OSDN Git Service

PR tree-optimization/34355
[pf3gnuchains/gcc-fork.git] / gcc / final.c
1 /* Convert RTL to assembler code and output it, for GNU compiler.
2    Copyright (C) 1987, 1988, 1989, 1992, 1993, 1994, 1995, 1996, 1997,
3    1998, 1999, 2000, 2001, 2002, 2003, 2004, 2005, 2006, 2007
4    Free Software Foundation, Inc.
5
6 This file is part of GCC.
7
8 GCC is free software; you can redistribute it and/or modify it under
9 the terms of the GNU General Public License as published by the Free
10 Software Foundation; either version 3, or (at your option) any later
11 version.
12
13 GCC is distributed in the hope that it will be useful, but WITHOUT ANY
14 WARRANTY; without even the implied warranty of MERCHANTABILITY or
15 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
16 for more details.
17
18 You should have received a copy of the GNU General Public License
19 along with GCC; see the file COPYING3.  If not see
20 <http://www.gnu.org/licenses/>.  */
21
22 /* This is the final pass of the compiler.
23    It looks at the rtl code for a function and outputs assembler code.
24
25    Call `final_start_function' to output the assembler code for function entry,
26    `final' to output assembler code for some RTL code,
27    `final_end_function' to output assembler code for function exit.
28    If a function is compiled in several pieces, each piece is
29    output separately with `final'.
30
31    Some optimizations are also done at this level.
32    Move instructions that were made unnecessary by good register allocation
33    are detected and omitted from the output.  (Though most of these
34    are removed by the last jump pass.)
35
36    Instructions to set the condition codes are omitted when it can be
37    seen that the condition codes already had the desired values.
38
39    In some cases it is sufficient if the inherited condition codes
40    have related values, but this may require the following insn
41    (the one that tests the condition codes) to be modified.
42
43    The code for the function prologue and epilogue are generated
44    directly in assembler by the target functions function_prologue and
45    function_epilogue.  Those instructions never exist as rtl.  */
46
47 #include "config.h"
48 #include "system.h"
49 #include "coretypes.h"
50 #include "tm.h"
51
52 #include "tree.h"
53 #include "rtl.h"
54 #include "tm_p.h"
55 #include "regs.h"
56 #include "insn-config.h"
57 #include "insn-attr.h"
58 #include "recog.h"
59 #include "conditions.h"
60 #include "flags.h"
61 #include "real.h"
62 #include "hard-reg-set.h"
63 #include "output.h"
64 #include "except.h"
65 #include "function.h"
66 #include "toplev.h"
67 #include "reload.h"
68 #include "intl.h"
69 #include "basic-block.h"
70 #include "target.h"
71 #include "debug.h"
72 #include "expr.h"
73 #include "cfglayout.h"
74 #include "tree-pass.h"
75 #include "timevar.h"
76 #include "cgraph.h"
77 #include "coverage.h"
78 #include "df.h"
79 #include "vecprim.h"
80 #include "ggc.h"
81 #include "cfgloop.h"
82 #include "params.h"
83
84 #ifdef XCOFF_DEBUGGING_INFO
85 #include "xcoffout.h"           /* Needed for external data
86                                    declarations for e.g. AIX 4.x.  */
87 #endif
88
89 #if defined (DWARF2_UNWIND_INFO) || defined (DWARF2_DEBUGGING_INFO)
90 #include "dwarf2out.h"
91 #endif
92
93 #ifdef DBX_DEBUGGING_INFO
94 #include "dbxout.h"
95 #endif
96
97 #ifdef SDB_DEBUGGING_INFO
98 #include "sdbout.h"
99 #endif
100
101 /* If we aren't using cc0, CC_STATUS_INIT shouldn't exist.  So define a
102    null default for it to save conditionalization later.  */
103 #ifndef CC_STATUS_INIT
104 #define CC_STATUS_INIT
105 #endif
106
107 /* How to start an assembler comment.  */
108 #ifndef ASM_COMMENT_START
109 #define ASM_COMMENT_START ";#"
110 #endif
111
112 /* Is the given character a logical line separator for the assembler?  */
113 #ifndef IS_ASM_LOGICAL_LINE_SEPARATOR
114 #define IS_ASM_LOGICAL_LINE_SEPARATOR(C, STR) ((C) == ';')
115 #endif
116
117 #ifndef JUMP_TABLES_IN_TEXT_SECTION
118 #define JUMP_TABLES_IN_TEXT_SECTION 0
119 #endif
120
121 /* Bitflags used by final_scan_insn.  */
122 #define SEEN_BB         1
123 #define SEEN_NOTE       2
124 #define SEEN_EMITTED    4
125
126 /* Last insn processed by final_scan_insn.  */
127 static rtx debug_insn;
128 rtx current_output_insn;
129
130 /* Line number of last NOTE.  */
131 static int last_linenum;
132
133 /* Highest line number in current block.  */
134 static int high_block_linenum;
135
136 /* Likewise for function.  */
137 static int high_function_linenum;
138
139 /* Filename of last NOTE.  */
140 static const char *last_filename;
141
142 /* Override filename and line number.  */
143 static const char *override_filename;
144 static int override_linenum;
145
146 /* Whether to force emission of a line note before the next insn.  */
147 static bool force_source_line = false;
148
149 extern const int length_unit_log; /* This is defined in insn-attrtab.c.  */
150
151 /* Nonzero while outputting an `asm' with operands.
152    This means that inconsistencies are the user's fault, so don't die.
153    The precise value is the insn being output, to pass to error_for_asm.  */
154 rtx this_is_asm_operands;
155
156 /* Number of operands of this insn, for an `asm' with operands.  */
157 static unsigned int insn_noperands;
158
159 /* Compare optimization flag.  */
160
161 static rtx last_ignored_compare = 0;
162
163 /* Assign a unique number to each insn that is output.
164    This can be used to generate unique local labels.  */
165
166 static int insn_counter = 0;
167
168 #ifdef HAVE_cc0
169 /* This variable contains machine-dependent flags (defined in tm.h)
170    set and examined by output routines
171    that describe how to interpret the condition codes properly.  */
172
173 CC_STATUS cc_status;
174
175 /* During output of an insn, this contains a copy of cc_status
176    from before the insn.  */
177
178 CC_STATUS cc_prev_status;
179 #endif
180
181 /* Nonzero means current function must be given a frame pointer.
182    Initialized in function.c to 0.  Set only in reload1.c as per
183    the needs of the function.  */
184
185 int frame_pointer_needed;
186
187 /* Number of unmatched NOTE_INSN_BLOCK_BEG notes we have seen.  */
188
189 static int block_depth;
190
191 /* Nonzero if have enabled APP processing of our assembler output.  */
192
193 static int app_on;
194
195 /* If we are outputting an insn sequence, this contains the sequence rtx.
196    Zero otherwise.  */
197
198 rtx final_sequence;
199
200 #ifdef ASSEMBLER_DIALECT
201
202 /* Number of the assembler dialect to use, starting at 0.  */
203 static int dialect_number;
204 #endif
205
206 #ifdef HAVE_conditional_execution
207 /* Nonnull if the insn currently being emitted was a COND_EXEC pattern.  */
208 rtx current_insn_predicate;
209 #endif
210
211 #ifdef HAVE_ATTR_length
212 static int asm_insn_count (rtx);
213 #endif
214 static void profile_function (FILE *);
215 static void profile_after_prologue (FILE *);
216 static bool notice_source_line (rtx);
217 static rtx walk_alter_subreg (rtx *, bool *);
218 static void output_asm_name (void);
219 static void output_alternate_entry_point (FILE *, rtx);
220 static tree get_mem_expr_from_op (rtx, int *);
221 static void output_asm_operand_names (rtx *, int *, int);
222 static void output_operand (rtx, int);
223 #ifdef LEAF_REGISTERS
224 static void leaf_renumber_regs (rtx);
225 #endif
226 #ifdef HAVE_cc0
227 static int alter_cond (rtx);
228 #endif
229 #ifndef ADDR_VEC_ALIGN
230 static int final_addr_vec_align (rtx);
231 #endif
232 #ifdef HAVE_ATTR_length
233 static int align_fuzz (rtx, rtx, int, unsigned);
234 #endif
235 \f
236 /* Initialize data in final at the beginning of a compilation.  */
237
238 void
239 init_final (const char *filename ATTRIBUTE_UNUSED)
240 {
241   app_on = 0;
242   final_sequence = 0;
243
244 #ifdef ASSEMBLER_DIALECT
245   dialect_number = ASSEMBLER_DIALECT;
246 #endif
247 }
248
249 /* Default target function prologue and epilogue assembler output.
250
251    If not overridden for epilogue code, then the function body itself
252    contains return instructions wherever needed.  */
253 void
254 default_function_pro_epilogue (FILE *file ATTRIBUTE_UNUSED,
255                                HOST_WIDE_INT size ATTRIBUTE_UNUSED)
256 {
257 }
258
259 /* Default target hook that outputs nothing to a stream.  */
260 void
261 no_asm_to_stream (FILE *file ATTRIBUTE_UNUSED)
262 {
263 }
264
265 /* Enable APP processing of subsequent output.
266    Used before the output from an `asm' statement.  */
267
268 void
269 app_enable (void)
270 {
271   if (! app_on)
272     {
273       fputs (ASM_APP_ON, asm_out_file);
274       app_on = 1;
275     }
276 }
277
278 /* Disable APP processing of subsequent output.
279    Called from varasm.c before most kinds of output.  */
280
281 void
282 app_disable (void)
283 {
284   if (app_on)
285     {
286       fputs (ASM_APP_OFF, asm_out_file);
287       app_on = 0;
288     }
289 }
290 \f
291 /* Return the number of slots filled in the current
292    delayed branch sequence (we don't count the insn needing the
293    delay slot).   Zero if not in a delayed branch sequence.  */
294
295 #ifdef DELAY_SLOTS
296 int
297 dbr_sequence_length (void)
298 {
299   if (final_sequence != 0)
300     return XVECLEN (final_sequence, 0) - 1;
301   else
302     return 0;
303 }
304 #endif
305 \f
306 /* The next two pages contain routines used to compute the length of an insn
307    and to shorten branches.  */
308
309 /* Arrays for insn lengths, and addresses.  The latter is referenced by
310    `insn_current_length'.  */
311
312 static int *insn_lengths;
313
314 VEC(int,heap) *insn_addresses_;
315
316 /* Max uid for which the above arrays are valid.  */
317 static int insn_lengths_max_uid;
318
319 /* Address of insn being processed.  Used by `insn_current_length'.  */
320 int insn_current_address;
321
322 /* Address of insn being processed in previous iteration.  */
323 int insn_last_address;
324
325 /* known invariant alignment of insn being processed.  */
326 int insn_current_align;
327
328 /* After shorten_branches, for any insn, uid_align[INSN_UID (insn)]
329    gives the next following alignment insn that increases the known
330    alignment, or NULL_RTX if there is no such insn.
331    For any alignment obtained this way, we can again index uid_align with
332    its uid to obtain the next following align that in turn increases the
333    alignment, till we reach NULL_RTX; the sequence obtained this way
334    for each insn we'll call the alignment chain of this insn in the following
335    comments.  */
336
337 struct label_alignment
338 {
339   short alignment;
340   short max_skip;
341 };
342
343 static rtx *uid_align;
344 static int *uid_shuid;
345 static struct label_alignment *label_align;
346
347 /* Indicate that branch shortening hasn't yet been done.  */
348
349 void
350 init_insn_lengths (void)
351 {
352   if (uid_shuid)
353     {
354       free (uid_shuid);
355       uid_shuid = 0;
356     }
357   if (insn_lengths)
358     {
359       free (insn_lengths);
360       insn_lengths = 0;
361       insn_lengths_max_uid = 0;
362     }
363 #ifdef HAVE_ATTR_length
364   INSN_ADDRESSES_FREE ();
365 #endif
366   if (uid_align)
367     {
368       free (uid_align);
369       uid_align = 0;
370     }
371 }
372
373 /* Obtain the current length of an insn.  If branch shortening has been done,
374    get its actual length.  Otherwise, use FALLBACK_FN to calculate the
375    length.  */
376 static inline int
377 get_attr_length_1 (rtx insn ATTRIBUTE_UNUSED,
378                    int (*fallback_fn) (rtx) ATTRIBUTE_UNUSED)
379 {
380 #ifdef HAVE_ATTR_length
381   rtx body;
382   int i;
383   int length = 0;
384
385   if (insn_lengths_max_uid > INSN_UID (insn))
386     return insn_lengths[INSN_UID (insn)];
387   else
388     switch (GET_CODE (insn))
389       {
390       case NOTE:
391       case BARRIER:
392       case CODE_LABEL:
393         return 0;
394
395       case CALL_INSN:
396         length = fallback_fn (insn);
397         break;
398
399       case JUMP_INSN:
400         body = PATTERN (insn);
401         if (GET_CODE (body) == ADDR_VEC || GET_CODE (body) == ADDR_DIFF_VEC)
402           {
403             /* Alignment is machine-dependent and should be handled by
404                ADDR_VEC_ALIGN.  */
405           }
406         else
407           length = fallback_fn (insn);
408         break;
409
410       case INSN:
411         body = PATTERN (insn);
412         if (GET_CODE (body) == USE || GET_CODE (body) == CLOBBER)
413           return 0;
414
415         else if (GET_CODE (body) == ASM_INPUT || asm_noperands (body) >= 0)
416           length = asm_insn_count (body) * fallback_fn (insn);
417         else if (GET_CODE (body) == SEQUENCE)
418           for (i = 0; i < XVECLEN (body, 0); i++)
419             length += get_attr_length (XVECEXP (body, 0, i));
420         else
421           length = fallback_fn (insn);
422         break;
423
424       default:
425         break;
426       }
427
428 #ifdef ADJUST_INSN_LENGTH
429   ADJUST_INSN_LENGTH (insn, length);
430 #endif
431   return length;
432 #else /* not HAVE_ATTR_length */
433   return 0;
434 #define insn_default_length 0
435 #define insn_min_length 0
436 #endif /* not HAVE_ATTR_length */
437 }
438
439 /* Obtain the current length of an insn.  If branch shortening has been done,
440    get its actual length.  Otherwise, get its maximum length.  */
441 int
442 get_attr_length (rtx insn)
443 {
444   return get_attr_length_1 (insn, insn_default_length);
445 }
446
447 /* Obtain the current length of an insn.  If branch shortening has been done,
448    get its actual length.  Otherwise, get its minimum length.  */
449 int
450 get_attr_min_length (rtx insn)
451 {
452   return get_attr_length_1 (insn, insn_min_length);
453 }
454 \f
455 /* Code to handle alignment inside shorten_branches.  */
456
457 /* Here is an explanation how the algorithm in align_fuzz can give
458    proper results:
459
460    Call a sequence of instructions beginning with alignment point X
461    and continuing until the next alignment point `block X'.  When `X'
462    is used in an expression, it means the alignment value of the
463    alignment point.
464
465    Call the distance between the start of the first insn of block X, and
466    the end of the last insn of block X `IX', for the `inner size of X'.
467    This is clearly the sum of the instruction lengths.
468
469    Likewise with the next alignment-delimited block following X, which we
470    shall call block Y.
471
472    Call the distance between the start of the first insn of block X, and
473    the start of the first insn of block Y `OX', for the `outer size of X'.
474
475    The estimated padding is then OX - IX.
476
477    OX can be safely estimated as
478
479            if (X >= Y)
480                    OX = round_up(IX, Y)
481            else
482                    OX = round_up(IX, X) + Y - X
483
484    Clearly est(IX) >= real(IX), because that only depends on the
485    instruction lengths, and those being overestimated is a given.
486
487    Clearly round_up(foo, Z) >= round_up(bar, Z) if foo >= bar, so
488    we needn't worry about that when thinking about OX.
489
490    When X >= Y, the alignment provided by Y adds no uncertainty factor
491    for branch ranges starting before X, so we can just round what we have.
492    But when X < Y, we don't know anything about the, so to speak,
493    `middle bits', so we have to assume the worst when aligning up from an
494    address mod X to one mod Y, which is Y - X.  */
495
496 #ifndef LABEL_ALIGN
497 #define LABEL_ALIGN(LABEL) align_labels_log
498 #endif
499
500 #ifndef LABEL_ALIGN_MAX_SKIP
501 #define LABEL_ALIGN_MAX_SKIP align_labels_max_skip
502 #endif
503
504 #ifndef LOOP_ALIGN
505 #define LOOP_ALIGN(LABEL) align_loops_log
506 #endif
507
508 #ifndef LOOP_ALIGN_MAX_SKIP
509 #define LOOP_ALIGN_MAX_SKIP align_loops_max_skip
510 #endif
511
512 #ifndef LABEL_ALIGN_AFTER_BARRIER
513 #define LABEL_ALIGN_AFTER_BARRIER(LABEL) 0
514 #endif
515
516 #ifndef LABEL_ALIGN_AFTER_BARRIER_MAX_SKIP
517 #define LABEL_ALIGN_AFTER_BARRIER_MAX_SKIP 0
518 #endif
519
520 #ifndef JUMP_ALIGN
521 #define JUMP_ALIGN(LABEL) align_jumps_log
522 #endif
523
524 #ifndef JUMP_ALIGN_MAX_SKIP
525 #define JUMP_ALIGN_MAX_SKIP align_jumps_max_skip
526 #endif
527
528 #ifndef ADDR_VEC_ALIGN
529 static int
530 final_addr_vec_align (rtx addr_vec)
531 {
532   int align = GET_MODE_SIZE (GET_MODE (PATTERN (addr_vec)));
533
534   if (align > BIGGEST_ALIGNMENT / BITS_PER_UNIT)
535     align = BIGGEST_ALIGNMENT / BITS_PER_UNIT;
536   return exact_log2 (align);
537
538 }
539
540 #define ADDR_VEC_ALIGN(ADDR_VEC) final_addr_vec_align (ADDR_VEC)
541 #endif
542
543 #ifndef INSN_LENGTH_ALIGNMENT
544 #define INSN_LENGTH_ALIGNMENT(INSN) length_unit_log
545 #endif
546
547 #define INSN_SHUID(INSN) (uid_shuid[INSN_UID (INSN)])
548
549 static int min_labelno, max_labelno;
550
551 #define LABEL_TO_ALIGNMENT(LABEL) \
552   (label_align[CODE_LABEL_NUMBER (LABEL) - min_labelno].alignment)
553
554 #define LABEL_TO_MAX_SKIP(LABEL) \
555   (label_align[CODE_LABEL_NUMBER (LABEL) - min_labelno].max_skip)
556
557 /* For the benefit of port specific code do this also as a function.  */
558
559 int
560 label_to_alignment (rtx label)
561 {
562   return LABEL_TO_ALIGNMENT (label);
563 }
564
565 #ifdef HAVE_ATTR_length
566 /* The differences in addresses
567    between a branch and its target might grow or shrink depending on
568    the alignment the start insn of the range (the branch for a forward
569    branch or the label for a backward branch) starts out on; if these
570    differences are used naively, they can even oscillate infinitely.
571    We therefore want to compute a 'worst case' address difference that
572    is independent of the alignment the start insn of the range end
573    up on, and that is at least as large as the actual difference.
574    The function align_fuzz calculates the amount we have to add to the
575    naively computed difference, by traversing the part of the alignment
576    chain of the start insn of the range that is in front of the end insn
577    of the range, and considering for each alignment the maximum amount
578    that it might contribute to a size increase.
579
580    For casesi tables, we also want to know worst case minimum amounts of
581    address difference, in case a machine description wants to introduce
582    some common offset that is added to all offsets in a table.
583    For this purpose, align_fuzz with a growth argument of 0 computes the
584    appropriate adjustment.  */
585
586 /* Compute the maximum delta by which the difference of the addresses of
587    START and END might grow / shrink due to a different address for start
588    which changes the size of alignment insns between START and END.
589    KNOWN_ALIGN_LOG is the alignment known for START.
590    GROWTH should be ~0 if the objective is to compute potential code size
591    increase, and 0 if the objective is to compute potential shrink.
592    The return value is undefined for any other value of GROWTH.  */
593
594 static int
595 align_fuzz (rtx start, rtx end, int known_align_log, unsigned int growth)
596 {
597   int uid = INSN_UID (start);
598   rtx align_label;
599   int known_align = 1 << known_align_log;
600   int end_shuid = INSN_SHUID (end);
601   int fuzz = 0;
602
603   for (align_label = uid_align[uid]; align_label; align_label = uid_align[uid])
604     {
605       int align_addr, new_align;
606
607       uid = INSN_UID (align_label);
608       align_addr = INSN_ADDRESSES (uid) - insn_lengths[uid];
609       if (uid_shuid[uid] > end_shuid)
610         break;
611       known_align_log = LABEL_TO_ALIGNMENT (align_label);
612       new_align = 1 << known_align_log;
613       if (new_align < known_align)
614         continue;
615       fuzz += (-align_addr ^ growth) & (new_align - known_align);
616       known_align = new_align;
617     }
618   return fuzz;
619 }
620
621 /* Compute a worst-case reference address of a branch so that it
622    can be safely used in the presence of aligned labels.  Since the
623    size of the branch itself is unknown, the size of the branch is
624    not included in the range.  I.e. for a forward branch, the reference
625    address is the end address of the branch as known from the previous
626    branch shortening pass, minus a value to account for possible size
627    increase due to alignment.  For a backward branch, it is the start
628    address of the branch as known from the current pass, plus a value
629    to account for possible size increase due to alignment.
630    NB.: Therefore, the maximum offset allowed for backward branches needs
631    to exclude the branch size.  */
632
633 int
634 insn_current_reference_address (rtx branch)
635 {
636   rtx dest, seq;
637   int seq_uid;
638
639   if (! INSN_ADDRESSES_SET_P ())
640     return 0;
641
642   seq = NEXT_INSN (PREV_INSN (branch));
643   seq_uid = INSN_UID (seq);
644   if (!JUMP_P (branch))
645     /* This can happen for example on the PA; the objective is to know the
646        offset to address something in front of the start of the function.
647        Thus, we can treat it like a backward branch.
648        We assume here that FUNCTION_BOUNDARY / BITS_PER_UNIT is larger than
649        any alignment we'd encounter, so we skip the call to align_fuzz.  */
650     return insn_current_address;
651   dest = JUMP_LABEL (branch);
652
653   /* BRANCH has no proper alignment chain set, so use SEQ.
654      BRANCH also has no INSN_SHUID.  */
655   if (INSN_SHUID (seq) < INSN_SHUID (dest))
656     {
657       /* Forward branch.  */
658       return (insn_last_address + insn_lengths[seq_uid]
659               - align_fuzz (seq, dest, length_unit_log, ~0));
660     }
661   else
662     {
663       /* Backward branch.  */
664       return (insn_current_address
665               + align_fuzz (dest, seq, length_unit_log, ~0));
666     }
667 }
668 #endif /* HAVE_ATTR_length */
669 \f
670 /* Compute branch alignments based on frequency information in the
671    CFG.  */
672
673 static unsigned int
674 compute_alignments (void)
675 {
676   int log, max_skip, max_log;
677   basic_block bb;
678   int freq_max = 0;
679   int freq_threshold = 0;
680
681   if (label_align)
682     {
683       free (label_align);
684       label_align = 0;
685     }
686
687   max_labelno = max_label_num ();
688   min_labelno = get_first_label_num ();
689   label_align = XCNEWVEC (struct label_alignment, max_labelno - min_labelno + 1);
690
691   /* If not optimizing or optimizing for size, don't assign any alignments.  */
692   if (! optimize || optimize_size)
693     return 0;
694
695   if (dump_file)
696     {
697       dump_flow_info (dump_file, TDF_DETAILS);
698       flow_loops_dump (dump_file, NULL, 1);
699       loop_optimizer_init (AVOID_CFG_MODIFICATIONS);
700     }
701   FOR_EACH_BB (bb)
702     if (bb->frequency > freq_max)
703       freq_max = bb->frequency;
704   freq_threshold = freq_max / PARAM_VALUE (PARAM_ALIGN_THRESHOLD);
705
706   if (dump_file)
707     fprintf(dump_file, "freq_max: %i\n",freq_max);
708   FOR_EACH_BB (bb)
709     {
710       rtx label = BB_HEAD (bb);
711       int fallthru_frequency = 0, branch_frequency = 0, has_fallthru = 0;
712       edge e;
713       edge_iterator ei;
714
715       if (!LABEL_P (label)
716           || probably_never_executed_bb_p (bb))
717         {
718           if (dump_file)
719             fprintf(dump_file, "BB %4i freq %4i loop %2i loop_depth %2i skipped.\n",
720                     bb->index, bb->frequency, bb->loop_father->num, bb->loop_depth);
721           continue;
722         }
723       max_log = LABEL_ALIGN (label);
724       max_skip = LABEL_ALIGN_MAX_SKIP;
725
726       FOR_EACH_EDGE (e, ei, bb->preds)
727         {
728           if (e->flags & EDGE_FALLTHRU)
729             has_fallthru = 1, fallthru_frequency += EDGE_FREQUENCY (e);
730           else
731             branch_frequency += EDGE_FREQUENCY (e);
732         }
733       if (dump_file)
734         {
735           fprintf(dump_file, "BB %4i freq %4i loop %2i loop_depth %2i fall %4i branch %4i",
736                   bb->index, bb->frequency, bb->loop_father->num,
737                   bb->loop_depth,
738                   fallthru_frequency, branch_frequency);
739           if (!bb->loop_father->inner && bb->loop_father->num)
740             fprintf (dump_file, " inner_loop");
741           if (bb->loop_father->header == bb)
742             fprintf (dump_file, " loop_header");
743           fprintf (dump_file, "\n");
744         }
745
746       /* There are two purposes to align block with no fallthru incoming edge:
747          1) to avoid fetch stalls when branch destination is near cache boundary
748          2) to improve cache efficiency in case the previous block is not executed
749             (so it does not need to be in the cache).
750
751          We to catch first case, we align frequently executed blocks.
752          To catch the second, we align blocks that are executed more frequently
753          than the predecessor and the predecessor is likely to not be executed
754          when function is called.  */
755
756       if (!has_fallthru
757           && (branch_frequency > freq_threshold
758               || (bb->frequency > bb->prev_bb->frequency * 10
759                   && (bb->prev_bb->frequency
760                       <= ENTRY_BLOCK_PTR->frequency / 2))))
761         {
762           log = JUMP_ALIGN (label);
763           if (dump_file)
764             fprintf(dump_file, "  jump alignment added.\n");
765           if (max_log < log)
766             {
767               max_log = log;
768               max_skip = JUMP_ALIGN_MAX_SKIP;
769             }
770         }
771       /* In case block is frequent and reached mostly by non-fallthru edge,
772          align it.  It is most likely a first block of loop.  */
773       if (has_fallthru
774           && maybe_hot_bb_p (bb)
775           && branch_frequency + fallthru_frequency > freq_threshold
776           && (branch_frequency
777               > fallthru_frequency * PARAM_VALUE (PARAM_ALIGN_LOOP_ITERATIONS)))
778         {
779           log = LOOP_ALIGN (label);
780           if (dump_file)
781             fprintf(dump_file, "  internal loop alignment added.\n");
782           if (max_log < log)
783             {
784               max_log = log;
785               max_skip = LOOP_ALIGN_MAX_SKIP;
786             }
787         }
788       LABEL_TO_ALIGNMENT (label) = max_log;
789       LABEL_TO_MAX_SKIP (label) = max_skip;
790     }
791
792   if (dump_file)
793     loop_optimizer_finalize ();
794   return 0;
795 }
796
797 struct tree_opt_pass pass_compute_alignments =
798 {
799   "alignments",                         /* name */
800   NULL,                                 /* gate */
801   compute_alignments,                   /* execute */
802   NULL,                                 /* sub */
803   NULL,                                 /* next */
804   0,                                    /* static_pass_number */
805   0,                                    /* tv_id */
806   0,                                    /* properties_required */
807   0,                                    /* properties_provided */
808   0,                                    /* properties_destroyed */
809   0,                                    /* todo_flags_start */
810   TODO_dump_func | TODO_verify_rtl_sharing
811   | TODO_ggc_collect,                   /* todo_flags_finish */
812   0                                     /* letter */
813 };
814
815 \f
816 /* Make a pass over all insns and compute their actual lengths by shortening
817    any branches of variable length if possible.  */
818
819 /* shorten_branches might be called multiple times:  for example, the SH
820    port splits out-of-range conditional branches in MACHINE_DEPENDENT_REORG.
821    In order to do this, it needs proper length information, which it obtains
822    by calling shorten_branches.  This cannot be collapsed with
823    shorten_branches itself into a single pass unless we also want to integrate
824    reorg.c, since the branch splitting exposes new instructions with delay
825    slots.  */
826
827 void
828 shorten_branches (rtx first ATTRIBUTE_UNUSED)
829 {
830   rtx insn;
831   int max_uid;
832   int i;
833   int max_log;
834   int max_skip;
835 #ifdef HAVE_ATTR_length
836 #define MAX_CODE_ALIGN 16
837   rtx seq;
838   int something_changed = 1;
839   char *varying_length;
840   rtx body;
841   int uid;
842   rtx align_tab[MAX_CODE_ALIGN];
843
844 #endif
845
846   /* Compute maximum UID and allocate label_align / uid_shuid.  */
847   max_uid = get_max_uid ();
848
849   /* Free uid_shuid before reallocating it.  */
850   free (uid_shuid);
851
852   uid_shuid = XNEWVEC (int, max_uid);
853
854   if (max_labelno != max_label_num ())
855     {
856       int old = max_labelno;
857       int n_labels;
858       int n_old_labels;
859
860       max_labelno = max_label_num ();
861
862       n_labels = max_labelno - min_labelno + 1;
863       n_old_labels = old - min_labelno + 1;
864
865       label_align = xrealloc (label_align,
866                               n_labels * sizeof (struct label_alignment));
867
868       /* Range of labels grows monotonically in the function.  Failing here
869          means that the initialization of array got lost.  */
870       gcc_assert (n_old_labels <= n_labels);
871
872       memset (label_align + n_old_labels, 0,
873               (n_labels - n_old_labels) * sizeof (struct label_alignment));
874     }
875
876   /* Initialize label_align and set up uid_shuid to be strictly
877      monotonically rising with insn order.  */
878   /* We use max_log here to keep track of the maximum alignment we want to
879      impose on the next CODE_LABEL (or the current one if we are processing
880      the CODE_LABEL itself).  */
881
882   max_log = 0;
883   max_skip = 0;
884
885   for (insn = get_insns (), i = 1; insn; insn = NEXT_INSN (insn))
886     {
887       int log;
888
889       INSN_SHUID (insn) = i++;
890       if (INSN_P (insn))
891         continue;
892
893       if (LABEL_P (insn))
894         {
895           rtx next;
896
897           /* Merge in alignments computed by compute_alignments.  */
898           log = LABEL_TO_ALIGNMENT (insn);
899           if (max_log < log)
900             {
901               max_log = log;
902               max_skip = LABEL_TO_MAX_SKIP (insn);
903             }
904
905           log = LABEL_ALIGN (insn);
906           if (max_log < log)
907             {
908               max_log = log;
909               max_skip = LABEL_ALIGN_MAX_SKIP;
910             }
911           next = next_nonnote_insn (insn);
912           /* ADDR_VECs only take room if read-only data goes into the text
913              section.  */
914           if (JUMP_TABLES_IN_TEXT_SECTION
915               || readonly_data_section == text_section)
916             if (next && JUMP_P (next))
917               {
918                 rtx nextbody = PATTERN (next);
919                 if (GET_CODE (nextbody) == ADDR_VEC
920                     || GET_CODE (nextbody) == ADDR_DIFF_VEC)
921                   {
922                     log = ADDR_VEC_ALIGN (next);
923                     if (max_log < log)
924                       {
925                         max_log = log;
926                         max_skip = LABEL_ALIGN_MAX_SKIP;
927                       }
928                   }
929               }
930           LABEL_TO_ALIGNMENT (insn) = max_log;
931           LABEL_TO_MAX_SKIP (insn) = max_skip;
932           max_log = 0;
933           max_skip = 0;
934         }
935       else if (BARRIER_P (insn))
936         {
937           rtx label;
938
939           for (label = insn; label && ! INSN_P (label);
940                label = NEXT_INSN (label))
941             if (LABEL_P (label))
942               {
943                 log = LABEL_ALIGN_AFTER_BARRIER (insn);
944                 if (max_log < log)
945                   {
946                     max_log = log;
947                     max_skip = LABEL_ALIGN_AFTER_BARRIER_MAX_SKIP;
948                   }
949                 break;
950               }
951         }
952     }
953 #ifdef HAVE_ATTR_length
954
955   /* Allocate the rest of the arrays.  */
956   insn_lengths = XNEWVEC (int, max_uid);
957   insn_lengths_max_uid = max_uid;
958   /* Syntax errors can lead to labels being outside of the main insn stream.
959      Initialize insn_addresses, so that we get reproducible results.  */
960   INSN_ADDRESSES_ALLOC (max_uid);
961
962   varying_length = XCNEWVEC (char, max_uid);
963
964   /* Initialize uid_align.  We scan instructions
965      from end to start, and keep in align_tab[n] the last seen insn
966      that does an alignment of at least n+1, i.e. the successor
967      in the alignment chain for an insn that does / has a known
968      alignment of n.  */
969   uid_align = XCNEWVEC (rtx, max_uid);
970
971   for (i = MAX_CODE_ALIGN; --i >= 0;)
972     align_tab[i] = NULL_RTX;
973   seq = get_last_insn ();
974   for (; seq; seq = PREV_INSN (seq))
975     {
976       int uid = INSN_UID (seq);
977       int log;
978       log = (LABEL_P (seq) ? LABEL_TO_ALIGNMENT (seq) : 0);
979       uid_align[uid] = align_tab[0];
980       if (log)
981         {
982           /* Found an alignment label.  */
983           uid_align[uid] = align_tab[log];
984           for (i = log - 1; i >= 0; i--)
985             align_tab[i] = seq;
986         }
987     }
988 #ifdef CASE_VECTOR_SHORTEN_MODE
989   if (optimize)
990     {
991       /* Look for ADDR_DIFF_VECs, and initialize their minimum and maximum
992          label fields.  */
993
994       int min_shuid = INSN_SHUID (get_insns ()) - 1;
995       int max_shuid = INSN_SHUID (get_last_insn ()) + 1;
996       int rel;
997
998       for (insn = first; insn != 0; insn = NEXT_INSN (insn))
999         {
1000           rtx min_lab = NULL_RTX, max_lab = NULL_RTX, pat;
1001           int len, i, min, max, insn_shuid;
1002           int min_align;
1003           addr_diff_vec_flags flags;
1004
1005           if (!JUMP_P (insn)
1006               || GET_CODE (PATTERN (insn)) != ADDR_DIFF_VEC)
1007             continue;
1008           pat = PATTERN (insn);
1009           len = XVECLEN (pat, 1);
1010           gcc_assert (len > 0);
1011           min_align = MAX_CODE_ALIGN;
1012           for (min = max_shuid, max = min_shuid, i = len - 1; i >= 0; i--)
1013             {
1014               rtx lab = XEXP (XVECEXP (pat, 1, i), 0);
1015               int shuid = INSN_SHUID (lab);
1016               if (shuid < min)
1017                 {
1018                   min = shuid;
1019                   min_lab = lab;
1020                 }
1021               if (shuid > max)
1022                 {
1023                   max = shuid;
1024                   max_lab = lab;
1025                 }
1026               if (min_align > LABEL_TO_ALIGNMENT (lab))
1027                 min_align = LABEL_TO_ALIGNMENT (lab);
1028             }
1029           XEXP (pat, 2) = gen_rtx_LABEL_REF (Pmode, min_lab);
1030           XEXP (pat, 3) = gen_rtx_LABEL_REF (Pmode, max_lab);
1031           insn_shuid = INSN_SHUID (insn);
1032           rel = INSN_SHUID (XEXP (XEXP (pat, 0), 0));
1033           memset (&flags, 0, sizeof (flags));
1034           flags.min_align = min_align;
1035           flags.base_after_vec = rel > insn_shuid;
1036           flags.min_after_vec  = min > insn_shuid;
1037           flags.max_after_vec  = max > insn_shuid;
1038           flags.min_after_base = min > rel;
1039           flags.max_after_base = max > rel;
1040           ADDR_DIFF_VEC_FLAGS (pat) = flags;
1041         }
1042     }
1043 #endif /* CASE_VECTOR_SHORTEN_MODE */
1044
1045   /* Compute initial lengths, addresses, and varying flags for each insn.  */
1046   for (insn_current_address = 0, insn = first;
1047        insn != 0;
1048        insn_current_address += insn_lengths[uid], insn = NEXT_INSN (insn))
1049     {
1050       uid = INSN_UID (insn);
1051
1052       insn_lengths[uid] = 0;
1053
1054       if (LABEL_P (insn))
1055         {
1056           int log = LABEL_TO_ALIGNMENT (insn);
1057           if (log)
1058             {
1059               int align = 1 << log;
1060               int new_address = (insn_current_address + align - 1) & -align;
1061               insn_lengths[uid] = new_address - insn_current_address;
1062             }
1063         }
1064
1065       INSN_ADDRESSES (uid) = insn_current_address + insn_lengths[uid];
1066
1067       if (NOTE_P (insn) || BARRIER_P (insn)
1068           || LABEL_P (insn))
1069         continue;
1070       if (INSN_DELETED_P (insn))
1071         continue;
1072
1073       body = PATTERN (insn);
1074       if (GET_CODE (body) == ADDR_VEC || GET_CODE (body) == ADDR_DIFF_VEC)
1075         {
1076           /* This only takes room if read-only data goes into the text
1077              section.  */
1078           if (JUMP_TABLES_IN_TEXT_SECTION
1079               || readonly_data_section == text_section)
1080             insn_lengths[uid] = (XVECLEN (body,
1081                                           GET_CODE (body) == ADDR_DIFF_VEC)
1082                                  * GET_MODE_SIZE (GET_MODE (body)));
1083           /* Alignment is handled by ADDR_VEC_ALIGN.  */
1084         }
1085       else if (GET_CODE (body) == ASM_INPUT || asm_noperands (body) >= 0)
1086         insn_lengths[uid] = asm_insn_count (body) * insn_default_length (insn);
1087       else if (GET_CODE (body) == SEQUENCE)
1088         {
1089           int i;
1090           int const_delay_slots;
1091 #ifdef DELAY_SLOTS
1092           const_delay_slots = const_num_delay_slots (XVECEXP (body, 0, 0));
1093 #else
1094           const_delay_slots = 0;
1095 #endif
1096           /* Inside a delay slot sequence, we do not do any branch shortening
1097              if the shortening could change the number of delay slots
1098              of the branch.  */
1099           for (i = 0; i < XVECLEN (body, 0); i++)
1100             {
1101               rtx inner_insn = XVECEXP (body, 0, i);
1102               int inner_uid = INSN_UID (inner_insn);
1103               int inner_length;
1104
1105               if (GET_CODE (body) == ASM_INPUT
1106                   || asm_noperands (PATTERN (XVECEXP (body, 0, i))) >= 0)
1107                 inner_length = (asm_insn_count (PATTERN (inner_insn))
1108                                 * insn_default_length (inner_insn));
1109               else
1110                 inner_length = insn_default_length (inner_insn);
1111
1112               insn_lengths[inner_uid] = inner_length;
1113               if (const_delay_slots)
1114                 {
1115                   if ((varying_length[inner_uid]
1116                        = insn_variable_length_p (inner_insn)) != 0)
1117                     varying_length[uid] = 1;
1118                   INSN_ADDRESSES (inner_uid) = (insn_current_address
1119                                                 + insn_lengths[uid]);
1120                 }
1121               else
1122                 varying_length[inner_uid] = 0;
1123               insn_lengths[uid] += inner_length;
1124             }
1125         }
1126       else if (GET_CODE (body) != USE && GET_CODE (body) != CLOBBER)
1127         {
1128           insn_lengths[uid] = insn_default_length (insn);
1129           varying_length[uid] = insn_variable_length_p (insn);
1130         }
1131
1132       /* If needed, do any adjustment.  */
1133 #ifdef ADJUST_INSN_LENGTH
1134       ADJUST_INSN_LENGTH (insn, insn_lengths[uid]);
1135       if (insn_lengths[uid] < 0)
1136         fatal_insn ("negative insn length", insn);
1137 #endif
1138     }
1139
1140   /* Now loop over all the insns finding varying length insns.  For each,
1141      get the current insn length.  If it has changed, reflect the change.
1142      When nothing changes for a full pass, we are done.  */
1143
1144   while (something_changed)
1145     {
1146       something_changed = 0;
1147       insn_current_align = MAX_CODE_ALIGN - 1;
1148       for (insn_current_address = 0, insn = first;
1149            insn != 0;
1150            insn = NEXT_INSN (insn))
1151         {
1152           int new_length;
1153 #ifdef ADJUST_INSN_LENGTH
1154           int tmp_length;
1155 #endif
1156           int length_align;
1157
1158           uid = INSN_UID (insn);
1159
1160           if (LABEL_P (insn))
1161             {
1162               int log = LABEL_TO_ALIGNMENT (insn);
1163               if (log > insn_current_align)
1164                 {
1165                   int align = 1 << log;
1166                   int new_address= (insn_current_address + align - 1) & -align;
1167                   insn_lengths[uid] = new_address - insn_current_address;
1168                   insn_current_align = log;
1169                   insn_current_address = new_address;
1170                 }
1171               else
1172                 insn_lengths[uid] = 0;
1173               INSN_ADDRESSES (uid) = insn_current_address;
1174               continue;
1175             }
1176
1177           length_align = INSN_LENGTH_ALIGNMENT (insn);
1178           if (length_align < insn_current_align)
1179             insn_current_align = length_align;
1180
1181           insn_last_address = INSN_ADDRESSES (uid);
1182           INSN_ADDRESSES (uid) = insn_current_address;
1183
1184 #ifdef CASE_VECTOR_SHORTEN_MODE
1185           if (optimize && JUMP_P (insn)
1186               && GET_CODE (PATTERN (insn)) == ADDR_DIFF_VEC)
1187             {
1188               rtx body = PATTERN (insn);
1189               int old_length = insn_lengths[uid];
1190               rtx rel_lab = XEXP (XEXP (body, 0), 0);
1191               rtx min_lab = XEXP (XEXP (body, 2), 0);
1192               rtx max_lab = XEXP (XEXP (body, 3), 0);
1193               int rel_addr = INSN_ADDRESSES (INSN_UID (rel_lab));
1194               int min_addr = INSN_ADDRESSES (INSN_UID (min_lab));
1195               int max_addr = INSN_ADDRESSES (INSN_UID (max_lab));
1196               rtx prev;
1197               int rel_align = 0;
1198               addr_diff_vec_flags flags;
1199
1200               /* Avoid automatic aggregate initialization.  */
1201               flags = ADDR_DIFF_VEC_FLAGS (body);
1202
1203               /* Try to find a known alignment for rel_lab.  */
1204               for (prev = rel_lab;
1205                    prev
1206                    && ! insn_lengths[INSN_UID (prev)]
1207                    && ! (varying_length[INSN_UID (prev)] & 1);
1208                    prev = PREV_INSN (prev))
1209                 if (varying_length[INSN_UID (prev)] & 2)
1210                   {
1211                     rel_align = LABEL_TO_ALIGNMENT (prev);
1212                     break;
1213                   }
1214
1215               /* See the comment on addr_diff_vec_flags in rtl.h for the
1216                  meaning of the flags values.  base: REL_LAB   vec: INSN  */
1217               /* Anything after INSN has still addresses from the last
1218                  pass; adjust these so that they reflect our current
1219                  estimate for this pass.  */
1220               if (flags.base_after_vec)
1221                 rel_addr += insn_current_address - insn_last_address;
1222               if (flags.min_after_vec)
1223                 min_addr += insn_current_address - insn_last_address;
1224               if (flags.max_after_vec)
1225                 max_addr += insn_current_address - insn_last_address;
1226               /* We want to know the worst case, i.e. lowest possible value
1227                  for the offset of MIN_LAB.  If MIN_LAB is after REL_LAB,
1228                  its offset is positive, and we have to be wary of code shrink;
1229                  otherwise, it is negative, and we have to be vary of code
1230                  size increase.  */
1231               if (flags.min_after_base)
1232                 {
1233                   /* If INSN is between REL_LAB and MIN_LAB, the size
1234                      changes we are about to make can change the alignment
1235                      within the observed offset, therefore we have to break
1236                      it up into two parts that are independent.  */
1237                   if (! flags.base_after_vec && flags.min_after_vec)
1238                     {
1239                       min_addr -= align_fuzz (rel_lab, insn, rel_align, 0);
1240                       min_addr -= align_fuzz (insn, min_lab, 0, 0);
1241                     }
1242                   else
1243                     min_addr -= align_fuzz (rel_lab, min_lab, rel_align, 0);
1244                 }
1245               else
1246                 {
1247                   if (flags.base_after_vec && ! flags.min_after_vec)
1248                     {
1249                       min_addr -= align_fuzz (min_lab, insn, 0, ~0);
1250                       min_addr -= align_fuzz (insn, rel_lab, 0, ~0);
1251                     }
1252                   else
1253                     min_addr -= align_fuzz (min_lab, rel_lab, 0, ~0);
1254                 }
1255               /* Likewise, determine the highest lowest possible value
1256                  for the offset of MAX_LAB.  */
1257               if (flags.max_after_base)
1258                 {
1259                   if (! flags.base_after_vec && flags.max_after_vec)
1260                     {
1261                       max_addr += align_fuzz (rel_lab, insn, rel_align, ~0);
1262                       max_addr += align_fuzz (insn, max_lab, 0, ~0);
1263                     }
1264                   else
1265                     max_addr += align_fuzz (rel_lab, max_lab, rel_align, ~0);
1266                 }
1267               else
1268                 {
1269                   if (flags.base_after_vec && ! flags.max_after_vec)
1270                     {
1271                       max_addr += align_fuzz (max_lab, insn, 0, 0);
1272                       max_addr += align_fuzz (insn, rel_lab, 0, 0);
1273                     }
1274                   else
1275                     max_addr += align_fuzz (max_lab, rel_lab, 0, 0);
1276                 }
1277               PUT_MODE (body, CASE_VECTOR_SHORTEN_MODE (min_addr - rel_addr,
1278                                                         max_addr - rel_addr,
1279                                                         body));
1280               if (JUMP_TABLES_IN_TEXT_SECTION
1281                   || readonly_data_section == text_section)
1282                 {
1283                   insn_lengths[uid]
1284                     = (XVECLEN (body, 1) * GET_MODE_SIZE (GET_MODE (body)));
1285                   insn_current_address += insn_lengths[uid];
1286                   if (insn_lengths[uid] != old_length)
1287                     something_changed = 1;
1288                 }
1289
1290               continue;
1291             }
1292 #endif /* CASE_VECTOR_SHORTEN_MODE */
1293
1294           if (! (varying_length[uid]))
1295             {
1296               if (NONJUMP_INSN_P (insn)
1297                   && GET_CODE (PATTERN (insn)) == SEQUENCE)
1298                 {
1299                   int i;
1300
1301                   body = PATTERN (insn);
1302                   for (i = 0; i < XVECLEN (body, 0); i++)
1303                     {
1304                       rtx inner_insn = XVECEXP (body, 0, i);
1305                       int inner_uid = INSN_UID (inner_insn);
1306
1307                       INSN_ADDRESSES (inner_uid) = insn_current_address;
1308
1309                       insn_current_address += insn_lengths[inner_uid];
1310                     }
1311                 }
1312               else
1313                 insn_current_address += insn_lengths[uid];
1314
1315               continue;
1316             }
1317
1318           if (NONJUMP_INSN_P (insn) && GET_CODE (PATTERN (insn)) == SEQUENCE)
1319             {
1320               int i;
1321
1322               body = PATTERN (insn);
1323               new_length = 0;
1324               for (i = 0; i < XVECLEN (body, 0); i++)
1325                 {
1326                   rtx inner_insn = XVECEXP (body, 0, i);
1327                   int inner_uid = INSN_UID (inner_insn);
1328                   int inner_length;
1329
1330                   INSN_ADDRESSES (inner_uid) = insn_current_address;
1331
1332                   /* insn_current_length returns 0 for insns with a
1333                      non-varying length.  */
1334                   if (! varying_length[inner_uid])
1335                     inner_length = insn_lengths[inner_uid];
1336                   else
1337                     inner_length = insn_current_length (inner_insn);
1338
1339                   if (inner_length != insn_lengths[inner_uid])
1340                     {
1341                       insn_lengths[inner_uid] = inner_length;
1342                       something_changed = 1;
1343                     }
1344                   insn_current_address += insn_lengths[inner_uid];
1345                   new_length += inner_length;
1346                 }
1347             }
1348           else
1349             {
1350               new_length = insn_current_length (insn);
1351               insn_current_address += new_length;
1352             }
1353
1354 #ifdef ADJUST_INSN_LENGTH
1355           /* If needed, do any adjustment.  */
1356           tmp_length = new_length;
1357           ADJUST_INSN_LENGTH (insn, new_length);
1358           insn_current_address += (new_length - tmp_length);
1359 #endif
1360
1361           if (new_length != insn_lengths[uid])
1362             {
1363               insn_lengths[uid] = new_length;
1364               something_changed = 1;
1365             }
1366         }
1367       /* For a non-optimizing compile, do only a single pass.  */
1368       if (!optimize)
1369         break;
1370     }
1371
1372   free (varying_length);
1373
1374 #endif /* HAVE_ATTR_length */
1375 }
1376
1377 #ifdef HAVE_ATTR_length
1378 /* Given the body of an INSN known to be generated by an ASM statement, return
1379    the number of machine instructions likely to be generated for this insn.
1380    This is used to compute its length.  */
1381
1382 static int
1383 asm_insn_count (rtx body)
1384 {
1385   const char *template;
1386   int count = 1;
1387
1388   if (GET_CODE (body) == ASM_INPUT)
1389     template = XSTR (body, 0);
1390   else
1391     template = decode_asm_operands (body, NULL, NULL, NULL, NULL, NULL);
1392
1393   for (; *template; template++)
1394     if (IS_ASM_LOGICAL_LINE_SEPARATOR (*template, template)
1395         || *template == '\n')
1396       count++;
1397
1398   return count;
1399 }
1400 #endif
1401 \f
1402 /* ??? This is probably the wrong place for these.  */
1403 /* Structure recording the mapping from source file and directory
1404    names at compile time to those to be embedded in debug
1405    information.  */
1406 typedef struct debug_prefix_map
1407 {
1408   const char *old_prefix;
1409   const char *new_prefix;
1410   size_t old_len;
1411   size_t new_len;
1412   struct debug_prefix_map *next;
1413 } debug_prefix_map;
1414
1415 /* Linked list of such structures.  */
1416 debug_prefix_map *debug_prefix_maps;
1417
1418
1419 /* Record a debug file prefix mapping.  ARG is the argument to
1420    -fdebug-prefix-map and must be of the form OLD=NEW.  */
1421
1422 void
1423 add_debug_prefix_map (const char *arg)
1424 {
1425   debug_prefix_map *map;
1426   const char *p;
1427
1428   p = strchr (arg, '=');
1429   if (!p)
1430     {
1431       error ("invalid argument %qs to -fdebug-prefix-map", arg);
1432       return;
1433     }
1434   map = XNEW (debug_prefix_map);
1435   map->old_prefix = ggc_alloc_string (arg, p - arg);
1436   map->old_len = p - arg;
1437   p++;
1438   map->new_prefix = ggc_strdup (p);
1439   map->new_len = strlen (p);
1440   map->next = debug_prefix_maps;
1441   debug_prefix_maps = map;
1442 }
1443
1444 /* Perform user-specified mapping of debug filename prefixes.  Return
1445    the new name corresponding to FILENAME.  */
1446
1447 const char *
1448 remap_debug_filename (const char *filename)
1449 {
1450   debug_prefix_map *map;
1451   char *s;
1452   const char *name;
1453   size_t name_len;
1454
1455   for (map = debug_prefix_maps; map; map = map->next)
1456     if (strncmp (filename, map->old_prefix, map->old_len) == 0)
1457       break;
1458   if (!map)
1459     return filename;
1460   name = filename + map->old_len;
1461   name_len = strlen (name) + 1;
1462   s = (char *) alloca (name_len + map->new_len);
1463   memcpy (s, map->new_prefix, map->new_len);
1464   memcpy (s + map->new_len, name, name_len);
1465   return ggc_strdup (s);
1466 }
1467 \f
1468 /* Output assembler code for the start of a function,
1469    and initialize some of the variables in this file
1470    for the new function.  The label for the function and associated
1471    assembler pseudo-ops have already been output in `assemble_start_function'.
1472
1473    FIRST is the first insn of the rtl for the function being compiled.
1474    FILE is the file to write assembler code to.
1475    OPTIMIZE is nonzero if we should eliminate redundant
1476      test and compare insns.  */
1477
1478 void
1479 final_start_function (rtx first ATTRIBUTE_UNUSED, FILE *file,
1480                       int optimize ATTRIBUTE_UNUSED)
1481 {
1482   block_depth = 0;
1483
1484   this_is_asm_operands = 0;
1485
1486   last_filename = locator_file (prologue_locator);
1487   last_linenum = locator_line (prologue_locator);
1488
1489   high_block_linenum = high_function_linenum = last_linenum;
1490
1491   (*debug_hooks->begin_prologue) (last_linenum, last_filename);
1492
1493 #if defined (DWARF2_UNWIND_INFO) || defined (TARGET_UNWIND_INFO)
1494   if (write_symbols != DWARF2_DEBUG && write_symbols != VMS_AND_DWARF2_DEBUG)
1495     dwarf2out_begin_prologue (0, NULL);
1496 #endif
1497
1498 #ifdef LEAF_REG_REMAP
1499   if (current_function_uses_only_leaf_regs)
1500     leaf_renumber_regs (first);
1501 #endif
1502
1503   /* The Sun386i and perhaps other machines don't work right
1504      if the profiling code comes after the prologue.  */
1505 #ifdef PROFILE_BEFORE_PROLOGUE
1506   if (current_function_profile)
1507     profile_function (file);
1508 #endif /* PROFILE_BEFORE_PROLOGUE */
1509
1510 #if defined (DWARF2_UNWIND_INFO) && defined (HAVE_prologue)
1511   if (dwarf2out_do_frame ())
1512     dwarf2out_frame_debug (NULL_RTX, false);
1513 #endif
1514
1515   /* If debugging, assign block numbers to all of the blocks in this
1516      function.  */
1517   if (write_symbols)
1518     {
1519       reemit_insn_block_notes ();
1520       number_blocks (current_function_decl);
1521       /* We never actually put out begin/end notes for the top-level
1522          block in the function.  But, conceptually, that block is
1523          always needed.  */
1524       TREE_ASM_WRITTEN (DECL_INITIAL (current_function_decl)) = 1;
1525     }
1526
1527   /* First output the function prologue: code to set up the stack frame.  */
1528   targetm.asm_out.function_prologue (file, get_frame_size ());
1529
1530   /* If the machine represents the prologue as RTL, the profiling code must
1531      be emitted when NOTE_INSN_PROLOGUE_END is scanned.  */
1532 #ifdef HAVE_prologue
1533   if (! HAVE_prologue)
1534 #endif
1535     profile_after_prologue (file);
1536 }
1537
1538 static void
1539 profile_after_prologue (FILE *file ATTRIBUTE_UNUSED)
1540 {
1541 #ifndef PROFILE_BEFORE_PROLOGUE
1542   if (current_function_profile)
1543     profile_function (file);
1544 #endif /* not PROFILE_BEFORE_PROLOGUE */
1545 }
1546
1547 static void
1548 profile_function (FILE *file ATTRIBUTE_UNUSED)
1549 {
1550 #ifndef NO_PROFILE_COUNTERS
1551 # define NO_PROFILE_COUNTERS    0
1552 #endif
1553 #if defined(ASM_OUTPUT_REG_PUSH)
1554   int sval = current_function_returns_struct;
1555   rtx svrtx = targetm.calls.struct_value_rtx (TREE_TYPE (current_function_decl), 1);
1556 #if defined(STATIC_CHAIN_INCOMING_REGNUM) || defined(STATIC_CHAIN_REGNUM)
1557   int cxt = cfun->static_chain_decl != NULL;
1558 #endif
1559 #endif /* ASM_OUTPUT_REG_PUSH */
1560
1561   if (! NO_PROFILE_COUNTERS)
1562     {
1563       int align = MIN (BIGGEST_ALIGNMENT, LONG_TYPE_SIZE);
1564       switch_to_section (data_section);
1565       ASM_OUTPUT_ALIGN (file, floor_log2 (align / BITS_PER_UNIT));
1566       targetm.asm_out.internal_label (file, "LP", current_function_funcdef_no);
1567       assemble_integer (const0_rtx, LONG_TYPE_SIZE / BITS_PER_UNIT, align, 1);
1568     }
1569
1570   switch_to_section (current_function_section ());
1571
1572 #if defined(ASM_OUTPUT_REG_PUSH)
1573   if (sval && svrtx != NULL_RTX && REG_P (svrtx))
1574     {
1575       ASM_OUTPUT_REG_PUSH (file, REGNO (svrtx));
1576     }
1577 #endif
1578
1579 #if defined(STATIC_CHAIN_INCOMING_REGNUM) && defined(ASM_OUTPUT_REG_PUSH)
1580   if (cxt)
1581     ASM_OUTPUT_REG_PUSH (file, STATIC_CHAIN_INCOMING_REGNUM);
1582 #else
1583 #if defined(STATIC_CHAIN_REGNUM) && defined(ASM_OUTPUT_REG_PUSH)
1584   if (cxt)
1585     {
1586       ASM_OUTPUT_REG_PUSH (file, STATIC_CHAIN_REGNUM);
1587     }
1588 #endif
1589 #endif
1590
1591   FUNCTION_PROFILER (file, current_function_funcdef_no);
1592
1593 #if defined(STATIC_CHAIN_INCOMING_REGNUM) && defined(ASM_OUTPUT_REG_PUSH)
1594   if (cxt)
1595     ASM_OUTPUT_REG_POP (file, STATIC_CHAIN_INCOMING_REGNUM);
1596 #else
1597 #if defined(STATIC_CHAIN_REGNUM) && defined(ASM_OUTPUT_REG_PUSH)
1598   if (cxt)
1599     {
1600       ASM_OUTPUT_REG_POP (file, STATIC_CHAIN_REGNUM);
1601     }
1602 #endif
1603 #endif
1604
1605 #if defined(ASM_OUTPUT_REG_PUSH)
1606   if (sval && svrtx != NULL_RTX && REG_P (svrtx))
1607     {
1608       ASM_OUTPUT_REG_POP (file, REGNO (svrtx));
1609     }
1610 #endif
1611 }
1612
1613 /* Output assembler code for the end of a function.
1614    For clarity, args are same as those of `final_start_function'
1615    even though not all of them are needed.  */
1616
1617 void
1618 final_end_function (void)
1619 {
1620   app_disable ();
1621
1622   (*debug_hooks->end_function) (high_function_linenum);
1623
1624   /* Finally, output the function epilogue:
1625      code to restore the stack frame and return to the caller.  */
1626   targetm.asm_out.function_epilogue (asm_out_file, get_frame_size ());
1627
1628   /* And debug output.  */
1629   (*debug_hooks->end_epilogue) (last_linenum, last_filename);
1630
1631 #if defined (DWARF2_UNWIND_INFO)
1632   if (write_symbols != DWARF2_DEBUG && write_symbols != VMS_AND_DWARF2_DEBUG
1633       && dwarf2out_do_frame ())
1634     dwarf2out_end_epilogue (last_linenum, last_filename);
1635 #endif
1636 }
1637 \f
1638 /* Output assembler code for some insns: all or part of a function.
1639    For description of args, see `final_start_function', above.  */
1640
1641 void
1642 final (rtx first, FILE *file, int optimize)
1643 {
1644   rtx insn;
1645   int max_uid = 0;
1646   int seen = 0;
1647
1648   last_ignored_compare = 0;
1649
1650   for (insn = first; insn; insn = NEXT_INSN (insn))
1651     {
1652       if (INSN_UID (insn) > max_uid)       /* Find largest UID.  */
1653         max_uid = INSN_UID (insn);
1654 #ifdef HAVE_cc0
1655       /* If CC tracking across branches is enabled, record the insn which
1656          jumps to each branch only reached from one place.  */
1657       if (optimize && JUMP_P (insn))
1658         {
1659           rtx lab = JUMP_LABEL (insn);
1660           if (lab && LABEL_NUSES (lab) == 1)
1661             {
1662               LABEL_REFS (lab) = insn;
1663             }
1664         }
1665 #endif
1666     }
1667
1668   init_recog ();
1669
1670   CC_STATUS_INIT;
1671
1672   /* Output the insns.  */
1673   for (insn = first; insn;)
1674     {
1675 #ifdef HAVE_ATTR_length
1676       if ((unsigned) INSN_UID (insn) >= INSN_ADDRESSES_SIZE ())
1677         {
1678           /* This can be triggered by bugs elsewhere in the compiler if
1679              new insns are created after init_insn_lengths is called.  */
1680           gcc_assert (NOTE_P (insn));
1681           insn_current_address = -1;
1682         }
1683       else
1684         insn_current_address = INSN_ADDRESSES (INSN_UID (insn));
1685 #endif /* HAVE_ATTR_length */
1686
1687       insn = final_scan_insn (insn, file, optimize, 0, &seen);
1688     }
1689 }
1690 \f
1691 const char *
1692 get_insn_template (int code, rtx insn)
1693 {
1694   switch (insn_data[code].output_format)
1695     {
1696     case INSN_OUTPUT_FORMAT_SINGLE:
1697       return insn_data[code].output.single;
1698     case INSN_OUTPUT_FORMAT_MULTI:
1699       return insn_data[code].output.multi[which_alternative];
1700     case INSN_OUTPUT_FORMAT_FUNCTION:
1701       gcc_assert (insn);
1702       return (*insn_data[code].output.function) (recog_data.operand, insn);
1703
1704     default:
1705       gcc_unreachable ();
1706     }
1707 }
1708
1709 /* Emit the appropriate declaration for an alternate-entry-point
1710    symbol represented by INSN, to FILE.  INSN is a CODE_LABEL with
1711    LABEL_KIND != LABEL_NORMAL.
1712
1713    The case fall-through in this function is intentional.  */
1714 static void
1715 output_alternate_entry_point (FILE *file, rtx insn)
1716 {
1717   const char *name = LABEL_NAME (insn);
1718
1719   switch (LABEL_KIND (insn))
1720     {
1721     case LABEL_WEAK_ENTRY:
1722 #ifdef ASM_WEAKEN_LABEL
1723       ASM_WEAKEN_LABEL (file, name);
1724 #endif
1725     case LABEL_GLOBAL_ENTRY:
1726       targetm.asm_out.globalize_label (file, name);
1727     case LABEL_STATIC_ENTRY:
1728 #ifdef ASM_OUTPUT_TYPE_DIRECTIVE
1729       ASM_OUTPUT_TYPE_DIRECTIVE (file, name, "function");
1730 #endif
1731       ASM_OUTPUT_LABEL (file, name);
1732       break;
1733
1734     case LABEL_NORMAL:
1735     default:
1736       gcc_unreachable ();
1737     }
1738 }
1739
1740 /* The final scan for one insn, INSN.
1741    Args are same as in `final', except that INSN
1742    is the insn being scanned.
1743    Value returned is the next insn to be scanned.
1744
1745    NOPEEPHOLES is the flag to disallow peephole processing (currently
1746    used for within delayed branch sequence output).
1747
1748    SEEN is used to track the end of the prologue, for emitting
1749    debug information.  We force the emission of a line note after
1750    both NOTE_INSN_PROLOGUE_END and NOTE_INSN_FUNCTION_BEG, or
1751    at the beginning of the second basic block, whichever comes
1752    first.  */
1753
1754 rtx
1755 final_scan_insn (rtx insn, FILE *file, int optimize ATTRIBUTE_UNUSED,
1756                  int nopeepholes ATTRIBUTE_UNUSED, int *seen)
1757 {
1758 #ifdef HAVE_cc0
1759   rtx set;
1760 #endif
1761   rtx next;
1762
1763   insn_counter++;
1764
1765   /* Ignore deleted insns.  These can occur when we split insns (due to a
1766      template of "#") while not optimizing.  */
1767   if (INSN_DELETED_P (insn))
1768     return NEXT_INSN (insn);
1769
1770   switch (GET_CODE (insn))
1771     {
1772     case NOTE:
1773       switch (NOTE_KIND (insn))
1774         {
1775         case NOTE_INSN_DELETED:
1776           break;
1777
1778         case NOTE_INSN_SWITCH_TEXT_SECTIONS:
1779           in_cold_section_p = !in_cold_section_p;
1780           (*debug_hooks->switch_text_section) ();
1781           switch_to_section (current_function_section ());
1782           break;
1783
1784         case NOTE_INSN_BASIC_BLOCK:
1785 #ifdef TARGET_UNWIND_INFO
1786           targetm.asm_out.unwind_emit (asm_out_file, insn);
1787 #endif
1788
1789           if (flag_debug_asm)
1790             fprintf (asm_out_file, "\t%s basic block %d\n",
1791                      ASM_COMMENT_START, NOTE_BASIC_BLOCK (insn)->index);
1792
1793           if ((*seen & (SEEN_EMITTED | SEEN_BB)) == SEEN_BB)
1794             {
1795               *seen |= SEEN_EMITTED;
1796               force_source_line = true;
1797             }
1798           else
1799             *seen |= SEEN_BB;
1800
1801           break;
1802
1803         case NOTE_INSN_EH_REGION_BEG:
1804           ASM_OUTPUT_DEBUG_LABEL (asm_out_file, "LEHB",
1805                                   NOTE_EH_HANDLER (insn));
1806           break;
1807
1808         case NOTE_INSN_EH_REGION_END:
1809           ASM_OUTPUT_DEBUG_LABEL (asm_out_file, "LEHE",
1810                                   NOTE_EH_HANDLER (insn));
1811           break;
1812
1813         case NOTE_INSN_PROLOGUE_END:
1814           targetm.asm_out.function_end_prologue (file);
1815           profile_after_prologue (file);
1816
1817           if ((*seen & (SEEN_EMITTED | SEEN_NOTE)) == SEEN_NOTE)
1818             {
1819               *seen |= SEEN_EMITTED;
1820               force_source_line = true;
1821             }
1822           else
1823             *seen |= SEEN_NOTE;
1824
1825           break;
1826
1827         case NOTE_INSN_EPILOGUE_BEG:
1828           targetm.asm_out.function_begin_epilogue (file);
1829           break;
1830
1831         case NOTE_INSN_FUNCTION_BEG:
1832           app_disable ();
1833           (*debug_hooks->end_prologue) (last_linenum, last_filename);
1834
1835           if ((*seen & (SEEN_EMITTED | SEEN_NOTE)) == SEEN_NOTE)
1836             {
1837               *seen |= SEEN_EMITTED;
1838               force_source_line = true;
1839             }
1840           else
1841             *seen |= SEEN_NOTE;
1842
1843           break;
1844
1845         case NOTE_INSN_BLOCK_BEG:
1846           if (debug_info_level == DINFO_LEVEL_NORMAL
1847               || debug_info_level == DINFO_LEVEL_VERBOSE
1848               || write_symbols == DWARF2_DEBUG
1849               || write_symbols == VMS_AND_DWARF2_DEBUG
1850               || write_symbols == VMS_DEBUG)
1851             {
1852               int n = BLOCK_NUMBER (NOTE_BLOCK (insn));
1853
1854               app_disable ();
1855               ++block_depth;
1856               high_block_linenum = last_linenum;
1857
1858               /* Output debugging info about the symbol-block beginning.  */
1859               (*debug_hooks->begin_block) (last_linenum, n);
1860
1861               /* Mark this block as output.  */
1862               TREE_ASM_WRITTEN (NOTE_BLOCK (insn)) = 1;
1863             }
1864           if (write_symbols == DBX_DEBUG
1865               || write_symbols == SDB_DEBUG)
1866             {
1867               location_t *locus_ptr
1868                 = block_nonartificial_location (NOTE_BLOCK (insn));
1869
1870               if (locus_ptr != NULL)
1871                 {
1872                   override_filename = LOCATION_FILE (*locus_ptr);
1873                   override_linenum = LOCATION_LINE (*locus_ptr);
1874                 }
1875             }
1876           break;
1877
1878         case NOTE_INSN_BLOCK_END:
1879           if (debug_info_level == DINFO_LEVEL_NORMAL
1880               || debug_info_level == DINFO_LEVEL_VERBOSE
1881               || write_symbols == DWARF2_DEBUG
1882               || write_symbols == VMS_AND_DWARF2_DEBUG
1883               || write_symbols == VMS_DEBUG)
1884             {
1885               int n = BLOCK_NUMBER (NOTE_BLOCK (insn));
1886
1887               app_disable ();
1888
1889               /* End of a symbol-block.  */
1890               --block_depth;
1891               gcc_assert (block_depth >= 0);
1892
1893               (*debug_hooks->end_block) (high_block_linenum, n);
1894             }
1895           if (write_symbols == DBX_DEBUG
1896               || write_symbols == SDB_DEBUG)
1897             {
1898               tree outer_block = BLOCK_SUPERCONTEXT (NOTE_BLOCK (insn));
1899               location_t *locus_ptr
1900                 = block_nonartificial_location (outer_block);
1901
1902               if (locus_ptr != NULL)
1903                 {
1904                   override_filename = LOCATION_FILE (*locus_ptr);
1905                   override_linenum = LOCATION_LINE (*locus_ptr);
1906                 }
1907               else
1908                 {
1909                   override_filename = NULL;
1910                   override_linenum = 0;
1911                 }
1912             }
1913           break;
1914
1915         case NOTE_INSN_DELETED_LABEL:
1916           /* Emit the label.  We may have deleted the CODE_LABEL because
1917              the label could be proved to be unreachable, though still
1918              referenced (in the form of having its address taken.  */
1919           ASM_OUTPUT_DEBUG_LABEL (file, "L", CODE_LABEL_NUMBER (insn));
1920           break;
1921
1922         case NOTE_INSN_VAR_LOCATION:
1923           (*debug_hooks->var_location) (insn);
1924           break;
1925
1926         default:
1927           gcc_unreachable ();
1928           break;
1929         }
1930       break;
1931
1932     case BARRIER:
1933 #if defined (DWARF2_UNWIND_INFO)
1934       if (dwarf2out_do_frame ())
1935         dwarf2out_frame_debug (insn, false);
1936 #endif
1937       break;
1938
1939     case CODE_LABEL:
1940       /* The target port might emit labels in the output function for
1941          some insn, e.g. sh.c output_branchy_insn.  */
1942       if (CODE_LABEL_NUMBER (insn) <= max_labelno)
1943         {
1944           int align = LABEL_TO_ALIGNMENT (insn);
1945 #ifdef ASM_OUTPUT_MAX_SKIP_ALIGN
1946           int max_skip = LABEL_TO_MAX_SKIP (insn);
1947 #endif
1948
1949           if (align && NEXT_INSN (insn))
1950             {
1951 #ifdef ASM_OUTPUT_MAX_SKIP_ALIGN
1952               ASM_OUTPUT_MAX_SKIP_ALIGN (file, align, max_skip);
1953 #else
1954 #ifdef ASM_OUTPUT_ALIGN_WITH_NOP
1955               ASM_OUTPUT_ALIGN_WITH_NOP (file, align);
1956 #else
1957               ASM_OUTPUT_ALIGN (file, align);
1958 #endif
1959 #endif
1960             }
1961         }
1962 #ifdef HAVE_cc0
1963       CC_STATUS_INIT;
1964       /* If this label is reached from only one place, set the condition
1965          codes from the instruction just before the branch.  */
1966
1967       /* Disabled because some insns set cc_status in the C output code
1968          and NOTICE_UPDATE_CC alone can set incorrect status.  */
1969       if (0 /* optimize && LABEL_NUSES (insn) == 1*/)
1970         {
1971           rtx jump = LABEL_REFS (insn);
1972           rtx barrier = prev_nonnote_insn (insn);
1973           rtx prev;
1974           /* If the LABEL_REFS field of this label has been set to point
1975              at a branch, the predecessor of the branch is a regular
1976              insn, and that branch is the only way to reach this label,
1977              set the condition codes based on the branch and its
1978              predecessor.  */
1979           if (barrier && BARRIER_P (barrier)
1980               && jump && JUMP_P (jump)
1981               && (prev = prev_nonnote_insn (jump))
1982               && NONJUMP_INSN_P (prev))
1983             {
1984               NOTICE_UPDATE_CC (PATTERN (prev), prev);
1985               NOTICE_UPDATE_CC (PATTERN (jump), jump);
1986             }
1987         }
1988 #endif
1989
1990       if (LABEL_NAME (insn))
1991         (*debug_hooks->label) (insn);
1992
1993       if (app_on)
1994         {
1995           fputs (ASM_APP_OFF, file);
1996           app_on = 0;
1997         }
1998
1999       next = next_nonnote_insn (insn);
2000       if (next != 0 && JUMP_P (next))
2001         {
2002           rtx nextbody = PATTERN (next);
2003
2004           /* If this label is followed by a jump-table,
2005              make sure we put the label in the read-only section.  Also
2006              possibly write the label and jump table together.  */
2007
2008           if (GET_CODE (nextbody) == ADDR_VEC
2009               || GET_CODE (nextbody) == ADDR_DIFF_VEC)
2010             {
2011 #if defined(ASM_OUTPUT_ADDR_VEC) || defined(ASM_OUTPUT_ADDR_DIFF_VEC)
2012               /* In this case, the case vector is being moved by the
2013                  target, so don't output the label at all.  Leave that
2014                  to the back end macros.  */
2015 #else
2016               if (! JUMP_TABLES_IN_TEXT_SECTION)
2017                 {
2018                   int log_align;
2019
2020                   switch_to_section (targetm.asm_out.function_rodata_section
2021                                      (current_function_decl));
2022
2023 #ifdef ADDR_VEC_ALIGN
2024                   log_align = ADDR_VEC_ALIGN (next);
2025 #else
2026                   log_align = exact_log2 (BIGGEST_ALIGNMENT / BITS_PER_UNIT);
2027 #endif
2028                   ASM_OUTPUT_ALIGN (file, log_align);
2029                 }
2030               else
2031                 switch_to_section (current_function_section ());
2032
2033 #ifdef ASM_OUTPUT_CASE_LABEL
2034               ASM_OUTPUT_CASE_LABEL (file, "L", CODE_LABEL_NUMBER (insn),
2035                                      next);
2036 #else
2037               targetm.asm_out.internal_label (file, "L", CODE_LABEL_NUMBER (insn));
2038 #endif
2039 #endif
2040               break;
2041             }
2042         }
2043       if (LABEL_ALT_ENTRY_P (insn))
2044         output_alternate_entry_point (file, insn);
2045       else
2046         targetm.asm_out.internal_label (file, "L", CODE_LABEL_NUMBER (insn));
2047       break;
2048
2049     default:
2050       {
2051         rtx body = PATTERN (insn);
2052         int insn_code_number;
2053         const char *template;
2054
2055 #ifdef HAVE_conditional_execution
2056         /* Reset this early so it is correct for ASM statements.  */
2057         current_insn_predicate = NULL_RTX;
2058 #endif
2059         /* An INSN, JUMP_INSN or CALL_INSN.
2060            First check for special kinds that recog doesn't recognize.  */
2061
2062         if (GET_CODE (body) == USE /* These are just declarations.  */
2063             || GET_CODE (body) == CLOBBER)
2064           break;
2065
2066 #ifdef HAVE_cc0
2067         {
2068           /* If there is a REG_CC_SETTER note on this insn, it means that
2069              the setting of the condition code was done in the delay slot
2070              of the insn that branched here.  So recover the cc status
2071              from the insn that set it.  */
2072
2073           rtx note = find_reg_note (insn, REG_CC_SETTER, NULL_RTX);
2074           if (note)
2075             {
2076               NOTICE_UPDATE_CC (PATTERN (XEXP (note, 0)), XEXP (note, 0));
2077               cc_prev_status = cc_status;
2078             }
2079         }
2080 #endif
2081
2082         /* Detect insns that are really jump-tables
2083            and output them as such.  */
2084
2085         if (GET_CODE (body) == ADDR_VEC || GET_CODE (body) == ADDR_DIFF_VEC)
2086           {
2087 #if !(defined(ASM_OUTPUT_ADDR_VEC) || defined(ASM_OUTPUT_ADDR_DIFF_VEC))
2088             int vlen, idx;
2089 #endif
2090
2091             if (! JUMP_TABLES_IN_TEXT_SECTION)
2092               switch_to_section (targetm.asm_out.function_rodata_section
2093                                  (current_function_decl));
2094             else
2095               switch_to_section (current_function_section ());
2096
2097             if (app_on)
2098               {
2099                 fputs (ASM_APP_OFF, file);
2100                 app_on = 0;
2101               }
2102
2103 #if defined(ASM_OUTPUT_ADDR_VEC) || defined(ASM_OUTPUT_ADDR_DIFF_VEC)
2104             if (GET_CODE (body) == ADDR_VEC)
2105               {
2106 #ifdef ASM_OUTPUT_ADDR_VEC
2107                 ASM_OUTPUT_ADDR_VEC (PREV_INSN (insn), body);
2108 #else
2109                 gcc_unreachable ();
2110 #endif
2111               }
2112             else
2113               {
2114 #ifdef ASM_OUTPUT_ADDR_DIFF_VEC
2115                 ASM_OUTPUT_ADDR_DIFF_VEC (PREV_INSN (insn), body);
2116 #else
2117                 gcc_unreachable ();
2118 #endif
2119               }
2120 #else
2121             vlen = XVECLEN (body, GET_CODE (body) == ADDR_DIFF_VEC);
2122             for (idx = 0; idx < vlen; idx++)
2123               {
2124                 if (GET_CODE (body) == ADDR_VEC)
2125                   {
2126 #ifdef ASM_OUTPUT_ADDR_VEC_ELT
2127                     ASM_OUTPUT_ADDR_VEC_ELT
2128                       (file, CODE_LABEL_NUMBER (XEXP (XVECEXP (body, 0, idx), 0)));
2129 #else
2130                     gcc_unreachable ();
2131 #endif
2132                   }
2133                 else
2134                   {
2135 #ifdef ASM_OUTPUT_ADDR_DIFF_ELT
2136                     ASM_OUTPUT_ADDR_DIFF_ELT
2137                       (file,
2138                        body,
2139                        CODE_LABEL_NUMBER (XEXP (XVECEXP (body, 1, idx), 0)),
2140                        CODE_LABEL_NUMBER (XEXP (XEXP (body, 0), 0)));
2141 #else
2142                     gcc_unreachable ();
2143 #endif
2144                   }
2145               }
2146 #ifdef ASM_OUTPUT_CASE_END
2147             ASM_OUTPUT_CASE_END (file,
2148                                  CODE_LABEL_NUMBER (PREV_INSN (insn)),
2149                                  insn);
2150 #endif
2151 #endif
2152
2153             switch_to_section (current_function_section ());
2154
2155             break;
2156           }
2157         /* Output this line note if it is the first or the last line
2158            note in a row.  */
2159         if (notice_source_line (insn))
2160           {
2161             (*debug_hooks->source_line) (last_linenum, last_filename);
2162           }
2163
2164         if (GET_CODE (body) == ASM_INPUT)
2165           {
2166             const char *string = XSTR (body, 0);
2167
2168             /* There's no telling what that did to the condition codes.  */
2169             CC_STATUS_INIT;
2170
2171             if (string[0])
2172               {
2173                 expanded_location loc;
2174
2175                 if (! app_on)
2176                   {
2177                     fputs (ASM_APP_ON, file);
2178                     app_on = 1;
2179                   }
2180 #ifdef USE_MAPPED_LOCATION
2181                 loc = expand_location (ASM_INPUT_SOURCE_LOCATION (body));
2182 #else
2183                 loc.file = ASM_INPUT_SOURCE_FILE (body);
2184                 loc.line = ASM_INPUT_SOURCE_LINE (body);
2185 #endif
2186                 if (*loc.file && loc.line)
2187                   fprintf (asm_out_file, "%s %i \"%s\" 1\n",
2188                            ASM_COMMENT_START, loc.line, loc.file);
2189                 fprintf (asm_out_file, "\t%s\n", string);
2190 #if HAVE_AS_LINE_ZERO
2191                 if (*loc.file && loc.line)
2192                   fprintf (asm_out_file, "%s 0 \"\" 2\n", ASM_COMMENT_START);
2193 #endif
2194               }
2195             break;
2196           }
2197
2198         /* Detect `asm' construct with operands.  */
2199         if (asm_noperands (body) >= 0)
2200           {
2201             unsigned int noperands = asm_noperands (body);
2202             rtx *ops = alloca (noperands * sizeof (rtx));
2203             const char *string;
2204             location_t loc;
2205             expanded_location expanded;
2206
2207             /* There's no telling what that did to the condition codes.  */
2208             CC_STATUS_INIT;
2209
2210             /* Get out the operand values.  */
2211             string = decode_asm_operands (body, ops, NULL, NULL, NULL, &loc);
2212             /* Inhibit dieing on what would otherwise be compiler bugs.  */
2213             insn_noperands = noperands;
2214             this_is_asm_operands = insn;
2215             expanded = expand_location (loc);
2216
2217 #ifdef FINAL_PRESCAN_INSN
2218             FINAL_PRESCAN_INSN (insn, ops, insn_noperands);
2219 #endif
2220
2221             /* Output the insn using them.  */
2222             if (string[0])
2223               {
2224                 if (! app_on)
2225                   {
2226                     fputs (ASM_APP_ON, file);
2227                     app_on = 1;
2228                   }
2229                 if (expanded.file && expanded.line)
2230                   fprintf (asm_out_file, "%s %i \"%s\" 1\n",
2231                            ASM_COMMENT_START, expanded.line, expanded.file);
2232                 output_asm_insn (string, ops);
2233 #if HAVE_AS_LINE_ZERO
2234                 if (expanded.file && expanded.line)
2235                   fprintf (asm_out_file, "%s 0 \"\" 2\n", ASM_COMMENT_START);
2236 #endif
2237               }
2238
2239             this_is_asm_operands = 0;
2240             break;
2241           }
2242
2243         if (app_on)
2244           {
2245             fputs (ASM_APP_OFF, file);
2246             app_on = 0;
2247           }
2248
2249         if (GET_CODE (body) == SEQUENCE)
2250           {
2251             /* A delayed-branch sequence */
2252             int i;
2253
2254             final_sequence = body;
2255
2256             /* Record the delay slots' frame information before the branch.
2257                This is needed for delayed calls: see execute_cfa_program().  */
2258 #if defined (DWARF2_UNWIND_INFO)
2259             if (dwarf2out_do_frame ())
2260               for (i = 1; i < XVECLEN (body, 0); i++)
2261                 dwarf2out_frame_debug (XVECEXP (body, 0, i), false);
2262 #endif
2263
2264             /* The first insn in this SEQUENCE might be a JUMP_INSN that will
2265                force the restoration of a comparison that was previously
2266                thought unnecessary.  If that happens, cancel this sequence
2267                and cause that insn to be restored.  */
2268
2269             next = final_scan_insn (XVECEXP (body, 0, 0), file, 0, 1, seen);
2270             if (next != XVECEXP (body, 0, 1))
2271               {
2272                 final_sequence = 0;
2273                 return next;
2274               }
2275
2276             for (i = 1; i < XVECLEN (body, 0); i++)
2277               {
2278                 rtx insn = XVECEXP (body, 0, i);
2279                 rtx next = NEXT_INSN (insn);
2280                 /* We loop in case any instruction in a delay slot gets
2281                    split.  */
2282                 do
2283                   insn = final_scan_insn (insn, file, 0, 1, seen);
2284                 while (insn != next);
2285               }
2286 #ifdef DBR_OUTPUT_SEQEND
2287             DBR_OUTPUT_SEQEND (file);
2288 #endif
2289             final_sequence = 0;
2290
2291             /* If the insn requiring the delay slot was a CALL_INSN, the
2292                insns in the delay slot are actually executed before the
2293                called function.  Hence we don't preserve any CC-setting
2294                actions in these insns and the CC must be marked as being
2295                clobbered by the function.  */
2296             if (CALL_P (XVECEXP (body, 0, 0)))
2297               {
2298                 CC_STATUS_INIT;
2299               }
2300             break;
2301           }
2302
2303         /* We have a real machine instruction as rtl.  */
2304
2305         body = PATTERN (insn);
2306
2307 #ifdef HAVE_cc0
2308         set = single_set (insn);
2309
2310         /* Check for redundant test and compare instructions
2311            (when the condition codes are already set up as desired).
2312            This is done only when optimizing; if not optimizing,
2313            it should be possible for the user to alter a variable
2314            with the debugger in between statements
2315            and the next statement should reexamine the variable
2316            to compute the condition codes.  */
2317
2318         if (optimize)
2319           {
2320             if (set
2321                 && GET_CODE (SET_DEST (set)) == CC0
2322                 && insn != last_ignored_compare)
2323               {
2324                 if (GET_CODE (SET_SRC (set)) == SUBREG)
2325                   SET_SRC (set) = alter_subreg (&SET_SRC (set));
2326                 else if (GET_CODE (SET_SRC (set)) == COMPARE)
2327                   {
2328                     if (GET_CODE (XEXP (SET_SRC (set), 0)) == SUBREG)
2329                       XEXP (SET_SRC (set), 0)
2330                         = alter_subreg (&XEXP (SET_SRC (set), 0));
2331                     if (GET_CODE (XEXP (SET_SRC (set), 1)) == SUBREG)
2332                       XEXP (SET_SRC (set), 1)
2333                         = alter_subreg (&XEXP (SET_SRC (set), 1));
2334                   }
2335                 if ((cc_status.value1 != 0
2336                      && rtx_equal_p (SET_SRC (set), cc_status.value1))
2337                     || (cc_status.value2 != 0
2338                         && rtx_equal_p (SET_SRC (set), cc_status.value2)))
2339                   {
2340                     /* Don't delete insn if it has an addressing side-effect.  */
2341                     if (! FIND_REG_INC_NOTE (insn, NULL_RTX)
2342                         /* or if anything in it is volatile.  */
2343                         && ! volatile_refs_p (PATTERN (insn)))
2344                       {
2345                         /* We don't really delete the insn; just ignore it.  */
2346                         last_ignored_compare = insn;
2347                         break;
2348                       }
2349                   }
2350               }
2351           }
2352 #endif
2353
2354 #ifdef HAVE_cc0
2355         /* If this is a conditional branch, maybe modify it
2356            if the cc's are in a nonstandard state
2357            so that it accomplishes the same thing that it would
2358            do straightforwardly if the cc's were set up normally.  */
2359
2360         if (cc_status.flags != 0
2361             && JUMP_P (insn)
2362             && GET_CODE (body) == SET
2363             && SET_DEST (body) == pc_rtx
2364             && GET_CODE (SET_SRC (body)) == IF_THEN_ELSE
2365             && COMPARISON_P (XEXP (SET_SRC (body), 0))
2366             && XEXP (XEXP (SET_SRC (body), 0), 0) == cc0_rtx)
2367           {
2368             /* This function may alter the contents of its argument
2369                and clear some of the cc_status.flags bits.
2370                It may also return 1 meaning condition now always true
2371                or -1 meaning condition now always false
2372                or 2 meaning condition nontrivial but altered.  */
2373             int result = alter_cond (XEXP (SET_SRC (body), 0));
2374             /* If condition now has fixed value, replace the IF_THEN_ELSE
2375                with its then-operand or its else-operand.  */
2376             if (result == 1)
2377               SET_SRC (body) = XEXP (SET_SRC (body), 1);
2378             if (result == -1)
2379               SET_SRC (body) = XEXP (SET_SRC (body), 2);
2380
2381             /* The jump is now either unconditional or a no-op.
2382                If it has become a no-op, don't try to output it.
2383                (It would not be recognized.)  */
2384             if (SET_SRC (body) == pc_rtx)
2385               {
2386                 delete_insn (insn);
2387                 break;
2388               }
2389             else if (GET_CODE (SET_SRC (body)) == RETURN)
2390               /* Replace (set (pc) (return)) with (return).  */
2391               PATTERN (insn) = body = SET_SRC (body);
2392
2393             /* Rerecognize the instruction if it has changed.  */
2394             if (result != 0)
2395               INSN_CODE (insn) = -1;
2396           }
2397
2398         /* If this is a conditional trap, maybe modify it if the cc's
2399            are in a nonstandard state so that it accomplishes the same
2400            thing that it would do straightforwardly if the cc's were
2401            set up normally.  */
2402         if (cc_status.flags != 0
2403             && NONJUMP_INSN_P (insn)
2404             && GET_CODE (body) == TRAP_IF
2405             && COMPARISON_P (TRAP_CONDITION (body))
2406             && XEXP (TRAP_CONDITION (body), 0) == cc0_rtx)
2407           {
2408             /* This function may alter the contents of its argument
2409                and clear some of the cc_status.flags bits.
2410                It may also return 1 meaning condition now always true
2411                or -1 meaning condition now always false
2412                or 2 meaning condition nontrivial but altered.  */
2413             int result = alter_cond (TRAP_CONDITION (body));
2414
2415             /* If TRAP_CONDITION has become always false, delete the
2416                instruction.  */
2417             if (result == -1)
2418               {
2419                 delete_insn (insn);
2420                 break;
2421               }
2422
2423             /* If TRAP_CONDITION has become always true, replace
2424                TRAP_CONDITION with const_true_rtx.  */
2425             if (result == 1)
2426               TRAP_CONDITION (body) = const_true_rtx;
2427
2428             /* Rerecognize the instruction if it has changed.  */
2429             if (result != 0)
2430               INSN_CODE (insn) = -1;
2431           }
2432
2433         /* Make same adjustments to instructions that examine the
2434            condition codes without jumping and instructions that
2435            handle conditional moves (if this machine has either one).  */
2436
2437         if (cc_status.flags != 0
2438             && set != 0)
2439           {
2440             rtx cond_rtx, then_rtx, else_rtx;
2441
2442             if (!JUMP_P (insn)
2443                 && GET_CODE (SET_SRC (set)) == IF_THEN_ELSE)
2444               {
2445                 cond_rtx = XEXP (SET_SRC (set), 0);
2446                 then_rtx = XEXP (SET_SRC (set), 1);
2447                 else_rtx = XEXP (SET_SRC (set), 2);
2448               }
2449             else
2450               {
2451                 cond_rtx = SET_SRC (set);
2452                 then_rtx = const_true_rtx;
2453                 else_rtx = const0_rtx;
2454               }
2455
2456             switch (GET_CODE (cond_rtx))
2457               {
2458               case GTU:
2459               case GT:
2460               case LTU:
2461               case LT:
2462               case GEU:
2463               case GE:
2464               case LEU:
2465               case LE:
2466               case EQ:
2467               case NE:
2468                 {
2469                   int result;
2470                   if (XEXP (cond_rtx, 0) != cc0_rtx)
2471                     break;
2472                   result = alter_cond (cond_rtx);
2473                   if (result == 1)
2474                     validate_change (insn, &SET_SRC (set), then_rtx, 0);
2475                   else if (result == -1)
2476                     validate_change (insn, &SET_SRC (set), else_rtx, 0);
2477                   else if (result == 2)
2478                     INSN_CODE (insn) = -1;
2479                   if (SET_DEST (set) == SET_SRC (set))
2480                     delete_insn (insn);
2481                 }
2482                 break;
2483
2484               default:
2485                 break;
2486               }
2487           }
2488
2489 #endif
2490
2491 #ifdef HAVE_peephole
2492         /* Do machine-specific peephole optimizations if desired.  */
2493
2494         if (optimize && !flag_no_peephole && !nopeepholes)
2495           {
2496             rtx next = peephole (insn);
2497             /* When peepholing, if there were notes within the peephole,
2498                emit them before the peephole.  */
2499             if (next != 0 && next != NEXT_INSN (insn))
2500               {
2501                 rtx note, prev = PREV_INSN (insn);
2502
2503                 for (note = NEXT_INSN (insn); note != next;
2504                      note = NEXT_INSN (note))
2505                   final_scan_insn (note, file, optimize, nopeepholes, seen);
2506
2507                 /* Put the notes in the proper position for a later
2508                    rescan.  For example, the SH target can do this
2509                    when generating a far jump in a delayed branch
2510                    sequence.  */
2511                 note = NEXT_INSN (insn);
2512                 PREV_INSN (note) = prev;
2513                 NEXT_INSN (prev) = note;
2514                 NEXT_INSN (PREV_INSN (next)) = insn;
2515                 PREV_INSN (insn) = PREV_INSN (next);
2516                 NEXT_INSN (insn) = next;
2517                 PREV_INSN (next) = insn;
2518               }
2519
2520             /* PEEPHOLE might have changed this.  */
2521             body = PATTERN (insn);
2522           }
2523 #endif
2524
2525         /* Try to recognize the instruction.
2526            If successful, verify that the operands satisfy the
2527            constraints for the instruction.  Crash if they don't,
2528            since `reload' should have changed them so that they do.  */
2529
2530         insn_code_number = recog_memoized (insn);
2531         cleanup_subreg_operands (insn);
2532
2533         /* Dump the insn in the assembly for debugging.  */
2534         if (flag_dump_rtl_in_asm)
2535           {
2536             print_rtx_head = ASM_COMMENT_START;
2537             print_rtl_single (asm_out_file, insn);
2538             print_rtx_head = "";
2539           }
2540
2541         if (! constrain_operands_cached (1))
2542           fatal_insn_not_found (insn);
2543
2544         /* Some target machines need to prescan each insn before
2545            it is output.  */
2546
2547 #ifdef FINAL_PRESCAN_INSN
2548         FINAL_PRESCAN_INSN (insn, recog_data.operand, recog_data.n_operands);
2549 #endif
2550
2551 #ifdef HAVE_conditional_execution
2552         if (GET_CODE (PATTERN (insn)) == COND_EXEC)
2553           current_insn_predicate = COND_EXEC_TEST (PATTERN (insn));
2554 #endif
2555
2556 #ifdef HAVE_cc0
2557         cc_prev_status = cc_status;
2558
2559         /* Update `cc_status' for this instruction.
2560            The instruction's output routine may change it further.
2561            If the output routine for a jump insn needs to depend
2562            on the cc status, it should look at cc_prev_status.  */
2563
2564         NOTICE_UPDATE_CC (body, insn);
2565 #endif
2566
2567         current_output_insn = debug_insn = insn;
2568
2569 #if defined (DWARF2_UNWIND_INFO)
2570         if (CALL_P (insn) && dwarf2out_do_frame ())
2571           dwarf2out_frame_debug (insn, false);
2572 #endif
2573
2574         /* Find the proper template for this insn.  */
2575         template = get_insn_template (insn_code_number, insn);
2576
2577         /* If the C code returns 0, it means that it is a jump insn
2578            which follows a deleted test insn, and that test insn
2579            needs to be reinserted.  */
2580         if (template == 0)
2581           {
2582             rtx prev;
2583
2584             gcc_assert (prev_nonnote_insn (insn) == last_ignored_compare);
2585
2586             /* We have already processed the notes between the setter and
2587                the user.  Make sure we don't process them again, this is
2588                particularly important if one of the notes is a block
2589                scope note or an EH note.  */
2590             for (prev = insn;
2591                  prev != last_ignored_compare;
2592                  prev = PREV_INSN (prev))
2593               {
2594                 if (NOTE_P (prev))
2595                   delete_insn (prev);   /* Use delete_note.  */
2596               }
2597
2598             return prev;
2599           }
2600
2601         /* If the template is the string "#", it means that this insn must
2602            be split.  */
2603         if (template[0] == '#' && template[1] == '\0')
2604           {
2605             rtx new = try_split (body, insn, 0);
2606
2607             /* If we didn't split the insn, go away.  */
2608             if (new == insn && PATTERN (new) == body)
2609               fatal_insn ("could not split insn", insn);
2610
2611 #ifdef HAVE_ATTR_length
2612             /* This instruction should have been split in shorten_branches,
2613                to ensure that we would have valid length info for the
2614                splitees.  */
2615             gcc_unreachable ();
2616 #endif
2617
2618             return new;
2619           }
2620
2621 #ifdef TARGET_UNWIND_INFO
2622         /* ??? This will put the directives in the wrong place if
2623            get_insn_template outputs assembly directly.  However calling it
2624            before get_insn_template breaks if the insns is split.  */
2625         targetm.asm_out.unwind_emit (asm_out_file, insn);
2626 #endif
2627
2628         /* Output assembler code from the template.  */
2629         output_asm_insn (template, recog_data.operand);
2630
2631         /* If necessary, report the effect that the instruction has on
2632            the unwind info.   We've already done this for delay slots
2633            and call instructions.  */
2634 #if defined (DWARF2_UNWIND_INFO)
2635         if (final_sequence == 0
2636 #if !defined (HAVE_prologue)
2637             && !ACCUMULATE_OUTGOING_ARGS
2638 #endif
2639             && dwarf2out_do_frame ())
2640           dwarf2out_frame_debug (insn, true);
2641 #endif
2642
2643         current_output_insn = debug_insn = 0;
2644       }
2645     }
2646   return NEXT_INSN (insn);
2647 }
2648 \f
2649 /* Return whether a source line note needs to be emitted before INSN.  */
2650
2651 static bool
2652 notice_source_line (rtx insn)
2653 {
2654   const char *filename;
2655   int linenum;
2656
2657   if (override_filename)
2658     {
2659       filename = override_filename;
2660       linenum = override_linenum;
2661     }
2662   else
2663     {
2664       filename = insn_file (insn);
2665       linenum = insn_line (insn);
2666     }
2667
2668   if (filename
2669       && (force_source_line
2670           || filename != last_filename
2671           || last_linenum != linenum))
2672     {
2673       force_source_line = false;
2674       last_filename = filename;
2675       last_linenum = linenum;
2676       high_block_linenum = MAX (last_linenum, high_block_linenum);
2677       high_function_linenum = MAX (last_linenum, high_function_linenum);
2678       return true;
2679     }
2680   return false;
2681 }
2682 \f
2683 /* For each operand in INSN, simplify (subreg (reg)) so that it refers
2684    directly to the desired hard register.  */
2685
2686 void
2687 cleanup_subreg_operands (rtx insn)
2688 {
2689   int i;
2690   bool changed = false;
2691   extract_insn_cached (insn);
2692   for (i = 0; i < recog_data.n_operands; i++)
2693     {
2694       /* The following test cannot use recog_data.operand when testing
2695          for a SUBREG: the underlying object might have been changed
2696          already if we are inside a match_operator expression that
2697          matches the else clause.  Instead we test the underlying
2698          expression directly.  */
2699       if (GET_CODE (*recog_data.operand_loc[i]) == SUBREG)
2700         {
2701           recog_data.operand[i] = alter_subreg (recog_data.operand_loc[i]);
2702           changed = true;
2703         }
2704       else if (GET_CODE (recog_data.operand[i]) == PLUS
2705                || GET_CODE (recog_data.operand[i]) == MULT
2706                || MEM_P (recog_data.operand[i]))
2707         recog_data.operand[i] = walk_alter_subreg (recog_data.operand_loc[i], &changed);
2708     }
2709
2710   for (i = 0; i < recog_data.n_dups; i++)
2711     {
2712       if (GET_CODE (*recog_data.dup_loc[i]) == SUBREG)
2713         {
2714           *recog_data.dup_loc[i] = alter_subreg (recog_data.dup_loc[i]);
2715           changed = true;
2716         }
2717       else if (GET_CODE (*recog_data.dup_loc[i]) == PLUS
2718                || GET_CODE (*recog_data.dup_loc[i]) == MULT
2719                || MEM_P (*recog_data.dup_loc[i]))
2720         *recog_data.dup_loc[i] = walk_alter_subreg (recog_data.dup_loc[i], &changed);
2721     }
2722   if (changed)
2723     df_insn_rescan (insn);
2724 }
2725
2726 /* If X is a SUBREG, replace it with a REG or a MEM,
2727    based on the thing it is a subreg of.  */
2728
2729 rtx
2730 alter_subreg (rtx *xp)
2731 {
2732   rtx x = *xp;
2733   rtx y = SUBREG_REG (x);
2734
2735   /* simplify_subreg does not remove subreg from volatile references.
2736      We are required to.  */
2737   if (MEM_P (y))
2738     {
2739       int offset = SUBREG_BYTE (x);
2740
2741       /* For paradoxical subregs on big-endian machines, SUBREG_BYTE
2742          contains 0 instead of the proper offset.  See simplify_subreg.  */
2743       if (offset == 0
2744           && GET_MODE_SIZE (GET_MODE (y)) < GET_MODE_SIZE (GET_MODE (x)))
2745         {
2746           int difference = GET_MODE_SIZE (GET_MODE (y))
2747                            - GET_MODE_SIZE (GET_MODE (x));
2748           if (WORDS_BIG_ENDIAN)
2749             offset += (difference / UNITS_PER_WORD) * UNITS_PER_WORD;
2750           if (BYTES_BIG_ENDIAN)
2751             offset += difference % UNITS_PER_WORD;
2752         }
2753
2754       *xp = adjust_address (y, GET_MODE (x), offset);
2755     }
2756   else
2757     {
2758       rtx new = simplify_subreg (GET_MODE (x), y, GET_MODE (y),
2759                                  SUBREG_BYTE (x));
2760
2761       if (new != 0)
2762         *xp = new;
2763       else if (REG_P (y))
2764         {
2765           /* Simplify_subreg can't handle some REG cases, but we have to.  */
2766           unsigned int regno;
2767           HOST_WIDE_INT offset;
2768
2769           regno = subreg_regno (x);
2770           if (subreg_lowpart_p (x))
2771             offset = byte_lowpart_offset (GET_MODE (x), GET_MODE (y));
2772           else
2773             offset = SUBREG_BYTE (x);
2774           *xp = gen_rtx_REG_offset (y, GET_MODE (x), regno, offset);
2775         }
2776     }
2777
2778   return *xp;
2779 }
2780
2781 /* Do alter_subreg on all the SUBREGs contained in X.  */
2782
2783 static rtx
2784 walk_alter_subreg (rtx *xp, bool *changed)
2785 {
2786   rtx x = *xp;
2787   switch (GET_CODE (x))
2788     {
2789     case PLUS:
2790     case MULT:
2791     case AND:
2792       XEXP (x, 0) = walk_alter_subreg (&XEXP (x, 0), changed);
2793       XEXP (x, 1) = walk_alter_subreg (&XEXP (x, 1), changed);
2794       break;
2795
2796     case MEM:
2797     case ZERO_EXTEND:
2798       XEXP (x, 0) = walk_alter_subreg (&XEXP (x, 0), changed);
2799       break;
2800
2801     case SUBREG:
2802       *changed = true;
2803       return alter_subreg (xp);
2804
2805     default:
2806       break;
2807     }
2808
2809   return *xp;
2810 }
2811 \f
2812 #ifdef HAVE_cc0
2813
2814 /* Given BODY, the body of a jump instruction, alter the jump condition
2815    as required by the bits that are set in cc_status.flags.
2816    Not all of the bits there can be handled at this level in all cases.
2817
2818    The value is normally 0.
2819    1 means that the condition has become always true.
2820    -1 means that the condition has become always false.
2821    2 means that COND has been altered.  */
2822
2823 static int
2824 alter_cond (rtx cond)
2825 {
2826   int value = 0;
2827
2828   if (cc_status.flags & CC_REVERSED)
2829     {
2830       value = 2;
2831       PUT_CODE (cond, swap_condition (GET_CODE (cond)));
2832     }
2833
2834   if (cc_status.flags & CC_INVERTED)
2835     {
2836       value = 2;
2837       PUT_CODE (cond, reverse_condition (GET_CODE (cond)));
2838     }
2839
2840   if (cc_status.flags & CC_NOT_POSITIVE)
2841     switch (GET_CODE (cond))
2842       {
2843       case LE:
2844       case LEU:
2845       case GEU:
2846         /* Jump becomes unconditional.  */
2847         return 1;
2848
2849       case GT:
2850       case GTU:
2851       case LTU:
2852         /* Jump becomes no-op.  */
2853         return -1;
2854
2855       case GE:
2856         PUT_CODE (cond, EQ);
2857         value = 2;
2858         break;
2859
2860       case LT:
2861         PUT_CODE (cond, NE);
2862         value = 2;
2863         break;
2864
2865       default:
2866         break;
2867       }
2868
2869   if (cc_status.flags & CC_NOT_NEGATIVE)
2870     switch (GET_CODE (cond))
2871       {
2872       case GE:
2873       case GEU:
2874         /* Jump becomes unconditional.  */
2875         return 1;
2876
2877       case LT:
2878       case LTU:
2879         /* Jump becomes no-op.  */
2880         return -1;
2881
2882       case LE:
2883       case LEU:
2884         PUT_CODE (cond, EQ);
2885         value = 2;
2886         break;
2887
2888       case GT:
2889       case GTU:
2890         PUT_CODE (cond, NE);
2891         value = 2;
2892         break;
2893
2894       default:
2895         break;
2896       }
2897
2898   if (cc_status.flags & CC_NO_OVERFLOW)
2899     switch (GET_CODE (cond))
2900       {
2901       case GEU:
2902         /* Jump becomes unconditional.  */
2903         return 1;
2904
2905       case LEU:
2906         PUT_CODE (cond, EQ);
2907         value = 2;
2908         break;
2909
2910       case GTU:
2911         PUT_CODE (cond, NE);
2912         value = 2;
2913         break;
2914
2915       case LTU:
2916         /* Jump becomes no-op.  */
2917         return -1;
2918
2919       default:
2920         break;
2921       }
2922
2923   if (cc_status.flags & (CC_Z_IN_NOT_N | CC_Z_IN_N))
2924     switch (GET_CODE (cond))
2925       {
2926       default:
2927         gcc_unreachable ();
2928
2929       case NE:
2930         PUT_CODE (cond, cc_status.flags & CC_Z_IN_N ? GE : LT);
2931         value = 2;
2932         break;
2933
2934       case EQ:
2935         PUT_CODE (cond, cc_status.flags & CC_Z_IN_N ? LT : GE);
2936         value = 2;
2937         break;
2938       }
2939
2940   if (cc_status.flags & CC_NOT_SIGNED)
2941     /* The flags are valid if signed condition operators are converted
2942        to unsigned.  */
2943     switch (GET_CODE (cond))
2944       {
2945       case LE:
2946         PUT_CODE (cond, LEU);
2947         value = 2;
2948         break;
2949
2950       case LT:
2951         PUT_CODE (cond, LTU);
2952         value = 2;
2953         break;
2954
2955       case GT:
2956         PUT_CODE (cond, GTU);
2957         value = 2;
2958         break;
2959
2960       case GE:
2961         PUT_CODE (cond, GEU);
2962         value = 2;
2963         break;
2964
2965       default:
2966         break;
2967       }
2968
2969   return value;
2970 }
2971 #endif
2972 \f
2973 /* Report inconsistency between the assembler template and the operands.
2974    In an `asm', it's the user's fault; otherwise, the compiler's fault.  */
2975
2976 void
2977 output_operand_lossage (const char *cmsgid, ...)
2978 {
2979   char *fmt_string;
2980   char *new_message;
2981   const char *pfx_str;
2982   va_list ap;
2983
2984   va_start (ap, cmsgid);
2985
2986   pfx_str = this_is_asm_operands ? _("invalid 'asm': ") : "output_operand: ";
2987   asprintf (&fmt_string, "%s%s", pfx_str, _(cmsgid));
2988   vasprintf (&new_message, fmt_string, ap);
2989
2990   if (this_is_asm_operands)
2991     error_for_asm (this_is_asm_operands, "%s", new_message);
2992   else
2993     internal_error ("%s", new_message);
2994
2995   free (fmt_string);
2996   free (new_message);
2997   va_end (ap);
2998 }
2999 \f
3000 /* Output of assembler code from a template, and its subroutines.  */
3001
3002 /* Annotate the assembly with a comment describing the pattern and
3003    alternative used.  */
3004
3005 static void
3006 output_asm_name (void)
3007 {
3008   if (debug_insn)
3009     {
3010       int num = INSN_CODE (debug_insn);
3011       fprintf (asm_out_file, "\t%s %d\t%s",
3012                ASM_COMMENT_START, INSN_UID (debug_insn),
3013                insn_data[num].name);
3014       if (insn_data[num].n_alternatives > 1)
3015         fprintf (asm_out_file, "/%d", which_alternative + 1);
3016 #ifdef HAVE_ATTR_length
3017       fprintf (asm_out_file, "\t[length = %d]",
3018                get_attr_length (debug_insn));
3019 #endif
3020       /* Clear this so only the first assembler insn
3021          of any rtl insn will get the special comment for -dp.  */
3022       debug_insn = 0;
3023     }
3024 }
3025
3026 /* If OP is a REG or MEM and we can find a MEM_EXPR corresponding to it
3027    or its address, return that expr .  Set *PADDRESSP to 1 if the expr
3028    corresponds to the address of the object and 0 if to the object.  */
3029
3030 static tree
3031 get_mem_expr_from_op (rtx op, int *paddressp)
3032 {
3033   tree expr;
3034   int inner_addressp;
3035
3036   *paddressp = 0;
3037
3038   if (REG_P (op))
3039     return REG_EXPR (op);
3040   else if (!MEM_P (op))
3041     return 0;
3042
3043   if (MEM_EXPR (op) != 0)
3044     return MEM_EXPR (op);
3045
3046   /* Otherwise we have an address, so indicate it and look at the address.  */
3047   *paddressp = 1;
3048   op = XEXP (op, 0);
3049
3050   /* First check if we have a decl for the address, then look at the right side
3051      if it is a PLUS.  Otherwise, strip off arithmetic and keep looking.
3052      But don't allow the address to itself be indirect.  */
3053   if ((expr = get_mem_expr_from_op (op, &inner_addressp)) && ! inner_addressp)
3054     return expr;
3055   else if (GET_CODE (op) == PLUS
3056            && (expr = get_mem_expr_from_op (XEXP (op, 1), &inner_addressp)))
3057     return expr;
3058
3059   while (GET_RTX_CLASS (GET_CODE (op)) == RTX_UNARY
3060          || GET_RTX_CLASS (GET_CODE (op)) == RTX_BIN_ARITH)
3061     op = XEXP (op, 0);
3062
3063   expr = get_mem_expr_from_op (op, &inner_addressp);
3064   return inner_addressp ? 0 : expr;
3065 }
3066
3067 /* Output operand names for assembler instructions.  OPERANDS is the
3068    operand vector, OPORDER is the order to write the operands, and NOPS
3069    is the number of operands to write.  */
3070
3071 static void
3072 output_asm_operand_names (rtx *operands, int *oporder, int nops)
3073 {
3074   int wrote = 0;
3075   int i;
3076
3077   for (i = 0; i < nops; i++)
3078     {
3079       int addressp;
3080       rtx op = operands[oporder[i]];
3081       tree expr = get_mem_expr_from_op (op, &addressp);
3082
3083       fprintf (asm_out_file, "%c%s",
3084                wrote ? ',' : '\t', wrote ? "" : ASM_COMMENT_START);
3085       wrote = 1;
3086       if (expr)
3087         {
3088           fprintf (asm_out_file, "%s",
3089                    addressp ? "*" : "");
3090           print_mem_expr (asm_out_file, expr);
3091           wrote = 1;
3092         }
3093       else if (REG_P (op) && ORIGINAL_REGNO (op)
3094                && ORIGINAL_REGNO (op) != REGNO (op))
3095         fprintf (asm_out_file, " tmp%i", ORIGINAL_REGNO (op));
3096     }
3097 }
3098
3099 /* Output text from TEMPLATE to the assembler output file,
3100    obeying %-directions to substitute operands taken from
3101    the vector OPERANDS.
3102
3103    %N (for N a digit) means print operand N in usual manner.
3104    %lN means require operand N to be a CODE_LABEL or LABEL_REF
3105       and print the label name with no punctuation.
3106    %cN means require operand N to be a constant
3107       and print the constant expression with no punctuation.
3108    %aN means expect operand N to be a memory address
3109       (not a memory reference!) and print a reference
3110       to that address.
3111    %nN means expect operand N to be a constant
3112       and print a constant expression for minus the value
3113       of the operand, with no other punctuation.  */
3114
3115 void
3116 output_asm_insn (const char *template, rtx *operands)
3117 {
3118   const char *p;
3119   int c;
3120 #ifdef ASSEMBLER_DIALECT
3121   int dialect = 0;
3122 #endif
3123   int oporder[MAX_RECOG_OPERANDS];
3124   char opoutput[MAX_RECOG_OPERANDS];
3125   int ops = 0;
3126
3127   /* An insn may return a null string template
3128      in a case where no assembler code is needed.  */
3129   if (*template == 0)
3130     return;
3131
3132   memset (opoutput, 0, sizeof opoutput);
3133   p = template;
3134   putc ('\t', asm_out_file);
3135
3136 #ifdef ASM_OUTPUT_OPCODE
3137   ASM_OUTPUT_OPCODE (asm_out_file, p);
3138 #endif
3139
3140   while ((c = *p++))
3141     switch (c)
3142       {
3143       case '\n':
3144         if (flag_verbose_asm)
3145           output_asm_operand_names (operands, oporder, ops);
3146         if (flag_print_asm_name)
3147           output_asm_name ();
3148
3149         ops = 0;
3150         memset (opoutput, 0, sizeof opoutput);
3151
3152         putc (c, asm_out_file);
3153 #ifdef ASM_OUTPUT_OPCODE
3154         while ((c = *p) == '\t')
3155           {
3156             putc (c, asm_out_file);
3157             p++;
3158           }
3159         ASM_OUTPUT_OPCODE (asm_out_file, p);
3160 #endif
3161         break;
3162
3163 #ifdef ASSEMBLER_DIALECT
3164       case '{':
3165         {
3166           int i;
3167
3168           if (dialect)
3169             output_operand_lossage ("nested assembly dialect alternatives");
3170           else
3171             dialect = 1;
3172
3173           /* If we want the first dialect, do nothing.  Otherwise, skip
3174              DIALECT_NUMBER of strings ending with '|'.  */
3175           for (i = 0; i < dialect_number; i++)
3176             {
3177               while (*p && *p != '}' && *p++ != '|')
3178                 ;
3179               if (*p == '}')
3180                 break;
3181               if (*p == '|')
3182                 p++;
3183             }
3184
3185           if (*p == '\0')
3186             output_operand_lossage ("unterminated assembly dialect alternative");
3187         }
3188         break;
3189
3190       case '|':
3191         if (dialect)
3192           {
3193             /* Skip to close brace.  */
3194             do
3195               {
3196                 if (*p == '\0')
3197                   {
3198                     output_operand_lossage ("unterminated assembly dialect alternative");
3199                     break;
3200                   }
3201               }
3202             while (*p++ != '}');
3203             dialect = 0;
3204           }
3205         else
3206           putc (c, asm_out_file);
3207         break;
3208
3209       case '}':
3210         if (! dialect)
3211           putc (c, asm_out_file);
3212         dialect = 0;
3213         break;
3214 #endif
3215
3216       case '%':
3217         /* %% outputs a single %.  */
3218         if (*p == '%')
3219           {
3220             p++;
3221             putc (c, asm_out_file);
3222           }
3223         /* %= outputs a number which is unique to each insn in the entire
3224            compilation.  This is useful for making local labels that are
3225            referred to more than once in a given insn.  */
3226         else if (*p == '=')
3227           {
3228             p++;
3229             fprintf (asm_out_file, "%d", insn_counter);
3230           }
3231         /* % followed by a letter and some digits
3232            outputs an operand in a special way depending on the letter.
3233            Letters `acln' are implemented directly.
3234            Other letters are passed to `output_operand' so that
3235            the PRINT_OPERAND macro can define them.  */
3236         else if (ISALPHA (*p))
3237           {
3238             int letter = *p++;
3239             unsigned long opnum;
3240             char *endptr;
3241
3242             opnum = strtoul (p, &endptr, 10);
3243
3244             if (endptr == p)
3245               output_operand_lossage ("operand number missing "
3246                                       "after %%-letter");
3247             else if (this_is_asm_operands && opnum >= insn_noperands)
3248               output_operand_lossage ("operand number out of range");
3249             else if (letter == 'l')
3250               output_asm_label (operands[opnum]);
3251             else if (letter == 'a')
3252               output_address (operands[opnum]);
3253             else if (letter == 'c')
3254               {
3255                 if (CONSTANT_ADDRESS_P (operands[opnum]))
3256                   output_addr_const (asm_out_file, operands[opnum]);
3257                 else
3258                   output_operand (operands[opnum], 'c');
3259               }
3260             else if (letter == 'n')
3261               {
3262                 if (GET_CODE (operands[opnum]) == CONST_INT)
3263                   fprintf (asm_out_file, HOST_WIDE_INT_PRINT_DEC,
3264                            - INTVAL (operands[opnum]));
3265                 else
3266                   {
3267                     putc ('-', asm_out_file);
3268                     output_addr_const (asm_out_file, operands[opnum]);
3269                   }
3270               }
3271             else
3272               output_operand (operands[opnum], letter);
3273
3274             if (!opoutput[opnum])
3275               oporder[ops++] = opnum;
3276             opoutput[opnum] = 1;
3277
3278             p = endptr;
3279             c = *p;
3280           }
3281         /* % followed by a digit outputs an operand the default way.  */
3282         else if (ISDIGIT (*p))
3283           {
3284             unsigned long opnum;
3285             char *endptr;
3286
3287             opnum = strtoul (p, &endptr, 10);
3288             if (this_is_asm_operands && opnum >= insn_noperands)
3289               output_operand_lossage ("operand number out of range");
3290             else
3291               output_operand (operands[opnum], 0);
3292
3293             if (!opoutput[opnum])
3294               oporder[ops++] = opnum;
3295             opoutput[opnum] = 1;
3296
3297             p = endptr;
3298             c = *p;
3299           }
3300         /* % followed by punctuation: output something for that
3301            punctuation character alone, with no operand.
3302            The PRINT_OPERAND macro decides what is actually done.  */
3303 #ifdef PRINT_OPERAND_PUNCT_VALID_P
3304         else if (PRINT_OPERAND_PUNCT_VALID_P ((unsigned char) *p))
3305           output_operand (NULL_RTX, *p++);
3306 #endif
3307         else
3308           output_operand_lossage ("invalid %%-code");
3309         break;
3310
3311       default:
3312         putc (c, asm_out_file);
3313       }
3314
3315   /* Write out the variable names for operands, if we know them.  */
3316   if (flag_verbose_asm)
3317     output_asm_operand_names (operands, oporder, ops);
3318   if (flag_print_asm_name)
3319     output_asm_name ();
3320
3321   putc ('\n', asm_out_file);
3322 }
3323 \f
3324 /* Output a LABEL_REF, or a bare CODE_LABEL, as an assembler symbol.  */
3325
3326 void
3327 output_asm_label (rtx x)
3328 {
3329   char buf[256];
3330
3331   if (GET_CODE (x) == LABEL_REF)
3332     x = XEXP (x, 0);
3333   if (LABEL_P (x)
3334       || (NOTE_P (x)
3335           && NOTE_KIND (x) == NOTE_INSN_DELETED_LABEL))
3336     ASM_GENERATE_INTERNAL_LABEL (buf, "L", CODE_LABEL_NUMBER (x));
3337   else
3338     output_operand_lossage ("'%%l' operand isn't a label");
3339
3340   assemble_name (asm_out_file, buf);
3341 }
3342
3343 /* Print operand X using machine-dependent assembler syntax.
3344    The macro PRINT_OPERAND is defined just to control this function.
3345    CODE is a non-digit that preceded the operand-number in the % spec,
3346    such as 'z' if the spec was `%z3'.  CODE is 0 if there was no char
3347    between the % and the digits.
3348    When CODE is a non-letter, X is 0.
3349
3350    The meanings of the letters are machine-dependent and controlled
3351    by PRINT_OPERAND.  */
3352
3353 static void
3354 output_operand (rtx x, int code ATTRIBUTE_UNUSED)
3355 {
3356   if (x && GET_CODE (x) == SUBREG)
3357     x = alter_subreg (&x);
3358
3359   /* X must not be a pseudo reg.  */
3360   gcc_assert (!x || !REG_P (x) || REGNO (x) < FIRST_PSEUDO_REGISTER);
3361
3362   PRINT_OPERAND (asm_out_file, x, code);
3363 }
3364
3365 /* Print a memory reference operand for address X
3366    using machine-dependent assembler syntax.
3367    The macro PRINT_OPERAND_ADDRESS exists just to control this function.  */
3368
3369 void
3370 output_address (rtx x)
3371 {
3372   bool changed = false;
3373   walk_alter_subreg (&x, &changed);
3374   PRINT_OPERAND_ADDRESS (asm_out_file, x);
3375 }
3376 \f
3377 /* Print an integer constant expression in assembler syntax.
3378    Addition and subtraction are the only arithmetic
3379    that may appear in these expressions.  */
3380
3381 void
3382 output_addr_const (FILE *file, rtx x)
3383 {
3384   char buf[256];
3385
3386  restart:
3387   switch (GET_CODE (x))
3388     {
3389     case PC:
3390       putc ('.', file);
3391       break;
3392
3393     case SYMBOL_REF:
3394       if (SYMBOL_REF_DECL (x))
3395         mark_decl_referenced (SYMBOL_REF_DECL (x));
3396 #ifdef ASM_OUTPUT_SYMBOL_REF
3397       ASM_OUTPUT_SYMBOL_REF (file, x);
3398 #else
3399       assemble_name (file, XSTR (x, 0));
3400 #endif
3401       break;
3402
3403     case LABEL_REF:
3404       x = XEXP (x, 0);
3405       /* Fall through.  */
3406     case CODE_LABEL:
3407       ASM_GENERATE_INTERNAL_LABEL (buf, "L", CODE_LABEL_NUMBER (x));
3408 #ifdef ASM_OUTPUT_LABEL_REF
3409       ASM_OUTPUT_LABEL_REF (file, buf);
3410 #else
3411       assemble_name (file, buf);
3412 #endif
3413       break;
3414
3415     case CONST_INT:
3416       fprintf (file, HOST_WIDE_INT_PRINT_DEC, INTVAL (x));
3417       break;
3418
3419     case CONST:
3420       /* This used to output parentheses around the expression,
3421          but that does not work on the 386 (either ATT or BSD assembler).  */
3422       output_addr_const (file, XEXP (x, 0));
3423       break;
3424
3425     case CONST_DOUBLE:
3426       if (GET_MODE (x) == VOIDmode)
3427         {
3428           /* We can use %d if the number is one word and positive.  */
3429           if (CONST_DOUBLE_HIGH (x))
3430             fprintf (file, HOST_WIDE_INT_PRINT_DOUBLE_HEX,
3431                      CONST_DOUBLE_HIGH (x), CONST_DOUBLE_LOW (x));
3432           else if (CONST_DOUBLE_LOW (x) < 0)
3433             fprintf (file, HOST_WIDE_INT_PRINT_HEX, CONST_DOUBLE_LOW (x));
3434           else
3435             fprintf (file, HOST_WIDE_INT_PRINT_DEC, CONST_DOUBLE_LOW (x));
3436         }
3437       else
3438         /* We can't handle floating point constants;
3439            PRINT_OPERAND must handle them.  */
3440         output_operand_lossage ("floating constant misused");
3441       break;
3442
3443     case CONST_FIXED:
3444       fprintf (file, HOST_WIDE_INT_PRINT_HEX, CONST_FIXED_VALUE_LOW (x));
3445       break;
3446
3447     case PLUS:
3448       /* Some assemblers need integer constants to appear last (eg masm).  */
3449       if (GET_CODE (XEXP (x, 0)) == CONST_INT)
3450         {
3451           output_addr_const (file, XEXP (x, 1));
3452           if (INTVAL (XEXP (x, 0)) >= 0)
3453             fprintf (file, "+");
3454           output_addr_const (file, XEXP (x, 0));
3455         }
3456       else
3457         {
3458           output_addr_const (file, XEXP (x, 0));
3459           if (GET_CODE (XEXP (x, 1)) != CONST_INT
3460               || INTVAL (XEXP (x, 1)) >= 0)
3461             fprintf (file, "+");
3462           output_addr_const (file, XEXP (x, 1));
3463         }
3464       break;
3465
3466     case MINUS:
3467       /* Avoid outputting things like x-x or x+5-x,
3468          since some assemblers can't handle that.  */
3469       x = simplify_subtraction (x);
3470       if (GET_CODE (x) != MINUS)
3471         goto restart;
3472
3473       output_addr_const (file, XEXP (x, 0));
3474       fprintf (file, "-");
3475       if ((GET_CODE (XEXP (x, 1)) == CONST_INT && INTVAL (XEXP (x, 1)) >= 0)
3476           || GET_CODE (XEXP (x, 1)) == PC
3477           || GET_CODE (XEXP (x, 1)) == SYMBOL_REF)
3478         output_addr_const (file, XEXP (x, 1));
3479       else
3480         {
3481           fputs (targetm.asm_out.open_paren, file);
3482           output_addr_const (file, XEXP (x, 1));
3483           fputs (targetm.asm_out.close_paren, file);
3484         }
3485       break;
3486
3487     case ZERO_EXTEND:
3488     case SIGN_EXTEND:
3489     case SUBREG:
3490       output_addr_const (file, XEXP (x, 0));
3491       break;
3492
3493     default:
3494 #ifdef OUTPUT_ADDR_CONST_EXTRA
3495       OUTPUT_ADDR_CONST_EXTRA (file, x, fail);
3496       break;
3497
3498     fail:
3499 #endif
3500       output_operand_lossage ("invalid expression as operand");
3501     }
3502 }
3503 \f
3504 /* A poor man's fprintf, with the added features of %I, %R, %L, and %U.
3505    %R prints the value of REGISTER_PREFIX.
3506    %L prints the value of LOCAL_LABEL_PREFIX.
3507    %U prints the value of USER_LABEL_PREFIX.
3508    %I prints the value of IMMEDIATE_PREFIX.
3509    %O runs ASM_OUTPUT_OPCODE to transform what follows in the string.
3510    Also supported are %d, %i, %u, %x, %X, %o, %c, %s and %%.
3511
3512    We handle alternate assembler dialects here, just like output_asm_insn.  */
3513
3514 void
3515 asm_fprintf (FILE *file, const char *p, ...)
3516 {
3517   char buf[10];
3518   char *q, c;
3519   va_list argptr;
3520
3521   va_start (argptr, p);
3522
3523   buf[0] = '%';
3524
3525   while ((c = *p++))
3526     switch (c)
3527       {
3528 #ifdef ASSEMBLER_DIALECT
3529       case '{':
3530         {
3531           int i;
3532
3533           /* If we want the first dialect, do nothing.  Otherwise, skip
3534              DIALECT_NUMBER of strings ending with '|'.  */
3535           for (i = 0; i < dialect_number; i++)
3536             {
3537               while (*p && *p++ != '|')
3538                 ;
3539
3540               if (*p == '|')
3541                 p++;
3542             }
3543         }
3544         break;
3545
3546       case '|':
3547         /* Skip to close brace.  */
3548         while (*p && *p++ != '}')
3549           ;
3550         break;
3551
3552       case '}':
3553         break;
3554 #endif
3555
3556       case '%':
3557         c = *p++;
3558         q = &buf[1];
3559         while (strchr ("-+ #0", c))
3560           {
3561             *q++ = c;
3562             c = *p++;
3563           }
3564         while (ISDIGIT (c) || c == '.')
3565           {
3566             *q++ = c;
3567             c = *p++;
3568           }
3569         switch (c)
3570           {
3571           case '%':
3572             putc ('%', file);
3573             break;
3574
3575           case 'd':  case 'i':  case 'u':
3576           case 'x':  case 'X':  case 'o':
3577           case 'c':
3578             *q++ = c;
3579             *q = 0;
3580             fprintf (file, buf, va_arg (argptr, int));
3581             break;
3582
3583           case 'w':
3584             /* This is a prefix to the 'd', 'i', 'u', 'x', 'X', and
3585                'o' cases, but we do not check for those cases.  It
3586                means that the value is a HOST_WIDE_INT, which may be
3587                either `long' or `long long'.  */
3588             memcpy (q, HOST_WIDE_INT_PRINT, strlen (HOST_WIDE_INT_PRINT));
3589             q += strlen (HOST_WIDE_INT_PRINT);
3590             *q++ = *p++;
3591             *q = 0;
3592             fprintf (file, buf, va_arg (argptr, HOST_WIDE_INT));
3593             break;
3594
3595           case 'l':
3596             *q++ = c;
3597 #ifdef HAVE_LONG_LONG
3598             if (*p == 'l')
3599               {
3600                 *q++ = *p++;
3601                 *q++ = *p++;
3602                 *q = 0;
3603                 fprintf (file, buf, va_arg (argptr, long long));
3604               }
3605             else
3606 #endif
3607               {
3608                 *q++ = *p++;
3609                 *q = 0;
3610                 fprintf (file, buf, va_arg (argptr, long));
3611               }
3612
3613             break;
3614
3615           case 's':
3616             *q++ = c;
3617             *q = 0;
3618             fprintf (file, buf, va_arg (argptr, char *));
3619             break;
3620
3621           case 'O':
3622 #ifdef ASM_OUTPUT_OPCODE
3623             ASM_OUTPUT_OPCODE (asm_out_file, p);
3624 #endif
3625             break;
3626
3627           case 'R':
3628 #ifdef REGISTER_PREFIX
3629             fprintf (file, "%s", REGISTER_PREFIX);
3630 #endif
3631             break;
3632
3633           case 'I':
3634 #ifdef IMMEDIATE_PREFIX
3635             fprintf (file, "%s", IMMEDIATE_PREFIX);
3636 #endif
3637             break;
3638
3639           case 'L':
3640 #ifdef LOCAL_LABEL_PREFIX
3641             fprintf (file, "%s", LOCAL_LABEL_PREFIX);
3642 #endif
3643             break;
3644
3645           case 'U':
3646             fputs (user_label_prefix, file);
3647             break;
3648
3649 #ifdef ASM_FPRINTF_EXTENSIONS
3650             /* Uppercase letters are reserved for general use by asm_fprintf
3651                and so are not available to target specific code.  In order to
3652                prevent the ASM_FPRINTF_EXTENSIONS macro from using them then,
3653                they are defined here.  As they get turned into real extensions
3654                to asm_fprintf they should be removed from this list.  */
3655           case 'A': case 'B': case 'C': case 'D': case 'E':
3656           case 'F': case 'G': case 'H': case 'J': case 'K':
3657           case 'M': case 'N': case 'P': case 'Q': case 'S':
3658           case 'T': case 'V': case 'W': case 'Y': case 'Z':
3659             break;
3660
3661           ASM_FPRINTF_EXTENSIONS (file, argptr, p)
3662 #endif
3663           default:
3664             gcc_unreachable ();
3665           }
3666         break;
3667
3668       default:
3669         putc (c, file);
3670       }
3671   va_end (argptr);
3672 }
3673 \f
3674 /* Split up a CONST_DOUBLE or integer constant rtx
3675    into two rtx's for single words,
3676    storing in *FIRST the word that comes first in memory in the target
3677    and in *SECOND the other.  */
3678
3679 void
3680 split_double (rtx value, rtx *first, rtx *second)
3681 {
3682   if (GET_CODE (value) == CONST_INT)
3683     {
3684       if (HOST_BITS_PER_WIDE_INT >= (2 * BITS_PER_WORD))
3685         {
3686           /* In this case the CONST_INT holds both target words.
3687              Extract the bits from it into two word-sized pieces.
3688              Sign extend each half to HOST_WIDE_INT.  */
3689           unsigned HOST_WIDE_INT low, high;
3690           unsigned HOST_WIDE_INT mask, sign_bit, sign_extend;
3691
3692           /* Set sign_bit to the most significant bit of a word.  */
3693           sign_bit = 1;
3694           sign_bit <<= BITS_PER_WORD - 1;
3695
3696           /* Set mask so that all bits of the word are set.  We could
3697              have used 1 << BITS_PER_WORD instead of basing the
3698              calculation on sign_bit.  However, on machines where
3699              HOST_BITS_PER_WIDE_INT == BITS_PER_WORD, it could cause a
3700              compiler warning, even though the code would never be
3701              executed.  */
3702           mask = sign_bit << 1;
3703           mask--;
3704
3705           /* Set sign_extend as any remaining bits.  */
3706           sign_extend = ~mask;
3707
3708           /* Pick the lower word and sign-extend it.  */
3709           low = INTVAL (value);
3710           low &= mask;
3711           if (low & sign_bit)
3712             low |= sign_extend;
3713
3714           /* Pick the higher word, shifted to the least significant
3715              bits, and sign-extend it.  */
3716           high = INTVAL (value);
3717           high >>= BITS_PER_WORD - 1;
3718           high >>= 1;
3719           high &= mask;
3720           if (high & sign_bit)
3721             high |= sign_extend;
3722
3723           /* Store the words in the target machine order.  */
3724           if (WORDS_BIG_ENDIAN)
3725             {
3726               *first = GEN_INT (high);
3727               *second = GEN_INT (low);
3728             }
3729           else
3730             {
3731               *first = GEN_INT (low);
3732               *second = GEN_INT (high);
3733             }
3734         }
3735       else
3736         {
3737           /* The rule for using CONST_INT for a wider mode
3738              is that we regard the value as signed.
3739              So sign-extend it.  */
3740           rtx high = (INTVAL (value) < 0 ? constm1_rtx : const0_rtx);
3741           if (WORDS_BIG_ENDIAN)
3742             {
3743               *first = high;
3744               *second = value;
3745             }
3746           else
3747             {
3748               *first = value;
3749               *second = high;
3750             }
3751         }
3752     }
3753   else if (GET_CODE (value) != CONST_DOUBLE)
3754     {
3755       if (WORDS_BIG_ENDIAN)
3756         {
3757           *first = const0_rtx;
3758           *second = value;
3759         }
3760       else
3761         {
3762           *first = value;
3763           *second = const0_rtx;
3764         }
3765     }
3766   else if (GET_MODE (value) == VOIDmode
3767            /* This is the old way we did CONST_DOUBLE integers.  */
3768            || GET_MODE_CLASS (GET_MODE (value)) == MODE_INT)
3769     {
3770       /* In an integer, the words are defined as most and least significant.
3771          So order them by the target's convention.  */
3772       if (WORDS_BIG_ENDIAN)
3773         {
3774           *first = GEN_INT (CONST_DOUBLE_HIGH (value));
3775           *second = GEN_INT (CONST_DOUBLE_LOW (value));
3776         }
3777       else
3778         {
3779           *first = GEN_INT (CONST_DOUBLE_LOW (value));
3780           *second = GEN_INT (CONST_DOUBLE_HIGH (value));
3781         }
3782     }
3783   else
3784     {
3785       REAL_VALUE_TYPE r;
3786       long l[2];
3787       REAL_VALUE_FROM_CONST_DOUBLE (r, value);
3788
3789       /* Note, this converts the REAL_VALUE_TYPE to the target's
3790          format, splits up the floating point double and outputs
3791          exactly 32 bits of it into each of l[0] and l[1] --
3792          not necessarily BITS_PER_WORD bits.  */
3793       REAL_VALUE_TO_TARGET_DOUBLE (r, l);
3794
3795       /* If 32 bits is an entire word for the target, but not for the host,
3796          then sign-extend on the host so that the number will look the same
3797          way on the host that it would on the target.  See for instance
3798          simplify_unary_operation.  The #if is needed to avoid compiler
3799          warnings.  */
3800
3801 #if HOST_BITS_PER_LONG > 32
3802       if (BITS_PER_WORD < HOST_BITS_PER_LONG && BITS_PER_WORD == 32)
3803         {
3804           if (l[0] & ((long) 1 << 31))
3805             l[0] |= ((long) (-1) << 32);
3806           if (l[1] & ((long) 1 << 31))
3807             l[1] |= ((long) (-1) << 32);
3808         }
3809 #endif
3810
3811       *first = GEN_INT (l[0]);
3812       *second = GEN_INT (l[1]);
3813     }
3814 }
3815 \f
3816 /* Return nonzero if this function has no function calls.  */
3817
3818 int
3819 leaf_function_p (void)
3820 {
3821   rtx insn;
3822   rtx link;
3823
3824   if (current_function_profile || profile_arc_flag)
3825     return 0;
3826
3827   for (insn = get_insns (); insn; insn = NEXT_INSN (insn))
3828     {
3829       if (CALL_P (insn)
3830           && ! SIBLING_CALL_P (insn))
3831         return 0;
3832       if (NONJUMP_INSN_P (insn)
3833           && GET_CODE (PATTERN (insn)) == SEQUENCE
3834           && CALL_P (XVECEXP (PATTERN (insn), 0, 0))
3835           && ! SIBLING_CALL_P (XVECEXP (PATTERN (insn), 0, 0)))
3836         return 0;
3837     }
3838   for (link = current_function_epilogue_delay_list;
3839        link;
3840        link = XEXP (link, 1))
3841     {
3842       insn = XEXP (link, 0);
3843
3844       if (CALL_P (insn)
3845           && ! SIBLING_CALL_P (insn))
3846         return 0;
3847       if (NONJUMP_INSN_P (insn)
3848           && GET_CODE (PATTERN (insn)) == SEQUENCE
3849           && CALL_P (XVECEXP (PATTERN (insn), 0, 0))
3850           && ! SIBLING_CALL_P (XVECEXP (PATTERN (insn), 0, 0)))
3851         return 0;
3852     }
3853
3854   return 1;
3855 }
3856
3857 /* Return 1 if branch is a forward branch.
3858    Uses insn_shuid array, so it works only in the final pass.  May be used by
3859    output templates to customary add branch prediction hints.
3860  */
3861 int
3862 final_forward_branch_p (rtx insn)
3863 {
3864   int insn_id, label_id;
3865
3866   gcc_assert (uid_shuid);
3867   insn_id = INSN_SHUID (insn);
3868   label_id = INSN_SHUID (JUMP_LABEL (insn));
3869   /* We've hit some insns that does not have id information available.  */
3870   gcc_assert (insn_id && label_id);
3871   return insn_id < label_id;
3872 }
3873
3874 /* On some machines, a function with no call insns
3875    can run faster if it doesn't create its own register window.
3876    When output, the leaf function should use only the "output"
3877    registers.  Ordinarily, the function would be compiled to use
3878    the "input" registers to find its arguments; it is a candidate
3879    for leaf treatment if it uses only the "input" registers.
3880    Leaf function treatment means renumbering so the function
3881    uses the "output" registers instead.  */
3882
3883 #ifdef LEAF_REGISTERS
3884
3885 /* Return 1 if this function uses only the registers that can be
3886    safely renumbered.  */
3887
3888 int
3889 only_leaf_regs_used (void)
3890 {
3891   int i;
3892   const char *const permitted_reg_in_leaf_functions = LEAF_REGISTERS;
3893
3894   for (i = 0; i < FIRST_PSEUDO_REGISTER; i++)
3895     if ((df_regs_ever_live_p (i) || global_regs[i])
3896         && ! permitted_reg_in_leaf_functions[i])
3897       return 0;
3898
3899   if (current_function_uses_pic_offset_table
3900       && pic_offset_table_rtx != 0
3901       && REG_P (pic_offset_table_rtx)
3902       && ! permitted_reg_in_leaf_functions[REGNO (pic_offset_table_rtx)])
3903     return 0;
3904
3905   return 1;
3906 }
3907
3908 /* Scan all instructions and renumber all registers into those
3909    available in leaf functions.  */
3910
3911 static void
3912 leaf_renumber_regs (rtx first)
3913 {
3914   rtx insn;
3915
3916   /* Renumber only the actual patterns.
3917      The reg-notes can contain frame pointer refs,
3918      and renumbering them could crash, and should not be needed.  */
3919   for (insn = first; insn; insn = NEXT_INSN (insn))
3920     if (INSN_P (insn))
3921       leaf_renumber_regs_insn (PATTERN (insn));
3922   for (insn = current_function_epilogue_delay_list;
3923        insn;
3924        insn = XEXP (insn, 1))
3925     if (INSN_P (XEXP (insn, 0)))
3926       leaf_renumber_regs_insn (PATTERN (XEXP (insn, 0)));
3927 }
3928
3929 /* Scan IN_RTX and its subexpressions, and renumber all regs into those
3930    available in leaf functions.  */
3931
3932 void
3933 leaf_renumber_regs_insn (rtx in_rtx)
3934 {
3935   int i, j;
3936   const char *format_ptr;
3937
3938   if (in_rtx == 0)
3939     return;
3940
3941   /* Renumber all input-registers into output-registers.
3942      renumbered_regs would be 1 for an output-register;
3943      they  */
3944
3945   if (REG_P (in_rtx))
3946     {
3947       int newreg;
3948
3949       /* Don't renumber the same reg twice.  */
3950       if (in_rtx->used)
3951         return;
3952
3953       newreg = REGNO (in_rtx);
3954       /* Don't try to renumber pseudo regs.  It is possible for a pseudo reg
3955          to reach here as part of a REG_NOTE.  */
3956       if (newreg >= FIRST_PSEUDO_REGISTER)
3957         {
3958           in_rtx->used = 1;
3959           return;
3960         }
3961       newreg = LEAF_REG_REMAP (newreg);
3962       gcc_assert (newreg >= 0);
3963       df_set_regs_ever_live (REGNO (in_rtx), false);
3964       df_set_regs_ever_live (newreg, true);
3965       SET_REGNO (in_rtx, newreg);
3966       in_rtx->used = 1;
3967     }
3968
3969   if (INSN_P (in_rtx))
3970     {
3971       /* Inside a SEQUENCE, we find insns.
3972          Renumber just the patterns of these insns,
3973          just as we do for the top-level insns.  */
3974       leaf_renumber_regs_insn (PATTERN (in_rtx));
3975       return;
3976     }
3977
3978   format_ptr = GET_RTX_FORMAT (GET_CODE (in_rtx));
3979
3980   for (i = 0; i < GET_RTX_LENGTH (GET_CODE (in_rtx)); i++)
3981     switch (*format_ptr++)
3982       {
3983       case 'e':
3984         leaf_renumber_regs_insn (XEXP (in_rtx, i));
3985         break;
3986
3987       case 'E':
3988         if (NULL != XVEC (in_rtx, i))
3989           {
3990             for (j = 0; j < XVECLEN (in_rtx, i); j++)
3991               leaf_renumber_regs_insn (XVECEXP (in_rtx, i, j));
3992           }
3993         break;
3994
3995       case 'S':
3996       case 's':
3997       case '0':
3998       case 'i':
3999       case 'w':
4000       case 'n':
4001       case 'u':
4002         break;
4003
4004       default:
4005         gcc_unreachable ();
4006       }
4007 }
4008 #endif
4009
4010
4011 /* When -gused is used, emit debug info for only used symbols. But in
4012    addition to the standard intercepted debug_hooks there are some direct
4013    calls into this file, i.e., dbxout_symbol, dbxout_parms, and dbxout_reg_params.
4014    Those routines may also be called from a higher level intercepted routine. So
4015    to prevent recording data for an inner call to one of these for an intercept,
4016    we maintain an intercept nesting counter (debug_nesting). We only save the
4017    intercepted arguments if the nesting is 1.  */
4018 int debug_nesting = 0;
4019
4020 static tree *symbol_queue;
4021 int symbol_queue_index = 0;
4022 static int symbol_queue_size = 0;
4023
4024 /* Generate the symbols for any queued up type symbols we encountered
4025    while generating the type info for some originally used symbol.
4026    This might generate additional entries in the queue.  Only when
4027    the nesting depth goes to 0 is this routine called.  */
4028
4029 void
4030 debug_flush_symbol_queue (void)
4031 {
4032   int i;
4033
4034   /* Make sure that additionally queued items are not flushed
4035      prematurely.  */
4036
4037   ++debug_nesting;
4038
4039   for (i = 0; i < symbol_queue_index; ++i)
4040     {
4041       /* If we pushed queued symbols then such symbols must be
4042          output no matter what anyone else says.  Specifically,
4043          we need to make sure dbxout_symbol() thinks the symbol was
4044          used and also we need to override TYPE_DECL_SUPPRESS_DEBUG
4045          which may be set for outside reasons.  */
4046       int saved_tree_used = TREE_USED (symbol_queue[i]);
4047       int saved_suppress_debug = TYPE_DECL_SUPPRESS_DEBUG (symbol_queue[i]);
4048       TREE_USED (symbol_queue[i]) = 1;
4049       TYPE_DECL_SUPPRESS_DEBUG (symbol_queue[i]) = 0;
4050
4051 #ifdef DBX_DEBUGGING_INFO
4052       dbxout_symbol (symbol_queue[i], 0);
4053 #endif
4054
4055       TREE_USED (symbol_queue[i]) = saved_tree_used;
4056       TYPE_DECL_SUPPRESS_DEBUG (symbol_queue[i]) = saved_suppress_debug;
4057     }
4058
4059   symbol_queue_index = 0;
4060   --debug_nesting;
4061 }
4062
4063 /* Queue a type symbol needed as part of the definition of a decl
4064    symbol.  These symbols are generated when debug_flush_symbol_queue()
4065    is called.  */
4066
4067 void
4068 debug_queue_symbol (tree decl)
4069 {
4070   if (symbol_queue_index >= symbol_queue_size)
4071     {
4072       symbol_queue_size += 10;
4073       symbol_queue = xrealloc (symbol_queue,
4074                                symbol_queue_size * sizeof (tree));
4075     }
4076
4077   symbol_queue[symbol_queue_index++] = decl;
4078 }
4079
4080 /* Free symbol queue.  */
4081 void
4082 debug_free_queue (void)
4083 {
4084   if (symbol_queue)
4085     {
4086       free (symbol_queue);
4087       symbol_queue = NULL;
4088       symbol_queue_size = 0;
4089     }
4090 }
4091 \f
4092 /* Turn the RTL into assembly.  */
4093 static unsigned int
4094 rest_of_handle_final (void)
4095 {
4096   rtx x;
4097   const char *fnname;
4098
4099   /* Get the function's name, as described by its RTL.  This may be
4100      different from the DECL_NAME name used in the source file.  */
4101
4102   x = DECL_RTL (current_function_decl);
4103   gcc_assert (MEM_P (x));
4104   x = XEXP (x, 0);
4105   gcc_assert (GET_CODE (x) == SYMBOL_REF);
4106   fnname = XSTR (x, 0);
4107
4108   assemble_start_function (current_function_decl, fnname);
4109   final_start_function (get_insns (), asm_out_file, optimize);
4110   final (get_insns (), asm_out_file, optimize);
4111   final_end_function ();
4112
4113 #ifdef TARGET_UNWIND_INFO
4114   /* ??? The IA-64 ".handlerdata" directive must be issued before
4115      the ".endp" directive that closes the procedure descriptor.  */
4116   output_function_exception_table (fnname);
4117 #endif
4118
4119   assemble_end_function (current_function_decl, fnname);
4120
4121 #ifndef TARGET_UNWIND_INFO
4122   /* Otherwise, it feels unclean to switch sections in the middle.  */
4123   output_function_exception_table (fnname);
4124 #endif
4125
4126   user_defined_section_attribute = false;
4127
4128   /* Free up reg info memory.  */
4129   free_reg_info ();
4130
4131   if (! quiet_flag)
4132     fflush (asm_out_file);
4133
4134   /* Write DBX symbols if requested.  */
4135
4136   /* Note that for those inline functions where we don't initially
4137      know for certain that we will be generating an out-of-line copy,
4138      the first invocation of this routine (rest_of_compilation) will
4139      skip over this code by doing a `goto exit_rest_of_compilation;'.
4140      Later on, wrapup_global_declarations will (indirectly) call
4141      rest_of_compilation again for those inline functions that need
4142      to have out-of-line copies generated.  During that call, we
4143      *will* be routed past here.  */
4144
4145   timevar_push (TV_SYMOUT);
4146   (*debug_hooks->function_decl) (current_function_decl);
4147   timevar_pop (TV_SYMOUT);
4148   if (DECL_STATIC_CONSTRUCTOR (current_function_decl)
4149       && targetm.have_ctors_dtors)
4150     targetm.asm_out.constructor (XEXP (DECL_RTL (current_function_decl), 0),
4151                                  decl_init_priority_lookup
4152                                    (current_function_decl));
4153   if (DECL_STATIC_DESTRUCTOR (current_function_decl)
4154       && targetm.have_ctors_dtors)
4155     targetm.asm_out.destructor (XEXP (DECL_RTL (current_function_decl), 0),
4156                                 decl_fini_priority_lookup
4157                                   (current_function_decl));
4158   return 0;
4159 }
4160
4161 struct tree_opt_pass pass_final =
4162 {
4163   NULL,                                 /* name */
4164   NULL,                                 /* gate */
4165   rest_of_handle_final,                 /* execute */
4166   NULL,                                 /* sub */
4167   NULL,                                 /* next */
4168   0,                                    /* static_pass_number */
4169   TV_FINAL,                             /* tv_id */
4170   0,                                    /* properties_required */
4171   0,                                    /* properties_provided */
4172   0,                                    /* properties_destroyed */
4173   0,                                    /* todo_flags_start */
4174   TODO_ggc_collect,                     /* todo_flags_finish */
4175   0                                     /* letter */
4176 };
4177
4178
4179 static unsigned int
4180 rest_of_handle_shorten_branches (void)
4181 {
4182   /* Shorten branches.  */
4183   shorten_branches (get_insns ());
4184   return 0;
4185 }
4186
4187 struct tree_opt_pass pass_shorten_branches =
4188 {
4189   "shorten",                            /* name */
4190   NULL,                                 /* gate */
4191   rest_of_handle_shorten_branches,      /* execute */
4192   NULL,                                 /* sub */
4193   NULL,                                 /* next */
4194   0,                                    /* static_pass_number */
4195   TV_FINAL,                             /* tv_id */
4196   0,                                    /* properties_required */
4197   0,                                    /* properties_provided */
4198   0,                                    /* properties_destroyed */
4199   0,                                    /* todo_flags_start */
4200   TODO_dump_func,                       /* todo_flags_finish */
4201   0                                     /* letter */
4202 };
4203
4204
4205 static unsigned int
4206 rest_of_clean_state (void)
4207 {
4208   rtx insn, next;
4209
4210   /* It is very important to decompose the RTL instruction chain here:
4211      debug information keeps pointing into CODE_LABEL insns inside the function
4212      body.  If these remain pointing to the other insns, we end up preserving
4213      whole RTL chain and attached detailed debug info in memory.  */
4214   for (insn = get_insns (); insn; insn = next)
4215     {
4216       next = NEXT_INSN (insn);
4217       NEXT_INSN (insn) = NULL;
4218       PREV_INSN (insn) = NULL;
4219     }
4220
4221   /* In case the function was not output,
4222      don't leave any temporary anonymous types
4223      queued up for sdb output.  */
4224 #ifdef SDB_DEBUGGING_INFO
4225   if (write_symbols == SDB_DEBUG)
4226     sdbout_types (NULL_TREE);
4227 #endif
4228
4229   reload_completed = 0;
4230   epilogue_completed = 0;
4231 #ifdef STACK_REGS
4232   regstack_completed = 0;
4233 #endif
4234
4235   /* Clear out the insn_length contents now that they are no
4236      longer valid.  */
4237   init_insn_lengths ();
4238
4239   /* Show no temporary slots allocated.  */
4240   init_temp_slots ();
4241
4242   free_bb_for_insn ();
4243
4244   if (targetm.binds_local_p (current_function_decl))
4245     {
4246       int pref = cfun->preferred_stack_boundary;
4247       if (cfun->stack_alignment_needed > cfun->preferred_stack_boundary)
4248         pref = cfun->stack_alignment_needed;
4249       cgraph_rtl_info (current_function_decl)->preferred_incoming_stack_boundary
4250         = pref;
4251     }
4252
4253   /* Make sure volatile mem refs aren't considered valid operands for
4254      arithmetic insns.  We must call this here if this is a nested inline
4255      function, since the above code leaves us in the init_recog state,
4256      and the function context push/pop code does not save/restore volatile_ok.
4257
4258      ??? Maybe it isn't necessary for expand_start_function to call this
4259      anymore if we do it here?  */
4260
4261   init_recog_no_volatile ();
4262
4263   /* We're done with this function.  Free up memory if we can.  */
4264   free_after_parsing (cfun);
4265   free_after_compilation (cfun);
4266   return 0;
4267 }
4268
4269 struct tree_opt_pass pass_clean_state =
4270 {
4271   NULL,                                 /* name */
4272   NULL,                                 /* gate */
4273   rest_of_clean_state,                  /* execute */
4274   NULL,                                 /* sub */
4275   NULL,                                 /* next */
4276   0,                                    /* static_pass_number */
4277   TV_FINAL,                             /* tv_id */
4278   0,                                    /* properties_required */
4279   0,                                    /* properties_provided */
4280   PROP_rtl,                             /* properties_destroyed */
4281   0,                                    /* todo_flags_start */
4282   0,                                    /* todo_flags_finish */
4283   0                                     /* letter */
4284 };
4285