OSDN Git Service

* c-lex.c: Move main_input_filename handling to FC_ENTER. Clean up.
[pf3gnuchains/gcc-fork.git] / gcc / c-lex.c
1 /* Lexical analyzer for C and Objective C.
2    Copyright (C) 1987, 1988, 1989, 1992, 1994, 1995, 1996, 1997
3    1998, 1999, 2000 Free Software Foundation, Inc.
4
5 This file is part of GNU CC.
6
7 GNU CC is free software; you can redistribute it and/or modify
8 it under the terms of the GNU General Public License as published by
9 the Free Software Foundation; either version 2, or (at your option)
10 any later version.
11
12 GNU CC is distributed in the hope that it will be useful,
13 but WITHOUT ANY WARRANTY; without even the implied warranty of
14 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15 GNU General Public License for more details.
16
17 You should have received a copy of the GNU General Public License
18 along with GNU CC; see the file COPYING.  If not, write to
19 the Free Software Foundation, 59 Temple Place - Suite 330,
20 Boston, MA 02111-1307, USA.  */
21
22 #include "config.h"
23 #include "system.h"
24
25 #include "rtl.h"
26 #include "expr.h"
27 #include "tree.h"
28 #include "input.h"
29 #include "output.h"
30 #include "c-lex.h"
31 #include "c-tree.h"
32 #include "flags.h"
33 #include "timevar.h"
34 #include "cpplib.h"
35 #include "c-pragma.h"
36 #include "toplev.h"
37 #include "intl.h"
38 #include "tm_p.h"
39 #include "splay-tree.h"
40
41 /* MULTIBYTE_CHARS support only works for native compilers.
42    ??? Ideally what we want is to model widechar support after
43    the current floating point support.  */
44 #ifdef CROSS_COMPILE
45 #undef MULTIBYTE_CHARS
46 #endif
47
48 #ifdef MULTIBYTE_CHARS
49 #include "mbchar.h"
50 #include <locale.h>
51 #endif /* MULTIBYTE_CHARS */
52 #ifndef GET_ENVIRONMENT
53 #define GET_ENVIRONMENT(ENV_VALUE,ENV_NAME) ((ENV_VALUE) = getenv (ENV_NAME))
54 #endif
55
56 /* The original file name, before changing "-" to "stdin".  */
57 static const char *orig_filename;
58
59 /* Private idea of the line number.  See discussion in c_lex().  */
60 static int lex_lineno;
61
62 /* We may keep statistics about how long which files took to compile.  */
63 static int header_time, body_time;
64 static splay_tree file_info_tree;
65
66 /* Cause the `yydebug' variable to be defined.  */
67 #define YYDEBUG 1
68
69 /* File used for outputting assembler code.  */
70 extern FILE *asm_out_file;
71
72 #undef WCHAR_TYPE_SIZE
73 #define WCHAR_TYPE_SIZE TYPE_PRECISION (wchar_type_node)
74
75 /* Number of bytes in a wide character.  */
76 #define WCHAR_BYTES (WCHAR_TYPE_SIZE / BITS_PER_UNIT)
77
78 int indent_level;        /* Number of { minus number of }. */
79 int pending_lang_change; /* If we need to switch languages - C++ only */
80 int c_header_level;      /* depth in C headers - C++ only */
81
82 /* Nonzero tells yylex to ignore \ in string constants.  */
83 static int ignore_escape_flag;
84
85 static const char *readescape   PARAMS ((const char *, const char *,
86                                          unsigned int *));
87 static const char *read_ucs     PARAMS ((const char *, const char *,
88                                          unsigned int *, int));
89 static void parse_float         PARAMS ((PTR));
90 static tree lex_number          PARAMS ((const char *, unsigned int));
91 static tree lex_string          PARAMS ((const char *, unsigned int, int));
92 static tree lex_charconst       PARAMS ((const char *, unsigned int, int));
93 static void update_header_times PARAMS ((const char *));
94 static int dump_one_header      PARAMS ((splay_tree_node, void *));
95 static void cb_ident            PARAMS ((cpp_reader *, const cpp_string *));
96 static void cb_change_file    PARAMS ((cpp_reader *, const cpp_file_change *));
97 static void cb_def_pragma       PARAMS ((cpp_reader *));
98 \f
99 const char *
100 init_c_lex (filename)
101      const char *filename;
102 {
103   struct c_fileinfo *toplevel;
104
105   orig_filename = filename;
106
107   /* Set up filename timing.  Must happen before cpp_start_read.  */
108   file_info_tree = splay_tree_new ((splay_tree_compare_fn)strcmp,
109                                    0,
110                                    (splay_tree_delete_value_fn)free);
111   toplevel = get_fileinfo ("<top level>");
112   if (flag_detailed_statistics)
113     {
114       header_time = 0;
115       body_time = get_run_time ();
116       toplevel->time = body_time;
117     }
118   
119 #ifdef MULTIBYTE_CHARS
120   /* Change to the native locale for multibyte conversions.  */
121   setlocale (LC_CTYPE, "");
122   GET_ENVIRONMENT (literal_codeset, "LANG");
123 #endif
124
125   parse_in->cb.ident = cb_ident;
126   parse_in->cb.change_file = cb_change_file;
127   parse_in->cb.def_pragma = cb_def_pragma;
128
129   if (filename == 0 || !strcmp (filename, "-"))
130     filename = "stdin";
131
132   /* Start it at 0, because check_newline is called at the very beginning
133      and will increment it to 1.  */
134   lineno = lex_lineno = 0;
135
136   return filename;
137 }
138
139 /* A thin wrapper around the real parser that initializes the 
140    integrated preprocessor after debug output has been initialized.  */
141
142 int
143 yyparse()
144 {
145   if (! cpp_start_read (parse_in, orig_filename))
146     return 1;                   /* cpplib has emitted an error.  */
147
148   return yyparse_1();
149 }
150
151 struct c_fileinfo *
152 get_fileinfo (name)
153      const char *name;
154 {
155   splay_tree_node n;
156   struct c_fileinfo *fi;
157
158   n = splay_tree_lookup (file_info_tree, (splay_tree_key) name);
159   if (n)
160     return (struct c_fileinfo *) n->value;
161
162   fi = (struct c_fileinfo *) xmalloc (sizeof (struct c_fileinfo));
163   fi->time = 0;
164   fi->interface_only = 0;
165   fi->interface_unknown = 1;
166   splay_tree_insert (file_info_tree, (splay_tree_key) name,
167                      (splay_tree_value) fi);
168   return fi;
169 }
170
171 static void
172 update_header_times (name)
173      const char *name;
174 {
175   /* Changing files again.  This means currently collected time
176      is charged against header time, and body time starts back at 0.  */
177   if (flag_detailed_statistics)
178     {
179       int this_time = get_run_time ();
180       struct c_fileinfo *file = get_fileinfo (name);
181       header_time += this_time - body_time;
182       file->time += this_time - body_time;
183       body_time = this_time;
184     }
185 }
186
187 static int
188 dump_one_header (n, dummy)
189      splay_tree_node n;
190      void *dummy ATTRIBUTE_UNUSED;
191 {
192   print_time ((const char *) n->key,
193               ((struct c_fileinfo *) n->value)->time);
194   return 0;
195 }
196
197 void
198 dump_time_statistics ()
199 {
200   struct c_fileinfo *file = get_fileinfo (input_filename);
201   int this_time = get_run_time ();
202   file->time += this_time - body_time;
203
204   fprintf (stderr, "\n******\n");
205   print_time ("header files (total)", header_time);
206   print_time ("main file (total)", this_time - body_time);
207   fprintf (stderr, "ratio = %g : 1\n",
208            (double)header_time / (double)(this_time - body_time));
209   fprintf (stderr, "\n******\n");
210
211   splay_tree_foreach (file_info_tree, dump_one_header, 0);
212 }
213
214 /* Not yet handled: #pragma, #define, #undef.
215    No need to deal with linemarkers under normal conditions.  */
216
217 static void
218 cb_ident (pfile, str)
219      cpp_reader *pfile ATTRIBUTE_UNUSED;
220      const cpp_string *str ATTRIBUTE_UNUSED;
221 {
222 #ifdef ASM_OUTPUT_IDENT
223   if (! flag_no_ident)
224     {
225       /* Convert escapes in the string.  */
226       tree value = lex_string ((const char *)str->text, str->len, 0);
227       ASM_OUTPUT_IDENT (asm_out_file, TREE_STRING_POINTER (value));
228     }
229 #endif
230 }
231
232 static void
233 cb_change_file (pfile, fc)
234      cpp_reader *pfile ATTRIBUTE_UNUSED;
235      const cpp_file_change *fc;
236 {
237   /* Do the actions implied by the preceding numbers.  */
238   if (fc->reason == FC_ENTER)
239     {
240       /* Don't stack the main buffer on the input stack.  */
241       if (fc->from.filename)
242         {
243           lineno = lex_lineno;
244           push_srcloc (fc->to.filename, 1);
245           input_file_stack->indent_level = indent_level;
246           debug_start_source_file (fc->to.filename);
247 #ifndef NO_IMPLICIT_EXTERN_C
248           if (c_header_level)
249             ++c_header_level;
250           else if (fc->externc)
251             {
252               c_header_level = 1;
253               ++pending_lang_change;
254             }
255 #endif
256         }
257       else
258         main_input_filename = fc->to.filename;
259     }
260   else if (fc->reason == FC_LEAVE)
261     {
262       /* Popping out of a file.  */
263       if (input_file_stack->next)
264         {
265 #ifndef NO_IMPLICIT_EXTERN_C
266           if (c_header_level && --c_header_level == 0)
267             {
268               if (fc->externc)
269                 warning ("badly nested C headers from preprocessor");
270               --pending_lang_change;
271             }
272 #endif
273 #if 0
274           if (indent_level != input_file_stack->indent_level)
275             {
276               warning_with_file_and_line
277                 (input_filename, lex_lineno,
278                  "This file contains more '%c's than '%c's.",
279                  indent_level > input_file_stack->indent_level ? '{' : '}',
280                  indent_level > input_file_stack->indent_level ? '}' : '{');
281             }
282 #endif
283           pop_srcloc ();
284           debug_end_source_file (input_file_stack->line);
285         }
286       else
287         error ("leaving more files than we entered");
288     }
289
290   update_header_times (fc->to.filename);
291   in_system_header = fc->sysp;
292   input_filename = fc->to.filename;
293   lex_lineno = fc->to.lineno;
294
295   /* Hook for C++.  */
296   extract_interface_info ();
297 }
298
299 static void
300 cb_def_pragma (pfile)
301      cpp_reader *pfile;
302 {
303   /* Issue a warning message if we have been asked to do so.  Ignore
304      unknown pragmas in system headers unless an explicit
305      -Wunknown-pragmas has been given. */
306   if (warn_unknown_pragmas > in_system_header)
307     {
308       const unsigned char *space, *name = 0;
309       cpp_token s;
310
311       cpp_get_token (pfile, &s);
312       space = cpp_token_as_text (pfile, &s);
313       cpp_get_token (pfile, &s);
314       if (s.type == CPP_NAME)
315         name = cpp_token_as_text (pfile, &s);
316
317       if (name)
318         warning ("ignoring #pragma %s %s", space, name);
319       else
320         warning ("ignoring #pragma %s", space);
321     }
322 }
323
324 /* Parse a '\uNNNN' or '\UNNNNNNNN' sequence.
325
326    [lex.charset]: The character designated by the universal-character-name 
327    \UNNNNNNNN is that character whose character short name in ISO/IEC 10646
328    is NNNNNNNN; the character designated by the universal-character-name
329    \uNNNN is that character whose character short name in ISO/IEC 10646 is
330    0000NNNN. If the hexadecimal value for a universal character name is
331    less than 0x20 or in the range 0x7F-0x9F (inclusive), or if the
332    universal character name designates a character in the basic source
333    character set, then the program is ill-formed.
334
335    We assume that wchar_t is Unicode, so we don't need to do any
336    mapping.  Is this ever wrong?  */
337
338 static const char *
339 read_ucs (p, limit, cptr, length)
340      const char *p;
341      const char *limit;
342      unsigned int *cptr;
343      int length;
344 {
345   unsigned int code = 0;
346   int c;
347
348   for (; length; --length)
349     {
350       if (p >= limit)
351         {
352           error ("incomplete universal-character-name");
353           break;
354         }
355
356       c = *p++;
357       if (! ISXDIGIT (c))
358         {
359           error ("non hex digit '%c' in universal-character-name", c);
360           p--;
361           break;
362         }
363
364       code <<= 4;
365       if (c >= 'a' && c <= 'f')
366         code += c - 'a' + 10;
367       if (c >= 'A' && c <= 'F')
368         code += c - 'A' + 10;
369       if (c >= '0' && c <= '9')
370         code += c - '0';
371     }
372
373 #ifdef TARGET_EBCDIC
374   sorry ("universal-character-name on EBCDIC target");
375   *cptr = 0x3f;  /* EBCDIC invalid character */
376   return p;
377 #endif
378
379   if (code > 0x9f && !(code & 0x80000000))
380     /* True extended character, OK.  */;
381   else if (code >= 0x20 && code < 0x7f)
382     {
383       /* ASCII printable character.  The C character set consists of all of
384          these except $, @ and `.  We use hex escapes so that this also
385          works with EBCDIC hosts.  */
386       if (code != 0x24 && code != 0x40 && code != 0x60)
387         error ("universal-character-name used for '%c'", code);
388     }
389   else
390     error ("invalid universal-character-name");
391
392   *cptr = code;
393   return p;
394 }
395
396 /* Read an escape sequence and write its character equivalent into *CPTR.
397    P is the input pointer, which is just after the backslash.  LIMIT
398    is how much text we have.
399    Returns the updated input pointer.  */
400
401 static const char *
402 readescape (p, limit, cptr)
403      const char *p;
404      const char *limit;
405      unsigned int *cptr;
406 {
407   unsigned int c, code, count;
408   unsigned firstdig = 0;
409   int nonnull;
410
411   if (p == limit)
412     {
413       /* cpp has already issued an error for this.  */
414       *cptr = 0;
415       return p;
416     }
417
418   c = *p++;
419
420   switch (c)
421     {
422     case 'x':
423       if (warn_traditional && !in_system_header)
424         warning ("the meaning of `\\x' varies with -traditional");
425
426       if (flag_traditional)
427         {
428           *cptr = 'x';
429           return p;
430         }
431
432       code = 0;
433       count = 0;
434       nonnull = 0;
435       while (p < limit)
436         {
437           c = *p++;
438           if (! ISXDIGIT (c))
439             {
440               p--;
441               break;
442             }
443           code *= 16;
444           if (c >= 'a' && c <= 'f')
445             code += c - 'a' + 10;
446           if (c >= 'A' && c <= 'F')
447             code += c - 'A' + 10;
448           if (c >= '0' && c <= '9')
449             code += c - '0';
450           if (code != 0 || count != 0)
451             {
452               if (count == 0)
453                 firstdig = code;
454               count++;
455             }
456           nonnull = 1;
457         }
458       if (! nonnull)
459         {
460           warning ("\\x used with no following hex digits");
461           *cptr = 'x';
462           return p;
463         }
464       else if (count == 0)
465         /* Digits are all 0's.  Ok.  */
466         ;
467       else if ((count - 1) * 4 >= TYPE_PRECISION (integer_type_node)
468                || (count > 1
469                    && (((unsigned)1
470                         << (TYPE_PRECISION (integer_type_node)
471                             - (count - 1) * 4))
472                        <= firstdig)))
473         pedwarn ("hex escape out of range");
474       *cptr = code;
475       return p;
476
477     case '0':  case '1':  case '2':  case '3':  case '4':
478     case '5':  case '6':  case '7':
479       code = 0;
480       for (count = 0; count < 3; count++)
481         {
482           if (c < '0' || c > '7')
483             {
484               p--;
485               break;
486             }
487           code = (code * 8) + (c - '0');
488           if (p == limit)
489             break;
490           c = *p++;
491         }
492
493       if (count == 3)
494         p--;
495
496       *cptr = code;
497       return p;
498
499     case '\\': case '\'': case '"': case '?':
500       *cptr = c;
501       return p;
502
503     case 'n': *cptr = TARGET_NEWLINE;   return p;
504     case 't': *cptr = TARGET_TAB;       return p;
505     case 'r': *cptr = TARGET_CR;        return p;
506     case 'f': *cptr = TARGET_FF;        return p;
507     case 'b': *cptr = TARGET_BS;        return p;
508     case 'v': *cptr = TARGET_VT;        return p;
509     case 'a':
510       if (warn_traditional && !in_system_header)
511         warning ("the meaning of '\\a' varies with -traditional");
512       *cptr = flag_traditional ? c : TARGET_BELL;
513       return p;
514
515       /* Warnings and support checks handled by read_ucs().  */
516     case 'u': case 'U':
517       if (c_language != clk_cplusplus && !flag_isoc99)
518         break;
519
520       if (warn_traditional && !in_system_header)
521         warning ("the meaning of '\\%c' varies with -traditional", c);
522
523       return read_ucs (p, limit, cptr, c == 'u' ? 4 : 8);
524       
525     case 'e': case 'E':
526       if (pedantic)
527         pedwarn ("non-ISO-standard escape sequence, '\\%c'", c);
528       *cptr = TARGET_ESC; return p;
529
530       /* '\(', etc, are used at beginning of line to avoid confusing Emacs.
531          '\%' is used to prevent SCCS from getting confused.  */
532     case '(': case '{': case '[': case '%':
533       if (pedantic)
534         pedwarn ("unknown escape sequence '\\%c'", c);
535       *cptr = c;
536       return p;
537     }
538
539   if (ISGRAPH (c))
540     pedwarn ("unknown escape sequence '\\%c'", c);
541   else
542     pedwarn ("unknown escape sequence: '\\' followed by char 0x%x", c);
543
544   *cptr = c;
545   return p;
546 }
547
548 #if 0 /* not yet */
549 /* Returns nonzero if C is a universal-character-name.  Give an error if it
550    is not one which may appear in an identifier, as per [extendid].
551
552    Note that extended character support in identifiers has not yet been
553    implemented.  It is my personal opinion that this is not a desirable
554    feature.  Portable code cannot count on support for more than the basic
555    identifier character set.  */
556
557 static inline int
558 is_extended_char (c)
559      int c;
560 {
561 #ifdef TARGET_EBCDIC
562   return 0;
563 #else
564   /* ASCII.  */
565   if (c < 0x7f)
566     return 0;
567
568   /* None of the valid chars are outside the Basic Multilingual Plane (the
569      low 16 bits).  */
570   if (c > 0xffff)
571     {
572       error ("universal-character-name '\\U%08x' not valid in identifier", c);
573       return 1;
574     }
575   
576   /* Latin */
577   if ((c >= 0x00c0 && c <= 0x00d6)
578       || (c >= 0x00d8 && c <= 0x00f6)
579       || (c >= 0x00f8 && c <= 0x01f5)
580       || (c >= 0x01fa && c <= 0x0217)
581       || (c >= 0x0250 && c <= 0x02a8)
582       || (c >= 0x1e00 && c <= 0x1e9a)
583       || (c >= 0x1ea0 && c <= 0x1ef9))
584     return 1;
585
586   /* Greek */
587   if ((c == 0x0384)
588       || (c >= 0x0388 && c <= 0x038a)
589       || (c == 0x038c)
590       || (c >= 0x038e && c <= 0x03a1)
591       || (c >= 0x03a3 && c <= 0x03ce)
592       || (c >= 0x03d0 && c <= 0x03d6)
593       || (c == 0x03da)
594       || (c == 0x03dc)
595       || (c == 0x03de)
596       || (c == 0x03e0)
597       || (c >= 0x03e2 && c <= 0x03f3)
598       || (c >= 0x1f00 && c <= 0x1f15)
599       || (c >= 0x1f18 && c <= 0x1f1d)
600       || (c >= 0x1f20 && c <= 0x1f45)
601       || (c >= 0x1f48 && c <= 0x1f4d)
602       || (c >= 0x1f50 && c <= 0x1f57)
603       || (c == 0x1f59)
604       || (c == 0x1f5b)
605       || (c == 0x1f5d)
606       || (c >= 0x1f5f && c <= 0x1f7d)
607       || (c >= 0x1f80 && c <= 0x1fb4)
608       || (c >= 0x1fb6 && c <= 0x1fbc)
609       || (c >= 0x1fc2 && c <= 0x1fc4)
610       || (c >= 0x1fc6 && c <= 0x1fcc)
611       || (c >= 0x1fd0 && c <= 0x1fd3)
612       || (c >= 0x1fd6 && c <= 0x1fdb)
613       || (c >= 0x1fe0 && c <= 0x1fec)
614       || (c >= 0x1ff2 && c <= 0x1ff4)
615       || (c >= 0x1ff6 && c <= 0x1ffc))
616     return 1;
617
618   /* Cyrillic */
619   if ((c >= 0x0401 && c <= 0x040d)
620       || (c >= 0x040f && c <= 0x044f)
621       || (c >= 0x0451 && c <= 0x045c)
622       || (c >= 0x045e && c <= 0x0481)
623       || (c >= 0x0490 && c <= 0x04c4)
624       || (c >= 0x04c7 && c <= 0x04c8)
625       || (c >= 0x04cb && c <= 0x04cc)
626       || (c >= 0x04d0 && c <= 0x04eb)
627       || (c >= 0x04ee && c <= 0x04f5)
628       || (c >= 0x04f8 && c <= 0x04f9))
629     return 1;
630
631   /* Armenian */
632   if ((c >= 0x0531 && c <= 0x0556)
633       || (c >= 0x0561 && c <= 0x0587))
634     return 1;
635
636   /* Hebrew */
637   if ((c >= 0x05d0 && c <= 0x05ea)
638       || (c >= 0x05f0 && c <= 0x05f4))
639     return 1;
640
641   /* Arabic */
642   if ((c >= 0x0621 && c <= 0x063a)
643       || (c >= 0x0640 && c <= 0x0652)
644       || (c >= 0x0670 && c <= 0x06b7)
645       || (c >= 0x06ba && c <= 0x06be)
646       || (c >= 0x06c0 && c <= 0x06ce)
647       || (c >= 0x06e5 && c <= 0x06e7))
648     return 1;
649
650   /* Devanagari */
651   if ((c >= 0x0905 && c <= 0x0939)
652       || (c >= 0x0958 && c <= 0x0962))
653     return 1;
654
655   /* Bengali */
656   if ((c >= 0x0985 && c <= 0x098c)
657       || (c >= 0x098f && c <= 0x0990)
658       || (c >= 0x0993 && c <= 0x09a8)
659       || (c >= 0x09aa && c <= 0x09b0)
660       || (c == 0x09b2)
661       || (c >= 0x09b6 && c <= 0x09b9)
662       || (c >= 0x09dc && c <= 0x09dd)
663       || (c >= 0x09df && c <= 0x09e1)
664       || (c >= 0x09f0 && c <= 0x09f1))
665     return 1;
666
667   /* Gurmukhi */
668   if ((c >= 0x0a05 && c <= 0x0a0a)
669       || (c >= 0x0a0f && c <= 0x0a10)
670       || (c >= 0x0a13 && c <= 0x0a28)
671       || (c >= 0x0a2a && c <= 0x0a30)
672       || (c >= 0x0a32 && c <= 0x0a33)
673       || (c >= 0x0a35 && c <= 0x0a36)
674       || (c >= 0x0a38 && c <= 0x0a39)
675       || (c >= 0x0a59 && c <= 0x0a5c)
676       || (c == 0x0a5e))
677     return 1;
678
679   /* Gujarati */
680   if ((c >= 0x0a85 && c <= 0x0a8b)
681       || (c == 0x0a8d)
682       || (c >= 0x0a8f && c <= 0x0a91)
683       || (c >= 0x0a93 && c <= 0x0aa8)
684       || (c >= 0x0aaa && c <= 0x0ab0)
685       || (c >= 0x0ab2 && c <= 0x0ab3)
686       || (c >= 0x0ab5 && c <= 0x0ab9)
687       || (c == 0x0ae0))
688     return 1;
689
690   /* Oriya */
691   if ((c >= 0x0b05 && c <= 0x0b0c)
692       || (c >= 0x0b0f && c <= 0x0b10)
693       || (c >= 0x0b13 && c <= 0x0b28)
694       || (c >= 0x0b2a && c <= 0x0b30)
695       || (c >= 0x0b32 && c <= 0x0b33)
696       || (c >= 0x0b36 && c <= 0x0b39)
697       || (c >= 0x0b5c && c <= 0x0b5d)
698       || (c >= 0x0b5f && c <= 0x0b61))
699     return 1;
700
701   /* Tamil */
702   if ((c >= 0x0b85 && c <= 0x0b8a)
703       || (c >= 0x0b8e && c <= 0x0b90)
704       || (c >= 0x0b92 && c <= 0x0b95)
705       || (c >= 0x0b99 && c <= 0x0b9a)
706       || (c == 0x0b9c)
707       || (c >= 0x0b9e && c <= 0x0b9f)
708       || (c >= 0x0ba3 && c <= 0x0ba4)
709       || (c >= 0x0ba8 && c <= 0x0baa)
710       || (c >= 0x0bae && c <= 0x0bb5)
711       || (c >= 0x0bb7 && c <= 0x0bb9))
712     return 1;
713
714   /* Telugu */
715   if ((c >= 0x0c05 && c <= 0x0c0c)
716       || (c >= 0x0c0e && c <= 0x0c10)
717       || (c >= 0x0c12 && c <= 0x0c28)
718       || (c >= 0x0c2a && c <= 0x0c33)
719       || (c >= 0x0c35 && c <= 0x0c39)
720       || (c >= 0x0c60 && c <= 0x0c61))
721     return 1;
722
723   /* Kannada */
724   if ((c >= 0x0c85 && c <= 0x0c8c)
725       || (c >= 0x0c8e && c <= 0x0c90)
726       || (c >= 0x0c92 && c <= 0x0ca8)
727       || (c >= 0x0caa && c <= 0x0cb3)
728       || (c >= 0x0cb5 && c <= 0x0cb9)
729       || (c >= 0x0ce0 && c <= 0x0ce1))
730     return 1;
731
732   /* Malayalam */
733   if ((c >= 0x0d05 && c <= 0x0d0c)
734       || (c >= 0x0d0e && c <= 0x0d10)
735       || (c >= 0x0d12 && c <= 0x0d28)
736       || (c >= 0x0d2a && c <= 0x0d39)
737       || (c >= 0x0d60 && c <= 0x0d61))
738     return 1;
739
740   /* Thai */
741   if ((c >= 0x0e01 && c <= 0x0e30)
742       || (c >= 0x0e32 && c <= 0x0e33)
743       || (c >= 0x0e40 && c <= 0x0e46)
744       || (c >= 0x0e4f && c <= 0x0e5b))
745     return 1;
746
747   /* Lao */
748   if ((c >= 0x0e81 && c <= 0x0e82)
749       || (c == 0x0e84)
750       || (c == 0x0e87)
751       || (c == 0x0e88)
752       || (c == 0x0e8a)
753       || (c == 0x0e0d)
754       || (c >= 0x0e94 && c <= 0x0e97)
755       || (c >= 0x0e99 && c <= 0x0e9f)
756       || (c >= 0x0ea1 && c <= 0x0ea3)
757       || (c == 0x0ea5)
758       || (c == 0x0ea7)
759       || (c == 0x0eaa)
760       || (c == 0x0eab)
761       || (c >= 0x0ead && c <= 0x0eb0)
762       || (c == 0x0eb2)
763       || (c == 0x0eb3)
764       || (c == 0x0ebd)
765       || (c >= 0x0ec0 && c <= 0x0ec4)
766       || (c == 0x0ec6))
767     return 1;
768
769   /* Georgian */
770   if ((c >= 0x10a0 && c <= 0x10c5)
771       || (c >= 0x10d0 && c <= 0x10f6))
772     return 1;
773
774   /* Hiragana */
775   if ((c >= 0x3041 && c <= 0x3094)
776       || (c >= 0x309b && c <= 0x309e))
777     return 1;
778
779   /* Katakana */
780   if ((c >= 0x30a1 && c <= 0x30fe))
781     return 1;
782
783   /* Bopmofo */
784   if ((c >= 0x3105 && c <= 0x312c))
785     return 1;
786
787   /* Hangul */
788   if ((c >= 0x1100 && c <= 0x1159)
789       || (c >= 0x1161 && c <= 0x11a2)
790       || (c >= 0x11a8 && c <= 0x11f9))
791     return 1;
792
793   /* CJK Unified Ideographs */
794   if ((c >= 0xf900 && c <= 0xfa2d)
795       || (c >= 0xfb1f && c <= 0xfb36)
796       || (c >= 0xfb38 && c <= 0xfb3c)
797       || (c == 0xfb3e)
798       || (c >= 0xfb40 && c <= 0xfb41)
799       || (c >= 0xfb42 && c <= 0xfb44)
800       || (c >= 0xfb46 && c <= 0xfbb1)
801       || (c >= 0xfbd3 && c <= 0xfd3f)
802       || (c >= 0xfd50 && c <= 0xfd8f)
803       || (c >= 0xfd92 && c <= 0xfdc7)
804       || (c >= 0xfdf0 && c <= 0xfdfb)
805       || (c >= 0xfe70 && c <= 0xfe72)
806       || (c == 0xfe74)
807       || (c >= 0xfe76 && c <= 0xfefc)
808       || (c >= 0xff21 && c <= 0xff3a)
809       || (c >= 0xff41 && c <= 0xff5a)
810       || (c >= 0xff66 && c <= 0xffbe)
811       || (c >= 0xffc2 && c <= 0xffc7)
812       || (c >= 0xffca && c <= 0xffcf)
813       || (c >= 0xffd2 && c <= 0xffd7)
814       || (c >= 0xffda && c <= 0xffdc)
815       || (c >= 0x4e00 && c <= 0x9fa5))
816     return 1;
817
818   error ("universal-character-name '\\u%04x' not valid in identifier", c);
819   return 1;
820 #endif
821 }
822
823 /* Add the UTF-8 representation of C to the token_buffer.  */
824
825 static void
826 utf8_extend_token (c)
827      int c;
828 {
829   int shift, mask;
830
831   if      (c <= 0x0000007f)
832     {
833       extend_token (c);
834       return;
835     }
836   else if (c <= 0x000007ff)
837     shift = 6, mask = 0xc0;
838   else if (c <= 0x0000ffff)
839     shift = 12, mask = 0xe0;
840   else if (c <= 0x001fffff)
841     shift = 18, mask = 0xf0;
842   else if (c <= 0x03ffffff)
843     shift = 24, mask = 0xf8;
844   else
845     shift = 30, mask = 0xfc;
846
847   extend_token (mask | (c >> shift));
848   do
849     {
850       shift -= 6;
851       extend_token ((unsigned char) (0x80 | (c >> shift)));
852     }
853   while (shift);
854 }
855 #endif
856
857 #if 0
858 struct try_type
859 {
860   tree *node_var;
861   char unsigned_flag;
862   char long_flag;
863   char long_long_flag;
864 };
865
866 struct try_type type_sequence[] =
867 {
868   { &integer_type_node, 0, 0, 0},
869   { &unsigned_type_node, 1, 0, 0},
870   { &long_integer_type_node, 0, 1, 0},
871   { &long_unsigned_type_node, 1, 1, 0},
872   { &long_long_integer_type_node, 0, 1, 1},
873   { &long_long_unsigned_type_node, 1, 1, 1}
874 };
875 #endif /* 0 */
876 \f
877 struct pf_args
878 {
879   /* Input */
880   const char *str;
881   int fflag;
882   int lflag;
883   int base;
884   /* Output */
885   int conversion_errno;
886   REAL_VALUE_TYPE value;
887   tree type;
888 };
889  
890 static void
891 parse_float (data)
892   PTR data;
893 {
894   struct pf_args * args = (struct pf_args *) data;
895   const char *typename;
896
897   args->conversion_errno = 0;
898   args->type = double_type_node;
899   typename = "double";
900
901   /* The second argument, machine_mode, of REAL_VALUE_ATOF
902      tells the desired precision of the binary result
903      of decimal-to-binary conversion.  */
904
905   if (args->fflag)
906     {
907       if (args->lflag)
908         error ("both 'f' and 'l' suffixes on floating constant");
909
910       args->type = float_type_node;
911       typename = "float";
912     }
913   else if (args->lflag)
914     {
915       args->type = long_double_type_node;
916       typename = "long double";
917     }
918   else if (flag_single_precision_constant)
919     {
920       args->type = float_type_node;
921       typename = "float";
922     }
923
924   errno = 0;
925   if (args->base == 16)
926     args->value = REAL_VALUE_HTOF (args->str, TYPE_MODE (args->type));
927   else
928     args->value = REAL_VALUE_ATOF (args->str, TYPE_MODE (args->type));
929
930   args->conversion_errno = errno;
931   /* A diagnostic is required here by some ISO C testsuites.
932      This is not pedwarn, because some people don't want
933      an error for this.  */
934   if (REAL_VALUE_ISINF (args->value) && pedantic)
935     warning ("floating point number exceeds range of '%s'", typename);
936 }
937  
938 int
939 c_lex (value)
940      tree *value;
941 {
942   cpp_token tok;
943   enum cpp_ttype type;
944
945   retry:
946   timevar_push (TV_CPP);
947   cpp_get_token (parse_in, &tok);
948   timevar_pop (TV_CPP);
949
950   /* The C++ front end does horrible things with the current line
951      number.  To ensure an accurate line number, we must reset it
952      every time we return a token.  */
953   lex_lineno = cpp_get_line (parse_in)->line;
954
955   *value = NULL_TREE;
956   lineno = lex_lineno;
957   type = tok.type;
958   switch (type)
959     {
960     case CPP_OPEN_BRACE:  indent_level++;  break;
961     case CPP_CLOSE_BRACE: indent_level--;  break;
962
963     /* Issue this error here, where we can get at tok.val.c.  */
964     case CPP_OTHER:
965       if (ISGRAPH (tok.val.c))
966         error ("stray '%c' in program", tok.val.c);
967       else
968         error ("stray '\\%#o' in program", tok.val.c);
969       goto retry;
970       
971     case CPP_NAME:
972       *value = get_identifier ((const char *)tok.val.node->name);
973       break;
974
975     case CPP_INT:
976     case CPP_FLOAT:
977     case CPP_NUMBER:
978       *value = lex_number ((const char *)tok.val.str.text, tok.val.str.len);
979       break;
980
981     case CPP_CHAR:
982     case CPP_WCHAR:
983       *value = lex_charconst ((const char *)tok.val.str.text,
984                               tok.val.str.len, tok.type == CPP_WCHAR);
985       break;
986
987     case CPP_STRING:
988     case CPP_WSTRING:
989     case CPP_OSTRING:
990       *value = lex_string ((const char *)tok.val.str.text,
991                            tok.val.str.len, tok.type == CPP_WSTRING);
992       break;
993
994       /* These tokens should not be visible outside cpplib.  */
995     case CPP_HEADER_NAME:
996     case CPP_COMMENT:
997     case CPP_MACRO_ARG:
998       abort ();
999
1000     default: break;
1001     }
1002
1003   return type;
1004 }
1005
1006 #define ERROR(msgid) do { error(msgid); goto syntax_error; } while(0)
1007
1008 static tree
1009 lex_number (str, len)
1010      const char *str;
1011      unsigned int len;
1012 {
1013   int base = 10;
1014   int count = 0;
1015   int largest_digit = 0;
1016   int numdigits = 0;
1017   int overflow = 0;
1018   int c;
1019   tree value;
1020   const char *p;
1021   enum anon1 { NOT_FLOAT = 0, AFTER_POINT, AFTER_EXPON } floatflag = NOT_FLOAT;
1022   
1023   /* We actually store only HOST_BITS_PER_CHAR bits in each part.
1024      The code below which fills the parts array assumes that a host
1025      int is at least twice as wide as a host char, and that 
1026      HOST_BITS_PER_WIDE_INT is an even multiple of HOST_BITS_PER_CHAR.
1027      Two HOST_WIDE_INTs is the largest int literal we can store.
1028      In order to detect overflow below, the number of parts (TOTAL_PARTS)
1029      must be exactly the number of parts needed to hold the bits
1030      of two HOST_WIDE_INTs. */
1031 #define TOTAL_PARTS ((HOST_BITS_PER_WIDE_INT / HOST_BITS_PER_CHAR) * 2)
1032   unsigned int parts[TOTAL_PARTS];
1033   
1034   /* Optimize for most frequent case.  */
1035   if (len == 1)
1036     {
1037       if (*str == '0')
1038         return integer_zero_node;
1039       else if (*str == '1')
1040         return integer_one_node;
1041       else
1042         return build_int_2 (*str - '0', 0);
1043     }
1044
1045   for (count = 0; count < TOTAL_PARTS; count++)
1046     parts[count] = 0;
1047
1048   /* len is known to be >1 at this point.  */
1049   p = str;
1050
1051   if (len > 2 && str[0] == '0' && (str[1] == 'x' || str[1] == 'X'))
1052     {
1053       base = 16;
1054       p = str + 2;
1055     }
1056   /* The ISDIGIT check is so we are not confused by a suffix on 0.  */
1057   else if (str[0] == '0' && ISDIGIT (str[1]))
1058     {
1059       base = 8;
1060       p = str + 1;
1061     }
1062
1063   do
1064     {
1065       c = *p++;
1066
1067       if (c == '.')
1068         {
1069           if (base == 16 && pedantic && !flag_isoc99)
1070             pedwarn ("floating constant may not be in radix 16");
1071           else if (floatflag == AFTER_POINT)
1072             ERROR ("too many decimal points in floating constant");
1073           else if (floatflag == AFTER_EXPON)
1074             ERROR ("decimal point in exponent - impossible!");
1075           else
1076             floatflag = AFTER_POINT;
1077
1078           if (base == 8)
1079             base = 10;
1080         }
1081       else if (c == '_')
1082         /* Possible future extension: silently ignore _ in numbers,
1083            permitting cosmetic grouping - e.g. 0x8000_0000 == 0x80000000
1084            but somewhat easier to read.  Ada has this?  */
1085         ERROR ("underscore in number");
1086       else
1087         {
1088           int n;
1089           /* It is not a decimal point.
1090              It should be a digit (perhaps a hex digit).  */
1091
1092           if (ISDIGIT (c))
1093             {
1094               n = c - '0';
1095             }
1096           else if (base <= 10 && (c == 'e' || c == 'E'))
1097             {
1098               base = 10;
1099               floatflag = AFTER_EXPON;
1100               break;
1101             }
1102           else if (base == 16 && (c == 'p' || c == 'P'))
1103             {
1104               floatflag = AFTER_EXPON;
1105               break;   /* start of exponent */
1106             }
1107           else if (base == 16 && c >= 'a' && c <= 'f')
1108             {
1109               n = c - 'a' + 10;
1110             }
1111           else if (base == 16 && c >= 'A' && c <= 'F')
1112             {
1113               n = c - 'A' + 10;
1114             }
1115           else
1116             {
1117               p--;
1118               break;  /* start of suffix */
1119             }
1120
1121           if (n >= largest_digit)
1122             largest_digit = n;
1123           numdigits++;
1124
1125           for (count = 0; count < TOTAL_PARTS; count++)
1126             {
1127               parts[count] *= base;
1128               if (count)
1129                 {
1130                   parts[count]
1131                     += (parts[count-1] >> HOST_BITS_PER_CHAR);
1132                   parts[count-1]
1133                     &= (1 << HOST_BITS_PER_CHAR) - 1;
1134                 }
1135               else
1136                 parts[0] += n;
1137             }
1138
1139           /* If the highest-order part overflows (gets larger than
1140              a host char will hold) then the whole number has 
1141              overflowed.  Record this and truncate the highest-order
1142              part. */
1143           if (parts[TOTAL_PARTS - 1] >> HOST_BITS_PER_CHAR)
1144             {
1145               overflow = 1;
1146               parts[TOTAL_PARTS - 1] &= (1 << HOST_BITS_PER_CHAR) - 1;
1147             }
1148         }
1149     }
1150   while (p < str + len);
1151
1152   /* This can happen on input like `int i = 0x;' */
1153   if (numdigits == 0)
1154     ERROR ("numeric constant with no digits");
1155
1156   if (largest_digit >= base)
1157     ERROR ("numeric constant contains digits beyond the radix");
1158
1159   if (floatflag != NOT_FLOAT)
1160     {
1161       tree type;
1162       int imag, fflag, lflag, conversion_errno;
1163       REAL_VALUE_TYPE real;
1164       struct pf_args args;
1165       char *copy;
1166
1167       if (base == 16 && floatflag != AFTER_EXPON)
1168         ERROR ("hexadecimal floating constant has no exponent");
1169
1170       /* Read explicit exponent if any, and put it in tokenbuf.  */
1171       if ((base == 10 && ((c == 'e') || (c == 'E')))
1172           || (base == 16 && (c == 'p' || c == 'P')))
1173         {
1174           if (p < str + len)
1175             c = *p++;
1176           if (p < str + len && (c == '+' || c == '-'))
1177             c = *p++;
1178           /* Exponent is decimal, even if string is a hex float.  */
1179           if (! ISDIGIT (c))
1180             ERROR ("floating constant exponent has no digits");
1181           while (p < str + len && ISDIGIT (c))
1182             c = *p++;
1183           if (! ISDIGIT (c))
1184             p--;
1185         }
1186
1187       /* Copy the float constant now; we don't want any suffixes in the
1188          string passed to parse_float.  */
1189       copy = alloca (p - str + 1);
1190       memcpy (copy, str, p - str);
1191       copy[p - str] = '\0';
1192
1193       /* Now parse suffixes.  */
1194       fflag = lflag = imag = 0;
1195       while (p < str + len)
1196         switch (*p++)
1197           {
1198           case 'f': case 'F':
1199             if (fflag)
1200               ERROR ("more than one 'f' suffix on floating constant");
1201             else if (warn_traditional && !in_system_header)
1202               warning ("traditional C rejects the 'f' suffix");
1203
1204             fflag = 1;
1205             break;
1206
1207           case 'l': case 'L':
1208             if (lflag)
1209               ERROR ("more than one 'l' suffix on floating constant");
1210             else if (warn_traditional && !in_system_header)
1211               warning ("traditional C rejects the 'l' suffix");
1212
1213             lflag = 1;
1214             break;
1215
1216           case 'i': case 'I':
1217           case 'j': case 'J':
1218             if (imag)
1219               ERROR ("more than one 'i' or 'j' suffix on floating constant");
1220             else if (pedantic)
1221               pedwarn ("ISO C forbids imaginary numeric constants");
1222             imag = 1;
1223             break;
1224
1225           default:
1226             ERROR ("invalid suffix on floating constant");
1227           }
1228
1229       /* Setup input for parse_float() */
1230       args.str = copy;
1231       args.fflag = fflag;
1232       args.lflag = lflag;
1233       args.base = base;
1234
1235       /* Convert string to a double, checking for overflow.  */
1236       if (do_float_handler (parse_float, (PTR) &args))
1237         {
1238           /* Receive output from parse_float() */
1239           real = args.value;
1240         }
1241       else
1242           /* We got an exception from parse_float() */
1243           ERROR ("floating constant out of range");
1244
1245       /* Receive output from parse_float() */
1246       conversion_errno = args.conversion_errno;
1247       type = args.type;
1248             
1249 #ifdef ERANGE
1250       /* ERANGE is also reported for underflow,
1251          so test the value to distinguish overflow from that.  */
1252       if (conversion_errno == ERANGE && !flag_traditional && pedantic
1253           && (REAL_VALUES_LESS (dconst1, real)
1254               || REAL_VALUES_LESS (real, dconstm1)))
1255         warning ("floating point number exceeds range of 'double'");
1256 #endif
1257
1258       /* Create a node with determined type and value.  */
1259       if (imag)
1260         value = build_complex (NULL_TREE, convert (type, integer_zero_node),
1261                                build_real (type, real));
1262       else
1263         value = build_real (type, real);
1264     }
1265   else
1266     {
1267       tree trad_type, ansi_type, type;
1268       HOST_WIDE_INT high, low;
1269       int spec_unsigned = 0;
1270       int spec_long = 0;
1271       int spec_long_long = 0;
1272       int spec_imag = 0;
1273       int suffix_lu = 0;
1274       int warn = 0, i;
1275
1276       trad_type = ansi_type = type = NULL_TREE;
1277       while (p < str + len)
1278         {
1279           c = *p++;
1280           switch (c)
1281             {
1282             case 'u': case 'U':
1283               if (spec_unsigned)
1284                 error ("two 'u' suffixes on integer constant");
1285               else if (warn_traditional && !in_system_header)
1286                 warning ("traditional C rejects the 'u' suffix");
1287
1288               spec_unsigned = 1;
1289               if (spec_long)
1290                 suffix_lu = 1;
1291               break;
1292
1293             case 'l': case 'L':
1294               if (spec_long)
1295                 {
1296                   if (spec_long_long)
1297                     error ("three 'l' suffixes on integer constant");
1298                   else if (suffix_lu)
1299                     error ("'lul' is not a valid integer suffix");
1300                   else if (c != spec_long)
1301                     error ("'Ll' and 'lL' are not valid integer suffixes");
1302                   else if (pedantic && ! flag_isoc99
1303                            && ! in_system_header && warn_long_long)
1304                     pedwarn ("ISO C89 forbids long long integer constants");
1305                   spec_long_long = 1;
1306                 }
1307               spec_long = c;
1308               break;
1309
1310             case 'i': case 'I': case 'j': case 'J':
1311               if (spec_imag)
1312                 error ("more than one 'i' or 'j' suffix on integer constant");
1313               else if (pedantic)
1314                 pedwarn ("ISO C forbids imaginary numeric constants");
1315               spec_imag = 1;
1316               break;
1317
1318             default:
1319               ERROR ("invalid suffix on integer constant");
1320             }
1321         }
1322
1323       /* If the literal overflowed, pedwarn about it now. */
1324       if (overflow)
1325         {
1326           warn = 1;
1327           pedwarn ("integer constant is too large for this configuration of the compiler - truncated to %d bits", HOST_BITS_PER_WIDE_INT * 2);
1328         }
1329
1330       /* This is simplified by the fact that our constant
1331          is always positive.  */
1332
1333       high = low = 0;
1334
1335       for (i = 0; i < HOST_BITS_PER_WIDE_INT / HOST_BITS_PER_CHAR; i++)
1336         {
1337           high |= ((HOST_WIDE_INT) parts[i + (HOST_BITS_PER_WIDE_INT
1338                                               / HOST_BITS_PER_CHAR)]
1339                    << (i * HOST_BITS_PER_CHAR));
1340           low |= (HOST_WIDE_INT) parts[i] << (i * HOST_BITS_PER_CHAR);
1341         }
1342
1343       value = build_int_2 (low, high);
1344       TREE_TYPE (value) = long_long_unsigned_type_node;
1345
1346       /* If warn_traditional, calculate both the ISO type and the
1347          traditional type, then see if they disagree.
1348          Otherwise, calculate only the type for the dialect in use.  */
1349       if (warn_traditional || flag_traditional)
1350         {
1351           /* Calculate the traditional type.  */
1352           /* Traditionally, any constant is signed; but if unsigned is
1353              specified explicitly, obey that.  Use the smallest size
1354              with the right number of bits, except for one special
1355              case with decimal constants.  */
1356           if (! spec_long && base != 10
1357               && int_fits_type_p (value, unsigned_type_node))
1358             trad_type = spec_unsigned ? unsigned_type_node : integer_type_node;
1359           /* A decimal constant must be long if it does not fit in
1360              type int.  I think this is independent of whether the
1361              constant is signed.  */
1362           else if (! spec_long && base == 10
1363                    && int_fits_type_p (value, integer_type_node))
1364             trad_type = spec_unsigned ? unsigned_type_node : integer_type_node;
1365           else if (! spec_long_long)
1366             trad_type = (spec_unsigned
1367                          ? long_unsigned_type_node
1368                          : long_integer_type_node);
1369           else if (int_fits_type_p (value,
1370                                     spec_unsigned 
1371                                     ? long_long_unsigned_type_node
1372                                     : long_long_integer_type_node)) 
1373             trad_type = (spec_unsigned
1374                          ? long_long_unsigned_type_node
1375                          : long_long_integer_type_node);
1376           else
1377             trad_type = (spec_unsigned
1378                          ? widest_unsigned_literal_type_node
1379                          : widest_integer_literal_type_node);
1380         }
1381       if (warn_traditional || ! flag_traditional)
1382         {
1383           /* Calculate the ISO type.  */
1384           if (! spec_long && ! spec_unsigned
1385               && int_fits_type_p (value, integer_type_node))
1386             ansi_type = integer_type_node;
1387           else if (! spec_long && (base != 10 || spec_unsigned)
1388                    && int_fits_type_p (value, unsigned_type_node))
1389             ansi_type = unsigned_type_node;
1390           else if (! spec_unsigned && !spec_long_long
1391                    && int_fits_type_p (value, long_integer_type_node))
1392             ansi_type = long_integer_type_node;
1393           else if (! spec_long_long
1394                    && int_fits_type_p (value, long_unsigned_type_node))
1395             ansi_type = long_unsigned_type_node;
1396           else if (! spec_unsigned
1397                    && int_fits_type_p (value, long_long_integer_type_node))
1398             ansi_type = long_long_integer_type_node;
1399           else if (int_fits_type_p (value, long_long_unsigned_type_node))
1400             ansi_type = long_long_unsigned_type_node;
1401           else if (! spec_unsigned
1402                    && int_fits_type_p (value, widest_integer_literal_type_node))
1403             ansi_type = widest_integer_literal_type_node;
1404           else
1405             ansi_type = widest_unsigned_literal_type_node;
1406         }
1407
1408       type = flag_traditional ? trad_type : ansi_type;
1409
1410       /* We assume that constants specified in a non-decimal
1411          base are bit patterns, and that the programmer really
1412          meant what they wrote.  */
1413       if (warn_traditional && !in_system_header
1414           && base == 10 && trad_type != ansi_type)
1415         {
1416           if (TYPE_PRECISION (trad_type) != TYPE_PRECISION (ansi_type))
1417             warning ("width of integer constant changes with -traditional");
1418           else if (TREE_UNSIGNED (trad_type) != TREE_UNSIGNED (ansi_type))
1419             warning ("integer constant is unsigned in ISO C, signed with -traditional");
1420           else
1421             warning ("width of integer constant may change on other systems with -traditional");
1422         }
1423
1424       if (pedantic && !flag_traditional && (flag_isoc99 || !spec_long_long)
1425           && !warn
1426           && ((flag_isoc99
1427                ? TYPE_PRECISION (long_long_integer_type_node)
1428                : TYPE_PRECISION (long_integer_type_node)) < TYPE_PRECISION (type)))
1429         {
1430           warn = 1;
1431           pedwarn ("integer constant larger than the maximum value of %s",
1432                    (flag_isoc99
1433                     ? (TREE_UNSIGNED (type)
1434                        ? "an unsigned long long int"
1435                        : "a long long int")
1436                     : "an unsigned long int"));
1437         }
1438
1439       if (base == 10 && ! spec_unsigned && TREE_UNSIGNED (type))
1440         warning ("decimal constant is so large that it is unsigned");
1441
1442       if (spec_imag)
1443         {
1444           if (TYPE_PRECISION (type)
1445               <= TYPE_PRECISION (integer_type_node))
1446             value = build_complex (NULL_TREE, integer_zero_node,
1447                                    convert (integer_type_node, value));
1448           else
1449             ERROR ("complex integer constant is too wide for 'complex int'");
1450         }
1451       else if (flag_traditional && !int_fits_type_p (value, type))
1452         /* The traditional constant 0x80000000 is signed
1453            but doesn't fit in the range of int.
1454            This will change it to -0x80000000, which does fit.  */
1455         {
1456           TREE_TYPE (value) = unsigned_type (type);
1457           value = convert (type, value);
1458           TREE_OVERFLOW (value) = TREE_CONSTANT_OVERFLOW (value) = 0;
1459         }
1460       else
1461         TREE_TYPE (value) = type;
1462
1463       /* If it's still an integer (not a complex), and it doesn't
1464          fit in the type we choose for it, then pedwarn. */
1465
1466       if (! warn
1467           && TREE_CODE (TREE_TYPE (value)) == INTEGER_TYPE
1468           && ! int_fits_type_p (value, TREE_TYPE (value)))
1469         pedwarn ("integer constant is larger than the maximum value for its type");
1470     }
1471
1472   if (p < str + len)
1473     error ("missing white space after number '%.*s'", (int) (p - str), str);
1474
1475   return value;
1476
1477  syntax_error:
1478   return integer_zero_node;
1479 }
1480
1481 static tree
1482 lex_string (str, len, wide)
1483      const char *str;
1484      unsigned int len;
1485      int wide;
1486 {
1487   tree value;
1488   char *buf = alloca ((len + 1) * (wide ? WCHAR_BYTES : 1));
1489   char *q = buf;
1490   const char *p = str, *limit = str + len;
1491   unsigned int c;
1492   unsigned width = wide ? WCHAR_TYPE_SIZE
1493                         : TYPE_PRECISION (char_type_node);
1494
1495 #ifdef MULTIBYTE_CHARS
1496   /* Reset multibyte conversion state.  */
1497   (void) local_mbtowc (NULL_PTR, NULL_PTR, 0);
1498 #endif
1499
1500   while (p < limit)
1501     {
1502 #ifdef MULTIBYTE_CHARS
1503       wchar_t wc;
1504       int char_len;
1505
1506       char_len = local_mbtowc (&wc, p, limit - p);
1507       if (char_len == -1)
1508         {
1509           warning ("Ignoring invalid multibyte character");
1510           char_len = 1;
1511           c = *p++;
1512         }
1513       else
1514         {
1515           p += char_len;
1516           c = wc;
1517         }
1518 #else
1519       c = *p++;
1520 #endif
1521
1522       if (c == '\\' && !ignore_escape_flag)
1523         {
1524           p = readescape (p, limit, &c);
1525           if (width < HOST_BITS_PER_INT
1526               && (unsigned) c >= ((unsigned)1 << width))
1527             pedwarn ("escape sequence out of range for character");
1528         }
1529         
1530       /* Add this single character into the buffer either as a wchar_t
1531          or as a single byte.  */
1532       if (wide)
1533         {
1534           unsigned charwidth = TYPE_PRECISION (char_type_node);
1535           unsigned bytemask = (1 << charwidth) - 1;
1536           int byte;
1537
1538           for (byte = 0; byte < WCHAR_BYTES; ++byte)
1539             {
1540               int n;
1541               if (byte >= (int) sizeof (c))
1542                 n = 0;
1543               else
1544                 n = (c >> (byte * charwidth)) & bytemask;
1545               if (BYTES_BIG_ENDIAN)
1546                 q[WCHAR_BYTES - byte - 1] = n;
1547               else
1548                 q[byte] = n;
1549             }
1550           q += WCHAR_BYTES;
1551         }
1552       else
1553         {
1554           *q++ = c;
1555         }
1556     }
1557
1558   /* Terminate the string value, either with a single byte zero
1559      or with a wide zero.  */
1560
1561   if (wide)
1562     {
1563       memset (q, 0, WCHAR_BYTES);
1564       q += WCHAR_BYTES;
1565     }
1566   else
1567     {
1568       *q++ = '\0';
1569     }
1570
1571   value = build_string (q - buf, buf);
1572
1573   if (wide)
1574     TREE_TYPE (value) = wchar_array_type_node;
1575   else
1576     TREE_TYPE (value) = char_array_type_node;
1577   return value;
1578 }
1579
1580 static tree
1581 lex_charconst (str, len, wide)
1582      const char *str;
1583      unsigned int len;
1584      int wide;
1585 {
1586   const char *limit = str + len;
1587   int result = 0;
1588   int num_chars = 0;
1589   int chars_seen = 0;
1590   unsigned width = TYPE_PRECISION (char_type_node);
1591   int max_chars;
1592   unsigned int c;
1593   tree value;
1594
1595 #ifdef MULTIBYTE_CHARS
1596   int longest_char = local_mb_cur_max ();
1597   (void) local_mbtowc (NULL_PTR, NULL_PTR, 0);
1598 #endif
1599
1600   max_chars = TYPE_PRECISION (integer_type_node) / width;
1601   if (wide)
1602     width = WCHAR_TYPE_SIZE;
1603
1604   while (str < limit)
1605     {
1606 #ifdef MULTIBYTE_CHARS
1607       wchar_t wc;
1608       int char_len;
1609
1610       char_len = local_mbtowc (&wc, str, limit - str);
1611       if (char_len == -1)
1612         {
1613           warning ("Ignoring invalid multibyte character");
1614           char_len = 1;
1615           c = *str++;
1616         }
1617       else
1618         {
1619           p += char_len;
1620           c = wc;
1621         }
1622 #else
1623       c = *str++;
1624 #endif
1625
1626       ++chars_seen;
1627       if (c == '\\')
1628         {
1629           str = readescape (str, limit, &c);
1630           if (width < HOST_BITS_PER_INT
1631               && (unsigned) c >= ((unsigned)1 << width))
1632             pedwarn ("escape sequence out of range for character");
1633         }
1634 #ifdef MAP_CHARACTER
1635       if (ISPRINT (c))
1636         c = MAP_CHARACTER (c);
1637 #endif
1638       
1639       /* Merge character into result; ignore excess chars.  */
1640       num_chars += (width / TYPE_PRECISION (char_type_node));
1641       if (num_chars < max_chars + 1)
1642         {
1643           if (width < HOST_BITS_PER_INT)
1644             result = (result << width) | (c & ((1 << width) - 1));
1645           else
1646             result = c;
1647         }
1648     }
1649
1650   if (chars_seen == 0)
1651     error ("empty character constant");
1652   else if (num_chars > max_chars)
1653     {
1654       num_chars = max_chars;
1655       error ("character constant too long");
1656     }
1657   else if (chars_seen != 1 && ! flag_traditional && warn_multichar)
1658     warning ("multi-character character constant");
1659
1660   /* If char type is signed, sign-extend the constant.  */
1661   if (! wide)
1662     {
1663       int num_bits = num_chars * width;
1664       if (num_bits == 0)
1665         /* We already got an error; avoid invalid shift.  */
1666         value = build_int_2 (0, 0);
1667       else if (TREE_UNSIGNED (char_type_node)
1668                || ((result >> (num_bits - 1)) & 1) == 0)
1669         value = build_int_2 (result & (~(unsigned HOST_WIDE_INT) 0
1670                                        >> (HOST_BITS_PER_WIDE_INT - num_bits)),
1671                              0);
1672       else
1673         value = build_int_2 (result | ~(~(unsigned HOST_WIDE_INT) 0
1674                                         >> (HOST_BITS_PER_WIDE_INT - num_bits)),
1675                              -1);
1676       /* In C, a character constant has type 'int'; in C++, 'char'.  */
1677       if (chars_seen <= 1 && c_language == clk_cplusplus)
1678         TREE_TYPE (value) = char_type_node;
1679       else
1680         TREE_TYPE (value) = integer_type_node;
1681     }
1682   else
1683     {
1684       value = build_int_2 (result, 0);
1685       TREE_TYPE (value) = wchar_type_node;
1686     }
1687
1688   return value;
1689 }