boehm-gc/misc.c

   1 /*
   2  * Copyright 1988, 1989 Hans-J. Boehm, Alan J. Demers
   3  * Copyright (c) 1991-1994 by Xerox Corporation.  All rights reserved.
   4  *
   5  * THIS MATERIAL IS PROVIDED AS IS, WITH ABSOLUTELY NO WARRANTY EXPRESSED
   6  * OR IMPLIED.  ANY USE IS AT YOUR OWN RISK.
   7  *
   8  * Permission is hereby granted to use or copy this program
   9  * for any purpose,  provided the above notices are retained on all copies.
  10  * Permission to modify the code and to distribute modified code is granted,
  11  * provided the above notices are retained, and a notice that the code was
  12  * modified is included with the above copyright notice.
  13  */
  14 /* Boehm, July 31, 1995 5:02 pm PDT */
  15
  16
  17 #include <stdio.h>
  18 #ifndef _WIN32_WCE
  19 #include <signal.h>
  20 #endif
  21
  22 #define I_HIDE_POINTERS /* To make GC_call_with_alloc_lock visible */
  23 #include "private/gc_pmark.h"
  24
  25 #ifdef GC_SOLARIS_THREADS
  26 # include <sys/syscall.h>
  27 #endif
  28 #if defined(MSWIN32) || defined(MSWINCE)
  29 # define WIN32_LEAN_AND_MEAN
  30 # define NOSERVICE
  31 # include <windows.h>
  32 # include <tchar.h>
  33 #endif
  34
  35 # ifdef THREADS
  36 #   ifdef PCR
  37 #     include "il/PCR_IL.h"
  38       PCR_Th_ML GC_allocate_ml;
  39 #   else
  40 #     ifdef SRC_M3
  41         /* Critical section counter is defined in the M3 runtime        */
  42         /* That's all we use.                                           */
  43 #     else
  44 #       ifdef GC_SOLARIS_THREADS
  45           mutex_t GC_allocate_ml;       /* Implicitly initialized.      */
  46 #       else
  47 #          ifdef GC_WIN32_THREADS
  48 #             if !defined(GC_NOT_DLL) && (defined(_DLL) || defined(GC_DLL))
  49                  __declspec(dllexport) CRITICAL_SECTION GC_allocate_ml;
  50 #             else
  51                  CRITICAL_SECTION GC_allocate_ml;
  52 #             endif
  53 #          else
  54 #             if defined(GC_PTHREADS) && !defined(GC_SOLARIS_THREADS)
  55 #               if defined(USE_SPIN_LOCK)
  56                   pthread_t GC_lock_holder = NO_THREAD;
  57 #               else
  58                   pthread_mutex_t GC_allocate_ml = PTHREAD_MUTEX_INITIALIZER;
  59                   pthread_t GC_lock_holder = NO_THREAD;
  60                         /* Used only for assertions, and to prevent      */
  61                         /* recursive reentry in the system call wrapper. */
  62 #               endif
  63 #             else
  64                   --> declare allocator lock here
  65 #             endif
  66 #          endif
  67 #       endif
  68 #     endif
  69 #   endif
  70 # endif
  71
  72 #ifdef ECOS
  73 #undef STACKBASE
  74 #endif
  75
  76 GC_FAR struct _GC_arrays GC_arrays /* = { 0 } */;
  77
  78
  79 GC_bool GC_debugging_started = FALSE;
  80         /* defined here so we don't have to load debug_malloc.o */
  81
  82 void (*GC_check_heap) GC_PROTO((void)) = (void (*) GC_PROTO((void)))0;
  83
  84 void (*GC_start_call_back) GC_PROTO((void)) = (void (*) GC_PROTO((void)))0;
  85
  86 ptr_t GC_stackbottom = 0;
  87
  88 #ifdef IA64
  89   ptr_t GC_register_stackbottom = 0;
  90 #endif
  91
  92 GC_bool GC_dont_gc = 0;
  93
  94 GC_bool GC_dont_precollect = 0;
  95
  96 GC_bool GC_quiet = 0;
  97
  98 GC_bool GC_print_stats = 0;
  99
 100 #ifdef FIND_LEAK
 101   int GC_find_leak = 1;
 102 #else
 103   int GC_find_leak = 0;
 104 #endif
 105
 106 #ifdef ALL_INTERIOR_POINTERS
 107   int GC_all_interior_pointers = 1;
 108 #else
 109   int GC_all_interior_pointers = 0;
 110 #endif
 111
 112 /*ARGSUSED*/
 113 GC_PTR GC_default_oom_fn GC_PROTO((size_t bytes_requested))
 114 {
 115     return(0);
 116 }
 117
 118 GC_PTR (*GC_oom_fn) GC_PROTO((size_t bytes_requested)) = GC_default_oom_fn;
 119
 120 extern signed_word GC_mem_found;
 121
 122 # ifdef MERGE_SIZES
 123     /* Set things up so that GC_size_map[i] >= words(i),                */
 124     /* but not too much bigger                                          */
 125     /* and so that size_map contains relatively few distinct entries    */
 126     /* This is stolen from Russ Atkinson's Cedar quantization           */
 127     /* alogrithm (but we precompute it).                                */
 128
 129
 130     void GC_init_size_map()
 131     {
 132         register unsigned i;
 133
 134         /* Map size 0 to something bigger.                      */
 135         /* This avoids problems at lower levels.                */
 136         /* One word objects don't have to be 2 word aligned,    */
 137         /* unless we're using mark bytes.                       */
 138           for (i = 0; i < sizeof(word); i++) {
 139               GC_size_map[i] = MIN_WORDS;
 140           }
 141 #         if MIN_WORDS > 1
 142             GC_size_map[sizeof(word)] = MIN_WORDS;
 143 #         else
 144             GC_size_map[sizeof(word)] = ROUNDED_UP_WORDS(sizeof(word));
 145 #         endif
 146         for (i = sizeof(word) + 1; i <= 8 * sizeof(word); i++) {
 147             GC_size_map[i] = ALIGNED_WORDS(i);
 148         }
 149         for (i = 8*sizeof(word) + 1; i <= 16 * sizeof(word); i++) {
 150               GC_size_map[i] = (ROUNDED_UP_WORDS(i) + 1) & (~1);
 151         }
 152 #       ifdef GC_GCJ_SUPPORT
 153            /* Make all sizes up to 32 words predictable, so that a      */
 154            /* compiler can statically perform the same computation,     */
 155            /* or at least a computation that results in similar size    */
 156            /* classes.                                                  */
 157            for (i = 16*sizeof(word) + 1; i <= 32 * sizeof(word); i++) {
 158               GC_size_map[i] = (ROUNDED_UP_WORDS(i) + 3) & (~3);
 159            }
 160 #       endif
 161         /* We leave the rest of the array to be filled in on demand. */
 162     }
 163
 164     /* Fill in additional entries in GC_size_map, including the ith one */
 165     /* We assume the ith entry is currently 0.                          */
 166     /* Note that a filled in section of the array ending at n always    */
 167     /* has length at least n/4.                                         */
 168     void GC_extend_size_map(i)
 169     word i;
 170     {
 171         word orig_word_sz = ROUNDED_UP_WORDS(i);
 172         word word_sz = orig_word_sz;
 173         register word byte_sz = WORDS_TO_BYTES(word_sz);
 174                                 /* The size we try to preserve.         */
 175                                 /* Close to to i, unless this would     */
 176                                 /* introduce too many distinct sizes.   */
 177         word smaller_than_i = byte_sz - (byte_sz >> 3);
 178         word much_smaller_than_i = byte_sz - (byte_sz >> 2);
 179         register word low_limit;        /* The lowest indexed entry we  */
 180                                         /* initialize.                  */
 181         register word j;
 182
 183         if (GC_size_map[smaller_than_i] == 0) {
 184             low_limit = much_smaller_than_i;
 185             while (GC_size_map[low_limit] != 0) low_limit++;
 186         } else {
 187             low_limit = smaller_than_i + 1;
 188             while (GC_size_map[low_limit] != 0) low_limit++;
 189             word_sz = ROUNDED_UP_WORDS(low_limit);
 190             word_sz += word_sz >> 3;
 191             if (word_sz < orig_word_sz) word_sz = orig_word_sz;
 192         }
 193 #       ifdef ALIGN_DOUBLE
 194             word_sz += 1;
 195             word_sz &= ~1;
 196 #       endif
 197         if (word_sz > MAXOBJSZ) {
 198             word_sz = MAXOBJSZ;
 199         }
 200         /* If we can fit the same number of larger objects in a block,  */
 201         /* do so.                                                       */
 202         {
 203             size_t number_of_objs = BODY_SZ/word_sz;
 204             word_sz = BODY_SZ/number_of_objs;
 205 #           ifdef ALIGN_DOUBLE
 206                 word_sz &= ~1;
 207 #           endif
 208         }
 209         byte_sz = WORDS_TO_BYTES(word_sz);
 210         if (GC_all_interior_pointers) {
 211             /* We need one extra byte; don't fill in GC_size_map[byte_sz] */
 212             byte_sz--;
 213         }
 214
 215         for (j = low_limit; j <= byte_sz; j++) GC_size_map[j] = word_sz;
 216     }
 217 # endif
 218
 219
 220 /*
 221  * The following is a gross hack to deal with a problem that can occur
 222  * on machines that are sloppy about stack frame sizes, notably SPARC.
 223  * Bogus pointers may be written to the stack and not cleared for
 224  * a LONG time, because they always fall into holes in stack frames
 225  * that are not written.  We partially address this by clearing
 226  * sections of the stack whenever we get control.
 227  */
 228 word GC_stack_last_cleared = 0; /* GC_no when we last did this */
 229 # ifdef THREADS
 230 #   define BIG_CLEAR_SIZE 2048  /* Clear this much now and then.        */
 231 #   define SMALL_CLEAR_SIZE 256 /* Clear this much every time.          */
 232 # endif
 233 # define CLEAR_SIZE 213  /* Granularity for GC_clear_stack_inner */
 234 # define DEGRADE_RATE 50
 235
 236 word GC_min_sp;         /* Coolest stack pointer value from which we've */
 237                         /* already cleared the stack.                   */
 238
 239 word GC_high_water;
 240                         /* "hottest" stack pointer value we have seen   */
 241                         /* recently.  Degrades over time.               */
 242
 243 word GC_words_allocd_at_reset;
 244
 245 #if defined(ASM_CLEAR_CODE)
 246   extern ptr_t GC_clear_stack_inner();
 247 #else
 248 /* Clear the stack up to about limit.  Return arg. */
 249 /*ARGSUSED*/
 250 ptr_t GC_clear_stack_inner(arg, limit)
 251 ptr_t arg;
 252 word limit;
 253 {
 254     word dummy[CLEAR_SIZE];
 255
 256     BZERO(dummy, CLEAR_SIZE*sizeof(word));
 257     if ((word)(dummy) COOLER_THAN limit) {
 258         (void) GC_clear_stack_inner(arg, limit);
 259     }
 260     /* Make sure the recursive call is not a tail call, and the bzero   */
 261     /* call is not recognized as dead code.                             */
 262     GC_noop1((word)dummy);
 263     return(arg);
 264 }
 265 #endif
 266
 267 /* Clear some of the inaccessible part of the stack.  Returns its       */
 268 /* argument, so it can be used in a tail call position, hence clearing  */
 269 /* another frame.                                                       */
 270 ptr_t GC_clear_stack(arg)
 271 ptr_t arg;
 272 {
 273     register word sp = (word)GC_approx_sp();  /* Hotter than actual sp */
 274 #   ifdef THREADS
 275         word dummy[SMALL_CLEAR_SIZE];
 276         static unsigned random_no = 0;
 277                                  /* Should be more random than it is ... */
 278                                  /* Used to occasionally clear a bigger  */
 279                                  /* chunk.                               */
 280 #   endif
 281     register word limit;
 282
 283 #   define SLOP 400
 284         /* Extra bytes we clear every time.  This clears our own        */
 285         /* activation record, and should cause more frequent            */
 286         /* clearing near the cold end of the stack, a good thing.       */
 287 #   define GC_SLOP 4000
 288         /* We make GC_high_water this much hotter than we really saw    */
 289         /* saw it, to cover for GC noise etc. above our current frame.  */
 290 #   define CLEAR_THRESHOLD 100000
 291         /* We restart the clearing process after this many bytes of     */
 292         /* allocation.  Otherwise very heavily recursive programs       */
 293         /* with sparse stacks may result in heaps that grow almost      */
 294         /* without bounds.  As the heap gets larger, collection         */
 295         /* frequency decreases, thus clearing frequency would decrease, */
 296         /* thus more junk remains accessible, thus the heap gets        */
 297         /* larger ...                                                   */
 298 # ifdef THREADS
 299     if (++random_no % 13 == 0) {
 300         limit = sp;
 301         MAKE_HOTTER(limit, BIG_CLEAR_SIZE*sizeof(word));
 302         limit &= ~0xf;  /* Make it sufficiently aligned for assembly    */
 303                         /* implementations of GC_clear_stack_inner.     */
 304         return GC_clear_stack_inner(arg, limit);
 305     } else {
 306         BZERO(dummy, SMALL_CLEAR_SIZE*sizeof(word));
 307         return arg;
 308     }
 309 # else
 310     if (GC_gc_no > GC_stack_last_cleared) {
 311         /* Start things over, so we clear the entire stack again */
 312         if (GC_stack_last_cleared == 0) GC_high_water = (word) GC_stackbottom;
 313         GC_min_sp = GC_high_water;
 314         GC_stack_last_cleared = GC_gc_no;
 315         GC_words_allocd_at_reset = GC_words_allocd;
 316     }
 317     /* Adjust GC_high_water */
 318         MAKE_COOLER(GC_high_water, WORDS_TO_BYTES(DEGRADE_RATE) + GC_SLOP);
 319         if (sp HOTTER_THAN GC_high_water) {
 320             GC_high_water = sp;
 321         }
 322         MAKE_HOTTER(GC_high_water, GC_SLOP);
 323     limit = GC_min_sp;
 324     MAKE_HOTTER(limit, SLOP);
 325     if (sp COOLER_THAN limit) {
 326         limit &= ~0xf;  /* Make it sufficiently aligned for assembly    */
 327                         /* implementations of GC_clear_stack_inner.     */
 328         GC_min_sp = sp;
 329         return(GC_clear_stack_inner(arg, limit));
 330     } else if (WORDS_TO_BYTES(GC_words_allocd - GC_words_allocd_at_reset)
 331                > CLEAR_THRESHOLD) {
 332         /* Restart clearing process, but limit how much clearing we do. */
 333         GC_min_sp = sp;
 334         MAKE_HOTTER(GC_min_sp, CLEAR_THRESHOLD/4);
 335         if (GC_min_sp HOTTER_THAN GC_high_water) GC_min_sp = GC_high_water;
 336         GC_words_allocd_at_reset = GC_words_allocd;
 337     }
 338     return(arg);
 339 # endif
 340 }
 341
 342
 343 /* Return a pointer to the base address of p, given a pointer to a      */
 344 /* an address within an object.  Return 0 o.w.                          */
 345 # ifdef __STDC__
 346     GC_PTR GC_base(GC_PTR p)
 347 # else
 348     GC_PTR GC_base(p)
 349     GC_PTR p;
 350 # endif
 351 {
 352     register word r;
 353     register struct hblk *h;
 354     register bottom_index *bi;
 355     register hdr *candidate_hdr;
 356     register word limit;
 357
 358     r = (word)p;
 359     if (!GC_is_initialized) return 0;
 360     h = HBLKPTR(r);
 361     GET_BI(r, bi);
 362     candidate_hdr = HDR_FROM_BI(bi, r);
 363     if (candidate_hdr == 0) return(0);
 364     /* If it's a pointer to the middle of a large object, move it       */
 365     /* to the beginning.                                                */
 366         while (IS_FORWARDING_ADDR_OR_NIL(candidate_hdr)) {
 367            h = FORWARDED_ADDR(h,candidate_hdr);
 368            r = (word)h;
 369            candidate_hdr = HDR(h);
 370         }
 371     if (candidate_hdr -> hb_map == GC_invalid_map) return(0);
 372     /* Make sure r points to the beginning of the object */
 373         r &= ~(WORDS_TO_BYTES(1) - 1);
 374         {
 375             register int offset = HBLKDISPL(r);
 376             register signed_word sz = candidate_hdr -> hb_sz;
 377             register signed_word map_entry;
 378
 379             map_entry = MAP_ENTRY((candidate_hdr -> hb_map), offset);
 380             if (map_entry > CPP_MAX_OFFSET) {
 381                 map_entry = (signed_word)(BYTES_TO_WORDS(offset)) % sz;
 382             }
 383             r -= WORDS_TO_BYTES(map_entry);
 384             limit = r + WORDS_TO_BYTES(sz);
 385             if (limit > (word)(h + 1)
 386                 && sz <= BYTES_TO_WORDS(HBLKSIZE)) {
 387                 return(0);
 388             }
 389             if ((word)p >= limit) return(0);
 390         }
 391     return((GC_PTR)r);
 392 }
 393
 394
 395 /* Return the size of an object, given a pointer to its base.           */
 396 /* (For small obects this also happens to work from interior pointers,  */
 397 /* but that shouldn't be relied upon.)                                  */
 398 # ifdef __STDC__
 399     size_t GC_size(GC_PTR p)
 400 # else
 401     size_t GC_size(p)
 402     GC_PTR p;
 403 # endif
 404 {
 405     register int sz;
 406     register hdr * hhdr = HDR(p);
 407
 408     sz = WORDS_TO_BYTES(hhdr -> hb_sz);
 409     return(sz);
 410 }
 411
 412 size_t GC_get_heap_size GC_PROTO(())
 413 {
 414     return ((size_t) GC_heapsize);
 415 }
 416
 417 size_t GC_get_free_bytes GC_PROTO(())
 418 {
 419     return ((size_t) GC_large_free_bytes);
 420 }
 421
 422 size_t GC_get_bytes_since_gc GC_PROTO(())
 423 {
 424     return ((size_t) WORDS_TO_BYTES(GC_words_allocd));
 425 }
 426
 427 size_t GC_get_total_bytes GC_PROTO(())
 428 {
 429     return ((size_t) WORDS_TO_BYTES(GC_words_allocd+GC_words_allocd_before_gc));
 430 }
 431
 432 GC_bool GC_is_initialized = FALSE;
 433
 434 void GC_init()
 435 {
 436     DCL_LOCK_STATE;
 437
 438     DISABLE_SIGNALS();
 439
 440 #ifdef MSWIN32
 441     if (!GC_is_initialized) InitializeCriticalSection(&GC_allocate_ml);
 442 #endif /* MSWIN32 */
 443
 444     LOCK();
 445     GC_init_inner();
 446     UNLOCK();
 447     ENABLE_SIGNALS();
 448
 449 #   if defined(PARALLEL_MARK) || defined(THREAD_LOCAL_ALLOC)
 450         /* Make sure marker threads and started and thread local */
 451         /* allocation is initialized, in case we didn't get      */
 452         /* called from GC_init_parallel();                       */
 453         {
 454           extern void GC_init_parallel(void);
 455           GC_init_parallel();
 456         }
 457 #   endif /* PARALLEL_MARK || THREAD_LOCAL_ALLOC */
 458 }
 459
 460 #if defined(MSWIN32) || defined(MSWINCE)
 461     CRITICAL_SECTION GC_write_cs;
 462 #endif
 463
 464 #ifdef MSWIN32
 465     extern void GC_init_win32 GC_PROTO((void));
 466 #endif
 467
 468 extern void GC_setpagesize();
 469
 470 #ifdef UNIX_LIKE
 471
 472 extern void GC_set_and_save_fault_handler GC_PROTO((void (*handler)(int)));
 473
 474 static void looping_handler(sig)
 475 int sig;
 476 {
 477     GC_err_printf1("Caught signal %d: looping in handler\n", sig);
 478     for(;;);
 479 }
 480 #endif
 481
 482 void GC_init_inner()
 483 {
 484 #   if !defined(THREADS) && defined(GC_ASSERTIONS)
 485         word dummy;
 486 #   endif
 487     word initial_heap_sz = (word)MINHINCR;
 488
 489     if (GC_is_initialized) return;
 490 #   ifdef PRINTSTATS
 491       GC_print_stats = 1;
 492 #   endif
 493     if (0 != GETENV("GC_PRINT_STATS")) {
 494       GC_print_stats = 1;
 495     }
 496     if (0 != GETENV("GC_FIND_LEAK")) {
 497       GC_find_leak = 1;
 498     }
 499     if (0 != GETENV("GC_ALL_INTERIOR_POINTERS")) {
 500       GC_all_interior_pointers = 1;
 501     }
 502     if (0 != GETENV("GC_DONT_GC")) {
 503       GC_dont_gc = 1;
 504     }
 505 #   ifdef UNIX_LIKE
 506       if (0 != GETENV("GC_LOOP_ON_ABORT")) {
 507         GC_set_and_save_fault_handler(looping_handler);
 508       }
 509 #   endif
 510     /* Adjust normal object descriptor for extra allocation.    */
 511     if (ALIGNMENT > GC_DS_TAGS && EXTRA_BYTES != 0) {
 512       GC_obj_kinds[NORMAL].ok_descriptor = ((word)(-ALIGNMENT) | GC_DS_LENGTH);
 513     }
 514 #   if defined(MSWIN32) || defined(MSWINCE)
 515         InitializeCriticalSection(&GC_write_cs);
 516 #   endif
 517     GC_setpagesize();
 518     GC_exclude_static_roots(beginGC_arrays, endGC_arrays);
 519     GC_exclude_static_roots(beginGC_obj_kinds, endGC_obj_kinds);
 520 #   ifdef SEPARATE_GLOBALS
 521       GC_exclude_static_roots(beginGC_objfreelist, endGC_objfreelist);
 522       GC_exclude_static_roots(beginGC_aobjfreelist, endGC_aobjfreelist);
 523 #   endif
 524 #   ifdef MSWIN32
 525         GC_init_win32();
 526 #   endif
 527 #   if defined(SEARCH_FOR_DATA_START)
 528         GC_init_linux_data_start();
 529 #   endif
 530 #   if (defined(NETBSD) || defined(OPENBSD)) && defined(__ELF__)
 531         GC_init_netbsd_elf();
 532 #   endif
 533 #   if defined(GC_PTHREADS) || defined(GC_SOLARIS_THREADS)
 534         GC_thr_init();
 535 #   endif
 536 #   ifdef GC_SOLARIS_THREADS
 537         /* We need dirty bits in order to find live stack sections.     */
 538         GC_dirty_init();
 539 #   endif
 540 #   if !defined(THREADS) || defined(GC_PTHREADS) || defined(GC_WIN32_THREADS) \
 541         || defined(GC_SOLARIS_THREADS)
 542       if (GC_stackbottom == 0) {
 543         GC_stackbottom = GC_get_stack_base();
 544 #       if defined(LINUX) && defined(IA64)
 545           GC_register_stackbottom = GC_get_register_stack_base();
 546 #       endif
 547       }
 548 #   endif
 549     GC_ASSERT(sizeof (ptr_t) == sizeof(word));
 550     GC_ASSERT(sizeof (signed_word) == sizeof(word));
 551     GC_ASSERT(sizeof (struct hblk) == HBLKSIZE);
 552 #   ifndef THREADS
 553 #     if defined(STACK_GROWS_UP) && defined(STACK_GROWS_DOWN)
 554         ABORT(
 555           "Only one of STACK_GROWS_UP and STACK_GROWS_DOWN should be defd\n");
 556 #     endif
 557 #     if !defined(STACK_GROWS_UP) && !defined(STACK_GROWS_DOWN)
 558         ABORT(
 559           "One of STACK_GROWS_UP and STACK_GROWS_DOWN should be defd\n");
 560 #     endif
 561 #     ifdef STACK_GROWS_DOWN
 562         GC_ASSERT((word)(&dummy) <= (word)GC_stackbottom);
 563 #     else
 564         GC_ASSERT((word)(&dummy) >= (word)GC_stackbottom);
 565 #     endif
 566 #   endif
 567 #   if !defined(_AUX_SOURCE) || defined(__GNUC__)
 568       GC_ASSERT((word)(-1) > (word)0);
 569       /* word should be unsigned */
 570 #   endif
 571     GC_ASSERT((signed_word)(-1) < (signed_word)0);
 572
 573     /* Add initial guess of root sets.  Do this first, since sbrk(0)    */
 574     /* might be used.                                                   */
 575       GC_register_data_segments();
 576     GC_init_headers();
 577     GC_bl_init();
 578     GC_mark_init();
 579     {
 580         char * sz_str = GETENV("GC_INITIAL_HEAP_SIZE");
 581         if (sz_str != NULL) {
 582           initial_heap_sz = atoi(sz_str);
 583           if (initial_heap_sz <= MINHINCR * HBLKSIZE) {
 584             WARN("Bad initial heap size %s - ignoring it.\n",
 585                  sz_str);
 586           }
 587           initial_heap_sz = divHBLKSZ(initial_heap_sz);
 588         }
 589     }
 590     if (!GC_expand_hp_inner(initial_heap_sz)) {
 591         GC_err_printf0("Can't start up: not enough memory\n");
 592         EXIT();
 593     }
 594     /* Preallocate large object map.  It's otherwise inconvenient to    */
 595     /* deal with failure.                                               */
 596       if (!GC_add_map_entry((word)0)) {
 597         GC_err_printf0("Can't start up: not enough memory\n");
 598         EXIT();
 599       }
 600     GC_register_displacement_inner(0L);
 601 #   ifdef MERGE_SIZES
 602       GC_init_size_map();
 603 #   endif
 604 #   ifdef PCR
 605       if (PCR_IL_Lock(PCR_Bool_false, PCR_allSigsBlocked, PCR_waitForever)
 606           != PCR_ERes_okay) {
 607           ABORT("Can't lock load state\n");
 608       } else if (PCR_IL_Unlock() != PCR_ERes_okay) {
 609           ABORT("Can't unlock load state\n");
 610       }
 611       PCR_IL_Unlock();
 612       GC_pcr_install();
 613 #   endif
 614     /* Get black list set up */
 615       if (!GC_dont_precollect) GC_gcollect_inner();
 616     GC_is_initialized = TRUE;
 617 #   ifdef STUBBORN_ALLOC
 618         GC_stubborn_init();
 619 #   endif
 620     /* Convince lint that some things are used */
 621 #   ifdef LINT
 622       {
 623           extern char * GC_copyright[];
 624           extern int GC_read();
 625           extern void GC_register_finalizer_no_order();
 626
 627           GC_noop(GC_copyright, GC_find_header,
 628                   GC_push_one, GC_call_with_alloc_lock, GC_read,
 629                   GC_dont_expand,
 630 #                 ifndef NO_DEBUGGING
 631                     GC_dump,
 632 #                 endif
 633                   GC_register_finalizer_no_order);
 634       }
 635 #   endif
 636 }
 637
 638 void GC_enable_incremental GC_PROTO(())
 639 {
 640 # if !defined(SMALL_CONFIG)
 641   if (!GC_find_leak) {
 642     DCL_LOCK_STATE;
 643
 644     DISABLE_SIGNALS();
 645     LOCK();
 646     if (GC_incremental) goto out;
 647     GC_setpagesize();
 648 #   ifdef MSWIN32
 649       {
 650         extern GC_bool GC_is_win32s();
 651
 652         /* VirtualProtect is not functional under win32s.       */
 653         if (GC_is_win32s()) goto out;
 654       }
 655 #   endif /* MSWIN32 */
 656 #   ifndef GC_SOLARIS_THREADS
 657         GC_dirty_init();
 658 #   endif
 659     if (!GC_is_initialized) {
 660         GC_init_inner();
 661     }
 662     if (GC_dont_gc) {
 663         /* Can't easily do it. */
 664         UNLOCK();
 665         ENABLE_SIGNALS();
 666         return;
 667     }
 668     if (GC_words_allocd > 0) {
 669         /* There may be unmarked reachable objects      */
 670         GC_gcollect_inner();
 671     }   /* else we're OK in assuming everything's       */
 672         /* clean since nothing can point to an          */
 673         /* unmarked object.                             */
 674     GC_read_dirty();
 675     GC_incremental = TRUE;
 676 out:
 677     UNLOCK();
 678     ENABLE_SIGNALS();
 679   }
 680 # endif
 681 }
 682
 683
 684 #if defined(MSWIN32) || defined(MSWINCE)
 685 # define LOG_FILE _T("gc.log")
 686
 687   HANDLE GC_stdout = 0;
 688
 689   void GC_deinit()
 690   {
 691       if (GC_is_initialized) {
 692         DeleteCriticalSection(&GC_write_cs);
 693       }
 694   }
 695
 696   int GC_write(buf, len)
 697   GC_CONST char * buf;
 698   size_t len;
 699   {
 700       BOOL tmp;
 701       DWORD written;
 702       if (len == 0)
 703           return 0;
 704       EnterCriticalSection(&GC_write_cs);
 705       if (GC_stdout == INVALID_HANDLE_VALUE) {
 706           return -1;
 707       } else if (GC_stdout == 0) {
 708           GC_stdout = CreateFile(LOG_FILE, GENERIC_WRITE,
 709                                  FILE_SHARE_READ | FILE_SHARE_WRITE,
 710                                  NULL, CREATE_ALWAYS, FILE_FLAG_WRITE_THROUGH,
 711                                  NULL);
 712           if (GC_stdout == INVALID_HANDLE_VALUE) ABORT("Open of log file failed");
 713       }
 714       tmp = WriteFile(GC_stdout, buf, len, &written, NULL);
 715       if (!tmp)
 716           DebugBreak();
 717       LeaveCriticalSection(&GC_write_cs);
 718       return tmp ? (int)written : -1;
 719   }
 720
 721 #endif
 722
 723 #if defined(OS2) || defined(MACOS)
 724 FILE * GC_stdout = NULL;
 725 FILE * GC_stderr = NULL;
 726 int GC_tmp;  /* Should really be local ... */
 727
 728   void GC_set_files()
 729   {
 730       if (GC_stdout == NULL) {
 731         GC_stdout = stdout;
 732     }
 733     if (GC_stderr == NULL) {
 734         GC_stderr = stderr;
 735     }
 736   }
 737 #endif
 738
 739 #if !defined(OS2) && !defined(MACOS) && !defined(MSWIN32) && !defined(MSWINCE)
 740   int GC_stdout = 1;
 741   int GC_stderr = 2;
 742 # if !defined(AMIGA)
 743 #   include <unistd.h>
 744 # endif
 745 #endif
 746
 747 #if !defined(MSWIN32) && !defined(MSWINCE) && !defined(OS2) && !defined(MACOS)
 748 int GC_write(fd, buf, len)
 749 int fd;
 750 GC_CONST char *buf;
 751 size_t len;
 752 {
 753      register int bytes_written = 0;
 754      register int result;
 755
 756      while (bytes_written < len) {
 757 #       ifdef GC_SOLARIS_THREADS
 758             result = syscall(SYS_write, fd, buf + bytes_written,
 759                                             len - bytes_written);
 760 #       else
 761             result = write(fd, buf + bytes_written, len - bytes_written);
 762 #       endif
 763         if (-1 == result) return(result);
 764         bytes_written += result;
 765     }
 766     return(bytes_written);
 767 }
 768 #endif /* UN*X */
 769
 770 #if defined(ECOS)
 771 int GC_write(fd, buf, len)
 772 {
 773   _Jv_diag_write (buf, len);
 774   return len;
 775 }
 776 #endif
 777
 778
 779 #if defined(MSWIN32) || defined(MSWINCE)
 780 #   define WRITE(f, buf, len) GC_write(buf, len)
 781 #else
 782 #   if defined(OS2) || defined(MACOS)
 783 #   define WRITE(f, buf, len) (GC_set_files(), \
 784                                GC_tmp = fwrite((buf), 1, (len), (f)), \
 785                                fflush(f), GC_tmp)
 786 #   else
 787 #     define WRITE(f, buf, len) GC_write((f), (buf), (len))
 788 #   endif
 789 #endif
 790
 791 /* A version of printf that is unlikely to call malloc, and is thus safer */
 792 /* to call from the collector in case malloc has been bound to GC_malloc. */
 793 /* Assumes that no more than 1023 characters are written at once.         */
 794 /* Assumes that all arguments have been converted to something of the     */
 795 /* same size as long, and that the format conversions expect something    */
 796 /* of that size.                                                          */
 797 void GC_printf(format, a, b, c, d, e, f)
 798 GC_CONST char * format;
 799 long a, b, c, d, e, f;
 800 {
 801     char buf[1025];
 802
 803     if (GC_quiet) return;
 804     buf[1024] = 0x15;
 805     (void) sprintf(buf, format, a, b, c, d, e, f);
 806     if (buf[1024] != 0x15) ABORT("GC_printf clobbered stack");
 807     if (WRITE(GC_stdout, buf, strlen(buf)) < 0) ABORT("write to stdout failed");
 808 }
 809
 810 void GC_err_printf(format, a, b, c, d, e, f)
 811 GC_CONST char * format;
 812 long a, b, c, d, e, f;
 813 {
 814     char buf[1025];
 815
 816     buf[1024] = 0x15;
 817     (void) sprintf(buf, format, a, b, c, d, e, f);
 818     if (buf[1024] != 0x15) ABORT("GC_err_printf clobbered stack");
 819     if (WRITE(GC_stderr, buf, strlen(buf)) < 0) ABORT("write to stderr failed");
 820 }
 821
 822 void GC_err_puts(s)
 823 GC_CONST char *s;
 824 {
 825     if (WRITE(GC_stderr, s, strlen(s)) < 0) ABORT("write to stderr failed");
 826 }
 827
 828 #if defined(LINUX) && !defined(SMALL_CONFIG)
 829 void GC_err_write(buf, len)
 830 GC_CONST char *buf;
 831 size_t len;
 832 {
 833     if (WRITE(GC_stderr, buf, len) < 0) ABORT("write to stderr failed");
 834 }
 835 #endif
 836
 837 # if defined(__STDC__) || defined(__cplusplus)
 838     void GC_default_warn_proc(char *msg, GC_word arg)
 839 # else
 840     void GC_default_warn_proc(msg, arg)
 841     char *msg;
 842     GC_word arg;
 843 # endif
 844 {
 845     GC_err_printf1(msg, (unsigned long)arg);
 846 }
 847
 848 GC_warn_proc GC_current_warn_proc = GC_default_warn_proc;
 849
 850 # if defined(__STDC__) || defined(__cplusplus)
 851     GC_warn_proc GC_set_warn_proc(GC_warn_proc p)
 852 # else
 853     GC_warn_proc GC_set_warn_proc(p)
 854     GC_warn_proc p;
 855 # endif
 856 {
 857     GC_warn_proc result;
 858
 859     LOCK();
 860     result = GC_current_warn_proc;
 861     GC_current_warn_proc = p;
 862     UNLOCK();
 863     return(result);
 864 }
 865
 866
 867 #ifndef PCR
 868 void GC_abort(msg)
 869 GC_CONST char * msg;
 870 {
 871 #   if defined(MSWIN32)
 872       (void) MessageBoxA(NULL, msg, "Fatal error in gc", MB_ICONERROR|MB_OK);
 873       DebugBreak();
 874 #   else
 875       GC_err_printf1("%s\n", msg);
 876 #   endif
 877     if (GETENV("GC_LOOP_ON_ABORT") != NULL) {
 878             /* In many cases it's easier to debug a running process.    */
 879             /* It's arguably nicer to sleep, but that makes it harder   */
 880             /* to look at the thread if the debugger doesn't know much  */
 881             /* about threads.                                           */
 882             for(;;) {}
 883     }
 884 #   ifdef MSWIN32
 885         DebugBreak();
 886 #   else
 887         (void) abort();
 888 #   endif
 889 }
 890 #endif
 891
 892 #ifdef NEED_CALLINFO
 893
 894 void GC_print_callers (info)
 895 struct callinfo info[NFRAMES];
 896 {
 897     register int i;
 898
 899 #   if NFRAMES == 1
 900       GC_err_printf0("\tCaller at allocation:\n");
 901 #   else
 902       GC_err_printf0("\tCall chain at allocation:\n");
 903 #   endif
 904     for (i = 0; i < NFRAMES; i++) {
 905         if (info[i].ci_pc == 0) break;
 906 #       if NARGS > 0
 907         {
 908           int j;
 909
 910           GC_err_printf0("\t\targs: ");
 911           for (j = 0; j < NARGS; j++) {
 912             if (j != 0) GC_err_printf0(", ");
 913             GC_err_printf2("%d (0x%X)", ~(info[i].ci_arg[j]),
 914                                         ~(info[i].ci_arg[j]));
 915           }
 916           GC_err_printf0("\n");
 917         }
 918 #       endif
 919         GC_err_printf1("\t\t##PC##= 0x%X\n", info[i].ci_pc);
 920     }
 921 }
 922
 923 #endif /* SAVE_CALL_CHAIN */
 924
 925 /* Needed by SRC_M3, gcj, and should perhaps be the official interface  */
 926 /* to GC_dont_gc.                                                       */
 927 void GC_enable()
 928 {
 929     GC_dont_gc--;
 930 }
 931
 932 void GC_disable()
 933 {
 934     GC_dont_gc++;
 935 }
 936
 937 #if !defined(NO_DEBUGGING)
 938
 939 void GC_dump()
 940 {
 941     GC_printf0("***Static roots:\n");
 942     GC_print_static_roots();
 943     GC_printf0("\n***Heap sections:\n");
 944     GC_print_heap_sects();
 945     GC_printf0("\n***Free blocks:\n");
 946     GC_print_hblkfreelist();
 947     GC_printf0("\n***Blocks in use:\n");
 948     GC_print_block_list();
 949 }
 950
 951 #endif /* NO_DEBUGGING */