OSDN Git Service

*** empty log message ***
[nkf/nkf.git] / nkf.c
1 /** Network Kanji Filter. (PDS Version)
2 ************************************************************************
3 ** Copyright (C) 1987, Fujitsu LTD. (Itaru ICHIKAWA)
4 ** \e$BO"Mm@h!'\e(B \e$B!J3t!KIY;NDL8&5f=j!!%=%U%H#38&!!;T@n!!;j\e(B 
5 ** \e$B!J\e(BE-Mail Address: ichikawa@flab.fujitsu.co.jp\e$B!K\e(B
6 ** Copyright (C) 1996,1998
7 ** Copyright (C) 2002
8 ** \e$BO"Mm@h!'\e(B \e$BN05eBg3X>pJs9)3X2J\e(B \e$B2OLn\e(B \e$B??<#\e(B  mime/X0208 support
9 ** \e$B!J\e(BE-Mail Address: kono@ie.u-ryukyu.ac.jp\e$B!K\e(B
10 ** \e$BO"Mm@h!'\e(B COW for DOS & Win16 & Win32 & OS/2
11 ** \e$B!J\e(BE-Mail Address: GHG00637@niftyserve.or.p\e$B!K\e(B
12 **
13 **    \e$B$3$N%=!<%9$N$$$+$J$kJ#<L!$2~JQ!$=$@5$b5vBz$7$^$9!#$?$@$7!"\e(B
14 **    \e$B$=$N:]$K$O!"C/$,9W8%$7$?$r<($9$3$NItJ,$r;D$9$3$H!#\e(B
15 **    \e$B:FG[I[$d;(;o$NIUO?$J$I$NLd$$9g$o$;$bI,MW$"$j$^$;$s!#\e(B
16 **    \e$B1DMxMxMQ$b>e5-$KH?$7$J$$HO0O$G5v2D$7$^$9!#\e(B
17 **    \e$B%P%$%J%j$NG[I[$N:]$K$O\e(Bversion message\e$B$rJ]B8$9$k$3$H$r>r7o$H$7$^$9!#\e(B
18 **    \e$B$3$N%W%m%0%i%`$K$D$$$F$OFC$K2?$NJ]>Z$b$7$J$$!"0-$7$+$i$:!#\e(B
19 **
20 **    Everyone is permitted to do anything on this program 
21 **    including copying, modifying, improving,
22 **    as long as you don't try to pretend that you wrote it.
23 **    i.e., the above copyright notice has to appear in all copies.  
24 **    Binary distribution requires original version messages.
25 **    You don't have to ask before copying, redistribution or publishing.
26 **    THE AUTHOR DISCLAIMS ALL WARRANTIES WITH REGARD TO THIS SOFTWARE.
27 ***********************************************************************/
28
29 /***********************************************************************
30 ** UTF-8 \e$B%5%]!<%H$K$D$$$F\e(B
31 **    \e$B=>Mh$N\e(B nkf \e$B$HF~$l$+$($F$=$N$^$^;H$($k$h$&$K$J$C$F$$$^$9\e(B
32 **    nkf -e \e$B$J$I$H$7$F5/F0$9$k$H!"<+F0H=JL$G\e(B UTF-8 \e$B$HH=Dj$5$l$l$P!"\e(B
33 **    \e$B$=$N$^$^\e(B euc-jp \e$B$KJQ49$5$l$^$9\e(B
34 **
35 **    \e$B$^$@%P%0$,$"$k2DG=@-$,9b$$$G$9!#\e(B
36 **    (\e$BFC$K<+F0H=JL!"%3!<%I:.:_!"%(%i!<=hM}7O\e(B)
37 **
38 **    \e$B2?$+LdBj$r8+$D$1$?$i!"\e(B
39 **        E-Mail: furukawa@tcp-ip.or.jp
40 **    \e$B$^$G8fO"Mm$r$*4j$$$7$^$9!#\e(B
41 ***********************************************************************/
42 #include "config.h"
43
44 static char *CopyRight =
45       "Copyright (C) 1987, FUJITSU LTD. (I.Ichikawa),2000 S. Kono, COW, 2002-2003 Kono, Furukawa";
46 static char *Version =
47       "2.0";
48 static char *Patchlevel =
49       "3/0310/Shinji Kono";
50
51 /*
52 **
53 **
54 **
55 ** USAGE:       nkf [flags] [file] 
56 **
57 ** Flags:
58 ** b    Output is bufferred             (DEFAULT)
59 ** u    Output is unbufferred
60 **
61 ** t    no operation
62 **
63 ** j    Outout code is JIS 7 bit        (DEFAULT SELECT) 
64 ** s    Output code is MS Kanji         (DEFAULT SELECT) 
65 ** e    Output code is AT&T JIS         (DEFAULT SELECT) 
66 ** w    Output code is AT&T JIS         (DEFAULT SELECT) 
67 ** l    Output code is JIS 7bit and ISO8859-1 Latin-1
68 **
69 ** m    MIME conversion for ISO-2022-JP
70 ** I    Convert non ISO-2022-JP charactor to GETA by Pekoe <pekoe@lair.net>
71 ** i_ Output sequence to designate JIS-kanji (DEFAULT_J)
72 ** o_ Output sequence to designate single-byte roman characters (DEFAULT_R)
73 ** M    MIME output conversion 
74 **
75 ** r  {de/en}crypt ROT13/47
76 **
77 ** v  display Version
78 **
79 ** T  Text mode output        (for MS-DOS)
80 **
81 ** x    Do not convert X0201 kana into X0208
82 ** Z    Convert X0208 alphabet to ASCII
83 **
84 ** f60  fold option
85 **
86 ** m    MIME decode
87 ** B    try to fix broken JIS, missing Escape
88 ** B[1-9]  broken level
89 **
90 ** O   Output to 'nkf.out' file or last file name
91 ** d   Delete \r in line feed 
92 ** c   Add \r in line feed 
93 ** -- other long option
94 ** -- ignore following option (don't use with -O )
95 **
96 **/
97
98 #if (defined(__TURBOC__) || defined(_MSC_VER) || defined(LSI_C) || defined(__MINGW32__)) && !defined(MSDOS)
99 #define MSDOS
100 #if (defined(__Win32__) || defined(_WIN32)) && !defined(__WIN32__)
101 #define __WIN32__
102 #endif
103 #endif
104
105 #ifdef PERL_XS
106 #undef OVERWRITE
107 #endif
108
109 #ifndef PERL_XS
110 #include <stdio.h>
111 #endif
112
113 #if defined(MSDOS) || defined(__OS2__) 
114 #include <fcntl.h>
115 #include <io.h>
116 #endif
117
118 #ifdef MSDOS
119 #ifdef LSI_C
120 #define setbinmode(fp) fsetbin(fp)
121 #else /* Microsoft C, Turbo C */
122 #define setbinmode(fp) setmode(fileno(fp), O_BINARY)
123 #endif
124 #else /* UNIX,OS/2 */
125 #define setbinmode(fp)
126 #endif
127
128 #ifdef _IOFBF /* SysV and MSDOS, Windows */
129 #define       setvbuffer(fp, buf, size)       setvbuf(fp, buf, _IOFBF, size)
130 #else /* BSD */
131 #define       setvbuffer(fp, buf, size)       setbuffer(fp, buf, size)
132 #endif
133
134 /*Borland C++ 4.5 EasyWin*/
135 #if defined(__TURBOC__) && defined(_Windows) && !defined(__WIN32__) /*Easy Win */
136 #define         EASYWIN
137 #ifndef __WIN16__
138 #define __WIN16__
139 #endif
140 #include <windows.h>
141 #endif
142
143 #ifdef OVERWRITE
144 /* added by satoru@isoternet.org */
145 #include <stdlib.h>
146 #include <string.h>
147 #include <sys/stat.h>
148 #ifndef MSDOS /* UNIX, OS/2 */
149 #include <unistd.h>
150 #include <utime.h>
151 #else
152 #if defined(_MSC_VER) || defined(__MINGW32__) /* VC++, MinGW */
153 #include <sys/utime.h>
154 #elif defined(__TURBOC__) /* BCC */
155 #include <utime.h>
156 #elif defined(LSI_C) /* LSI C */
157 #endif
158 #endif
159 #endif 
160
161 #ifdef INT_IS_SHORT
162 #define int long
163 #endif
164
165 #define         FALSE   0
166 #define         TRUE    1
167
168 /* state of output_mode and input_mode  
169
170    c2           0 means ASCII
171                 X0201
172                 ISO8859_1
173                 X0208
174                 EOF      all termination
175    c1           32bit data
176
177  */
178
179 #define         ASCII           0
180 #define         X0208           1
181 #define         X0201           2
182 #define         ISO8859_1       8
183 #define         NO_X0201        3
184
185 /* Input Assumption */
186
187 #define         JIS_INPUT       4
188 #define         SJIS_INPUT      5
189 #define         LATIN1_INPUT    6
190 #define         FIXED_MIME      7
191 #define         STRICT_MIME     8
192
193 /* MIME ENCODE */
194
195 #define         ISO2022JP       9
196 #define         JAPANESE_EUC   10
197 #define         SHIFT_JIS      11
198
199 #define         UTF8           12
200 #define         UTF8_INPUT     13
201 #define         UTF16_INPUT    14
202 #define         UTF16BE_INPUT  15
203
204 #define         WISH_TRUE      15
205
206 /* ASCII CODE */
207
208 #define         BS      0x08
209 #define         NL      0x0a
210 #define         CR      0x0d
211 #define         ESC     0x1b
212 #define         SPACE   0x20
213 #define         AT      0x40
214 #define         SSP     0xa0
215 #define         DEL     0x7f
216 #define         SI      0x0f
217 #define         SO      0x0e
218 #define         SSO     0x8e
219
220 #define         is_alnum(c)  \
221             (('a'<=c && c<='z')||('A'<= c && c<='Z')||('0'<=c && c<='9'))
222
223 #define         HOLD_SIZE       1024
224 #define         IOBUF_SIZE      16384
225
226 #define         DEFAULT_J       'B'
227 #define         DEFAULT_R       'B'
228
229 #define         SJ0162  0x00e1          /* 01 - 62 ku offset */
230 #define         SJ6394  0x0161          /* 63 - 94 ku offset */
231
232 #define         RANGE_NUM_MAX   18
233 #define         GETA1   0x22
234 #define         GETA2   0x2e
235
236
237 #if defined( UTF8_OUTPUT_ENABLE ) || defined( UTF8_INPUT_ENABLE )
238 #define sizeof_euc_utf8 94
239 #define sizeof_euc_to_utf8_1byte 94
240 #define sizeof_euc_to_utf8_2bytes 94
241 #define sizeof_utf8_to_euc_C2 64
242 #define sizeof_utf8_to_euc_E5B8 64
243 #define sizeof_utf8_to_euc_2bytes 112
244 #define sizeof_utf8_to_euc_3bytes 112
245 #endif
246
247 /* MIME preprocessor */
248
249
250 #ifdef EASYWIN /*Easy Win */
251 extern POINT _BufferSize;
252 #endif
253
254 /*      function prototype  */
255
256 #ifdef ANSI_C_PROTOTYPE
257 #define PROTO(x)  x 
258 #define STATIC static
259 #else
260 #define PROTO(x)  ()
261 #define STATIC
262 #endif
263
264 struct input_code{
265     char *name;
266     int stat;
267     int score;
268     int index;
269     int buf[3];
270     void (*status_func)PROTO((struct input_code *, int));
271     int (*iconv_func)PROTO((int c2, int c1, int c0));
272     int _file_stat;
273 };
274
275 STATIC char *input_codename = "";
276
277 STATIC  int     noconvert PROTO((FILE *f));
278 STATIC  int     kanji_convert PROTO((FILE *f));
279 STATIC  int     h_conv PROTO((FILE *f,int c2,int c1));
280 STATIC  int     push_hold_buf PROTO((int c2));
281 STATIC  void    set_iconv PROTO((int f, int (*iconv_func)()));
282 STATIC  int     s_iconv PROTO((int c2,int c1,int c0));
283 STATIC  int     s2e_conv PROTO((int c2, int c1, int *p2, int *p1));
284 STATIC  int     e_iconv PROTO((int c2,int c1,int c0));
285 #ifdef UTF8_INPUT_ENABLE
286 STATIC  int     w2e_conv PROTO((int c2,int c1,int c0,int *p2,int *p1));
287 STATIC  int     w_iconv PROTO((int c2,int c1,int c0));
288 STATIC  int     w_iconv16 PROTO((int c2,int c1,int c0));
289 STATIC  int     w_iconv_common PROTO((int c1,int c0,unsigned short **pp,int psize,int *p2,int *p1));
290 STATIC  int     ww16_conv PROTO((int c2, int c1, int c0));
291 #endif
292 #ifdef UTF8_OUTPUT_ENABLE
293 STATIC  int     e2w_conv PROTO((int c2,int c1));
294 STATIC  void    w_oconv PROTO((int c2,int c1));
295 STATIC  void    w_oconv16 PROTO((int c2,int c1));
296 #endif
297 STATIC  void    e_oconv PROTO((int c2,int c1));
298 STATIC  void    e2s_conv PROTO((int c2, int c1, int *p2, int *p1));
299 STATIC  void    s_oconv PROTO((int c2,int c1));
300 STATIC  void    j_oconv PROTO((int c2,int c1));
301 STATIC  void    fold_conv PROTO((int c2,int c1));
302 STATIC  void    cr_conv PROTO((int c2,int c1));
303 STATIC  void    z_conv PROTO((int c2,int c1));
304 STATIC  void    rot_conv PROTO((int c2,int c1));
305 STATIC  void    hira_conv PROTO((int c2,int c1));
306 STATIC  void    base64_conv PROTO((int c2,int c1));
307 STATIC  void    iso2022jp_check_conv PROTO((int c2,int c1));
308 STATIC  void    no_connection PROTO((int c2,int c1));
309 STATIC  int     no_connection2 PROTO((int c2,int c1,int c0));
310
311 STATIC  void    code_score PROTO((struct input_code *ptr));
312 STATIC  void    code_status PROTO((int c));
313
314 STATIC  void    std_putc PROTO((int c));
315 STATIC  int     std_getc PROTO((FILE *f));
316 STATIC  int     std_ungetc PROTO((int c,FILE *f));
317
318 STATIC  int     broken_getc PROTO((FILE *f));
319 STATIC  int     broken_ungetc PROTO((int c,FILE *f));
320
321 STATIC  int     mime_begin PROTO((FILE *f));
322 STATIC  int     mime_getc PROTO((FILE *f));
323 STATIC  int     mime_ungetc PROTO((int c,FILE *f));
324
325 STATIC  int     mime_begin_strict PROTO((FILE *f));
326 STATIC  int     mime_getc_buf PROTO((FILE *f));
327 STATIC  int     mime_ungetc_buf  PROTO((int c,FILE *f));
328 STATIC  int     mime_integrity PROTO((FILE *f,unsigned char *p));
329
330 STATIC  int     base64decode PROTO((int c));
331 STATIC  void    mime_putc PROTO((int c));
332 STATIC  void    open_mime PROTO((int c));
333 STATIC  void    close_mime PROTO(());
334 STATIC  void    usage PROTO(());
335 STATIC  void    version PROTO(());
336 STATIC  void    options PROTO((unsigned char *c));
337 #ifdef PERL_XS
338 STATIC  void    reinit PROTO(());
339 #endif
340
341 /* buffers */
342
343 static unsigned char   stdibuf[IOBUF_SIZE];
344 static unsigned char   stdobuf[IOBUF_SIZE];
345 static unsigned char   hold_buf[HOLD_SIZE*2];
346 static int             hold_count;
347
348 /* MIME preprocessor fifo */
349
350 #define MIME_BUF_SIZE   (1024)    /* 2^n ring buffer */
351 #define MIME_BUF_MASK   (MIME_BUF_SIZE-1)   
352 #define Fifo(n)         mime_buf[(n)&MIME_BUF_MASK]
353 static unsigned char           mime_buf[MIME_BUF_SIZE];
354 static unsigned int            mime_top = 0;
355 static unsigned int            mime_last = 0;  /* decoded */
356 static unsigned int            mime_input = 0; /* undecoded */
357
358 /* flags */
359 static int             unbuf_f = FALSE;
360 static int             estab_f = FALSE;
361 static int             nop_f = FALSE;
362 static int             binmode_f = TRUE;       /* binary mode */
363 static int             rot_f = FALSE;          /* rot14/43 mode */
364 static int             hira_f = FALSE;          /* hira/kata henkan */
365 static int             input_f = FALSE;        /* non fixed input code  */
366 static int             alpha_f = FALSE;        /* convert JIx0208 alphbet to ASCII */
367 static int             mime_f = STRICT_MIME;   /* convert MIME B base64 or Q */
368 static int             mimebuf_f = FALSE;      /* MIME buffered input */
369 static int             broken_f = FALSE;       /* convert ESC-less broken JIS */
370 static int             iso8859_f = FALSE;      /* ISO8859 through */
371 static int             mimeout_f = FALSE;       /* base64 mode */
372 #if defined(MSDOS) || defined(__OS2__) 
373 static int             x0201_f = TRUE;         /* Assume JISX0201 kana */
374 #else
375 static int             x0201_f = NO_X0201;     /* Assume NO JISX0201 */
376 #endif
377 static int             iso2022jp_f = FALSE;    /* convert ISO-2022-JP */
378 #ifdef UTF8_OUTPUT_ENABLE
379 static int             w_oconv16_begin_f= 0;   /* utf-16 header */
380 static int             w_oconv16_LE = 0;   /* utf-16 little endian */
381 #endif
382
383
384 #ifdef NUMCHAR_OPTION
385
386 #define CLASS_MASK  0x0f000000
387 #define CLASS_UTF16 0x01000000
388 #endif
389
390 #ifdef INPUT_OPTION
391 static int cap_f = FALSE;
392 static int (*i_cgetc)PROTO((FILE *)) = std_getc; /* input of cgetc */
393 static int (*i_cungetc)PROTO((int c ,FILE *f)) = std_ungetc;
394 STATIC int cap_getc PROTO((FILE *f));
395 STATIC int cap_ungetc PROTO((int c,FILE *f));
396
397 static int url_f = FALSE;
398 static int (*i_ugetc)PROTO((FILE *)) = std_getc; /* input of ugetc */
399 static int (*i_uungetc)PROTO((int c ,FILE *f)) = std_ungetc;
400 STATIC int url_getc PROTO((FILE *f));
401 STATIC int url_ungetc PROTO((int c,FILE *f));
402
403 static int numchar_f = FALSE;
404 static int (*i_ngetc)PROTO((FILE *)) = std_getc; /* input of ugetc */
405 static int (*i_nungetc)PROTO((int c ,FILE *f)) = std_ungetc;
406 STATIC int numchar_getc PROTO((FILE *f));
407 STATIC int numchar_ungetc PROTO((int c,FILE *f));
408 #endif
409
410 #ifdef CHECK_OPTION
411 static int noout_f = FALSE;
412 STATIC void no_putc PROTO((int c));
413 static int debug_f = FALSE;
414 STATIC void debug PROTO((char *str));
415 #endif
416
417 #ifdef EXEC_IO
418 static int exec_f = 0;
419 #endif
420
421 #ifdef SHIFTJIS_CP932
422 STATIC int cp932_f = TRUE;
423 #define CP932_TABLE_BEGIN (0xfa)
424 #define CP932_TABLE_END   (0xfc)
425
426 #endif /* SHIFTJIS_CP932 */
427
428 STATIC void e_status PROTO((struct input_code *, int));
429 STATIC void s_status PROTO((struct input_code *, int));
430
431 #ifdef UTF8_INPUT_ENABLE
432 STATIC void w_status PROTO((struct input_code *, int));
433 STATIC void w16_status PROTO((struct input_code *, int));
434 static int             utf16_mode = UTF16_INPUT;
435 #endif
436
437 struct input_code input_code_list[] = {
438     {"EUC-JP",    0, 0, 0, {0, 0, 0}, e_status, e_iconv, 0},
439     {"Shift_JIS", 0, 0, 0, {0, 0, 0}, s_status, s_iconv, 0},
440     {"UTF-8",     0, 0, 0, {0, 0, 0}, w_status, w_iconv, 0},
441     {"UTF-16",    0, 0, 0, {0, 0, 0}, w16_status, w_iconv16, 0},
442     {0}
443 };
444
445 static int              mimeout_mode = 0;
446 static int              base64_count = 0;
447
448 /* X0208 -> ASCII converter */
449
450 /* fold parameter */
451 static int             f_line = 0;    /* chars in line */
452 static int             f_prev = 0;
453 static int             fold_preserve_f = FALSE; /* preserve new lines */
454 static int             fold_f  = FALSE;
455 static int             fold_len  = 0;
456
457 /* options */
458 static unsigned char   kanji_intro = DEFAULT_J,
459                        ascii_intro = DEFAULT_R;
460
461 /* Folding */
462
463 #define FOLD_MARGIN  10
464 #define DEFAULT_FOLD 60
465
466 static int             fold_margin  = FOLD_MARGIN;
467
468 /* converters */
469
470 #ifdef DEFAULT_CODE_JIS
471 #   define  DEFAULT_CONV j_oconv
472 #endif
473 #ifdef DEFAULT_CODE_SJIS
474 #   define  DEFAULT_CONV s_oconv
475 #endif
476 #ifdef DEFAULT_CODE_EUC
477 #   define  DEFAULT_CONV e_oconv
478 #endif
479 #ifdef DEFAULT_CODE_UTF8
480 #   define  DEFAULT_CONV w_oconv
481 #endif
482
483 /* process default */
484 static void (*output_conv)PROTO((int c2,int c1)) = DEFAULT_CONV;   
485
486 static void (*oconv)PROTO((int c2,int c1)) = no_connection; 
487 /* s_iconv or oconv */
488 static int (*iconv)PROTO((int c2,int c1,int c0)) = no_connection2;   
489
490 static void (*o_zconv)PROTO((int c2,int c1)) = no_connection; 
491 static void (*o_fconv)PROTO((int c2,int c1)) = no_connection; 
492 static void (*o_crconv)PROTO((int c2,int c1)) = no_connection; 
493 static void (*o_rot_conv)PROTO((int c2,int c1)) = no_connection; 
494 static void (*o_hira_conv)PROTO((int c2,int c1)) = no_connection; 
495 static void (*o_base64conv)PROTO((int c2,int c1)) = no_connection;
496 static void (*o_iso2022jp_check_conv)PROTO((int c2,int c1)) = no_connection;
497
498 /* static redirections */
499
500 static  void   (*o_putc)PROTO((int c)) = std_putc;
501
502 static  int    (*i_getc)PROTO((FILE *f)) = std_getc; /* general input */
503 static  int    (*i_ungetc)PROTO((int c,FILE *f)) =std_ungetc;
504
505 static  int    (*i_bgetc)PROTO((FILE *)) = std_getc; /* input of mgetc */
506 static  int    (*i_bungetc)PROTO((int c ,FILE *f)) = std_ungetc;
507
508 static  void   (*o_mputc)PROTO((int c)) = std_putc ; /* output of mputc */
509
510 static  int    (*i_mgetc)PROTO((FILE *)) = std_getc; /* input of mgetc */
511 static  int    (*i_mungetc)PROTO((int c ,FILE *f)) = std_ungetc;
512
513 /* for strict mime */
514 static  int    (*i_mgetc_buf)PROTO((FILE *)) = std_getc; /* input of mgetc_buf */
515 static  int    (*i_mungetc_buf)PROTO((int c,FILE *f)) = std_ungetc;
516
517 /* Global states */
518 static int output_mode = ASCII,    /* output kanji mode */
519            input_mode =  ASCII,    /* input kanji mode */
520            shift_mode =  FALSE;    /* TRUE shift out, or X0201  */
521 static int mime_decode_mode =   FALSE;    /* MIME mode B base64, Q hex */
522
523 /* X0201 / X0208 conversion tables */
524
525 /* X0201 kana conversion table */
526 /* 90-9F A0-DF */
527 static
528 unsigned char cv[]= {
529     0x21,0x21,0x21,0x23,0x21,0x56,0x21,0x57,
530     0x21,0x22,0x21,0x26,0x25,0x72,0x25,0x21,
531     0x25,0x23,0x25,0x25,0x25,0x27,0x25,0x29,
532     0x25,0x63,0x25,0x65,0x25,0x67,0x25,0x43,
533     0x21,0x3c,0x25,0x22,0x25,0x24,0x25,0x26,
534     0x25,0x28,0x25,0x2a,0x25,0x2b,0x25,0x2d,
535     0x25,0x2f,0x25,0x31,0x25,0x33,0x25,0x35,
536     0x25,0x37,0x25,0x39,0x25,0x3b,0x25,0x3d,
537     0x25,0x3f,0x25,0x41,0x25,0x44,0x25,0x46,
538     0x25,0x48,0x25,0x4a,0x25,0x4b,0x25,0x4c,
539     0x25,0x4d,0x25,0x4e,0x25,0x4f,0x25,0x52,
540     0x25,0x55,0x25,0x58,0x25,0x5b,0x25,0x5e,
541     0x25,0x5f,0x25,0x60,0x25,0x61,0x25,0x62,
542     0x25,0x64,0x25,0x66,0x25,0x68,0x25,0x69,
543     0x25,0x6a,0x25,0x6b,0x25,0x6c,0x25,0x6d,
544     0x25,0x6f,0x25,0x73,0x21,0x2b,0x21,0x2c,
545     0x00,0x00};
546
547
548 /* X0201 kana conversion table for daguten */
549 /* 90-9F A0-DF */
550 static
551 unsigned char dv[]= { 
552     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
553     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
554     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
555     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
556     0x00,0x00,0x00,0x00,0x00,0x00,0x25,0x74,
557     0x00,0x00,0x00,0x00,0x25,0x2c,0x25,0x2e,
558     0x25,0x30,0x25,0x32,0x25,0x34,0x25,0x36,
559     0x25,0x38,0x25,0x3a,0x25,0x3c,0x25,0x3e,
560     0x25,0x40,0x25,0x42,0x25,0x45,0x25,0x47,
561     0x25,0x49,0x00,0x00,0x00,0x00,0x00,0x00,
562     0x00,0x00,0x00,0x00,0x25,0x50,0x25,0x53,
563     0x25,0x56,0x25,0x59,0x25,0x5c,0x00,0x00,
564     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
565     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
566     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
567     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
568     0x00,0x00};
569
570 /* X0201 kana conversion table for han-daguten */
571 /* 90-9F A0-DF */
572 static
573 unsigned char ev[]= { 
574     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
575     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
576     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
577     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
578     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
579     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
580     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
581     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
582     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
583     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
584     0x00,0x00,0x00,0x00,0x25,0x51,0x25,0x54,
585     0x25,0x57,0x25,0x5a,0x25,0x5d,0x00,0x00,
586     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
587     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
588     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
589     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
590     0x00,0x00};
591
592
593 /* X0208 kigou conversion table */
594 /* 0x8140 - 0x819e */
595 static
596 unsigned char fv[] = {
597
598     0x00,0x00,0x00,0x00,0x2c,0x2e,0x00,0x3a,
599     0x3b,0x3f,0x21,0x00,0x00,0x27,0x60,0x00,
600     0x5e,0x00,0x5f,0x00,0x00,0x00,0x00,0x00,
601     0x00,0x00,0x00,0x00,0x00,0x2d,0x00,0x2f,
602     0x5c,0x00,0x00,0x7c,0x00,0x00,0x60,0x27,
603     0x22,0x22,0x28,0x29,0x00,0x00,0x5b,0x5d,
604     0x7b,0x7d,0x3c,0x3e,0x00,0x00,0x00,0x00,
605     0x00,0x00,0x00,0x00,0x2b,0x2d,0x00,0x00,
606     0x00,0x3d,0x00,0x3c,0x3e,0x00,0x00,0x00,
607     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00,
608     0x24,0x00,0x00,0x25,0x23,0x26,0x2a,0x40,
609     0x00,0x00,0x00,0x00,0x00,0x00,0x00,0x00
610 } ;
611
612
613 #define    CRLF      1
614
615 static int             file_out = FALSE;
616 #ifdef OVERWRITE
617 static int             overwrite = FALSE;
618 #endif
619
620 static int             crmode_f = 0;   /* CR, NL, CRLF */
621 #ifdef EASYWIN /*Easy Win */
622 static int             end_check;
623 #endif /*Easy Win */
624
625 #ifndef PERL_XS
626 int
627 main(argc, argv)
628     int             argc;
629     char          **argv;
630 {
631     FILE  *fin;
632     unsigned char  *cp;
633
634     char *outfname;
635     char *origfname;
636
637 #ifdef EASYWIN /*Easy Win */
638     _BufferSize.y = 400;/*Set Scroll Buffer Size*/
639 #endif
640
641     for (argc--,argv++; (argc > 0) && **argv == '-'; argc--, argv++) {
642         cp = (unsigned char *)*argv;
643         options(cp);
644 #ifdef EXEC_IO
645         if (exec_f){
646             int fds[2], pid;
647             if (pipe(fds) < 0 || (pid = fork()) < 0){
648                 abort();
649             }
650             if (pid == 0){
651                 if (exec_f > 0){
652                     close(fds[0]);
653                     dup2(fds[1], 1);
654                 }else{
655                     close(fds[1]);
656                     dup2(fds[0], 0);
657                 }
658                 execvp(argv[1], &argv[1]);
659             }
660             if (exec_f > 0){
661                 close(fds[1]);
662                 dup2(fds[0], 0);
663             }else{
664                 close(fds[0]);
665                 dup2(fds[1], 1);
666             }
667             argc = 0;
668             break;
669         }
670 #endif
671     }
672     if(x0201_f == WISH_TRUE)
673          x0201_f = ((!iso2022jp_f)? TRUE : NO_X0201);
674
675     if (binmode_f == TRUE)
676 #ifdef __OS2__
677     if (freopen("","wb",stdout) == NULL) 
678         return (-1);
679 #else
680     setbinmode(stdout);
681 #endif
682
683     if (unbuf_f)
684       setbuf(stdout, (char *) NULL);
685     else
686       setvbuffer(stdout, stdobuf, IOBUF_SIZE);
687
688     if (argc == 0) {
689       if (binmode_f == TRUE)
690 #ifdef __OS2__
691       if (freopen("","rb",stdin) == NULL) return (-1);
692 #else
693       setbinmode(stdin);
694 #endif
695       setvbuffer(stdin, stdibuf, IOBUF_SIZE);
696       if (nop_f)
697           noconvert(stdin);
698       else
699           kanji_convert(stdin);
700     } else {
701       while (argc--) {
702           if ((fin = fopen((origfname = *argv++), "r")) == NULL) {
703               perror(*--argv);
704               return(-1);
705           } else {
706 #ifdef OVERWRITE
707               int fd;
708               int fd_backup;
709 #endif
710
711 /* reopen file for stdout */
712               if (file_out == TRUE) {
713 #ifdef OVERWRITE
714                   if (overwrite){
715                       outfname = malloc(strlen(origfname)
716                                         + strlen(".nkftmpXXXXXX")
717                                         + 1);
718                       if (!outfname){
719                           perror(origfname);
720                           return -1;
721                       }
722                       strcpy(outfname, origfname);
723 #ifdef MSDOS
724                       {
725                           int i;
726                           for (i = strlen(outfname); i; --i){
727                               if (outfname[i - 1] == '/'
728                                   || outfname[i - 1] == '\\'){
729                                   break;
730                               }
731                           }
732                           outfname[i] = '\0';
733                       }
734                       strcat(outfname, "ntXXXXXX");
735                       mktemp(outfname);
736                       fd = open(outfname, O_WRONLY | O_CREAT | O_TRUNC,
737                                 S_IREAD | S_IWRITE);
738 #else
739                       strcat(outfname, ".nkftmpXXXXXX");
740                       fd = mkstemp(outfname);
741 #endif
742                       if (fd < 0
743                           || (fd_backup = dup(fileno(stdout))) < 0
744                           || dup2(fd, fileno(stdout)) < 0
745                           ){
746                           perror(origfname);
747                           return -1;
748                       }
749                   }else
750 #endif
751                   if(argc == 1 ) {
752                       outfname = *argv++;
753                       argc--;
754                   } else {
755                       outfname = "nkf.out";
756                   }
757
758                   if(freopen(outfname, "w", stdout) == NULL) {
759                       perror (outfname);
760                       return (-1);
761                   }
762                   if (binmode_f == TRUE) {
763 #ifdef __OS2__
764                       if (freopen("","wb",stdout) == NULL) 
765                            return (-1);
766 #else
767                       setbinmode(stdout);
768 #endif
769                   }
770               }
771               if (binmode_f == TRUE)
772 #ifdef __OS2__
773                  if (freopen("","rb",fin) == NULL) 
774                     return (-1);
775 #else
776                  setbinmode(fin);
777 #endif 
778               setvbuffer(fin, stdibuf, IOBUF_SIZE);
779               if (nop_f)
780                   noconvert(fin);
781               else
782                   kanji_convert(fin);
783               fclose(fin);
784 #ifdef OVERWRITE
785               if (overwrite) {
786                   struct stat     sb;
787 #if defined(MSDOS) && !defined(__MINGW32__)
788                   time_t tb[2];
789 #else
790                   struct utimbuf  tb;
791 #endif
792
793                   fflush(stdout);
794                   close(fd);
795                   if (dup2(fd_backup, fileno(stdout)) < 0){
796                       perror("dup2");
797                   }
798                   if (stat(origfname, &sb)) {
799                       fprintf(stderr, "Can't stat %s\n", origfname);
800                   }
801                   /* \e$B%Q!<%_%C%7%g%s$rI|85\e(B */
802                   if (chmod(outfname, sb.st_mode)) {
803                       fprintf(stderr, "Can't set permission %s\n", outfname);
804                   }
805
806                   /* \e$B%?%$%`%9%?%s%W$rI|85\e(B */
807 #if defined(MSDOS) && !defined(__MINGW32__)
808                   tb[0] = tb[1] = sb.st_mtime;
809                   if (utime(outfname, tb)) {
810                       fprintf(stderr, "Can't set timestamp %s\n", outfname);
811                   }
812 #else
813                   tb.actime  = sb.st_atime;
814                   tb.modtime = sb.st_mtime;
815                   if (utime(outfname, &tb)) {
816                       fprintf(stderr, "Can't set timestamp %s\n", outfname);
817                   }
818 #endif
819 #ifdef MSDOS
820                   if (unlink(origfname)){
821                       perror(origfname);
822                   }
823 #endif
824                   if (rename(outfname, origfname)) {
825                       perror(origfname);
826                       fprintf(stderr, "Can't rename %s to %s\n",
827                               outfname, origfname);
828                   }
829                   free(outfname);
830               }
831 #endif
832           }
833       }
834     }
835 #ifdef EASYWIN /*Easy Win */
836     if (file_out == FALSE) 
837         scanf("%d",&end_check);
838     else 
839         fclose(stdout);
840 #else /* for Other OS */
841     if (file_out == TRUE) 
842         fclose(stdout);
843 #endif 
844     return (0);
845 }
846 #endif
847
848 static 
849 struct {
850     char *name;
851     char *alias;
852 } long_option[] = {
853     {"base64","jMB"},
854     {"euc","e"},
855     {"euc-input","E"},
856     {"fj","jm"},
857     {"help","v"},
858     {"jis","j"},
859     {"jis-input","J"},
860     {"mac","sLm"},
861     {"mime","jM"},
862     {"mime-input","m"},
863     {"msdos","sLw"},
864     {"sjis","s"},
865     {"sjis-input","S"},
866     {"unix","eLu"},
867     {"version","V"},
868     {"windows","sLw"},
869     {"hiragana","h1"},
870     {"katakana","h2"},
871     {"katakana-hiragana","h3"},
872 #ifdef UTF8_OUTPUT_ENABLE
873     {"utf8", "w"},
874     {"utf16", "w16"},
875 #endif
876 #ifdef UTF8_INPUT_ENABLE
877     {"utf8-input", "W"},
878     {"utf16-input", "W16"},
879 #endif
880 #ifdef OVERWRITE
881     {"overwrite", ""},
882 #endif
883 #ifdef INPUT_OPTION
884     {"cap-input", ""},
885     {"url-input", ""},
886 #endif
887 #ifdef NUMCHAR_OPTION
888     {"numchar-input", ""},
889 #endif
890 #ifdef CHECK_OPTION
891     {"no-output", ""},
892     {"debug", ""},
893 #endif
894 #ifdef SHIFTJIS_CP932
895     {"no-cp932", ""},
896 #endif
897 #ifdef EXEC_IO
898     {"exec-in", ""},
899     {"exec-out", ""},
900 #endif
901 };
902
903 static int option_mode;
904
905 void
906 options(cp) 
907      unsigned char *cp;
908 {
909     int i;
910     unsigned char *p;
911
912     if (option_mode==1)
913         return;
914     if (*cp++ != '-') 
915         return;
916     while (*cp) {
917         switch (*cp++) {
918         case '-':  /* literal options */
919             if (!*cp) {        /* ignore the rest of arguments */
920                 option_mode = 1;
921                 return;
922             }
923             for (i=0;i<sizeof(long_option)/sizeof(long_option[0]);i++) {
924                 int j;
925                 p = (unsigned char *)long_option[i].name;
926                 for (j=0;*p && *p++ == cp[j];j++);
927                 if (! *p && !cp[j]) break;
928             }
929             if (*p) return;
930             cp = (unsigned char *)long_option[i].alias;
931             if (!*cp){
932 #ifdef OVERWRITE
933                 if (strcmp(long_option[i].name, "overwrite") == 0){
934                     file_out = TRUE;
935                     overwrite = TRUE;
936                     continue;
937                 }
938 #endif
939 #ifdef INPUT_OPTION
940                 if (strcmp(long_option[i].name, "cap-input") == 0){
941                     cap_f = TRUE;
942                     continue;
943                 }
944                 if (strcmp(long_option[i].name, "url-input") == 0){
945                     url_f = TRUE;
946                     continue;
947                 }
948 #endif
949 #ifdef NUMCHAR_OPTION
950                 if (strcmp(long_option[i].name, "numchar-input") == 0){
951                     numchar_f = TRUE;
952                     continue;
953                 }
954 #endif
955 #ifdef CHECK_OPTION
956                 if (strcmp(long_option[i].name, "no-output") == 0){
957                     noout_f = TRUE;
958                     continue;
959                 }
960                 if (strcmp(long_option[i].name, "debug") == 0){
961                     debug_f = TRUE;
962                     continue;
963                 }
964 #endif
965 #ifdef SHIFTJIS_CP932
966                 if (strcmp(long_option[i].name, "no-cp932") == 0){
967                     cp932_f = FALSE;
968                     continue;
969                 }
970 #endif
971 #ifdef EXEC_IO
972                   if (strcmp(long_option[i].name, "exec-in") == 0){
973                       exec_f = 1;
974                       return;
975                   }
976                   if (strcmp(long_option[i].name, "exec-out") == 0){
977                       exec_f = -1;
978                       return;
979                   }
980 #endif
981             }
982             continue;
983         case 'b':           /* buffered mode */
984             unbuf_f = FALSE;
985             continue;
986         case 'u':           /* non bufferd mode */
987             unbuf_f = TRUE;
988             continue;
989         case 't':           /* transparent mode */
990             nop_f = TRUE;
991             continue;
992         case 'j':           /* JIS output */
993         case 'n':
994             output_conv = j_oconv;
995             continue;
996         case 'e':           /* AT&T EUC output */
997             output_conv = e_oconv;
998             continue;
999         case 's':           /* SJIS output */
1000             output_conv = s_oconv;
1001             continue;
1002         case 'l':           /* ISO8859 Latin-1 support, no conversion */
1003             iso8859_f = TRUE;  /* Only compatible with ISO-2022-JP */
1004             input_f = LATIN1_INPUT;
1005             continue;
1006         case 'i':           /* Kanji IN ESC-$-@/B */
1007             if (*cp=='@'||*cp=='B') 
1008                 kanji_intro = *cp++;
1009             continue;
1010         case 'o':           /* ASCII IN ESC-(-J/B */
1011             if (*cp=='J'||*cp=='B'||*cp=='H') 
1012                 ascii_intro = *cp++;
1013             continue;
1014         case 'h':
1015             /*  
1016                 bit:1   hira -> kata
1017                 bit:2   kata -> hira
1018             */
1019             if ('9'>= *cp && *cp>='0') 
1020                 hira_f |= (*cp++ -'0');
1021             else 
1022                 hira_f |= 1;
1023             continue;
1024         case 'r':
1025             rot_f = TRUE;
1026             continue;
1027 #if defined(MSDOS) || defined(__OS2__) 
1028         case 'T':
1029             binmode_f = FALSE;
1030             continue;
1031 #endif
1032 #ifndef PERL_XS
1033         case 'V':
1034             version();
1035             exit(1);
1036             break;
1037         case 'v':
1038             usage();
1039             exit(1);
1040             break;
1041 #endif
1042 #ifdef UTF8_OUTPUT_ENABLE
1043         case 'w':           /* UTF-8 output */
1044             if ('1'== cp[0] && '6'==cp[1]) {
1045                 output_conv = w_oconv16; cp+=2;
1046                 if (cp[0]=='L') {
1047                     w_oconv16_begin_f=2; cp++;
1048                     w_oconv16_LE = 1;
1049                     if (cp[0] == '0'){
1050                         w_oconv16_begin_f=1; cp++;
1051                     }
1052                 } else if (cp[0] == 'B') {
1053                     w_oconv16_begin_f=2; cp++;
1054                     if (cp[0] == '0'){
1055                         w_oconv16_begin_f=1; cp++;
1056                     }
1057                 }
1058             } else
1059                 output_conv = w_oconv;
1060             continue;
1061 #endif
1062 #ifdef UTF8_INPUT_ENABLE
1063         case 'W':           /* UTF-8 input */
1064             if ('1'== cp[0] && '6'==cp[1]) {
1065                 input_f = UTF16_INPUT;
1066             } else
1067                 input_f = UTF8_INPUT;
1068             continue;
1069 #endif
1070         /* Input code assumption */
1071         case 'J':   /* JIS input */
1072         case 'E':   /* AT&T EUC input */
1073             input_f = JIS_INPUT;
1074             continue;
1075         case 'S':   /* MS Kanji input */
1076             input_f = SJIS_INPUT;
1077             if (x0201_f==NO_X0201) x0201_f=TRUE;
1078             continue;
1079         case 'Z':   /* Convert X0208 alphabet to asii */
1080             /*  bit:0   Convert X0208
1081                 bit:1   Convert Kankaku to one space
1082                 bit:2   Convert Kankaku to two spaces
1083                 bit:3   Convert HTML Entity
1084             */
1085             if ('9'>= *cp && *cp>='0') 
1086                 alpha_f |= 1<<(*cp++ -'0');
1087             else 
1088                 alpha_f |= TRUE;
1089             continue;
1090         case 'x':   /* Convert X0201 kana to X0208 or X0201 Conversion */
1091             x0201_f = FALSE;    /* No X0201->X0208 conversion */
1092             /* accept  X0201
1093                     ESC-(-I     in JIS, EUC, MS Kanji
1094                     SI/SO       in JIS, EUC, MS Kanji
1095                     SSO         in EUC, JIS, not in MS Kanji
1096                     MS Kanji (0xa0-0xdf) 
1097                output  X0201
1098                     ESC-(-I     in JIS (0x20-0x5f)
1099                     SSO         in EUC (0xa0-0xdf)
1100                     0xa0-0xd    in MS Kanji (0xa0-0xdf) 
1101             */
1102             continue;
1103         case 'X':   /* Assume X0201 kana */
1104             /* Default value is NO_X0201 for EUC/MS-Kanji mix */
1105             x0201_f = TRUE;
1106             continue;
1107         case 'F':   /* prserve new lines */
1108             fold_preserve_f = TRUE;
1109         case 'f':   /* folding -f60 or -f */
1110             fold_f = TRUE;
1111             fold_len = 0;
1112             while('0'<= *cp && *cp <='9') { /* we don't use atoi here */
1113                 fold_len *= 10;
1114                 fold_len += *cp++ - '0';
1115             }
1116             if (!(0<fold_len && fold_len<BUFSIZ)) 
1117                 fold_len = DEFAULT_FOLD;
1118             if (*cp=='-') {
1119                 fold_margin = 0;
1120                 cp++;
1121                 while('0'<= *cp && *cp <='9') { /* we don't use atoi here */
1122                     fold_margin *= 10;
1123                     fold_margin += *cp++ - '0';
1124                 }
1125             }
1126             continue;
1127         case 'm':   /* MIME support */
1128             if (*cp=='B'||*cp=='Q') {
1129                 mime_decode_mode = *cp++;
1130                 mimebuf_f = FIXED_MIME;
1131             } else if (*cp=='N') {
1132                 mime_f = TRUE; cp++;
1133             } else if (*cp=='S') {
1134                 mime_f = STRICT_MIME; cp++;
1135             } else if (*cp=='0') {
1136                 mime_f = FALSE; cp++;
1137             }
1138             continue;
1139         case 'M':   /* MIME output */
1140             if (*cp=='B') {
1141                 mimeout_mode = 'B';
1142                 mimeout_f = FIXED_MIME; cp++;
1143             } else if (*cp=='Q') {
1144                 mimeout_mode = 'Q';
1145                 mimeout_f = FIXED_MIME; cp++;
1146             } else {
1147                 mimeout_f = TRUE;
1148             }
1149             continue;
1150         case 'B':   /* Broken JIS support */
1151             /*  bit:0   no ESC JIS
1152                 bit:1   allow any x on ESC-(-x or ESC-$-x
1153                 bit:2   reset to ascii on NL
1154             */
1155             if ('9'>= *cp && *cp>='0') 
1156                 broken_f |= 1<<(*cp++ -'0');
1157             else 
1158                 broken_f |= TRUE;
1159             continue;
1160 #ifndef PERL_XS
1161         case 'O':/* for Output file */
1162             file_out = TRUE;
1163             continue;
1164 #endif
1165         case 'c':/* add cr code */
1166             crmode_f = CRLF;
1167             continue;
1168         case 'd':/* delete cr code */
1169             crmode_f = NL;
1170             continue;
1171         case 'I':   /* ISO-2022-JP output */
1172             iso2022jp_f = TRUE;
1173             continue;
1174         case 'L':  /* line mode */
1175             if (*cp=='u') {         /* unix */
1176                 crmode_f = NL; cp++;
1177             } else if (*cp=='m') { /* mac */
1178                 crmode_f = CR; cp++;
1179             } else if (*cp=='w') { /* windows */
1180                 crmode_f = CRLF; cp++;
1181             } else if (*cp=='0') { /* no conversion  */
1182                 crmode_f = 0; cp++;
1183             }
1184             continue;
1185         case ' ':    
1186         /* module muliple options in a string are allowed for Perl moudle  */
1187             while(*cp && *cp!='-') cp++;
1188             if(*cp=='-') cp++;
1189             continue;
1190         default:
1191             /* bogus option but ignored */
1192             continue;
1193         }
1194     }
1195 }
1196
1197 #ifdef ANSI_C_PROTOTYPE
1198 struct input_code * find_inputcode_byfunc(int (*iconv_func)(int c2,int c1,int c0))
1199 #else
1200 struct input_code * find_inputcode_byfunc(iconv_func)
1201      int (*iconv_func)();
1202 #endif
1203 {
1204     if (iconv_func){
1205         struct input_code *p = input_code_list;
1206         while (p->name){
1207             if (iconv_func == p->iconv_func){
1208                 return p;
1209             }
1210             p++;
1211         }
1212     }
1213     return 0;
1214 }
1215
1216 #ifdef ANSI_C_PROTOTYPE
1217 void set_iconv(int f, int (*iconv_func)(int c2,int c1,int c0))
1218 #else
1219 void set_iconv(f, iconv_func)
1220      int f;
1221      int (*iconv_func)();
1222 #endif
1223 {
1224 #ifdef CHECK_OPTION
1225     static int (*iconv_for_check)() = 0;
1226 #endif
1227 #ifdef INPUT_CODE_FIX
1228     if (f || !input_f)
1229 #endif
1230         if (estab_f != f){
1231             estab_f = f;
1232         }
1233
1234     if (iconv_func
1235 #ifdef INPUT_CODE_FIX
1236         && (f == -TRUE || !input_f) /* -TRUE means "FORCE" */
1237 #endif
1238         ){
1239         iconv = iconv_func;
1240     }
1241 #ifdef CHECK_OPTION
1242     if (estab_f && iconv_for_check != iconv){
1243         struct input_code *p = find_inputcode_byfunc(iconv);
1244         if (p){
1245             debug(input_codename = p->name);
1246         }
1247         iconv_for_check = iconv;
1248     }
1249 #endif
1250 }
1251
1252 #define SCORE_L2       (1)                   /* \e$BBh\e(B2\e$B?e=`4A;z\e(B */
1253 #define SCORE_KANA     (SCORE_L2 << 1)       /* \e$B$$$o$f$kH>3Q%+%J\e(B */
1254 #define SCORE_DEPEND   (SCORE_KANA << 1)     /* \e$B5!<o0MB8J8;z\e(B */
1255 #ifdef SHIFTJIS_CP932
1256 #define SCORE_CP932    (SCORE_DEPEND << 1)   /* CP932 \e$B$K$h$kFI$_49$(\e(B */
1257 #define SCORE_NO_EXIST (SCORE_CP932 << 1)    /* \e$BB8:_$7$J$$J8;z\e(B */
1258 #else
1259 #define SCORE_NO_EXIST (SCORE_DEPEND << 1)   /* \e$BB8:_$7$J$$J8;z\e(B */
1260 #endif
1261 #define SCORE_iMIME    (SCORE_NO_EXIST << 1) /* MIME \e$B$K$h$k;XDj\e(B */
1262 #define SCORE_ERROR    (SCORE_iMIME << 1) /* \e$B%(%i!<\e(B */
1263
1264 #define SCORE_INIT (SCORE_iMIME)
1265
1266 int score_table_A0[] = {
1267     0, 0, 0, 0,
1268     0, 0, 0, 0,
1269     0, SCORE_DEPEND, SCORE_DEPEND, SCORE_DEPEND,
1270     SCORE_DEPEND, SCORE_DEPEND, SCORE_DEPEND, SCORE_NO_EXIST,
1271 };
1272
1273 int score_table_F0[] = {
1274     SCORE_L2, SCORE_L2, SCORE_L2, SCORE_L2,
1275     SCORE_L2, SCORE_DEPEND, SCORE_NO_EXIST, SCORE_NO_EXIST,
1276     SCORE_DEPEND, SCORE_DEPEND, SCORE_DEPEND, SCORE_DEPEND,
1277     SCORE_DEPEND, SCORE_NO_EXIST, SCORE_NO_EXIST, SCORE_ERROR,
1278 };
1279
1280 void set_code_score(ptr, score)
1281      struct input_code *ptr;
1282      int score;
1283 {
1284     if (ptr){
1285         ptr->score |= score;
1286     }
1287 }
1288
1289 void clr_code_score(ptr, score)
1290      struct input_code *ptr;
1291      int score;
1292 {
1293     if (ptr){
1294         ptr->score &= ~score;
1295     }
1296 }
1297
1298 void code_score(ptr)
1299      struct input_code *ptr;
1300 {
1301     int c2 = ptr->buf[0];
1302     int c1 = ptr->buf[1];
1303     if (c2 < 0){
1304         set_code_score(ptr, SCORE_ERROR);
1305     }else if (c2 == SSO){
1306         set_code_score(ptr, SCORE_KANA);
1307 #ifdef UTF8_OUTPUT_ENABLE
1308     }else if (!e2w_conv(c2, c1)){
1309         set_code_score(ptr, SCORE_NO_EXIST);
1310 #endif
1311     }else if ((c2 & 0x70) == 0x20){
1312         set_code_score(ptr, score_table_A0[c2 & 0x0f]);
1313     }else if ((c2 & 0x70) == 0x70){
1314         set_code_score(ptr, score_table_F0[c2 & 0x0f]);
1315     }else if ((c2 & 0x70) >= 0x50){
1316         set_code_score(ptr, SCORE_L2);
1317     }
1318 }
1319
1320 void status_disable(ptr)
1321 struct input_code *ptr;
1322 {
1323     ptr->stat = -1;
1324     ptr->buf[0] = -1;
1325     code_score(ptr);
1326     if (iconv == ptr->iconv_func) set_iconv(FALSE, 0);
1327 }
1328
1329 void status_push_ch(ptr, c)
1330      struct input_code *ptr;
1331      int c;
1332 {
1333     ptr->buf[ptr->index++] = c;
1334 }
1335
1336 void status_clear(ptr)
1337      struct input_code *ptr;
1338 {
1339     ptr->stat = 0;
1340     ptr->index = 0;
1341 }
1342
1343 void status_reset(ptr)
1344      struct input_code *ptr;
1345 {
1346     status_clear(ptr);
1347     ptr->score = SCORE_INIT;
1348 }
1349
1350 void status_reinit(ptr)
1351      struct input_code *ptr;
1352 {
1353     status_reset(ptr);
1354     ptr->_file_stat = 0;
1355 }
1356
1357 void status_check(ptr, c)
1358      struct input_code *ptr;
1359      int c;
1360 {
1361     if (c <= DEL && estab_f){
1362         status_reset(ptr);
1363     }
1364 }
1365
1366 void s_status(ptr, c)
1367      struct input_code *ptr;
1368      int c;
1369 {
1370     switch(ptr->stat){
1371       case -1:
1372           status_check(ptr, c);
1373           break;
1374       case 0:
1375           if (c <= DEL){
1376               break;
1377 #ifdef NUMCHAR_OPTION
1378           }else if ((c & CLASS_MASK) == CLASS_UTF16){
1379               break;
1380 #endif
1381           }else if (0xa1 <= c && c <= 0xdf){
1382               status_push_ch(ptr, SSO);
1383               status_push_ch(ptr, c);
1384               code_score(ptr);
1385               status_clear(ptr);
1386           }else if ((0x81 <= c && c < 0xa0) || (0xe0 <= c && c <= 0xef)){
1387               ptr->stat = 1;
1388               status_push_ch(ptr, c);
1389 #ifdef SHIFTJIS_CP932
1390           }else if (cp932_f
1391                     && CP932_TABLE_BEGIN <= c && c <= CP932_TABLE_END){
1392               ptr->stat = 2;
1393               status_push_ch(ptr, c);
1394 #endif /* SHIFTJIS_CP932 */
1395           }else{
1396               status_disable(ptr);
1397           }
1398           break;
1399       case 1:
1400           if ((0x40 <= c && c <= 0x7e) || (0x80 <= c && c <= 0xfc)){
1401               status_push_ch(ptr, c);
1402               s2e_conv(ptr->buf[0], ptr->buf[1], &ptr->buf[0], &ptr->buf[1]);
1403               code_score(ptr);
1404               status_clear(ptr);
1405           }else{
1406               status_disable(ptr);
1407           }
1408           break;
1409 #ifdef SHIFTJIS_CP932
1410       case 2:
1411           if ((0x40 <= c && c <= 0x7e) || (0x80 <= c && c <= 0xfc)){
1412               status_push_ch(ptr, c);
1413               if (s2e_conv(ptr->buf[0], ptr->buf[1], &ptr->buf[0], &ptr->buf[1]) == 0){
1414                   set_code_score(ptr, SCORE_CP932);
1415                   status_clear(ptr);
1416                   break;
1417               }
1418           }
1419           status_disable(ptr);
1420           break;
1421 #endif /* SHIFTJIS_CP932 */
1422     }
1423 }
1424
1425 void e_status(ptr, c)
1426      struct input_code *ptr;
1427      int c;
1428 {
1429     switch (ptr->stat){
1430       case -1:
1431           status_check(ptr, c);
1432           break;
1433       case 0:
1434           if (c <= DEL){
1435               break;
1436 #ifdef NUMCHAR_OPTION
1437           }else if ((c & CLASS_MASK) == CLASS_UTF16){
1438               break;
1439 #endif
1440           }else if (SSO == c || (0xa1 <= c && c <= 0xfe)){
1441               ptr->stat = 1;
1442               status_push_ch(ptr, c);
1443           }else{
1444               status_disable(ptr);
1445           }
1446           break;
1447       case 1:
1448           if (0xa1 <= c && c <= 0xfe){
1449               status_push_ch(ptr, c);
1450               code_score(ptr);
1451               status_clear(ptr);
1452           }else{
1453               status_disable(ptr);
1454           }
1455           break;
1456     }
1457 }
1458
1459 #ifdef UTF8_INPUT_ENABLE
1460 void w16_status(ptr, c)
1461      struct input_code *ptr;
1462      int c;
1463 {
1464     switch (ptr->stat){
1465       case -1:
1466           break;
1467       case 0:
1468           if (ptr->_file_stat == 0){
1469               if (c == 0xfe || c == 0xff){
1470                   ptr->stat = c;
1471                   status_push_ch(ptr, c);
1472                   ptr->_file_stat = 1;
1473               }else{
1474                   status_disable(ptr);
1475                   ptr->_file_stat = -1;
1476               }
1477           }else if (ptr->_file_stat > 0){
1478               ptr->stat = 1;
1479               status_push_ch(ptr, c);
1480           }else if (ptr->_file_stat < 0){
1481               status_disable(ptr);
1482           }
1483           break;
1484
1485       case 1:
1486           if (c == EOF){
1487               status_disable(ptr);
1488               ptr->_file_stat = -1;
1489           }else{
1490               status_push_ch(ptr, c);
1491               status_clear(ptr);
1492           }
1493           break;
1494
1495       case 0xfe:
1496       case 0xff:
1497           if (ptr->stat != c && (c == 0xfe || c == 0xff)){
1498               status_push_ch(ptr, c);
1499               status_clear(ptr);
1500           }else{
1501               status_disable(ptr);
1502               ptr->_file_stat = -1;
1503           }
1504           break;
1505     }
1506 }
1507
1508 void w_status(ptr, c)
1509      struct input_code *ptr;
1510      int c;
1511 {
1512     switch (ptr->stat){
1513       case -1:
1514           status_check(ptr, c);
1515           break;
1516       case 0:
1517           if (c <= DEL){
1518               break;
1519 #ifdef NUMCHAR_OPTION
1520           }else if ((c & CLASS_MASK) == CLASS_UTF16){
1521               break;
1522 #endif
1523           }else if (0xc0 <= c && c <= 0xdf){
1524               ptr->stat = 1;
1525               status_push_ch(ptr, c);
1526           }else if (0xe0 <= c && c <= 0xef){
1527               ptr->stat = 2;
1528               status_push_ch(ptr, c);
1529           }else{
1530               status_disable(ptr);
1531           }
1532           break;
1533       case 1:
1534       case 2:
1535           if (0x80 <= c && c <= 0xbf){
1536               status_push_ch(ptr, c);
1537               if (ptr->index > ptr->stat){
1538                   int bom = (ptr->buf[0] == 0xef && ptr->buf[1] == 0xbb
1539                              && ptr->buf[2] == 0xbf);
1540                   w2e_conv(ptr->buf[0], ptr->buf[1], ptr->buf[2],
1541                            &ptr->buf[0], &ptr->buf[1]);
1542                   if (!bom){
1543                       code_score(ptr);
1544                   }
1545                   status_clear(ptr);
1546               }
1547           }else{
1548               status_disable(ptr);
1549           }
1550           break;
1551     }
1552 }
1553 #endif
1554
1555 void
1556 code_status(c)
1557      int c;
1558 {
1559     int action_flag = 1;
1560     struct input_code *result = 0;
1561     struct input_code *p = input_code_list;
1562     while (p->name){
1563         (p->status_func)(p, c);
1564         if (p->stat > 0){
1565             action_flag = 0;
1566         }else if(p->stat == 0){
1567             if (result){
1568                 action_flag = 0;
1569             }else{
1570                 result = p;
1571             }
1572         }
1573         ++p;
1574     }
1575
1576     if (action_flag){
1577         if (result && !estab_f){
1578             set_iconv(TRUE, result->iconv_func);
1579         }else if (c <= DEL){
1580             struct input_code *ptr = input_code_list;
1581             while (ptr->name){
1582                 status_reset(ptr);
1583                 ++ptr;
1584             }
1585         }
1586     }
1587 }
1588
1589 #ifdef PERL_XS
1590 #define STD_GC_BUFSIZE (256)
1591 int std_gc_buf[STD_GC_BUFSIZE];
1592 int std_gc_ndx;
1593 #endif
1594
1595 int 
1596 std_getc(f)
1597 FILE *f;
1598 {
1599 #ifdef PERL_XS
1600     if (std_gc_ndx){
1601         return std_gc_buf[--std_gc_ndx];
1602     }
1603 #endif
1604     return getc(f);
1605 }
1606
1607 int 
1608 std_ungetc(c,f)
1609 int c;
1610 FILE *f;
1611 {
1612 #ifdef PERL_XS
1613     if (std_gc_ndx == STD_GC_BUFSIZE){
1614         return EOF;
1615     }
1616     std_gc_buf[std_gc_ndx++] = c;
1617     return c;
1618 #endif
1619     return ungetc(c,f);
1620 }
1621
1622 void 
1623 std_putc(c)
1624 int c;
1625 {
1626     if(c!=EOF)
1627       putchar(c);
1628 }
1629
1630 int
1631 noconvert(f)
1632     FILE  *f;
1633 {
1634     int    c;
1635
1636     while ((c = (*i_getc)(f)) != EOF)
1637       (*o_putc)(c);
1638     return 1;
1639 }
1640
1641
1642 void
1643 module_connection()
1644 {
1645     oconv = output_conv; 
1646     o_putc = std_putc;
1647
1648     /* replace continucation module, from output side */
1649
1650     /* output redicrection */
1651 #ifdef CHECK_OPTION
1652     if (noout_f){
1653         o_putc = no_putc;
1654     }
1655 #endif
1656     if (mimeout_f) {
1657         o_mputc = o_putc;
1658         o_putc = mime_putc;
1659         if (mimeout_f == TRUE) {
1660             o_base64conv = oconv; oconv = base64_conv;
1661         }
1662         /* base64_count = 0; */
1663     }
1664
1665     if (crmode_f) {
1666         o_crconv = oconv; oconv = cr_conv;
1667     }
1668     if (rot_f) {
1669         o_rot_conv = oconv; oconv = rot_conv;
1670     }
1671     if (iso2022jp_f) {
1672         o_iso2022jp_check_conv = oconv; oconv = iso2022jp_check_conv;
1673     }
1674     if (hira_f) {
1675         o_hira_conv = oconv; oconv = hira_conv;
1676     }
1677     if (fold_f) {
1678         o_fconv = oconv; oconv = fold_conv;
1679         f_line = 0;
1680     }
1681     if (alpha_f || x0201_f) {
1682         o_zconv = oconv; oconv = z_conv;
1683     }
1684
1685     i_getc = std_getc;
1686     i_ungetc = std_ungetc;
1687     /* input redicrection */
1688 #ifdef INPUT_OPTION
1689     if (cap_f){
1690         i_cgetc = i_getc; i_getc = cap_getc;
1691         i_cungetc = i_ungetc; i_ungetc= cap_ungetc;
1692     }
1693     if (url_f){
1694         i_ugetc = i_getc; i_getc = url_getc;
1695         i_uungetc = i_ungetc; i_ungetc= url_ungetc;
1696     }
1697 #endif
1698 #ifdef NUMCHAR_OPTION
1699     if (numchar_f){
1700         i_ngetc = i_getc; i_getc = numchar_getc;
1701         i_nungetc = i_ungetc; i_ungetc= numchar_ungetc;
1702     }
1703 #endif
1704     if (mime_f && mimebuf_f==FIXED_MIME) {
1705         i_mgetc = i_getc; i_getc = mime_getc;
1706         i_mungetc = i_ungetc; i_ungetc = mime_ungetc;
1707     }
1708     if (broken_f & 1) {
1709         i_bgetc = i_getc; i_getc = broken_getc;
1710         i_bungetc = i_ungetc; i_ungetc = broken_ungetc;
1711     }
1712     if (input_f == JIS_INPUT || input_f == LATIN1_INPUT) {
1713         set_iconv(-TRUE, e_iconv);
1714     } else if (input_f == SJIS_INPUT) {
1715         set_iconv(-TRUE, s_iconv);
1716 #ifdef UTF8_INPUT_ENABLE
1717     } else if (input_f == UTF8_INPUT) {
1718         set_iconv(-TRUE, w_iconv);
1719     } else if (input_f == UTF16_INPUT) {
1720         set_iconv(-TRUE, w_iconv16);
1721 #endif
1722     } else {
1723         set_iconv(FALSE, e_iconv);
1724     }
1725
1726     {
1727         struct input_code *p = input_code_list;
1728         while (p->name){
1729             status_reinit(p++);
1730         }
1731     }
1732 }
1733
1734 /*
1735    Conversion main loop. Code detection only. 
1736  */
1737
1738 int
1739 kanji_convert(f)
1740     FILE  *f;
1741 {
1742     int    c1,
1743                     c2;
1744
1745     module_connection();
1746     c2 = 0;
1747
1748
1749     input_mode = ASCII;
1750     output_mode = ASCII;
1751     shift_mode = FALSE;
1752
1753 #define NEXT continue      /* no output, get next */
1754 #define SEND ;             /* output c1 and c2, get next */
1755 #define LAST break         /* end of loop, go closing  */
1756
1757     while ((c1 = (*i_getc)(f)) != EOF) {
1758         code_status(c1);
1759         if (c2) {
1760             /* second byte */
1761             if (c2 > DEL) {
1762                 /* in case of 8th bit is on */
1763                 if (!estab_f) {
1764                     /* in case of not established yet */
1765                     /* It is still ambiguious */
1766                     if (h_conv(f, c2, c1)==EOF) 
1767                         LAST;
1768                     else 
1769                         c2 = 0;
1770                     NEXT;
1771                 } else
1772                     /* in case of already established */
1773                     if (c1 < AT) {
1774                         /* ignore bogus code */
1775                         c2 = 0;
1776                         NEXT;
1777                     } else
1778                         SEND;
1779             } else
1780                 /* second byte, 7 bit code */
1781                 /* it might be kanji shitfted */
1782                 if ((c1 == DEL) || (c1 <= SPACE)) {
1783                     /* ignore bogus first code */
1784                     c2 = 0;
1785                     NEXT;
1786                 } else
1787                     SEND;
1788         } else {
1789             /* first byte */
1790             if (
1791 #ifdef UTF8_INPUT_ENABLE
1792                 iconv == w_iconv16
1793 #else
1794                 0
1795 #endif
1796                 ) {
1797                 c2 = c1;
1798                 c1 = (*i_getc)(f);
1799                 SEND;
1800 #ifdef NUMCHAR_OPTION
1801             } else if ((c1 & CLASS_MASK) == CLASS_UTF16){
1802                 SEND;
1803 #endif
1804             } else if (c1 > DEL) {
1805                 /* 8 bit code */
1806                 if (!estab_f && !iso8859_f) {
1807                     /* not established yet */
1808                     c2 = c1;
1809                     NEXT;
1810                 } else { /* estab_f==TRUE */
1811                     if (iso8859_f) {
1812                         c2 = ISO8859_1;
1813                         c1 &= 0x7f;
1814                         SEND;
1815                     } else if (SSP<=c1 && c1<0xe0 && iconv == s_iconv) {
1816                         /* SJIS X0201 Case... */
1817                         if(iso2022jp_f && x0201_f==NO_X0201) {
1818                             (*oconv)(GETA1, GETA2);
1819                             NEXT;
1820                         } else {
1821                             c2 = X0201;
1822                             c1 &= 0x7f;
1823                             SEND;
1824                         }
1825                     } else if (c1==SSO && iconv != s_iconv) {
1826                         /* EUC X0201 Case */
1827                         c1 = (*i_getc)(f);  /* skip SSO */
1828                         code_status(c1);
1829                         if (SSP<=c1 && c1<0xe0) {
1830                             if(iso2022jp_f &&  x0201_f==NO_X0201) {
1831                                 (*oconv)(GETA1, GETA2);
1832                                 NEXT;
1833                             } else {
1834                                 c2 = X0201;
1835                                 c1 &= 0x7f;
1836                                 SEND;
1837                             }
1838                         } else  { /* bogus code, skip SSO and one byte */
1839                             NEXT;
1840                         }
1841                     } else {
1842                        /* already established */
1843                        c2 = c1;
1844                        NEXT;
1845                     }
1846                 }
1847             } else if ((c1 > SPACE) && (c1 != DEL)) {
1848                 /* in case of Roman characters */
1849                 if (shift_mode) { 
1850                     /* output 1 shifted byte */
1851                     if (iso8859_f) {
1852                         c2 = ISO8859_1;
1853                         SEND;
1854                     } else if (SPACE<=c1 && c1<(0xe0&0x7f) ){
1855                       /* output 1 shifted byte */
1856                         if(iso2022jp_f && x0201_f==NO_X0201) {
1857                             (*oconv)(GETA1, GETA2);
1858                             NEXT;
1859                         } else {
1860                             c2 = X0201;
1861                             SEND;
1862                         }
1863                     } else {
1864                         /* look like bogus code */
1865                         NEXT;
1866                     }
1867                 } else if (input_mode == X0208) {
1868                     /* in case of Kanji shifted */
1869                     c2 = c1;
1870                     NEXT;
1871                 } else if (c1 == '=' && mime_f && !mime_decode_mode ) {
1872                     /* Check MIME code */
1873                     if ((c1 = (*i_getc)(f)) == EOF) {
1874                         (*oconv)(0, '=');
1875                         LAST;
1876                     } else if (c1 == '?') {
1877                         /* =? is mime conversion start sequence */
1878                         if(mime_f == STRICT_MIME) {
1879                             /* check in real detail */
1880                             if (mime_begin_strict(f) == EOF) 
1881                                 LAST;
1882                             else
1883                                 NEXT;
1884                         } else if (mime_begin(f) == EOF) 
1885                             LAST;
1886                         else
1887                             NEXT;
1888                     } else {
1889                         (*oconv)(0, '=');
1890                         (*i_ungetc)(c1,f);
1891                         NEXT;
1892                     }
1893                 } else {
1894                     /* normal ASCII code */ 
1895                     SEND;
1896                 }
1897             } else if (c1 == SI) {
1898                 shift_mode = FALSE; 
1899                 NEXT;
1900             } else if (c1 == SO) {
1901                 shift_mode = TRUE; 
1902                 NEXT;
1903             } else if (c1 == ESC ) {
1904                 if ((c1 = (*i_getc)(f)) == EOF) {
1905                     /*  (*oconv)(0, ESC); don't send bogus code */
1906                     LAST;
1907                 } else if (c1 == '$') {
1908                     if ((c1 = (*i_getc)(f)) == EOF) {
1909                         /*
1910                         (*oconv)(0, ESC); don't send bogus code 
1911                         (*oconv)(0, '$'); */
1912                         LAST;
1913                     } else if (c1 == '@'|| c1 == 'B') {
1914                         /* This is kanji introduction */
1915                         input_mode = X0208;
1916                         shift_mode = FALSE;
1917                         debug(input_codename = "ISO-2022-JP");
1918                         NEXT;
1919                     } else if (c1 == '(') {
1920                         if ((c1 = (*i_getc)(f)) == EOF) {
1921                             /* don't send bogus code 
1922                             (*oconv)(0, ESC);
1923                             (*oconv)(0, '$');
1924                             (*oconv)(0, '(');
1925                                 */
1926                             LAST;
1927                         } else if (c1 == '@'|| c1 == 'B') {
1928                             /* This is kanji introduction */
1929                             input_mode = X0208;
1930                             shift_mode = FALSE;
1931                             NEXT;
1932                         } else {
1933                             /* could be some special code */
1934                             (*oconv)(0, ESC);
1935                             (*oconv)(0, '$');
1936                             (*oconv)(0, '(');
1937                             (*oconv)(0, c1);
1938                             NEXT;
1939                         }
1940                     } else if (broken_f&0x2) {
1941                         /* accept any ESC-(-x as broken code ... */
1942                         input_mode = X0208;
1943                         shift_mode = FALSE;
1944                         NEXT;
1945                     } else {
1946                         (*oconv)(0, ESC);
1947                         (*oconv)(0, '$');
1948                         (*oconv)(0, c1);
1949                         NEXT;
1950                     }
1951                 } else if (c1 == '(') {
1952                     if ((c1 = (*i_getc)(f)) == EOF) {
1953                         /* don't send bogus code 
1954                         (*oconv)(0, ESC);
1955                         (*oconv)(0, '('); */
1956                         LAST;
1957                     } else {
1958                         if (c1 == 'I') {
1959                             /* This is X0201 kana introduction */
1960                             input_mode = X0201; shift_mode = X0201;
1961                             NEXT;
1962                         } else if (c1 == 'B' || c1 == 'J' || c1 == 'H') {
1963                             /* This is X0208 kanji introduction */
1964                             input_mode = ASCII; shift_mode = FALSE;
1965                             NEXT;
1966                         } else if (broken_f&0x2) {
1967                             input_mode = ASCII; shift_mode = FALSE;
1968                             NEXT;
1969                         } else {
1970                             (*oconv)(0, ESC);
1971                             (*oconv)(0, '(');
1972                             /* maintain various input_mode here */
1973                             SEND;
1974                         }
1975                     }
1976                } else if ( c1 == 'N' || c1 == 'n' ){
1977                    /* SS2 */
1978                    c1 = (*i_getc)(f);  /* skip SS2 */
1979                    if ( SPACE<=c1 && c1 < 0xe0 ) {
1980                        c2 = X0201;
1981                        SEND;
1982                    }
1983                 } else {
1984                     /* lonely ESC  */
1985                     (*oconv)(0, ESC);
1986                     SEND;
1987                 }
1988             } else if ((c1 == NL || c1 == CR) && broken_f&4) {
1989                 input_mode = ASCII; set_iconv(FALSE, 0);
1990                 SEND;
1991             } else 
1992                 SEND;
1993         }
1994         /* send: */
1995         if (input_mode == X0208) 
1996             (*oconv)(c2, c1);  /* this is JIS, not SJIS/EUC case */
1997         else if (input_mode) 
1998             (*oconv)(input_mode, c1);  /* other special case */
1999         else if ((*iconv)(c2, c1, 0) < 0){  /* can be EUC/SJIS */
2000             int c0 = (*i_getc)(f);
2001             if (c0 != EOF){
2002                 code_status(c0);
2003                 (*iconv)(c2, c1, c0);
2004             }
2005         }
2006
2007         c2 = 0;
2008         continue;
2009         /* goto next_word */
2010     }
2011
2012     /* epilogue */
2013     (*iconv)(EOF, 0, 0);
2014     return 1;
2015 }
2016
2017 int
2018 h_conv(f, c2, c1)
2019     FILE  *f;
2020     int    c1,
2021                     c2;
2022 {
2023     int    wc,c3;
2024
2025
2026     /** it must NOT be in the kanji shifte sequence      */
2027     /** it must NOT be written in JIS7                   */
2028     /** and it must be after 2 byte 8bit code            */
2029
2030     hold_count = 0;
2031     push_hold_buf(c2);
2032     push_hold_buf(c1);
2033     c2 = 0;
2034
2035     while ((c1 = (*i_getc)(f)) != EOF) {
2036         if (c1 == ESC){
2037             (*i_ungetc)(c1,f);
2038             break;
2039         }
2040         code_status(c1);
2041         if (push_hold_buf(c1) == EOF || estab_f){
2042             break;
2043         }
2044     }
2045
2046     if (!estab_f){
2047         struct input_code *p = input_code_list;
2048         struct input_code *result = p;
2049         if (c1 == EOF){
2050             code_status(c1);
2051         }
2052         while (p->name){
2053             if (p->score < result->score){
2054                 result = p;
2055             }
2056             ++p;
2057         }
2058         set_iconv(FALSE, result->iconv_func);
2059     }
2060
2061
2062     /** now,
2063      ** 1) EOF is detected, or
2064      ** 2) Code is established, or
2065      ** 3) Buffer is FULL (but last word is pushed)
2066      **
2067      ** in 1) and 3) cases, we continue to use
2068      ** Kanji codes by oconv and leave estab_f unchanged.
2069      **/
2070
2071     c3=c1;
2072     wc = 0;
2073     while (wc < hold_count){
2074         c2 = hold_buf[wc++];
2075         if (c2 <= DEL
2076 #ifdef NUMCHAR_OPTION
2077             || (c2 & CLASS_MASK) == CLASS_UTF16
2078 #endif
2079             ){
2080             (*iconv)(0, c2, 0);
2081             continue;
2082         }else if (iconv == s_iconv && 0xa1 <= c2 && c2 <= 0xdf){
2083             (*iconv)(X0201, c2, 0);
2084             continue;
2085         }
2086         if (wc < hold_count){
2087             c1 = hold_buf[wc++];
2088         }else{
2089             c1 = (*i_getc)(f);
2090             if (c1 == EOF){
2091                 c3 = EOF;
2092                 break;
2093             }
2094             code_status(c1);
2095         }
2096         if ((*iconv)(c2, c1, 0) < 0){
2097             int c0;
2098             if (wc < hold_count){
2099                 c0 = hold_buf[wc++];
2100             }else{
2101                 c0 = (*i_getc)(f);
2102                 if (c0 == EOF){
2103                     c3 = EOF;
2104                     break;
2105                 }
2106                 code_status(c0);
2107             }
2108             (*iconv)(c2, c1, c0);
2109             c1 = c0;
2110         }
2111     }
2112     return c3;
2113 }
2114
2115
2116
2117 int
2118 push_hold_buf(c2)
2119      int             c2;
2120 {
2121     if (hold_count >= HOLD_SIZE*2)
2122         return (EOF);
2123     hold_buf[hold_count++] = c2;
2124     return ((hold_count >= HOLD_SIZE*2) ? EOF : hold_count);
2125 }
2126
2127 int s2e_conv(c2, c1, p2, p1)
2128      int c2, c1;
2129      int *p2, *p1;
2130 {
2131 #ifdef SHIFTJIS_CP932
2132     if (cp932_f && CP932_TABLE_BEGIN <= c2 && c2 <= CP932_TABLE_END){
2133         extern unsigned short shiftjis_cp932[3][189];
2134         c1 = shiftjis_cp932[c2 - CP932_TABLE_BEGIN][c1 - 0x40];
2135         if (c1 == 0) return 1;
2136         c2 = c1 >> 8;
2137         c1 &= 0xff;
2138     }
2139 #endif /* SHIFTJIS_CP932 */
2140     c2 = c2 + c2 - ((c2 <= 0x9f) ? SJ0162 : SJ6394);
2141     if (c1 < 0x9f)
2142         c1 = c1 - ((c1 > DEL) ? SPACE : 0x1f);
2143     else {
2144         c1 = c1 - 0x7e;
2145         c2++;
2146     }
2147     if (p2) *p2 = c2;
2148     if (p1) *p1 = c1;
2149     return 0;
2150 }
2151
2152 int
2153 s_iconv(c2, c1, c0)
2154     int    c2,
2155                     c1, c0;
2156 {
2157     if (c2 == X0201) {
2158         c1 &= 0x7f;
2159     } else if ((c2 == EOF) || (c2 == 0) || c2 < SPACE) {
2160         /* NOP */
2161     } else {
2162         int ret = s2e_conv(c2, c1, &c2, &c1);
2163         if (ret) return ret;
2164     }
2165     (*oconv)(c2, c1);
2166     return 0;
2167 }
2168
2169 int
2170 e_iconv(c2, c1, c0)
2171     int    c2,
2172                     c1, c0;
2173 {
2174     if (c2 == X0201) {
2175         c1 &= 0x7f;
2176     } else if (c2 == SSO){
2177         c2 = X0201;
2178         c1 &= 0x7f;
2179     } else if ((c2 == EOF) || (c2 == 0) || c2 < SPACE) {
2180         /* NOP */
2181     } else {
2182         c1 &= 0x7f;
2183         c2 &= 0x7f;
2184     }
2185     (*oconv)(c2, c1);
2186     return 0;
2187 }
2188
2189 #ifdef UTF8_INPUT_ENABLE
2190 int
2191 w2e_conv(c2, c1, c0, p2, p1)
2192     int    c2, c1, c0;
2193     int *p2, *p1;
2194 {
2195     extern unsigned short * utf8_to_euc_2bytes[];
2196     extern unsigned short ** utf8_to_euc_3bytes[];
2197     int ret = 0;
2198
2199     if (0xc0 <= c2 && c2 <= 0xef) {
2200         unsigned short **pp;
2201
2202         if (0xe0 <= c2) {
2203             if (c0 == 0) return -1;
2204             pp = utf8_to_euc_3bytes[c2 - 0x80];
2205             ret = w_iconv_common(c1, c0, pp, sizeof_utf8_to_euc_C2, p2, p1);
2206         } else {
2207             ret =  w_iconv_common(c2, c1, utf8_to_euc_2bytes, sizeof_utf8_to_euc_2bytes, p2, p1);
2208         }
2209 #ifdef NUMCHAR_OPTION
2210         if (ret){
2211             if (p2) *p2 = 0;
2212             if (p1) *p1 = CLASS_UTF16 | ww16_conv(c2, c1, c0);
2213             ret = 0;
2214         }
2215 #endif
2216         return ret;
2217     } else if (c2 == X0201) {
2218         c1 &= 0x7f;
2219     }
2220     if (p2) *p2 = c2;
2221     if (p1) *p1 = c1;
2222     return ret;
2223 }
2224
2225 int
2226 w_iconv(c2, c1, c0)
2227     int    c2,
2228                     c1, c0;
2229 {
2230     int ret = w2e_conv(c2, c1, c0, &c2, &c1);
2231     if (ret == 0){
2232         (*oconv)(c2, c1);
2233     }
2234     return ret;
2235 }
2236
2237 void
2238 w16w_conv(val, p2, p1, p0)
2239      unsigned short val;
2240      int *p2, *p1, *p0;
2241 {
2242     if (val < 0x80){
2243         *p2 = val;
2244         *p1 = 0;
2245         *p0 = 0;
2246     }else if (val < 0x800){
2247         *p2 = 0xc0 | (val >> 6);
2248         *p1 = 0x80 | (val & 0x3f);
2249         *p0 = 0;
2250     }else{
2251         *p2 = 0xe0 | (val >> 12);
2252         *p1 = 0x80 | ((val >> 6) & 0x3f);
2253         *p0 = 0x80 | (val        & 0x3f);
2254     }
2255 }
2256
2257 int
2258 ww16_conv(c2, c1, c0)
2259      int c2, c1, c0;
2260 {
2261     unsigned short val;
2262     if (c2 >= 0xe0){
2263         val = (c2 & 0x0f) << 12;
2264         val |= (c1 & 0x3f) << 6;
2265         val |= (c0 & 0x3f);
2266     }else if (c2 >= 0xc0){
2267         val = (c2 & 0x1f) << 6;
2268         val |= (c1 & 0x3f) << 6;
2269     }else{
2270         val = c2;
2271     }
2272     return val;
2273 }
2274
2275 int
2276 w16e_conv(val, p2, p1)
2277      unsigned short val;
2278      int *p2, *p1;
2279 {
2280     extern unsigned short * utf8_to_euc_2bytes[];
2281     extern unsigned short ** utf8_to_euc_3bytes[];
2282     int c2, c1, c0;
2283     unsigned short **pp;
2284     int psize;
2285     int ret = 0;
2286
2287     w16w_conv(val, &c2, &c1, &c0);
2288     if (c1){
2289         if (c0){
2290             pp = utf8_to_euc_3bytes[c2 - 0x80];
2291             psize = sizeof_utf8_to_euc_C2;
2292             ret =  w_iconv_common(c1, c0, pp, psize, p2, p1);
2293         }else{
2294             pp = utf8_to_euc_2bytes;
2295             psize = sizeof_utf8_to_euc_2bytes;
2296             ret =  w_iconv_common(c2, c1, pp, psize, p2, p1);
2297         }
2298 #ifdef NUMCHAR_OPTION
2299         if (ret){
2300             *p2 = 0;
2301             *p1 = CLASS_UTF16 | val;
2302             ret = 0;
2303         }
2304 #endif
2305     }
2306     return ret;
2307 }
2308
2309 int
2310 w_iconv16(c2, c1, c0)
2311     int    c2, c1,c0;
2312 {
2313     int ret;
2314
2315     if (c2==0376 && c1==0377){
2316         utf16_mode = UTF16_INPUT;
2317         return 0;    
2318     } else if (c2==0377 && c1==0376){
2319         utf16_mode = UTF16BE_INPUT;
2320         return 0;    
2321     }
2322     if (utf16_mode == UTF16BE_INPUT) {
2323         int tmp;
2324         tmp=c1; c1=c2; c2=tmp;
2325     }
2326     if ((c2==0 && c1 < 0x80) || c2==EOF) {
2327         (*oconv)(c2, c1);
2328         return 0;
2329     }
2330     ret = w16e_conv(((c2<<8)&0xff00) + c1, &c2, &c1);
2331     if (ret) return ret;
2332     (*oconv)(c2, c1);
2333     return 0;
2334 }
2335
2336 int
2337 w_iconv_common(c1, c0, pp, psize, p2, p1)
2338     int    c1,c0;
2339     unsigned short **pp;
2340     int psize;
2341     int *p2, *p1;
2342 {
2343     int c2;
2344     unsigned short *p ;
2345     unsigned short val;
2346
2347     if (pp == 0) return 1;
2348
2349     c1 -= 0x80;
2350     if (c1 < 0 || psize <= c1) return 1;
2351     p = pp[c1];
2352     if (p == 0)  return 1;
2353
2354     c0 -= 0x80;
2355     if (c0 < 0 || sizeof_utf8_to_euc_E5B8 <= c0) return 1;
2356     val = p[c0];
2357     if (val == 0) return 1;
2358
2359     c2 = val >> 8;
2360     if (c2 == SO) c2 = X0201;
2361     c1 = val & 0x7f;
2362     if (p2) *p2 = c2;
2363     if (p1) *p1 = c1;
2364     return 0;
2365 }
2366
2367 #endif
2368
2369 #ifdef UTF8_OUTPUT_ENABLE
2370 int
2371 e2w_conv(c2, c1)
2372     int    c2, c1;
2373 {
2374     extern unsigned short euc_to_utf8_1byte[];
2375     extern unsigned short * euc_to_utf8_2bytes[];
2376     unsigned short *p;
2377
2378     if (c2 == X0201) {
2379         p = euc_to_utf8_1byte;
2380     } else {
2381         c2 &= 0x7f;
2382         c2 = (c2&0x7f) - 0x21;
2383         if (0<=c2 && c2<sizeof_euc_to_utf8_2bytes)
2384             p = euc_to_utf8_2bytes[c2];
2385         else
2386             return 0;
2387     }
2388     if (!p) return 0;
2389     c1 = (c1 & 0x7f) - 0x21;
2390     if (0<=c1 && c1<sizeof_euc_to_utf8_1byte)
2391         return p[c1];
2392     return 0;
2393 }
2394
2395 void
2396 w_oconv(c2, c1)
2397     int    c2,
2398                     c1;
2399 {
2400     int c0;
2401 #ifdef NUMCHAR_OPTION
2402     if (c2 == 0 && (c1 & CLASS_MASK) == CLASS_UTF16){
2403         w16w_conv(c1, &c2, &c1, &c0);
2404         (*o_putc)(c2);
2405         if (c1){
2406             (*o_putc)(c1);
2407             if (c0) (*o_putc)(c0);
2408         }
2409     }
2410 #endif
2411     if (c2 == EOF) {
2412         (*o_putc)(EOF);
2413         return;
2414     } else if (c2 == 0) { 
2415         output_mode = ASCII;
2416         (*o_putc)(c1);
2417     } else if (c2 == ISO8859_1) {
2418         output_mode = ISO8859_1;
2419         (*o_putc)(c1 | 0x080);
2420     } else {
2421         output_mode = UTF8;
2422         w16w_conv((unsigned short)e2w_conv(c2, c1), &c2, &c1, &c0);
2423         (*o_putc)(c2);
2424         if (c1){
2425             (*o_putc)(c1);
2426             if (c0) (*o_putc)(c0);
2427         }
2428     }
2429 }
2430
2431 void
2432 w_oconv16(c2, c1)
2433     int    c2,
2434                     c1;
2435 {
2436     if (c2 == EOF) {
2437         (*o_putc)(EOF);
2438         return;
2439     }    
2440
2441     if (w_oconv16_begin_f==2) {
2442         if (w_oconv16_LE){
2443             (*o_putc)((unsigned char)'\377');
2444             (*o_putc)('\376');
2445         }else{
2446             (*o_putc)('\376');
2447             (*o_putc)((unsigned char)'\377');
2448         }
2449         w_oconv16_begin_f=1;
2450     }
2451
2452     if (c2 == ISO8859_1) {
2453         c2 = 0;
2454         c1 |= 0x80;
2455 #ifdef NUMCHAR_OPTION
2456     } else if (c2 == 0 && (c1 & CLASS_MASK) == CLASS_UTF16) {
2457         c2 = (c1 >> 8) & 0xff;
2458         c1 &= 0xff;
2459 #endif
2460     } else if (c2) {
2461         unsigned short val = (unsigned short)e2w_conv(c2, c1);
2462         c2 = (val >> 8) & 0xff;
2463         c1 = val & 0xff;
2464     }
2465     if (w_oconv16_LE){
2466         (*o_putc)(c1);
2467         (*o_putc)(c2);
2468     }else{
2469         (*o_putc)(c2);
2470         (*o_putc)(c1);
2471     }
2472 }
2473
2474 #endif
2475
2476 void
2477 e_oconv(c2, c1)
2478     int    c2,
2479                     c1;
2480 {
2481 #ifdef NUMCHAR_OPTION
2482     if (c2 == 0 && (c1 & CLASS_MASK) == CLASS_UTF16){
2483         w16e_conv(c1, &c2, &c1);
2484     }
2485 #endif
2486     if (c2 == EOF) {
2487         (*o_putc)(EOF);
2488         return;
2489     } else if (c2 == 0) { 
2490         output_mode = ASCII;
2491         (*o_putc)(c1);
2492     } else if (c2 == X0201) {
2493         output_mode = JAPANESE_EUC;
2494         (*o_putc)(SSO); (*o_putc)(c1|0x80);
2495     } else if (c2 == ISO8859_1) {
2496         output_mode = ISO8859_1;
2497         (*o_putc)(c1 | 0x080);
2498     } else {
2499         if ((c1<0x21 || 0x7e<c1) ||
2500            (c2<0x21 || 0x7e<c2)) {
2501             set_iconv(FALSE, 0);
2502             return; /* too late to rescue this char */
2503         }
2504         output_mode = JAPANESE_EUC;
2505         (*o_putc)(c2 | 0x080);
2506         (*o_putc)(c1 | 0x080);
2507     }
2508 }
2509
2510 void
2511 e2s_conv(c2, c1, p2, p1)
2512      int c2, c1, *p2, *p1;
2513 {
2514     if (p2) *p2 = ((c2 - 1) >> 1) + ((c2 <= 0x5e) ? 0x71 : 0xb1);
2515     if (p1) *p1 = c1 + ((c2 & 1) ? ((c1 < 0x60) ? 0x1f : 0x20) : 0x7e);
2516 }
2517
2518 void
2519 s_oconv(c2, c1)
2520     int    c2,
2521                     c1;
2522 {
2523 #ifdef NUMCHAR_OPTION
2524     if (c2 == 0 && (c1 & CLASS_MASK) == CLASS_UTF16){
2525         w16e_conv(c1, &c2, &c1);
2526     }
2527 #endif
2528     if (c2 == EOF) {
2529         (*o_putc)(EOF);
2530         return;
2531     } else if (c2 == 0) {
2532         output_mode = ASCII;
2533         (*o_putc)(c1);
2534     } else if (c2 == X0201) {
2535         output_mode = SHIFT_JIS;
2536         (*o_putc)(c1|0x80);
2537     } else if (c2 == ISO8859_1) {
2538         output_mode = ISO8859_1;
2539         (*o_putc)(c1 | 0x080);
2540     } else {
2541         if ((c1<0x20 || 0x7e<c1) ||
2542            (c2<0x20 || 0x7e<c2)) {
2543             set_iconv(FALSE, 0);
2544             return; /* too late to rescue this char */
2545         }
2546         output_mode = SHIFT_JIS;
2547         e2s_conv(c2, c1, &c2, &c1);
2548         (*o_putc)(c2);
2549         (*o_putc)(c1);
2550     }
2551 }
2552
2553 void
2554 j_oconv(c2, c1)
2555     int    c2,
2556                     c1;
2557 {
2558 #ifdef NUMCHAR_OPTION
2559     if ((c1 & CLASS_MASK) == CLASS_UTF16){
2560         w16e_conv(c1, &c2, &c1);
2561     }
2562 #endif
2563     if (c2 == EOF) {
2564         if (output_mode !=ASCII && output_mode!=ISO8859_1) {
2565             (*o_putc)(ESC);
2566             (*o_putc)('(');
2567             (*o_putc)(ascii_intro);
2568             output_mode = ASCII;
2569         }
2570         (*o_putc)(EOF);
2571     } else if (c2==X0201) {
2572         if (output_mode!=X0201) {
2573             output_mode = X0201;
2574             (*o_putc)(ESC);
2575             (*o_putc)('(');
2576             (*o_putc)('I');
2577         }
2578         (*o_putc)(c1);
2579     } else if (c2==ISO8859_1) {
2580             /* iso8859 introduction, or 8th bit on */
2581             /* Can we convert in 7bit form using ESC-'-'-A ? 
2582                Is this popular? */
2583         output_mode = ISO8859_1;
2584         (*o_putc)(c1|0x80);
2585     } else if (c2 == 0) {
2586         if (output_mode !=ASCII && output_mode!=ISO8859_1) {
2587             (*o_putc)(ESC);
2588             (*o_putc)('(');
2589             (*o_putc)(ascii_intro);
2590             output_mode = ASCII;
2591         }
2592         (*o_putc)(c1);
2593     } else {
2594         if (output_mode != X0208) {
2595             output_mode = X0208;
2596             (*o_putc)(ESC);
2597             (*o_putc)('$');
2598             (*o_putc)(kanji_intro);
2599         }
2600         if (c1<0x20 || 0x7e<c1) 
2601             return;
2602         if (c2<0x20 || 0x7e<c2) 
2603             return;
2604         (*o_putc)(c2);
2605         (*o_putc)(c1);
2606     }
2607 }
2608
2609 void
2610 base64_conv(c2, c1)
2611     int    c2,
2612                     c1;
2613 {
2614     if (base64_count>50 && !mimeout_mode && c2==0 && c1==SPACE) {
2615         (*o_putc)(NL);
2616     } else if (base64_count>66 && mimeout_mode) {
2617         (*o_base64conv)(EOF,0);
2618         (*o_putc)(NL);
2619         (*o_putc)('\t'); base64_count += 7;
2620     }
2621     (*o_base64conv)(c2,c1);
2622 }
2623
2624
2625 static int broken_buf[3];
2626 static int broken_counter = 0;
2627 static int broken_last = 0;
2628 int
2629 broken_getc(f)
2630 FILE *f;
2631 {
2632     int c,c1;
2633
2634     if (broken_counter>0) {
2635         return broken_buf[--broken_counter];
2636     }
2637     c= (*i_bgetc)(f);
2638     if (c=='$' && broken_last != ESC 
2639             && (input_mode==ASCII || input_mode==X0201)) {
2640         c1= (*i_bgetc)(f);
2641         broken_last = 0;
2642         if (c1=='@'|| c1=='B') {
2643             broken_buf[0]=c1; broken_buf[1]=c; 
2644             broken_counter=2;
2645             return ESC;
2646         } else {
2647             (*i_bungetc)(c1,f);
2648             return c;
2649         }
2650     } else if (c=='(' && broken_last != ESC 
2651             && (input_mode==X0208 || input_mode==X0201)) { /* ) */
2652         c1= (*i_bgetc)(f);
2653         broken_last = 0;
2654         if (c1=='J'|| c1=='B') {
2655             broken_buf[0]=c1; broken_buf[1]=c;
2656             broken_counter=2;
2657             return ESC;
2658         } else {
2659             (*i_bungetc)(c1,f);
2660             return c;
2661         }
2662     } else {
2663         broken_last = c;
2664         return c;
2665     }
2666 }
2667
2668 int
2669 broken_ungetc(c,f)
2670 int c;
2671 FILE *f;
2672 {
2673     if (broken_counter<2)
2674         broken_buf[broken_counter++]=c;
2675     return c;
2676 }
2677
2678 static int prev_cr = 0;
2679
2680 void
2681 cr_conv(c2,c1) 
2682 int c2,c1;
2683 {
2684     if (prev_cr) {
2685         prev_cr = 0;
2686         if (! (c2==0&&c1==NL) ) {
2687             cr_conv(0,'\n');
2688         }
2689     }
2690     if (c2) {
2691         (*o_crconv)(c2,c1);
2692     } else if (c1=='\r') {
2693         prev_cr = c1;
2694     } else if (c1=='\n') {
2695         if (crmode_f==CRLF) {
2696             (*o_crconv)(0,'\r');
2697         } else if (crmode_f==CR) {
2698             (*o_crconv)(0,'\r');
2699             return;
2700         } 
2701         (*o_crconv)(0,NL);
2702     } else if (c1!='\032' || crmode_f!=NL){
2703         (*o_crconv)(c2,c1);
2704     }
2705 }
2706
2707 /* 
2708   Return value of fold_conv()
2709
2710        \n  add newline  and output char
2711        \r  add newline  and output nothing
2712        ' ' space
2713        0   skip  
2714        1   (or else) normal output 
2715
2716   fold state in prev (previous character)
2717
2718       >0x80 Japanese (X0208/X0201)
2719       <0x80 ASCII
2720       \n    new line 
2721       ' '   space
2722
2723   This fold algorthm does not preserve heading space in a line.
2724   This is the main difference from fmt.
2725 */
2726
2727 #define char_size(c2,c1) (c2?2:1)
2728
2729 void
2730 fold_conv(c2,c1) 
2731 int c2,c1;
2732
2733     int prev0;
2734     int fold_state=0;
2735
2736     if (c1== '\r' && !fold_preserve_f) {
2737         fold_state=0;  /* ignore cr */
2738     }else if (c1== '\n'&&f_prev=='\r' && fold_preserve_f) {
2739         f_prev = '\n';
2740         fold_state=0;  /* ignore cr */
2741     } else if (c1== BS) {
2742         if (f_line>0) f_line--;
2743         fold_state =  1;
2744     } else if (c2==EOF && f_line != 0) {    /* close open last line */
2745             fold_state = '\n';
2746     } else if ((c1=='\n' && !fold_preserve_f)
2747                || ((c1=='\r'||(c1=='\n'&&f_prev!='\r'))
2748                    && fold_preserve_f)) {
2749         /* new line */
2750         if (fold_preserve_f) { 
2751             f_prev = c1;
2752             f_line = 0;
2753             fold_state =  '\r';
2754         } else if ((f_prev == c1 && !fold_preserve_f)
2755                    || (f_prev == '\n' && fold_preserve_f)
2756                    ) {        /* duplicate newline */
2757             if (f_line) {
2758                 f_line = 0;
2759                 fold_state =  '\n';    /* output two newline */
2760             } else {
2761                 f_line = 0;
2762                 fold_state =  1;
2763             }
2764         } else  {
2765             if (f_prev&0x80) {     /* Japanese? */
2766                 f_prev = c1;
2767                 fold_state =  0;       /* ignore given single newline */
2768             } else if (f_prev==' ') {
2769                 fold_state =  0;
2770             } else {
2771                 f_prev = c1;
2772                 if (++f_line<=fold_len) 
2773                     fold_state =  ' ';
2774                 else {
2775                     f_line = 0;
2776                     fold_state =  '\r';        /* fold and output nothing */
2777                 }
2778             }
2779         }
2780     } else if (c1=='\f') {
2781         f_prev = '\n';
2782         if (f_line==0)
2783             fold_state =  1;
2784         f_line = 0;
2785         fold_state =  '\n';            /* output newline and clear */
2786     } else if ( (c2==0  && c1==' ')||
2787                (c2==0  && c1=='\t')||
2788                (c2=='!'&& c1=='!')) {
2789         /* X0208 kankaku or ascii space */
2790             if (f_prev == ' ') {
2791                 fold_state = 0;         /* remove duplicate spaces */
2792             } else {
2793                 f_prev = ' ';    
2794                 if (++f_line<=fold_len) 
2795                     fold_state = ' ';         /* output ASCII space only */
2796                 else {
2797                     f_prev = ' '; f_line = 0;
2798                     fold_state = '\r';        /* fold and output nothing */
2799                 }
2800             }
2801     } else {
2802         prev0 = f_prev; /* we still need this one... , but almost done */
2803         f_prev = c1;
2804         if (c2 || c2==X0201) 
2805             f_prev |= 0x80;  /* this is Japanese */
2806         f_line += char_size(c2,c1);
2807         if (f_line<=fold_len) {   /* normal case */
2808             fold_state = 1;
2809         } else {
2810             if (f_line>=fold_len+fold_margin) { /* too many kinsou suspension */
2811                 f_line = char_size(c2,c1);
2812                 fold_state =  '\n';       /* We can't wait, do fold now */
2813             } else if (c2==X0201) {
2814             /* simple kinsoku rules  return 1 means no folding  */
2815                 if (c1==(0xde&0x7f)) fold_state = 1; /* \e$B!+\e(B*/
2816                 else if (c1==(0xdf&0x7f)) fold_state = 1; /* \e$B!,\e(B*/
2817                 else if (c1==(0xa4&0x7f)) fold_state = 1; /* \e$B!#\e(B*/
2818                 else if (c1==(0xa3&0x7f)) fold_state = 1; /* \e$B!$\e(B*/
2819                 else if (c1==(0xa1&0x7f)) fold_state = 1; /* \e$B!W\e(B*/
2820                 else if (c1==(0xb0&0x7f)) fold_state = 1; /* - */
2821                 else if (SPACE<=c1 && c1<=(0xdf&0x7f)) {      /* X0201 */
2822                     f_line = 1;
2823                     fold_state = '\n';/* add one new f_line before this character */
2824                 } else {
2825                     f_line = 1;
2826                     fold_state = '\n';/* add one new f_line before this character */
2827                 }
2828             } else if (c2==0) {
2829                 /* kinsoku point in ASCII */ 
2830                 if (  c1==')'||    /* { [ ( */
2831                      c1==']'||
2832                      c1=='}'||
2833                      c1=='.'||
2834                      c1==','||
2835                      c1=='!'||
2836                      c1=='?'||
2837                      c1=='/'||
2838                      c1==':'||
2839                      c1==';' ) {
2840                     fold_state = 1;
2841                 /* just after special */
2842                 } else if (!is_alnum(prev0)) {
2843                     f_line = char_size(c2,c1);
2844                     fold_state = '\n';
2845                 } else if ((prev0==' ') ||   /* ignored new f_line */
2846                       (prev0=='\n')||        /* ignored new f_line */
2847                       (prev0&0x80)) {        /* X0208 - ASCII */
2848                     f_line = char_size(c2,c1);
2849                     fold_state = '\n';/* add one new f_line before this character */
2850                 } else {
2851                     fold_state = 1;  /* default no fold in ASCII */
2852                 }
2853             } else {
2854                 if (c2=='!') {
2855                     if (c1=='"')  fold_state = 1; /* \e$B!"\e(B */
2856                     else if (c1=='#')  fold_state = 1; /* \e$B!#\e(B */
2857                     else if (c1=='W')  fold_state = 1; /* \e$B!W\e(B */
2858                     else if (c1=='K')  fold_state = 1; /* \e$B!K\e(B */
2859                     else if (c1=='$')  fold_state = 1; /* \e$B!$\e(B */
2860                     else if (c1=='%')  fold_state = 1; /* \e$B!%\e(B */
2861                     else if (c1=='\'') fold_state = 1; /* \e$B!\\e(B */
2862                     else if (c1=='(')  fold_state = 1; /* \e$B!(\e(B */
2863                     else if (c1==')')  fold_state = 1; /* \e$B!)\e(B */
2864                     else if (c1=='*')  fold_state = 1; /* \e$B!*\e(B */
2865                     else if (c1=='+')  fold_state = 1; /* \e$B!+\e(B */
2866                     else if (c1==',')  fold_state = 1; /* \e$B!,\e(B */
2867                          /* default no fold in kinsoku */
2868                     else { 
2869                         fold_state = '\n';
2870                         f_line = char_size(c2,c1);
2871                         /* add one new f_line before this character */
2872                     }
2873                 } else {
2874                     f_line = char_size(c2,c1);
2875                     fold_state = '\n'; 
2876                     /* add one new f_line before this character */
2877                 }
2878             }
2879         }
2880     }
2881     /* terminator process */
2882     switch(fold_state) {
2883         case '\n': 
2884             (*o_fconv)(0,'\n');
2885             (*o_fconv)(c2,c1);
2886             break;
2887         case 0:    
2888             return;
2889         case '\r': 
2890             (*o_fconv)(0,'\n');
2891             break;
2892         case '\t': 
2893         case ' ': 
2894             (*o_fconv)(0,' ');
2895             break;
2896         default:
2897             (*o_fconv)(c2,c1);
2898     }
2899 }
2900
2901 int z_prev2=0,z_prev1=0;
2902
2903 void
2904 z_conv(c2,c1)
2905 int c2,c1;
2906 {
2907
2908     /* if (c2) c1 &= 0x7f; assertion */
2909
2910     if (x0201_f && z_prev2==X0201) {  /* X0201 */
2911         if (c1==(0xde&0x7f)) { /* \e$BByE@\e(B */
2912             z_prev2=0;
2913             (*o_zconv)(dv[(z_prev1-SPACE)*2],dv[(z_prev1-SPACE)*2+1]);
2914             return;
2915         } else if (c1==(0xdf&0x7f)&&ev[(z_prev1-SPACE)*2]) {  /* \e$BH>ByE@\e(B */
2916             z_prev2=0;
2917             (*o_zconv)(ev[(z_prev1-SPACE)*2],ev[(z_prev1-SPACE)*2+1]);
2918             return;
2919         } else {
2920             z_prev2=0;
2921             (*o_zconv)(cv[(z_prev1-SPACE)*2],cv[(z_prev1-SPACE)*2+1]);
2922         }
2923     }
2924
2925     if (c2==EOF) {
2926         (*o_zconv)(c2,c1);
2927         return;
2928     }
2929
2930     if (x0201_f && c2==X0201) {
2931         if (dv[(c1-SPACE)*2]||ev[(c1-SPACE)*2]) {
2932             /* wait for \e$BByE@\e(B or \e$BH>ByE@\e(B */
2933             z_prev1 = c1; z_prev2 = c2;
2934             return;
2935         } else {
2936             (*o_zconv)(cv[(c1-SPACE)*2],cv[(c1-SPACE)*2+1]);
2937             return;
2938         }
2939     }
2940
2941     /* JISX0208 Alphabet */
2942     if (alpha_f && c2 == 0x23 ) {
2943         c2 = 0;
2944     } else if (alpha_f && c2 == 0x21 ) { 
2945     /* JISX0208 Kigou */
2946        if (0x21==c1) {
2947            if (alpha_f&0x2) {
2948                c1 = ' ';
2949                c2 = 0;
2950            } else if (alpha_f&0x4) {
2951                 (*o_zconv)(0,' ');
2952                 (*o_zconv)(0,' ');
2953                 return;
2954            } 
2955        } else if (0x20<c1 && c1<0x7f && fv[c1-0x20]) {
2956            c1 = fv[c1-0x20];
2957            c2 =  0;
2958            if (alpha_f&0x8) {
2959                char *entity = 0;
2960                switch (c1){
2961                  case '>': entity = "&gt;"; break;
2962                  case '<': entity = "&lt;"; break;
2963                  case '\"': entity = "&quot;"; break;
2964                  case '&': entity = "&amp;"; break;
2965                }
2966                if (entity){
2967                    while (*entity) (*o_zconv)(0, *entity++);
2968                    return;
2969                }
2970            }
2971        } 
2972     }
2973     (*o_zconv)(c2,c1);
2974 }
2975
2976
2977 #define rot13(c)  ( \
2978       ( c < 'A' ) ? c: \
2979       (c <= 'M')  ? (c + 13): \
2980       (c <= 'Z')  ? (c - 13): \
2981       (c < 'a')   ? (c): \
2982       (c <= 'm')  ? (c + 13): \
2983       (c <= 'z')  ? (c - 13): \
2984       (c) \
2985 )
2986
2987 #define  rot47(c) ( \
2988       ( c < '!' ) ? c: \
2989       ( c <= 'O' ) ? (c + 47) : \
2990       ( c <= '~' ) ?  (c - 47) : \
2991       c \
2992 )
2993
2994 void
2995 rot_conv(c2,c1)
2996 int c2,c1;
2997 {
2998     if (c2==0 || c2==X0201 || c2==ISO8859_1) {
2999         c1 = rot13(c1);
3000     } else if (c2) {
3001         c1 = rot47(c1);
3002         c2 = rot47(c2);
3003     }
3004     (*o_rot_conv)(c2,c1);
3005 }
3006
3007 void
3008 hira_conv(c2,c1)
3009 int c2,c1;
3010 {
3011     if ((hira_f & 1) && c2==0x25 && 0x20<c1 && c1<0x74) {
3012         c2 = 0x24;
3013     } else if ((hira_f & 2) && c2==0x24 && 0x20<c1 && c1<0x74) {
3014         c2 = 0x25;
3015     } 
3016     (*o_hira_conv)(c2,c1);
3017 }
3018
3019
3020 void
3021 iso2022jp_check_conv(c2,c1)
3022 int    c2, c1;
3023 {
3024     static int range[RANGE_NUM_MAX][2] = {
3025         {0x222f, 0x2239,},
3026         {0x2242, 0x2249,},
3027         {0x2251, 0x225b,},
3028         {0x226b, 0x2271,},
3029         {0x227a, 0x227d,},
3030         {0x2321, 0x232f,},
3031         {0x233a, 0x2340,},
3032         {0x235b, 0x2360,},
3033         {0x237b, 0x237e,},
3034         {0x2474, 0x247e,},
3035         {0x2577, 0x257e,},
3036         {0x2639, 0x2640,},
3037         {0x2659, 0x267e,},
3038         {0x2742, 0x2750,},
3039         {0x2772, 0x277e,},
3040         {0x2841, 0x287e,},
3041         {0x4f54, 0x4f7e,},
3042         {0x7425, 0x747e},
3043     };
3044     int i;
3045     int start, end, c;
3046
3047     if(c2 >= 0x00 && c2 <= 0x20 && c1 >= 0x7f && c1 <= 0xff) {
3048         c2 = GETA1;
3049         c1 = GETA2;
3050     }
3051     if((c2 >= 0x29 && c2 <= 0x2f) || (c2 >= 0x75 && c2 <= 0x7e)) {
3052         c2 = GETA1;
3053         c1 = GETA2;
3054     }
3055
3056     for (i = 0; i < RANGE_NUM_MAX; i++) {
3057         start = range[i][0];
3058         end   = range[i][1];
3059         c     = (c2 << 8) + c1;
3060         if (c >= start && c <= end) {
3061             c2 = GETA1;
3062             c1 = GETA2;
3063         }
3064     }
3065     (*o_iso2022jp_check_conv)(c2,c1);
3066 }
3067
3068
3069 /* This converts  =?ISO-2022-JP?B?HOGE HOGE?= */
3070
3071 unsigned char *mime_pattern[] = {
3072    (unsigned char *)"\075?EUC-JP?B?",
3073    (unsigned char *)"\075?SHIFT_JIS?B?",
3074    (unsigned char *)"\075?ISO-8859-1?Q?",
3075    (unsigned char *)"\075?ISO-8859-1?B?",
3076    (unsigned char *)"\075?ISO-2022-JP?B?",
3077    (unsigned char *)"\075?ISO-2022-JP?Q?",
3078 #if defined(UTF8_INPUT_ENABLE) || defined(UTF8_OUTPUT_ENABLE)
3079    (unsigned char *)"\075?UTF-8?B?",
3080 #endif
3081    (unsigned char *)"\075?US-ASCII?Q?",
3082    NULL
3083 };
3084
3085
3086 /* \e$B3:Ev$9$k%3!<%I$NM%@hEY$r>e$2$k$?$a$NL\0u\e(B */
3087 int (*mime_priority_func[])PROTO((int c2, int c1, int c0)) = {
3088     e_iconv, s_iconv, 0, 0, 0, 0,
3089 #if defined(UTF8_INPUT_ENABLE) || defined(UTF8_OUTPUT_ENABLE)
3090     w_iconv,
3091 #endif
3092     0,
3093 };
3094
3095 int      mime_encode[] = {
3096     JAPANESE_EUC, SHIFT_JIS,ISO8859_1, ISO8859_1, X0208, X0201,
3097 #if defined(UTF8_INPUT_ENABLE) || defined(UTF8_OUTPUT_ENABLE)
3098     UTF8,
3099 #endif
3100     ASCII,
3101     0
3102 };
3103
3104 int      mime_encode_method[] = {
3105     'B', 'B','Q', 'B', 'B', 'Q',
3106 #if defined(UTF8_INPUT_ENABLE) || defined(UTF8_OUTPUT_ENABLE)
3107     'B',
3108 #endif
3109     'Q',
3110     0
3111 };
3112
3113
3114 #define MAXRECOVER 20
3115
3116 /* I don't trust portablity of toupper */
3117 #define nkf_toupper(c)  (('a'<=c && c<='z')?(c-('a'-'A')):c)
3118 #define nkf_isdigit(c)  ('0'<=c && c<='9')
3119 #define nkf_isxdigit(c)  (nkf_isdigit(c) || ('a'<=c && c<='f') || ('A'<=c && c <= 'F'))
3120
3121 void
3122 switch_mime_getc()
3123 {
3124     if (i_getc!=mime_getc) {
3125         i_mgetc = i_getc; i_getc = mime_getc;
3126         i_mungetc = i_ungetc; i_ungetc = mime_ungetc;
3127         if(mime_f==STRICT_MIME) {
3128             i_mgetc_buf = i_mgetc; i_mgetc = mime_getc_buf;
3129             i_mungetc_buf = i_mungetc; i_mungetc = mime_ungetc_buf;
3130         }
3131     }
3132 }
3133
3134 void
3135 unswitch_mime_getc()
3136 {
3137     if(mime_f==STRICT_MIME) {
3138         i_mgetc = i_mgetc_buf;
3139         i_mungetc = i_mungetc_buf;
3140     }
3141     i_getc = i_mgetc;
3142     i_ungetc = i_mungetc;
3143 }
3144
3145 int
3146 mime_begin_strict(f)
3147 FILE *f;
3148 {
3149     int c1 = 0;
3150     int i,j,k;
3151     unsigned char *p,*q;
3152     int r[MAXRECOVER];    /* recovery buffer, max mime pattern lenght */
3153
3154     mime_decode_mode = FALSE;
3155     /* =? has been checked */
3156     j = 0;
3157     p = mime_pattern[j];
3158     r[0]='='; r[1]='?';
3159
3160     for(i=2;p[i]>' ';i++) {                   /* start at =? */
3161         if ( ((r[i] = c1 = (*i_getc)(f))==EOF) || nkf_toupper(c1) != p[i] ) {
3162             /* pattern fails, try next one */
3163             q = p;
3164             while ((p = mime_pattern[++j])) {
3165                 for(k=2;k<i;k++)              /* assume length(p) > i */
3166                     if (p[k]!=q[k]) break;
3167                 if (k==i && nkf_toupper(c1)==p[k]) break;
3168             }
3169             if (p) continue;  /* found next one, continue */
3170             /* all fails, output from recovery buffer */
3171             (*i_ungetc)(c1,f);
3172             for(j=0;j<i;j++) {
3173                 (*oconv)(0,r[j]);
3174             }
3175             return c1;
3176         }
3177     }
3178     mime_decode_mode = p[i-2];
3179
3180     clr_code_score(find_inputcode_byfunc(mime_priority_func[j]), SCORE_iMIME);
3181
3182     if (mime_decode_mode=='B') {
3183         mimebuf_f = unbuf_f;
3184         if (!unbuf_f) {
3185             /* do MIME integrity check */
3186             return mime_integrity(f,mime_pattern[j]);
3187         } 
3188     }
3189     switch_mime_getc();
3190     mimebuf_f = TRUE;
3191     return c1;
3192 }
3193
3194 int
3195 mime_getc_buf(f) 
3196 FILE *f;
3197 {
3198     /* we don't keep eof of Fifo, becase it contains ?= as
3199        a terminator. It was checked in mime_integrity. */
3200     return ((mimebuf_f)?
3201         (*i_mgetc_buf)(f):Fifo(mime_input++));
3202 }
3203
3204 int
3205 mime_ungetc_buf(c,f) 
3206 FILE *f;
3207 int c;
3208 {
3209     if (mimebuf_f)
3210         (*i_mungetc_buf)(c,f);
3211     else 
3212         Fifo(--mime_input)=c;
3213     return c;
3214 }
3215
3216 int
3217 mime_begin(f)
3218 FILE *f;
3219 {
3220     int c1;
3221     int i,k;
3222
3223     /* In NONSTRICT mode, only =? is checked. In case of failure, we  */
3224     /* re-read and convert again from mime_buffer.  */
3225
3226     /* =? has been checked */
3227     k = mime_last;
3228     Fifo(mime_last++)='='; Fifo(mime_last++)='?';
3229     for(i=2;i<MAXRECOVER;i++) {                   /* start at =? */
3230         /* We accept any character type even if it is breaked by new lines */
3231         c1 = (*i_getc)(f); Fifo(mime_last++)= c1 ;
3232         if (c1=='\n'||c1==' '||c1=='\r'||
3233                 c1=='-'||c1=='_'||is_alnum(c1) ) continue;
3234         if (c1=='=') {
3235             /* Failed. But this could be another MIME preemble */
3236             (*i_ungetc)(c1,f);
3237             mime_last--;
3238             break;
3239         }
3240         if (c1!='?') break;
3241         else {
3242             /* c1=='?' */
3243             c1 = (*i_getc)(f); Fifo(mime_last++) = c1;
3244             if (!(++i<MAXRECOVER) || c1==EOF) break;
3245             if (c1=='b'||c1=='B') {
3246                 mime_decode_mode = 'B';
3247             } else if (c1=='q'||c1=='Q') {
3248                 mime_decode_mode = 'Q';
3249             } else {
3250                 break;
3251             }
3252             c1 = (*i_getc)(f); Fifo(mime_last++) = c1;
3253             if (!(++i<MAXRECOVER) || c1==EOF) break;
3254             if (c1!='?') {
3255                 mime_decode_mode = FALSE;
3256             }
3257             break;
3258         }
3259     }
3260     switch_mime_getc();
3261     if (!mime_decode_mode) {
3262         /* false MIME premble, restart from mime_buffer */
3263         mime_decode_mode = 1;  /* no decode, but read from the mime_buffer */
3264         /* Since we are in MIME mode until buffer becomes empty,    */
3265         /* we never go into mime_begin again for a while.           */
3266         return c1;
3267     }
3268     /* discard mime preemble, and goto MIME mode */
3269     mime_last = k;
3270     /* do no MIME integrity check */
3271     return c1;   /* used only for checking EOF */
3272 }
3273
3274 #ifdef CHECK_OPTION
3275 void
3276 no_putc(c)
3277      int c;
3278 {
3279     ;
3280 }
3281
3282 void debug(str)
3283      char *str;
3284 {
3285     if (debug_f){
3286         fprintf(stderr, "%s\n", str);
3287     }
3288 }
3289 #endif
3290
3291 int
3292 hex2bin(x)
3293      int x;
3294 {
3295     if (nkf_isdigit(x)) return x - '0';
3296     return nkf_toupper(x) - 'A' + 10;
3297 }
3298
3299 #ifdef INPUT_OPTION 
3300
3301 #ifdef ANSI_C_PROTOTYPE
3302 int hex_getc(int ch, FILE *f, int (*g)(FILE *f), int (*u)(int c, FILE *f))
3303 #else
3304 int
3305 hex_getc(ch, f, g, u)
3306      int ch;
3307      FILE *f;
3308      int (*g)();
3309      int (*u)();
3310 #endif
3311 {
3312     int c1, c2, c3;
3313     c1 = (*g)(f);
3314     if (c1 != ch){
3315         return c1;
3316     }
3317     c2 = (*g)(f);
3318     if (!nkf_isxdigit(c2)){
3319         (*u)(c2, f);
3320         return c1;
3321     }
3322     c3 = (*g)(f);
3323     if (!nkf_isxdigit(c3)){
3324         (*u)(c2, f);
3325         (*u)(c3, f);
3326         return c1;
3327     }
3328     return (hex2bin(c2) << 4) | hex2bin(c3);
3329 }
3330
3331 int
3332 cap_getc(f)
3333      FILE *f;
3334 {
3335     return hex_getc(':', f, i_cgetc, i_cungetc);
3336 }
3337
3338 int
3339 cap_ungetc(c, f)
3340      int c;
3341      FILE *f;
3342 {
3343     return (*i_cungetc)(c, f);
3344 }
3345
3346 int
3347 url_getc(f)
3348      FILE *f;
3349 {
3350     return hex_getc('%', f, i_ugetc, i_uungetc);
3351 }
3352
3353 int
3354 url_ungetc(c, f)
3355      int c;
3356      FILE *f;
3357 {
3358     return (*i_uungetc)(c, f);
3359 }
3360 #endif
3361
3362 #ifdef NUMCHAR_OPTION
3363 int
3364 numchar_getc(f)
3365      FILE *f;
3366 {
3367     int (*g)() = i_ngetc;
3368     int (*u)() = i_nungetc;
3369     int i = 0, j;
3370     int buf[8];
3371     long c = -1;
3372
3373     buf[i] = (*g)(f);
3374     if (buf[i] == '&'){
3375         buf[++i] = (*g)(f);
3376         if (buf[i] == '#'){
3377             c = 0;
3378             buf[++i] = (*g)(f);
3379             if (buf[i] == 'x' || buf[i] == 'X'){
3380                 for (j = 0; j < 5; j++){
3381                     buf[++i] = (*g)(f);
3382                     if (!nkf_isxdigit(buf[i])){
3383                         if (buf[i] != ';'){
3384                             c = -1;
3385                         }
3386                         break;
3387                     }
3388                     c <<= 4;
3389                     c |= hex2bin(buf[i]);
3390                 }
3391             }else{
3392                 for (j = 0; j < 6; j++){
3393                     if (j){
3394                         buf[++i] = (*g)(f);
3395                     }
3396                     if (!nkf_isdigit(buf[i])){
3397                         if (buf[i] != ';'){
3398                             c = -1;
3399                         }
3400                         break;
3401                     }
3402                     c *= 10;
3403                     c += hex2bin(buf[i]);
3404                 }
3405             }
3406         }
3407     }
3408     if (c != -1){
3409         return CLASS_UTF16 | c;
3410     }
3411     while (i > 0){
3412         (*u)(buf[i], f);
3413         --i;
3414     }
3415     return buf[0];
3416 }
3417
3418 int
3419 numchar_ungetc(c, f)
3420      int c;
3421      FILE *f;
3422 {
3423     return (*i_nungetc)(c, f);
3424 }
3425 #endif
3426
3427
3428 int 
3429 mime_getc(f)
3430 FILE *f;
3431 {
3432     int c1, c2, c3, c4, cc;
3433     int t1, t2, t3, t4, mode, exit_mode;
3434
3435     if (mime_top != mime_last) {  /* Something is in FIFO */
3436         return  Fifo(mime_top++);
3437     }
3438     if (mime_decode_mode==1 ||mime_decode_mode==FALSE) {
3439         mime_decode_mode=FALSE;
3440         unswitch_mime_getc();
3441         return (*i_getc)(f);
3442     }
3443
3444     if (mimebuf_f == FIXED_MIME)
3445         exit_mode = mime_decode_mode;
3446     else
3447         exit_mode = FALSE;
3448     if (mime_decode_mode == 'Q') {
3449         if ((c1 = (*i_mgetc)(f)) == EOF) return (EOF);
3450 restart_mime_q:
3451         if (c1=='_') return ' ';
3452         if (c1!='=' && c1!='?') {
3453             return c1;
3454         }
3455                 
3456         mime_decode_mode = exit_mode; /* prepare for quit */
3457         if (c1<=' ') return c1;
3458         if ((c2 = (*i_mgetc)(f)) == EOF) return (EOF);
3459         if (c1=='?'&&c2=='=' && mimebuf_f != FIXED_MIME) {
3460             /* end Q encoding */
3461             input_mode = exit_mode;
3462             while((c1=(*i_getc)(f))!=EOF && c1==SPACE 
3463                         /* && (c1==NL||c1==TAB||c1=='\r') */ ) ;
3464             return c1;
3465         }
3466         if (c1=='='&&c2<' ') { /* this is soft wrap */
3467             while((c1 =  (*i_mgetc)(f)) <=' ') {
3468                 if ((c1 = (*i_mgetc)(f)) == EOF) return (EOF);
3469             }
3470             mime_decode_mode = 'Q'; /* still in MIME */
3471             goto restart_mime_q;
3472         }
3473         if (c1=='?') {
3474             mime_decode_mode = 'Q'; /* still in MIME */
3475             (*i_mungetc)(c2,f);
3476             return c1;
3477         }
3478         if ((c3 = (*i_mgetc)(f)) == EOF) return (EOF);
3479         if (c2<=' ') return c2;
3480         mime_decode_mode = 'Q'; /* still in MIME */
3481 #define hex(c)   (('0'<=c&&c<='9')?(c-'0'):\
3482      ('A'<=c&&c<='F')?(c-'A'+10):('a'<=c&&c<='f')?(c-'a'+10):0)
3483         return ((hex(c2)<<4) + hex(c3));
3484     }
3485
3486     if (mime_decode_mode != 'B') {
3487         mime_decode_mode = FALSE;
3488         return (*i_mgetc)(f);
3489     }
3490
3491
3492     /* Base64 encoding */
3493     /* 
3494         MIME allows line break in the middle of 
3495         Base64, but we are very pessimistic in decoding
3496         in unbuf mode because MIME encoded code may broken by 
3497         less or editor's control sequence (such as ESC-[-K in unbuffered
3498         mode. ignore incomplete MIME.
3499     */
3500     mode = mime_decode_mode;
3501     mime_decode_mode = exit_mode;  /* prepare for quit */
3502
3503     while ((c1 = (*i_mgetc)(f))<=' ') {
3504         if (c1==EOF)
3505             return (EOF);
3506     }
3507 mime_c2_retry:
3508     if ((c2 = (*i_mgetc)(f))<=' ') {
3509         if (c2==EOF)
3510             return (EOF);
3511         if (mime_f != STRICT_MIME) goto mime_c2_retry;
3512         if (mimebuf_f!=FIXED_MIME) input_mode = ASCII;  
3513         return c2;
3514     }
3515     if ((c1 == '?') && (c2 == '=')) {
3516         input_mode = ASCII;
3517         while((c1=(*i_getc)(f))!=EOF && c1==SPACE 
3518                     /* && (c1==NL||c1==TAB||c1=='\r') */ ) ;
3519         return c1;
3520     }
3521 mime_c3_retry:
3522     if ((c3 = (*i_mgetc)(f))<=' ') {
3523         if (c3==EOF)
3524             return (EOF);
3525         if (mime_f != STRICT_MIME) goto mime_c3_retry;
3526         if (mimebuf_f!=FIXED_MIME) input_mode = ASCII;  
3527         return c3;
3528     }
3529 mime_c4_retry:
3530     if ((c4 = (*i_mgetc)(f))<=' ') {
3531         if (c4==EOF)
3532             return (EOF);
3533         if (mime_f != STRICT_MIME) goto mime_c4_retry;
3534         if (mimebuf_f!=FIXED_MIME) input_mode = ASCII;  
3535         return c4;
3536     }
3537
3538     mime_decode_mode = mode; /* still in MIME sigh... */
3539
3540     /* BASE 64 decoding */
3541
3542     t1 = 0x3f & base64decode(c1);
3543     t2 = 0x3f & base64decode(c2);
3544     t3 = 0x3f & base64decode(c3);
3545     t4 = 0x3f & base64decode(c4);
3546     cc = ((t1 << 2) & 0x0fc) | ((t2 >> 4) & 0x03);
3547     if (c2 != '=') {
3548         Fifo(mime_last++) = cc;
3549         cc = ((t2 << 4) & 0x0f0) | ((t3 >> 2) & 0x0f);
3550         if (c3 != '=') {
3551             Fifo(mime_last++) = cc;
3552             cc = ((t3 << 6) & 0x0c0) | (t4 & 0x3f);
3553             if (c4 != '=') 
3554                 Fifo(mime_last++) = cc;
3555         }
3556     } else {
3557         return c1;
3558     }
3559     return  Fifo(mime_top++);
3560 }
3561
3562 int
3563 mime_ungetc(c,f) 
3564 int   c;
3565 FILE  *f;
3566 {
3567     Fifo(--mime_top) = c;
3568     return c;
3569 }
3570
3571 int
3572 mime_integrity(f,p)
3573 FILE *f;
3574 unsigned char *p;
3575 {
3576     int c,d;
3577     unsigned int q;
3578     /* In buffered mode, read until =? or NL or buffer full
3579      */
3580     mime_input = mime_top;
3581     mime_last = mime_top;
3582     while(*p) Fifo(mime_input++) = *p++;
3583     d = 0;
3584     q = mime_input;
3585     while((c=(*i_getc)(f))!=EOF) {
3586         if (((mime_input-mime_top)&MIME_BUF_MASK)==0) {
3587             break;   /* buffer full */
3588         }
3589         if (c=='=' && d=='?') {
3590             /* checked. skip header, start decode */
3591             Fifo(mime_input++) = c;
3592             /* mime_last_input = mime_input; */
3593             mime_input = q; 
3594             switch_mime_getc();
3595             return 1;
3596         }
3597         if (!( (c=='+'||c=='/'|| c=='=' || c=='?' || is_alnum(c))))
3598             break;
3599         /* Should we check length mod 4? */
3600         Fifo(mime_input++) = c;
3601         d=c;
3602     }
3603     /* In case of Incomplete MIME, no MIME decode  */
3604     Fifo(mime_input++) = c;
3605     mime_last = mime_input;     /* point undecoded buffer */
3606     mime_decode_mode = 1;              /* no decode on Fifo last in mime_getc */
3607     switch_mime_getc();         /* anyway we need buffered getc */
3608     return 1;
3609 }
3610
3611 int
3612 base64decode(c)
3613     int            c;
3614 {
3615     int             i;
3616     if (c > '@') {
3617         if (c < '[') {
3618             i = c - 'A';                        /* A..Z 0-25 */
3619         } else {
3620             i = c - 'G'     /* - 'a' + 26 */ ;  /* a..z 26-51 */
3621         }
3622     } else if (c > '/') {
3623         i = c - '0' + '4'   /* - '0' + 52 */ ;  /* 0..9 52-61 */
3624     } else if (c == '+') {
3625         i = '>'             /* 62 */ ;          /* +  62 */
3626     } else {
3627         i = '?'             /* 63 */ ;          /* / 63 */
3628     }
3629     return (i);
3630 }
3631
3632 static char basis_64[] =
3633    "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+/";
3634
3635 static int b64c;
3636
3637 void
3638 open_mime(mode)
3639 int mode;
3640 {
3641     unsigned char *p;
3642     int i;
3643     p  = mime_pattern[0];
3644     for(i=0;mime_encode[i];i++) {
3645         if (mode == mime_encode[i]) {
3646             p = mime_pattern[i];
3647                 break;
3648         }
3649     }
3650     mimeout_mode = mime_encode_method[i];
3651             
3652     /* (*o_mputc)(' '); */
3653     while(*p) {
3654         (*o_mputc)(*p++);
3655         base64_count ++;
3656     }
3657 }
3658
3659 void
3660 close_mime()
3661 {
3662     (*o_mputc)('?');
3663     (*o_mputc)('=');
3664     (*o_mputc)(' ');
3665     base64_count += 3;
3666     mimeout_mode = 0;
3667 }
3668
3669 #define itoh4(c)   (c>=10?c+'A'-10:c+'0')
3670
3671 void
3672 mime_putc(c)
3673     int            c;
3674 {
3675     if (mimeout_f==FIXED_MIME) {
3676         if (base64_count>71) {
3677             (*o_mputc)('\n');
3678             base64_count=0;
3679         }
3680     } else if (c==NL) {
3681         base64_count=0;
3682     } 
3683     if (c!=EOF) {
3684         if ( c<=DEL &&(output_mode==ASCII ||output_mode == ISO8859_1 )
3685                 && mimeout_f!=FIXED_MIME) {
3686             if (mimeout_mode=='Q') {
3687                 if (c<=SPACE) {
3688                     close_mime();
3689                 }
3690                 (*o_mputc)(c);
3691                 return;
3692             }
3693             if (mimeout_mode!='B' || c!=SPACE) {
3694                 if (mimeout_mode) {
3695                     mime_putc(EOF);
3696                     mimeout_mode=0;
3697                 }
3698                 (*o_mputc)(c);
3699                 base64_count ++;
3700                 return;
3701             }
3702         } else if (!mimeout_mode && mimeout_f!=FIXED_MIME) {
3703             open_mime(output_mode);
3704         }
3705     } else { /* c==EOF */
3706         switch(mimeout_mode) {
3707         case 'Q':
3708         case 'B':
3709             break;
3710         case 2:
3711             (*o_mputc)(basis_64[((b64c & 0x3)<< 4)]);
3712             (*o_mputc)('=');
3713             (*o_mputc)('=');
3714             base64_count += 3;
3715             break;
3716         case 1:
3717             (*o_mputc)(basis_64[((b64c & 0xF) << 2)]);
3718             (*o_mputc)('=');
3719             base64_count += 2;
3720             break;
3721         }
3722         if (mimeout_mode) {
3723             if (mimeout_f!=FIXED_MIME) {
3724                 close_mime(); 
3725             } else if (mimeout_mode != 'Q')
3726                 mimeout_mode = 'B';
3727         }
3728         return;
3729     }
3730     switch(mimeout_mode) {
3731     case 'Q':
3732         if(c>=DEL) {
3733             (*o_mputc)('=');
3734             (*o_mputc)(itoh4(((c>>4)&0xf)));
3735             (*o_mputc)(itoh4((c&0xf)));
3736         } else {
3737             (*o_mputc)(c);
3738         }
3739         break;
3740     case 'B':
3741         b64c=c;
3742         (*o_mputc)(basis_64[c>>2]);
3743         mimeout_mode=2;
3744         base64_count ++;
3745         break;
3746     case 2:
3747         (*o_mputc)(basis_64[((b64c & 0x3)<< 4) | ((c & 0xF0) >> 4)]);
3748         b64c=c;
3749         mimeout_mode=1;
3750         base64_count ++;
3751         break;
3752     case 1:
3753         (*o_mputc)(basis_64[((b64c & 0xF) << 2) | ((c & 0xC0) >>6)]);
3754         (*o_mputc)(basis_64[c & 0x3F]);
3755         mimeout_mode='B';
3756         base64_count += 2;
3757         break;
3758     }
3759 }
3760
3761
3762 #ifdef PERL_XS
3763 void 
3764 reinit()
3765 {
3766     unbuf_f = FALSE;
3767     estab_f = FALSE;
3768     nop_f = FALSE;
3769     binmode_f = TRUE;       
3770     rot_f = FALSE;         
3771     hira_f = FALSE;         
3772     input_f = FALSE;      
3773     alpha_f = FALSE;     
3774     mime_f = STRICT_MIME; 
3775     mimebuf_f = FALSE; 
3776     broken_f = FALSE;  
3777     iso8859_f = FALSE; 
3778 #if defined(MSDOS) || defined(__OS2__) 
3779      x0201_f = TRUE;   
3780 #else
3781      x0201_f = NO_X0201;
3782 #endif
3783     iso2022jp_f = FALSE;
3784
3785     kanji_intro = DEFAULT_J;
3786     ascii_intro = DEFAULT_R;
3787
3788     output_conv = DEFAULT_CONV; 
3789     oconv = DEFAULT_CONV; 
3790
3791     i_mgetc  = std_getc; 
3792     i_mungetc  = std_ungetc;
3793     i_mgetc_buf = std_getc; 
3794     i_mungetc_buf = std_ungetc;
3795
3796     i_getc= std_getc; 
3797     i_ungetc=std_ungetc;
3798
3799     i_bgetc= std_getc;
3800     i_bungetc= std_ungetc;
3801
3802     o_putc = std_putc;
3803     o_mputc = std_putc;
3804     o_crconv = no_connection; 
3805     o_rot_conv = no_connection; 
3806     o_iso2022jp_check_conv = no_connection;
3807     o_hira_conv = no_connection; 
3808     o_fconv = no_connection; 
3809     o_zconv = no_connection;
3810
3811     i_getc = std_getc;
3812     i_ungetc = std_ungetc;
3813     i_mgetc = std_getc; 
3814     i_mungetc = std_ungetc; 
3815
3816     output_mode = ASCII;
3817     input_mode =  ASCII;
3818     shift_mode =  FALSE;
3819     mime_decode_mode =   FALSE;
3820     file_out = FALSE;
3821     mimeout_mode = 0;
3822     mimeout_f = FALSE;
3823     base64_count = 0;
3824     option_mode = 0;
3825     crmode_f = 0;
3826
3827     {
3828         struct input_code *p = input_code_list;
3829         while (p->name){
3830             status_reinit(p++);
3831         }
3832     }
3833 #ifdef UTF8_OUTPUT_ENABLE
3834     if (w_oconv16_begin_f) {
3835         w_oconv16_begin_f = 2;
3836     }
3837 #endif
3838     f_line = 0;    
3839     f_prev = 0;
3840     fold_preserve_f = FALSE; 
3841     fold_f  = FALSE;
3842     fold_len  = 0;
3843     fold_margin  = FOLD_MARGIN;
3844     broken_counter = 0;
3845     broken_last = 0;
3846     z_prev2=0,z_prev1=0;
3847
3848     input_codename = "";
3849 }
3850 #endif
3851
3852 void 
3853 no_connection(c2,c1) 
3854 int c2,c1;
3855 {
3856     no_connection2(c2,c1,0);
3857 }
3858
3859 int
3860 no_connection2(c2,c1,c0) 
3861 int c2,c1,c0;
3862 {
3863     fprintf(stderr,"nkf internal module connection failure.\n");
3864     exit(1);
3865 }
3866
3867 #ifndef PERL_XS
3868 void 
3869 usage()   
3870 {
3871     fprintf(stderr,"USAGE:  nkf(nkf32,wnkf,nkf2) -[flags] [in file] .. [out file for -O flag]\n");
3872     fprintf(stderr,"Flags:\n");
3873     fprintf(stderr,"b,u      Output is bufferred (DEFAULT),Output is unbufferred\n");
3874 #ifdef DEFAULT_CODE_SJIS
3875     fprintf(stderr,"j,s,e,w  Outout code is JIS 7 bit, Shift JIS (DEFAULT), AT&T JIS (EUC), UTF-8\n");
3876 #endif
3877 #ifdef DEFAULT_CODE_JIS
3878     fprintf(stderr,"j,s,e,w  Outout code is JIS 7 bit (DEFAULT), Shift JIS, AT&T JIS (EUC), UTF-8\n");
3879 #endif
3880 #ifdef DEFAULT_CODE_EUC
3881     fprintf(stderr,"j,s,e,w  Outout code is JIS 7 bit, Shift JIS, AT&T JIS (EUC) (DEFAULT), UTF-8\n");
3882 #endif
3883 #ifdef DEFAULT_CODE_UTF8
3884     fprintf(stderr,"j,s,e,w  Outout code is JIS 7 bit, Shift JIS, AT&T JIS (EUC), UTF-8 (DEFAULT)\n");
3885 #endif
3886     fprintf(stderr,"J,S,E,W  Input assumption is JIS 7 bit , Shift JIS, AT&T JIS (EUC), UTF-8\n");
3887     fprintf(stderr,"t        no conversion\n");
3888     fprintf(stderr,"i_/o_    Output sequence to designate JIS-kanji/ASCII (DEFAULT B)\n");
3889     fprintf(stderr,"r        {de/en}crypt ROT13/47\n");
3890     fprintf(stderr,"h        1 hirakana->katakana, 2 katakana->hirakana,3 both\n");
3891     fprintf(stderr,"v        Show this usage. V: show version\n");
3892     fprintf(stderr,"m[BQN0]  MIME decode [B:base64,Q:quoted,N:non-strict,0:no decode]\n");
3893     fprintf(stderr,"M[BQ]    MIME encode [B:base64 Q:quoted]\n");
3894     fprintf(stderr,"l        ISO8859-1 (Latin-1) support\n");
3895     fprintf(stderr,"f/F      Folding: -f60 or -f or -f60-10 (fold margin 10) F preserve nl\n");
3896     fprintf(stderr,"Z[0-3]   Convert X0208 alphabet to ASCII  1: Kankaku to space,2: 2 spaces,\n");
3897     fprintf(stderr,"                                          3: Convert HTML Entity\n");
3898     fprintf(stderr,"X,x      Assume X0201 kana in MS-Kanji, -x preserves X0201\n");
3899     fprintf(stderr,"B[0-2]   Broken input  0: missing ESC,1: any X on ESC-[($]-X,2: ASCII on NL\n");
3900 #ifdef MSDOS
3901     fprintf(stderr,"T        Text mode output\n");
3902 #endif
3903     fprintf(stderr,"O        Output to File (DEFAULT 'nkf.out')\n");
3904     fprintf(stderr,"d,c      Delete \\r in line feed and \\032, Add \\r in line feed\n");
3905     fprintf(stderr,"I        Convert non ISO-2022-JP charactor to GETA\n");
3906     fprintf(stderr,"-L[uwm]  line mode u:LF w:CRLF m:CR (DEFAULT noconversion)\n");
3907     fprintf(stderr,"long name options\n");
3908     fprintf(stderr," --fj,--unix,--mac,--windows                convert for the system\n");
3909     fprintf(stderr," --jis,--euc,--sjis,--utf8,--utf16,--mime,--base64  convert for the code\n");
3910 #ifdef OVERWRITE
3911     fprintf(stderr," --overwrite          Overwrite original listed files by filtered result\n");
3912 #endif
3913     fprintf(stderr," --help,--version\n");
3914     version();
3915 }
3916
3917 void
3918 version()
3919 {
3920     fprintf(stderr,"Network Kanji Filter Version %s (%s) "
3921 #if defined(MSDOS) && !defined(__WIN32__) && !defined(__WIN16__)
3922                   "for DOS"
3923 #endif
3924 #if defined(MSDOS) && defined(__WIN16__)
3925                   "for Win16"
3926 #endif
3927 #if defined(MSDOS) && defined(__WIN32__)
3928                   "for Win32"
3929 #endif
3930 #ifdef __OS2__
3931                   "for OS/2"
3932 #endif
3933                   ,Version,Patchlevel);
3934     fprintf(stderr,"\n%s\n",CopyRight);
3935 }
3936 #endif
3937
3938 /**
3939  ** \e$B%Q%C%A@):n<T\e(B
3940  **  void@merope.pleiades.or.jp (Kusakabe Youichi)
3941  **  NIDE Naoyuki <nide@ics.nara-wu.ac.jp>
3942  **  ohta@src.ricoh.co.jp (Junn Ohta)
3943  **  inouet@strl.nhk.or.jp (Tomoyuki Inoue)
3944  **  kiri@pulser.win.or.jp (Tetsuaki Kiriyama)
3945  **  Kimihiko Sato <sato@sail.t.u-tokyo.ac.jp>
3946  **  a_kuroe@kuroe.aoba.yokohama.jp (Akihiko Kuroe)
3947  **  kono@ie.u-ryukyu.ac.jp (Shinji Kono)
3948  **  GHG00637@nifty-serve.or.jp (COW)
3949  **
3950  **/
3951
3952 /* end */