git.chise.org Git - chise/xemacs-chise.git.1/blob - src/file-coding.h

   1 /* Header for code conversion stuff
   2    Copyright (C) 1991, 1995 Free Software Foundation, Inc.
   3    Copyright (C) 1995 Sun Microsystems, Inc.
   4
   5 This file is part of XEmacs.
   6
   7 XEmacs is free software; you can redistribute it and/or modify it
   8 under the terms of the GNU General Public License as published by the
   9 Free Software Foundation; either version 2, or (at your option) any
  10 later version.
  11
  12 XEmacs is distributed in the hope that it will be useful, but WITHOUT
  13 ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or
  14 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  15 for more details.
  16
  17 You should have received a copy of the GNU General Public License
  18 along with XEmacs; see the file COPYING.  If not, write to
  19 the Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  20 Boston, MA 02111-1307, USA.  */
  21
  22 /* Synched up with: Mule 2.3.  Not in FSF. */
  23
  24 /* 91.10.09 written by K.Handa <handa@etl.go.jp> */
  25 /* Rewritten by Ben Wing <ben@xemacs.org>. */
  26
  27 #ifndef _XEMACS_MULE_CODING_H_
  28 #define _XEMACS_MULE_CODING_H_
  29
  30 struct decoding_stream;
  31 struct encoding_stream;
  32
  33 /* Coding system types.  These go into the TYPE field of a
  34    struct Lisp_Coding_System. */
  35
  36 enum coding_system_type
  37 {
  38   CODESYS_AUTODETECT,   /* Automatic conversion. */
  39 #ifdef MULE
  40   CODESYS_SHIFT_JIS,    /* Shift-JIS; Hankaku (half-width) KANA
  41                            is also supported. */
  42   CODESYS_ISO2022,      /* Any ISO2022-compliant coding system.
  43                            Includes JIS, EUC, CTEXT */
  44   CODESYS_BIG5,         /* BIG5 (used for Taiwanese). */
  45   CODESYS_CCL,          /* Converter written in CCL. */
  46 #endif
  47   CODESYS_NO_CONVERSION /* "No conversion"; used for binary files.
  48                            We use quotes because there really
  49                            is some conversion being applied,
  50                            but it appears to the user as if
  51                            the text is read in without conversion. */
  52 #ifdef DEBUG_XEMACS
  53   ,CODESYS_INTERNAL     /* Raw (internally-formatted) data. */
  54 #endif
  55 };
  56
  57 enum eol_type
  58 {
  59   EOL_AUTODETECT,
  60   EOL_LF,
  61   EOL_CRLF,
  62   EOL_CR
  63 };
  64
  65 #ifdef MULE
  66 typedef struct charset_conversion_spec charset_conversion_spec;
  67 struct charset_conversion_spec
  68 {
  69   Lisp_Object from_charset;
  70   Lisp_Object to_charset;
  71 };
  72
  73 typedef struct
  74 {
  75   Dynarr_declare (charset_conversion_spec);
  76 } charset_conversion_spec_dynarr;
  77 #endif
  78
  79 struct Lisp_Coding_System
  80 {
  81   struct lcrecord_header header;
  82
  83   /* Name and doc string of this coding system. */
  84   Lisp_Object name, doc_string;
  85
  86   /* This is the major type of the coding system -- one of Big5, ISO2022,
  87      Shift-JIS, etc.  See the constants above. */
  88   enum coding_system_type type;
  89
  90   /* Mnemonic string displayed in the modeline when this coding
  91      system is active for a particular buffer. */
  92   Lisp_Object mnemonic;
  93
  94   Lisp_Object post_read_conversion, pre_write_conversion;
  95
  96   enum eol_type eol_type;
  97
  98   /* Subsidiary coding systems that specify a particular type of EOL
  99      marking, rather than autodetecting it.  These will only be non-nil
 100      if (eol_type == EOL_AUTODETECT). */
 101   Lisp_Object eol_lf, eol_crlf, eol_cr;
 102 #ifdef MULE
 103   struct
 104   {
 105     /* What are the charsets to be initially designated to G0, G1,
 106        G2, G3?  If t, no charset is initially designated.  If nil,
 107        no charset is initially designated and no charset is allowed
 108        to be designated. */
 109     Lisp_Object initial_charset[4];
 110
 111     /* If true, a designation escape sequence needs to be sent on output
 112        for the charset in G[0-3] before that charset is used. */
 113     unsigned char force_charset_on_output[4];
 114
 115     charset_conversion_spec_dynarr *input_conv;
 116     charset_conversion_spec_dynarr *output_conv;
 117
 118     unsigned int shoort         :1; /* C makes you speak Dutch */
 119     unsigned int no_ascii_eol   :1;
 120     unsigned int no_ascii_cntl  :1;
 121     unsigned int seven          :1;
 122     unsigned int lock_shift     :1;
 123     unsigned int no_iso6429     :1;
 124     unsigned int escape_quoted  :1;
 125   } iso2022;
 126   struct
 127   {
 128     /* For a CCL coding system, these specify the CCL programs used for
 129        decoding (input) and encoding (output). */
 130     Lisp_Object decode, encode;
 131   } ccl;
 132 #endif
 133 };
 134
 135 DECLARE_LRECORD (coding_system, struct Lisp_Coding_System);
 136 #define XCODING_SYSTEM(x) XRECORD (x, coding_system, struct Lisp_Coding_System)
 137 #define XSETCODING_SYSTEM(x, p) XSETRECORD (x, p, coding_system)
 138 #define CODING_SYSTEMP(x) RECORDP (x, coding_system)
 139 #define GC_CODING_SYSTEMP(x) GC_RECORDP (x, coding_system)
 140 #define CHECK_CODING_SYSTEM(x) CHECK_RECORD (x, coding_system)
 141 #define CONCHECK_CODING_SYSTEM(x) CONCHECK_RECORD (x, coding_system)
 142
 143 #define CODING_SYSTEM_NAME(codesys) ((codesys)->name)
 144 #define CODING_SYSTEM_DOC_STRING(codesys) ((codesys)->doc_string)
 145 #define CODING_SYSTEM_TYPE(codesys) ((codesys)->type)
 146 #define CODING_SYSTEM_MNEMONIC(codesys) ((codesys)->mnemonic)
 147 #define CODING_SYSTEM_POST_READ_CONVERSION(codesys) \
 148   ((codesys)->post_read_conversion)
 149 #define CODING_SYSTEM_PRE_WRITE_CONVERSION(codesys) \
 150   ((codesys)->pre_write_conversion)
 151 #define CODING_SYSTEM_EOL_TYPE(codesys) ((codesys)->eol_type)
 152 #define CODING_SYSTEM_EOL_LF(codesys)   ((codesys)->eol_lf)
 153 #define CODING_SYSTEM_EOL_CRLF(codesys) ((codesys)->eol_crlf)
 154 #define CODING_SYSTEM_EOL_CR(codesys)   ((codesys)->eol_cr)
 155
 156 #ifdef MULE
 157 #define CODING_SYSTEM_ISO2022_INITIAL_CHARSET(codesys, g) \
 158   ((codesys)->iso2022.initial_charset[g])
 159 #define CODING_SYSTEM_ISO2022_FORCE_CHARSET_ON_OUTPUT(codesys, g) \
 160   ((codesys)->iso2022.force_charset_on_output[g])
 161 #define CODING_SYSTEM_ISO2022_SHORT(codesys) ((codesys)->iso2022.shoort)
 162 #define CODING_SYSTEM_ISO2022_NO_ASCII_EOL(codesys) \
 163   ((codesys)->iso2022.no_ascii_eol)
 164 #define CODING_SYSTEM_ISO2022_NO_ASCII_CNTL(codesys) \
 165   ((codesys)->iso2022.no_ascii_cntl)
 166 #define CODING_SYSTEM_ISO2022_SEVEN(codesys) ((codesys)->iso2022.seven)
 167 #define CODING_SYSTEM_ISO2022_LOCK_SHIFT(codesys) \
 168   ((codesys)->iso2022.lock_shift)
 169 #define CODING_SYSTEM_ISO2022_NO_ISO6429(codesys) \
 170   ((codesys)->iso2022.no_iso6429)
 171 #define CODING_SYSTEM_ISO2022_ESCAPE_QUOTED(codesys) \
 172   ((codesys)->iso2022.escape_quoted)
 173 #define CODING_SYSTEM_CCL_DECODE(codesys) ((codesys)->ccl.decode)
 174 #define CODING_SYSTEM_CCL_ENCODE(codesys) ((codesys)->ccl.encode)
 175 #endif /* MULE */
 176
 177 #define XCODING_SYSTEM_NAME(codesys) \
 178   CODING_SYSTEM_NAME (XCODING_SYSTEM (codesys))
 179 #define XCODING_SYSTEM_DOC_STRING(codesys) \
 180   CODING_SYSTEM_DOC_STRING (XCODING_SYSTEM (codesys))
 181 #define XCODING_SYSTEM_TYPE(codesys) \
 182   CODING_SYSTEM_TYPE (XCODING_SYSTEM (codesys))
 183 #define XCODING_SYSTEM_MNEMONIC(codesys) \
 184   CODING_SYSTEM_MNEMONIC (XCODING_SYSTEM (codesys))
 185 #define XCODING_SYSTEM_POST_READ_CONVERSION(codesys) \
 186   CODING_SYSTEM_POST_READ_CONVERSION (XCODING_SYSTEM (codesys))
 187 #define XCODING_SYSTEM_PRE_WRITE_CONVERSION(codesys) \
 188   CODING_SYSTEM_PRE_WRITE_CONVERSION (XCODING_SYSTEM (codesys))
 189 #define XCODING_SYSTEM_EOL_TYPE(codesys) \
 190   CODING_SYSTEM_EOL_TYPE (XCODING_SYSTEM (codesys))
 191 #define XCODING_SYSTEM_EOL_LF(codesys) \
 192   CODING_SYSTEM_EOL_LF (XCODING_SYSTEM (codesys))
 193 #define XCODING_SYSTEM_EOL_CRLF(codesys) \
 194   CODING_SYSTEM_EOL_CRLF (XCODING_SYSTEM (codesys))
 195 #define XCODING_SYSTEM_EOL_CR(codesys) \
 196   CODING_SYSTEM_EOL_CR (XCODING_SYSTEM (codesys))
 197
 198 #ifdef MULE
 199 #define XCODING_SYSTEM_ISO2022_INITIAL_CHARSET(codesys, g) \
 200   CODING_SYSTEM_ISO2022_INITIAL_CHARSET (XCODING_SYSTEM (codesys), g)
 201 #define XCODING_SYSTEM_ISO2022_FORCE_CHARSET_ON_OUTPUT(codesys, g) \
 202   CODING_SYSTEM_ISO2022_FORCE_CHARSET_ON_OUTPUT (XCODING_SYSTEM (codesys), g)
 203 #define XCODING_SYSTEM_ISO2022_SHORT(codesys) \
 204   CODING_SYSTEM_ISO2022_SHORT (XCODING_SYSTEM (codesys))
 205 #define XCODING_SYSTEM_ISO2022_NO_ASCII_EOL(codesys) \
 206   CODING_SYSTEM_ISO2022_NO_ASCII_EOL (XCODING_SYSTEM (codesys))
 207 #define XCODING_SYSTEM_ISO2022_NO_ASCII_CNTL(codesys) \
 208   CODING_SYSTEM_ISO2022_NO_ASCII_CNTL (XCODING_SYSTEM (codesys))
 209 #define XCODING_SYSTEM_ISO2022_SEVEN(codesys) \
 210   CODING_SYSTEM_ISO2022_SEVEN (XCODING_SYSTEM (codesys))
 211 #define XCODING_SYSTEM_ISO2022_LOCK_SHIFT(codesys) \
 212   CODING_SYSTEM_ISO2022_LOCK_SHIFT (XCODING_SYSTEM (codesys))
 213 #define XCODING_SYSTEM_ISO2022_NO_ISO6429(codesys) \
 214   CODING_SYSTEM_ISO2022_NO_ISO6429 (XCODING_SYSTEM (codesys))
 215 #define XCODING_SYSTEM_ISO2022_ESCAPE_QUOTED(codesys) \
 216   CODING_SYSTEM_ISO2022_ESCAPE_QUOTED (XCODING_SYSTEM (codesys))
 217 #define XCODING_SYSTEM_CCL_DECODE(codesys) \
 218   CODING_SYSTEM_CCL_DECODE (XCODING_SYSTEM (codesys))
 219 #define XCODING_SYSTEM_CCL_ENCODE(codesys) \
 220   CODING_SYSTEM_CCL_ENCODE (XCODING_SYSTEM (codesys))
 221 #endif /* MULE */
 222
 223 EXFUN (Fcoding_category_list, 0);
 224 EXFUN (Fcoding_category_system, 1);
 225 EXFUN (Fcoding_priority_list, 0);
 226 EXFUN (Fcoding_system_charset, 2);
 227 EXFUN (Fcoding_system_doc_string, 1);
 228 EXFUN (Fcoding_system_list, 0);
 229 EXFUN (Fcoding_system_name, 1);
 230 EXFUN (Fcoding_system_p, 1);
 231 EXFUN (Fcoding_system_property, 2);
 232 EXFUN (Fcoding_system_type, 1);
 233 EXFUN (Fcopy_coding_system, 2);
 234 EXFUN (Fdecode_big5_char, 1);
 235 EXFUN (Fdecode_coding_region, 4);
 236 EXFUN (Fdecode_shift_jis_char, 1);
 237 EXFUN (Fdetect_coding_region, 3);
 238 EXFUN (Fencode_big5_char, 1);
 239 EXFUN (Fencode_coding_region, 4);
 240 EXFUN (Fencode_shift_jis_char, 1);
 241 EXFUN (Ffind_coding_system, 1);
 242 EXFUN (Fget_coding_system, 1);
 243 EXFUN (Fmake_coding_system, 4);
 244 EXFUN (Fset_coding_category_system, 2);
 245 EXFUN (Fset_coding_priority_list, 1);
 246 EXFUN (Fsubsidiary_coding_system, 2);
 247
 248 extern Lisp_Object Qbig5, Qbuffer_file_coding_system, Qccl, Qcharset_g0;
 249 extern Lisp_Object Qcharset_g1, Qcharset_g2, Qcharset_g3, Qcoding_system_error;
 250 extern Lisp_Object Qcoding_system_p, Qcr, Qcrlf, Qctext, Qdecode, Qencode;
 251 extern Lisp_Object Qeol_cr, Qeol_crlf, Qeol_lf, Qeol_type, Qescape_quoted;
 252 extern Lisp_Object Qforce_g0_on_output, Qforce_g1_on_output;
 253 extern Lisp_Object Qforce_g2_on_output, Qforce_g3_on_output;
 254 extern Lisp_Object Qinput_charset_conversion, Qiso2022, Qlf, Qlock_shift;
 255 extern Lisp_Object Qmnemonic, Qno_ascii_cntl, Qno_ascii_eol, Qno_conversion;
 256 extern Lisp_Object Qno_iso6429, Qoutput_charset_conversion;
 257 extern Lisp_Object Qpost_read_conversion, Qpre_write_conversion, Qseven;
 258 extern Lisp_Object Qshift_jis, Qshort, Vcoding_system_for_read;
 259 extern Lisp_Object Vcoding_system_for_write, Vcoding_system_hashtable;
 260 extern Lisp_Object Vfile_name_coding_system, Vkeyboard_coding_system;
 261 extern Lisp_Object Vterminal_coding_system;
 262
 263 /* Flags indicating current state while converting code. */
 264
 265 /* Used by everyone. */
 266
 267 #define CODING_STATE_END        (1 << 0) /* If set, this is the last chunk of
 268                                             data being processed.  When this
 269                                             is finished, output any necessary
 270                                             terminating control characters,
 271                                             escape sequences, etc. */
 272 #define CODING_STATE_CR         (1 << 1) /* If set, we just saw a CR. */
 273
 274
 275 /* Used by Big 5 on output. */
 276 #ifdef MULE
 277 #define CODING_STATE_BIG5_1     (1 << 2) /* If set, we just encountered
 278                                             LEADING_BYTE_BIG5_1. */
 279 #define CODING_STATE_BIG5_2     (1 << 3) /* If set, we just encountered
 280                                             LEADING_BYTE_BIG5_2. */
 281
 282
 283 /* Used by ISO2022 on input and output. */
 284
 285 #define CODING_STATE_R2L        (1 << 4)  /* If set, the current
 286                                              directionality is right-to-left.
 287                                              Otherwise, it's left-to-right. */
 288
 289
 290 /* Used by ISO2022 on input. */
 291
 292 #define CODING_STATE_ESCAPE     (1 << 5)  /* If set, we're currently parsing
 293                                              an escape sequence and the upper
 294                                              16 bits should be looked at to
 295                                              indicate what partial escape
 296                                              sequence we've seen so far.
 297                                              Otherwise, we're running
 298                                              through actual text. */
 299 #define CODING_STATE_SS2        (1 << 6)  /* If set, G2 is invoked into GL, but
 300                                              only for the next character. */
 301 #define CODING_STATE_SS3        (1 << 7)  /* If set, G3 is invoked into GL,
 302                                              but only for the next character.
 303                                              If both CODING_STATE_SS2 and
 304                                              CODING_STATE_SS3 are set,
 305                                              CODING_STATE_SS2 overrides; but
 306                                              this probably indicates an error
 307                                              in the text encoding. */
 308 #define CODING_STATE_COMPOSITE  (1 << 8)  /* If set, we're currently processing
 309                                              a composite character (i.e. a
 310                                              character constructed by
 311                                              overstriking two or more
 312                                              characters). */
 313
 314
 315 /* CODING_STATE_ISO2022_LOCK is the mask of flags that remain on until
 316    explicitly turned off when in the ISO2022 encoder/decoder.  Other flags are
 317    turned off at the end of processing each character or escape sequence. */
 318 # define CODING_STATE_ISO2022_LOCK \
 319   (CODING_STATE_END | CODING_STATE_COMPOSITE | CODING_STATE_R2L)
 320 #define CODING_STATE_BIG5_LOCK \
 321   CODING_STATE_END
 322
 323 /* Flags indicating what we've seen so far when parsing an
 324    ISO2022 escape sequence. */
 325 enum iso_esc_flag
 326 {
 327   /* Partial sequences */
 328   ISO_ESC_NOTHING,      /* Nothing has been seen. */
 329   ISO_ESC,              /* We've seen ESC. */
 330   ISO_ESC_2_4,          /* We've seen ESC $.  This indicates
 331                            that we're designating a multi-byte, rather
 332                            than a single-byte, character set. */
 333   ISO_ESC_2_8,          /* We've seen ESC 0x28, i.e. ESC (.
 334                            This means designate a 94-character
 335                            character set into G0. */
 336   ISO_ESC_2_9,          /* We've seen ESC 0x29 -- designate a
 337                            94-character character set into G1. */
 338   ISO_ESC_2_10,         /* We've seen ESC 0x2A. */
 339   ISO_ESC_2_11,         /* We've seen ESC 0x2B. */
 340   ISO_ESC_2_12,         /* We've seen ESC 0x2C -- designate a
 341                            96-character character set into G0.
 342                            (This is not ISO2022-standard.
 343                            The following 96-character
 344                            control sequences are standard,
 345                            though.) */
 346   ISO_ESC_2_13,         /* We've seen ESC 0x2D -- designate a
 347                            96-character character set into G1.
 348                            */
 349   ISO_ESC_2_14,         /* We've seen ESC 0x2E. */
 350   ISO_ESC_2_15,         /* We've seen ESC 0x2F. */
 351   ISO_ESC_2_4_8,        /* We've seen ESC $ 0x28 -- designate
 352                            a 94^N character set into G0. */
 353   ISO_ESC_2_4_9,        /* We've seen ESC $ 0x29. */
 354   ISO_ESC_2_4_10,       /* We've seen ESC $ 0x2A. */
 355   ISO_ESC_2_4_11,       /* We've seen ESC $ 0x2B. */
 356   ISO_ESC_2_4_12,       /* We've seen ESC $ 0x2C. */
 357   ISO_ESC_2_4_13,       /* We've seen ESC $ 0x2D. */
 358   ISO_ESC_2_4_14,       /* We've seen ESC $ 0x2E. */
 359   ISO_ESC_2_4_15,       /* We've seen ESC $ 0x2F. */
 360   ISO_ESC_5_11,         /* We've seen ESC [ or 0x9B.  This
 361                            starts a directionality-control
 362                            sequence.  The next character
 363                            must be 0, 1, 2, or ]. */
 364   ISO_ESC_5_11_0,       /* We've seen 0x9B 0.  The next
 365                            character must be ]. */
 366   ISO_ESC_5_11_1,       /* We've seen 0x9B 1.  The next
 367                            character must be ]. */
 368   ISO_ESC_5_11_2,       /* We've seen 0x9B 2.  The next
 369                            character must be ]. */
 370
 371   /* Full sequences. */
 372   ISO_ESC_START_COMPOSITE, /* Private usage for START COMPOSING */
 373   ISO_ESC_END_COMPOSITE, /* Private usage for END COMPOSING */
 374   ISO_ESC_SINGLE_SHIFT, /* We've seen a complete single-shift sequence. */
 375   ISO_ESC_LOCKING_SHIFT,/* We've seen a complete locking-shift sequence. */
 376   ISO_ESC_DESIGNATE,    /* We've seen a complete designation sequence. */
 377   ISO_ESC_DIRECTIONALITY,/* We've seen a complete ISO6429 directionality
 378                            sequence. */
 379   ISO_ESC_LITERAL       /* We've seen a literal character ala
 380                            escape-quoting. */
 381 };
 382
 383 /* Macros to define code of control characters for ISO2022's functions.  */
 384                         /* code */      /* function */
 385 #define ISO_CODE_LF     0x0A            /* line-feed */
 386 #define ISO_CODE_CR     0x0D            /* carriage-return */
 387 #define ISO_CODE_SO     0x0E            /* shift-out */
 388 #define ISO_CODE_SI     0x0F            /* shift-in */
 389 #define ISO_CODE_ESC    0x1B            /* escape */
 390 #define ISO_CODE_DEL    0x7F            /* delete */
 391 #define ISO_CODE_SS2    0x8E            /* single-shift-2 */
 392 #define ISO_CODE_SS3    0x8F            /* single-shift-3 */
 393 #define ISO_CODE_CSI    0x9B            /* control-sequence-introduce */
 394 #endif /* MULE */
 395
 396 /* Macros to access an encoding stream or decoding stream */
 397
 398 #define CODING_STREAM_DECOMPOSE(str, flags, ch) \
 399 do {                                            \
 400   flags = (str)->flags;                         \
 401   ch = (str)->ch;                               \
 402 } while (0)
 403
 404 #define CODING_STREAM_COMPOSE(str, flags, ch)   \
 405 do {                                            \
 406   (str)->flags = flags;                         \
 407   (str)->ch = ch;                               \
 408 } while (0)
 409
 410
 411 /* For detecting the encoding of text */
 412 enum coding_category_type
 413 {
 414 #ifdef MULE
 415   CODING_CATEGORY_SHIFT_JIS,
 416   CODING_CATEGORY_ISO_7, /* ISO2022 system using only seven-bit bytes,
 417                             no locking shift */
 418   CODING_CATEGORY_ISO_8_DESIGNATE, /* ISO2022 system using eight-bit bytes,
 419                                       no locking shift, no single shift,
 420                                       using designation to switch charsets */
 421   CODING_CATEGORY_ISO_8_1, /* ISO2022 system using eight-bit bytes,
 422                               no locking shift, no designation sequences,
 423                               one-dimension characters in the upper half. */
 424   CODING_CATEGORY_ISO_8_2, /* ISO2022 system using eight-bit bytes,
 425                               no locking shift, no designation sequences,
 426                               two-dimension characters in the upper half. */
 427   CODING_CATEGORY_ISO_LOCK_SHIFT, /* ISO2022 system using locking shift */
 428   CODING_CATEGORY_BIG5,
 429 #endif /* MULE */
 430   CODING_CATEGORY_NO_CONVERSION
 431 };
 432
 433 #define CODING_CATEGORY_LAST CODING_CATEGORY_NO_CONVERSION
 434
 435 #ifdef MULE
 436 #define CODING_CATEGORY_SHIFT_JIS_MASK  \
 437   (1 << CODING_CATEGORY_SHIFT_JIS)
 438 #define CODING_CATEGORY_ISO_7_MASK \
 439   (1 << CODING_CATEGORY_ISO_7)
 440 #define CODING_CATEGORY_ISO_8_DESIGNATE_MASK \
 441   (1 << CODING_CATEGORY_ISO_8_DESIGNATE)
 442 #define CODING_CATEGORY_ISO_8_1_MASK \
 443   (1 << CODING_CATEGORY_ISO_8_1)
 444 #define CODING_CATEGORY_ISO_8_2_MASK \
 445   (1 << CODING_CATEGORY_ISO_8_2)
 446 #define CODING_CATEGORY_ISO_LOCK_SHIFT_MASK \
 447   (1 << CODING_CATEGORY_ISO_LOCK_SHIFT)
 448 #define CODING_CATEGORY_BIG5_MASK \
 449   (1 << CODING_CATEGORY_BIG5)
 450 #endif
 451 #define CODING_CATEGORY_NO_CONVERSION_MASK \
 452   (1 << CODING_CATEGORY_NO_CONVERSION)
 453 #define CODING_CATEGORY_NOT_FINISHED_MASK \
 454   (1 << 30)
 455
 456 #ifdef MULE
 457 /* Convert shift-JIS code (sj1, sj2) into internal string
 458    representation (c1, c2). (The leading byte is assumed.) */
 459
 460 #define DECODE_SJIS(sj1, sj2, c1, c2)                   \
 461 do {                                                    \
 462   int I1 = sj1, I2 = sj2;                               \
 463   if (I2 >= 0x9f)                                       \
 464     c1 = (I1 << 1) - ((I1 >= 0xe0) ? 0xe0 : 0x60),      \
 465     c2 = I2 + 2;                                        \
 466   else                                                  \
 467     c1 = (I1 << 1) - ((I1 >= 0xe0) ? 0xe1 : 0x61),      \
 468     c2 = I2 + ((I2 >= 0x7f) ? 0x60 : 0x61);             \
 469 } while (0)
 470
 471 /* Convert the internal string representation of a Shift-JIS character
 472    (c1, c2) into Shift-JIS code (sj1, sj2).  The leading byte is
 473    assumed. */
 474
 475 #define ENCODE_SJIS(c1, c2, sj1, sj2)                   \
 476 do {                                                    \
 477   int I1 = c1, I2 = c2;                                 \
 478   if (I1 & 1)                                           \
 479     sj1 = (I1 >> 1) + ((I1 < 0xdf) ? 0x31 : 0x71),      \
 480     sj2 = I2 - ((I2 >= 0xe0) ? 0x60 : 0x61);            \
 481   else                                                  \
 482     sj1 = (I1 >> 1) + ((I1 < 0xdf) ? 0x30 : 0x70),      \
 483     sj2 = I2 - 2;                                       \
 484 } while (0)
 485 #endif /* MULE */
 486
 487 Lisp_Object make_decoding_input_stream (Lstream *stream,
 488                                         Lisp_Object codesys);
 489 Lisp_Object make_encoding_input_stream (Lstream *stream,
 490                                         Lisp_Object codesys);
 491 Lisp_Object make_decoding_output_stream (Lstream *stream,
 492                                          Lisp_Object codesys);
 493 Lisp_Object make_encoding_output_stream (Lstream *stream,
 494                                          Lisp_Object codesys);
 495 Lisp_Object decoding_stream_coding_system (Lstream *stream);
 496 Lisp_Object encoding_stream_coding_system (Lstream *stream);
 497 void set_decoding_stream_coding_system (Lstream *stream,
 498                                         Lisp_Object codesys);
 499 void set_encoding_stream_coding_system (Lstream *stream,
 500                                         Lisp_Object codesys);
 501 void determine_real_coding_system (Lstream *stream, Lisp_Object *codesys_in_out,
 502                                    enum eol_type *eol_type_in_out);
 503
 504
 505 #ifndef MULE
 506 #define MIN_LEADING_BYTE                0x80
 507 /* These need special treatment in a string and/or character */
 508 #define LEADING_BYTE_COMPOSITE          0x80 /* for a composite character */
 509 #define LEADING_BYTE_CONTROL_1          0x8F /* represent normal 80-9F */
 510 #define LEADING_BYTE_LATIN_ISO8859_1    0x81 /* Right half of ISO 8859-1 */
 511 #define BYTE_C1_P(c) ((unsigned int) ((unsigned int) (c) - 0x80) < 0x20)
 512 #define BUFBYTE_FIRST_BYTE_P(c) ((c) < 0xA0)
 513 #define BUFBYTE_LEADING_BYTE_P(c) BYTE_C1_P (c)
 514 #endif /* not MULE */
 515 #endif /* _XEMACS_MULE_CODING_H_ */
 516