(BUFBYTE_FIRST_BYTE_P): Moved to mb-utf-8.h.
[chise/xemacs-chise.git-] / src / character.h
1 /* Header for UCS-4 character representation.
2    Copyright (C) 1999 Electrotechnical Laboratory, JAPAN.
3    Licensed to the Free Software Foundation.
4
5 This file is part of XEmacs.
6
7 XEmacs is free software; you can redistribute it and/or modify it
8 under the terms of the GNU General Public License as published by the
9 Free Software Foundation; either version 2, or (at your option) any
10 later version.
11
12 XEmacs is distributed in the hope that it will be useful, but WITHOUT
13 ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or
14 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
15 for more details.
16
17 You should have received a copy of the GNU General Public License
18 along with XEmacs; see the file COPYING.  If not, write to
19 the Free Software Foundation, Inc., 59 Temple Place - Suite 330,
20 Boston, MA 02111-1307, USA.  */
21
22 /* Rewritten by MORIOKA Tomohiko <tomo@m17n.org>. */
23
24 #ifndef _XEMACS_CHARACTER_H
25 #define _XEMACS_CHARACTER_H
26
27 #ifndef CHAR_IS_UCS4
28 #include "mule-charset.h"
29 #else
30
31 /************************************************************************/
32 /*                    Definition of leading bytes                       */
33 /************************************************************************/
34
35 typedef int Charset_ID;
36
37 #define MIN_LEADING_BYTE                0x80
38
39 #define LEADING_BYTE_UCS_BMP            0x80
40 #define LEADING_BYTE_CONTROL_1          0x81 /* represent normal 80-9F */
41
42
43 #define CHARSET_ID_OFFSET_94            0x60
44
45 #define MIN_CHARSET_ID_PRIVATE_94       (CHARSET_ID_OFFSET_94 + '0')
46 #define MAX_CHARSET_ID_PRIVATE_94       (CHARSET_ID_OFFSET_94 + '?')
47
48 /* ISO 646 IRV */
49 #define LEADING_BYTE_ASCII              (CHARSET_ID_OFFSET_94 + 'B')
50
51 /* Right half of JIS X0201-1976 */
52 #define LEADING_BYTE_KATAKANA_JISX0201  (CHARSET_ID_OFFSET_94 + 'I')
53
54 /* Left  half of JIS X0201-1976 */
55 #define LEADING_BYTE_LATIN_JISX0201     (CHARSET_ID_OFFSET_94 + 'J')
56
57
58 #define CHARSET_ID_OFFSET_96            0x70
59
60 /* Right half of ISO 8859-1 */
61 #define LEADING_BYTE_LATIN_ISO8859_1    (CHARSET_ID_OFFSET_96 + 'A')
62
63 /* Right half of ISO 8859-2 */
64 #define LEADING_BYTE_LATIN_ISO8859_2    (CHARSET_ID_OFFSET_96 + 'B')
65
66 /* Right half of ISO 8859-3 */
67 #define LEADING_BYTE_LATIN_ISO8859_3    (CHARSET_ID_OFFSET_96 + 'C')
68
69 /* Right half of ISO 8859-4 */
70 #define LEADING_BYTE_LATIN_ISO8859_4    (CHARSET_ID_OFFSET_96 + 'D')
71
72 /* Right half of ISO 8859-7 */
73 #define LEADING_BYTE_GREEK_ISO8859_7    (CHARSET_ID_OFFSET_96 + 'F')
74
75 /* Right half of ISO 8859-6 */
76 #define LEADING_BYTE_ARABIC_ISO8859_6   (CHARSET_ID_OFFSET_96 + 'G')
77
78 /* Right half of ISO 8859-8 */
79 #define LEADING_BYTE_HEBREW_ISO8859_8   (CHARSET_ID_OFFSET_96 + 'H')
80
81 /* Right half of ISO 8859-5 */
82 #define LEADING_BYTE_CYRILLIC_ISO8859_5 (CHARSET_ID_OFFSET_96 + 'L')
83
84 /* Right half of ISO 8859-9 */
85 #define LEADING_BYTE_LATIN_ISO8859_9    (CHARSET_ID_OFFSET_96 + 'M')
86
87 /* TIS620-2533 */
88 #define LEADING_BYTE_THAI_TIS620        (CHARSET_ID_OFFSET_96 + 'T')
89
90
91 #define MIN_LEADING_BYTE_PRIVATE_1      0xD0
92 #define MAX_LEADING_BYTE_PRIVATE_1      0xDF
93
94
95 #define CHARSET_ID_OFFSET_94x94         0xB0
96
97 /* Big5 Level 1 */
98 #define LEADING_BYTE_CHINESE_BIG5_1     ('0' + CHARSET_ID_OFFSET_94x94)
99
100 /* Big5 Level 2 */
101 #define LEADING_BYTE_CHINESE_BIG5_2     ('1' + CHARSET_ID_OFFSET_94x94)
102
103 #define MIN_LEADING_BYTE_PRIVATE_2      ('0' + CHARSET_ID_OFFSET_94x94)
104 #define MAX_LEADING_BYTE_PRIVATE_2      ('?' + CHARSET_ID_OFFSET_94x94)
105
106 /* Japanese JIS X0208-1978 */
107 #define LEADING_BYTE_JAPANESE_JISX0208_1978 \
108                                         ('@' + CHARSET_ID_OFFSET_94x94)
109
110 /* Chinese Hanzi GB2312-1980 */
111 #define LEADING_BYTE_CHINESE_GB2312     ('A' + CHARSET_ID_OFFSET_94x94)
112
113 /* Japanese JIS X0208-1983 */
114 #define LEADING_BYTE_JAPANESE_JISX0208  ('B' + CHARSET_ID_OFFSET_94x94)
115
116 /* Hangul KS C5601-1987 */
117 #define LEADING_BYTE_KOREAN_KSC5601     ('C' + CHARSET_ID_OFFSET_94x94)
118
119 /* Japanese JIS X0212-1990 */
120 #define LEADING_BYTE_JAPANESE_JISX0212  ('D' + CHARSET_ID_OFFSET_94x94)
121
122 /* CCITT Extended GB */
123 #define LEADING_BYTE_CHINESE_CCITT_GB   ('E' + CHARSET_ID_OFFSET_94x94)
124
125 /* Chinese CNS11643 Set 1 */
126 #define LEADING_BYTE_CHINESE_CNS11643_1 ('G' + CHARSET_ID_OFFSET_94x94)
127
128 /* Chinese CNS11643 Set 2 */
129 #define LEADING_BYTE_CHINESE_CNS11643_2 ('H' + CHARSET_ID_OFFSET_94x94)
130
131 /* Chinese CNS11643 Set 3 */
132 #define LEADING_BYTE_CHINESE_CNS11643_3 ('I' + CHARSET_ID_OFFSET_94x94)
133
134 /* Chinese CNS11643 Set 4 */
135 #define LEADING_BYTE_CHINESE_CNS11643_4 ('J' + CHARSET_ID_OFFSET_94x94)
136
137 /* Chinese CNS11643 Set 5 */
138 #define LEADING_BYTE_CHINESE_CNS11643_5 ('K' + CHARSET_ID_OFFSET_94x94)
139
140 /* Chinese CNS11643 Set 6 */
141 #define LEADING_BYTE_CHINESE_CNS11643_6 ('L' + CHARSET_ID_OFFSET_94x94)
142
143 /* Chinese CNS11643 Set 7 */
144 #define LEADING_BYTE_CHINESE_CNS11643_7 ('M' + CHARSET_ID_OFFSET_94x94)
145
146 /* DPRK Hangul KPS 9566-1997 */
147 #define LEADING_BYTE_KOREAN_KPS9566     ('N' + CHARSET_ID_OFFSET_94x94)
148
149 #define MIN_LEADING_BYTE_OFFICIAL_2     LEADING_BYTE_JAPANESE_JISX0208_1978
150 #define MAX_LEADING_BYTE_OFFICIAL_2     LEADING_BYTE_KOREAN_KPS9566
151
152 #define NUM_LEADING_BYTES 256
153
154 \f
155 /************************************************************************/
156 /*                     Operations on individual bytes                   */
157 /*                             of any format                            */
158 /************************************************************************/
159
160 /* Argument `c' should be (unsigned int) or (unsigned char). */
161 /* Note that SP and DEL are not included. */
162
163 #define BYTE_ASCII_P(c) ((c) < 0x80)
164 #define BYTE_C0_P(c) ((c) < 0x20)
165 /* Do some forced casting just to make *sure* things are gotten right. */
166 #define BYTE_C1_P(c) ((unsigned int) ((unsigned int) (c) - 0x80) < 0x20)
167
168 \f
169 /************************************************************************/
170 /*            Information about a particular character set              */
171 /************************************************************************/
172
173 struct Lisp_Charset
174 {
175   struct lcrecord_header header;
176
177   int id;
178   Lisp_Object name;
179   Lisp_Object doc_string, registry, short_name, long_name;
180
181   Lisp_Object reverse_direction_charset;
182
183   Lisp_Object ccl_program;
184
185   /* Final byte of this character set in ISO2022 designating escape sequence */
186   Bufbyte final;
187
188   /* Number of bytes (1 - 4) required in the internal representation
189      for characters in this character set.  This is *not* the
190      same as the dimension of the character set). */
191   unsigned int rep_bytes;
192
193   /* Number of columns a character in this charset takes up, on TTY
194      devices.  Not used for X devices. */
195   unsigned int columns;
196
197   /* Direction of this character set */
198   unsigned int direction;
199
200   /* Type of this character set (94, 96, 94x94, 96x96) */
201   unsigned int type;
202
203   /* Number of bytes used in encoding of this character set (1 or 2) */
204   unsigned int dimension;
205
206   /* Number of chars in each dimension (usually 94 or 96) */
207   unsigned int chars;
208
209   /* Which half of font to be used to display this character set */
210   unsigned int graphic;
211 };
212
213 DECLARE_LRECORD (charset, struct Lisp_Charset);
214 #define XCHARSET(x) XRECORD (x, charset, struct Lisp_Charset)
215 #define XSETCHARSET(x, p) XSETRECORD (x, p, charset)
216 #define CHARSETP(x) RECORDP (x, charset)
217 #define GC_CHARSETP(x) GC_RECORDP (x, charset)
218 #define CHECK_CHARSET(x) CHECK_RECORD (x, charset)
219 #define CONCHECK_CHARSET(x) CONCHECK_RECORD (x, charset)
220
221 #define CHARSET_TYPE_94      0 /* This charset includes 94    characters. */
222 #define CHARSET_TYPE_96      1 /* This charset includes 96    characters. */
223 #define CHARSET_TYPE_94X94   2 /* This charset includes 94x94 characters. */
224 #define CHARSET_TYPE_96X96   3 /* This charset includes 96x96 characters. */
225 #define CHARSET_TYPE_128X128 4 /* This charset includes 128x128 characters. */
226 #define CHARSET_TYPE_256X256 5 /* This charset includes 256x256 characters. */
227
228 #define CHARSET_LEFT_TO_RIGHT   0
229 #define CHARSET_RIGHT_TO_LEFT   1
230
231 /* Leading byte and id have been regrouped. -- OG */
232 #define CHARSET_ID(cs)           ((cs)->id)
233 #define CHARSET_LEADING_BYTE(cs) ((Bufbyte)(CHARSET_ID(cs)))
234 #define CHARSET_NAME(cs)         ((cs)->name)
235 #define CHARSET_SHORT_NAME(cs)   ((cs)->short_name)
236 #define CHARSET_LONG_NAME(cs)    ((cs)->long_name)
237 #define CHARSET_REP_BYTES(cs)    ((cs)->rep_bytes)
238 #define CHARSET_COLUMNS(cs)      ((cs)->columns)
239 #define CHARSET_GRAPHIC(cs)      ((cs)->graphic)
240 #define CHARSET_TYPE(cs)         ((cs)->type)
241 #define CHARSET_DIRECTION(cs)    ((cs)->direction)
242 #define CHARSET_FINAL(cs)        ((cs)->final)
243 #define CHARSET_DOC_STRING(cs)   ((cs)->doc_string)
244 #define CHARSET_REGISTRY(cs)     ((cs)->registry)
245 #define CHARSET_CCL_PROGRAM(cs)  ((cs)->ccl_program)
246 #define CHARSET_DIMENSION(cs)    ((cs)->dimension)
247 #define CHARSET_CHARS(cs)        ((cs)->chars)
248 #define CHARSET_REVERSE_DIRECTION_CHARSET(cs) ((cs)->reverse_direction_charset)
249
250
251 #define XCHARSET_ID(cs)           CHARSET_ID           (XCHARSET (cs))
252 #define XCHARSET_NAME(cs)         CHARSET_NAME         (XCHARSET (cs))
253 #define XCHARSET_SHORT_NAME(cs)   CHARSET_SHORT_NAME   (XCHARSET (cs))
254 #define XCHARSET_LONG_NAME(cs)    CHARSET_LONG_NAME    (XCHARSET (cs))
255 #define XCHARSET_REP_BYTES(cs)    CHARSET_REP_BYTES    (XCHARSET (cs))
256 #define XCHARSET_COLUMNS(cs)      CHARSET_COLUMNS      (XCHARSET (cs))
257 #define XCHARSET_GRAPHIC(cs)      CHARSET_GRAPHIC      (XCHARSET (cs))
258 #define XCHARSET_TYPE(cs)         CHARSET_TYPE         (XCHARSET (cs))
259 #define XCHARSET_DIRECTION(cs)    CHARSET_DIRECTION    (XCHARSET (cs))
260 #define XCHARSET_FINAL(cs)        CHARSET_FINAL        (XCHARSET (cs))
261 #define XCHARSET_DOC_STRING(cs)   CHARSET_DOC_STRING   (XCHARSET (cs))
262 #define XCHARSET_REGISTRY(cs)     CHARSET_REGISTRY     (XCHARSET (cs))
263 #define XCHARSET_LEADING_BYTE(cs) CHARSET_LEADING_BYTE (XCHARSET (cs))
264 #define XCHARSET_CCL_PROGRAM(cs)  CHARSET_CCL_PROGRAM  (XCHARSET (cs))
265 #define XCHARSET_DIMENSION(cs)    CHARSET_DIMENSION    (XCHARSET (cs))
266 #define XCHARSET_CHARS(cs)        CHARSET_CHARS        (XCHARSET (cs))
267 #define XCHARSET_REVERSE_DIRECTION_CHARSET(cs) \
268   CHARSET_REVERSE_DIRECTION_CHARSET (XCHARSET (cs))
269
270 /* Table of charsets indexed by (leading byte - 128). */
271 extern Lisp_Object charset_by_leading_byte[NUM_LEADING_BYTES];
272
273 /* Table of charsets indexed by type/final-byte. */
274 extern Lisp_Object charset_by_attributes[4][128];
275
276 #ifdef ERROR_CHECK_TYPECHECK
277 /* int not Bufbyte even though that is the actual type of a leading byte.
278    This way, out-ot-range values will get caught rather than automatically
279    truncated. */
280 INLINE Lisp_Object CHARSET_BY_LEADING_BYTE (Charset_ID lb);
281 INLINE Lisp_Object
282 CHARSET_BY_LEADING_BYTE (Charset_ID lb)
283 {
284   assert (lb >= MIN_LEADING_BYTE &&
285           lb < (MIN_LEADING_BYTE + NUM_LEADING_BYTES));
286   return charset_by_leading_byte[lb - MIN_LEADING_BYTE];
287 }
288
289 #else
290
291 #define CHARSET_BY_LEADING_BYTE(lb) \
292   (charset_by_leading_byte[(lb) - MIN_LEADING_BYTE])
293
294 #endif
295
296 #define CHARSET_BY_ATTRIBUTES(type, final, dir) \
297   (charset_by_attributes[type][final])
298
299 INLINE int REP_BYTES_BY_FIRST_BYTE (int fb);
300 INLINE int
301 REP_BYTES_BY_FIRST_BYTE (int fb)
302 {
303   if ( fb < 0xc0 )
304     return 1;
305   else if ( fb < 0xe0 )
306     return 2;
307   else if ( fb < 0xf0 )
308     return 3;
309   else if ( fb < 0xf8 )
310     return 4;
311   else if ( fb < 0xfc )
312     return 5;
313   else
314     return 6;
315 }
316
317 \f
318 /************************************************************************/
319 /*                        Dealing with characters                       */
320 /************************************************************************/
321
322 /* Is this character represented by more than one byte in a string? */
323
324 #define CHAR_MULTIBYTE_P(c) ((c) >= 0x80)
325
326 #define CHAR_ASCII_P(c) (!CHAR_MULTIBYTE_P (c))
327
328 /* The bit fields of character are divided into 3 parts:
329    FIELD1(5bits):FIELD2(7bits):FIELD3(7bits) */
330
331 #define CHAR_FIELD1_MASK (0x7F << 14)
332 #define CHAR_FIELD2_MASK (0x7F << 7)
333 #define CHAR_FIELD3_MASK 0x7F
334
335 #define MIN_CHAR_GREEK          0x0370
336 #define MAX_CHAR_GREEK          0x03CF
337
338 #define MIN_CHAR_CYRILLIC       0x0400
339 #define MAX_CHAR_CYRILLIC       0x045F
340
341 #define MIN_CHAR_HEBREW         0x0590
342 #define MAX_CHAR_HEBREW         0x05EF
343
344 #define MIN_CHAR_THAI           0x0E00
345 #define MAX_CHAR_THAI           0x0E5F
346
347 #define MIN_CHAR_HALFWIDTH_KATAKANA     0xFF60
348 #define MAX_CHAR_HALFWIDTH_KATAKANA     0xFF9F
349
350 #define MIN_CHAR_94             0xE90940
351 #define MAX_CHAR_94             (MIN_CHAR_94 + 94 * 80 - 1)
352 #define MIN_CHAR_96             (MIN_CHAR_94 + 94 * 80)
353 #define MAX_CHAR_96             (MIN_CHAR_96 + 96 * 80 - 1)
354
355 #define MIN_CHAR_94x94          0xE9F6C0
356 #define MAX_CHAR_94x94          (MIN_CHAR_94x94 + 94 * 94 * 80 - 1)
357 #define MIN_CHAR_96x96          0xF4C000
358 #define MAX_CHAR_96x96          (MIN_CHAR_96x96 + 96 * 96 * 80 - 1)
359
360 /* Macros to access each field of a character code of C.  */
361
362 #define CHAR_FIELD1(c) (((c) & CHAR_FIELD1_MASK) >> 14)
363 #define CHAR_FIELD2_INTERNAL(c) (((c) & CHAR_FIELD2_MASK) >> 7)
364 #define CHAR_FIELD3_INTERNAL(c)  ((c) & CHAR_FIELD3_MASK)
365
366 /* Field 1, if non-zero, usually holds a leading byte for a
367    dimension-2 charset.  Field 2, if non-zero, usually holds a leading
368    byte for a dimension-1 charset. */
369
370 /* Converting between field values and leading bytes.  */
371
372 #define FIELD1_TO_PRIVATE_LEADING_BYTE  CHARSET_ID_OFFSET_94x94
373 #define FIELD1_TO_OFFICIAL_LEADING_BYTE CHARSET_ID_OFFSET_94x94
374 #define FIELD2_TO_PRIVATE_LEADING_BYTE  (MIN_LEADING_BYTE_PRIVATE_1 - 32)
375 #define FIELD2_TO_OFFICIAL_LEADING_BYTE LEADING_BYTE_ASCII
376
377 /* Minimum and maximum allowed values for the fields. */
378
379 #define MIN_CHAR_FIELD1_OFFICIAL \
380   (MIN_LEADING_BYTE_OFFICIAL_2 - FIELD1_TO_OFFICIAL_LEADING_BYTE)
381 #define MAX_CHAR_FIELD1_OFFICIAL \
382   (MAX_LEADING_BYTE_OFFICIAL_2 - FIELD1_TO_OFFICIAL_LEADING_BYTE)
383
384 #define MIN_CHAR_FIELD2_PRIVATE \
385   (MIN_LEADING_BYTE_PRIVATE_1 - FIELD2_TO_PRIVATE_LEADING_BYTE)
386 #define MAX_CHAR_FIELD2_PRIVATE \
387   (MAX_LEADING_BYTE_PRIVATE_1 - FIELD2_TO_PRIVATE_LEADING_BYTE)
388
389 #define MIN_CHAR_FIELD1_PRIVATE \
390   (MIN_LEADING_BYTE_PRIVATE_2 - FIELD1_TO_PRIVATE_LEADING_BYTE)
391 #define MAX_CHAR_FIELD1_PRIVATE \
392   (MAX_LEADING_BYTE_PRIVATE_2 - FIELD1_TO_PRIVATE_LEADING_BYTE)
393
394 /* Minimum character code of each <type> character.  */
395
396 #define MULE_CHAR_PRIVATE_OFFSET (0xe0 << 16)
397
398 #define MIN_CHAR_PRIVATE_TYPE9N \
399   (MULE_CHAR_PRIVATE_OFFSET | (MIN_CHAR_FIELD2_PRIVATE  <<  7))
400 #define MAX_CHAR_PRIVATE_TYPE9N \
401   (MULE_CHAR_PRIVATE_OFFSET | (MAX_CHAR_FIELD2_PRIVATE  <<  7) | 0x7f)
402 #define MIN_CHAR_PRIVATE_TYPE9NX9N \
403   (MULE_CHAR_PRIVATE_OFFSET | (MIN_CHAR_FIELD1_PRIVATE  << 14))
404 #define MIN_CHAR_OFFICIAL_TYPE9NX9N \
405   (MULE_CHAR_PRIVATE_OFFSET | (MIN_CHAR_FIELD1_OFFICIAL << 14))
406 #define MIN_CHAR_COMPOSITION \
407   (MULE_CHAR_PRIVATE_OFFSET | (0x7f << 14))
408
409 /* Return a character whose charset is CHARSET and position-codes
410    are C1 and C2.  TYPE9N character ignores C2.
411
412    NOTE: This takes advantage of the fact that
413    FIELD2_TO_OFFICIAL_LEADING_BYTE and
414    FIELD2_TO_PRIVATE_LEADING_BYTE are the same.
415    */
416
417 INLINE Emchar MAKE_CHAR (Lisp_Object charset, int c1, int c2);
418 INLINE Emchar
419 MAKE_CHAR (Lisp_Object charset, int c1, int c2)
420 {
421   if (EQ (charset, Vcharset_ascii))
422     return c1;
423   else if (EQ (charset, Vcharset_control_1))
424     return c1 | 0x80;
425   else if (EQ (charset, Vcharset_latin_iso8859_1))
426     return c1 | 0x80;
427   else if (EQ (charset, Vcharset_greek_iso8859_7))
428     return c1 + MIN_CHAR_GREEK - 0x20;
429   else if (EQ (charset, Vcharset_cyrillic_iso8859_5))
430     return c1 + MIN_CHAR_CYRILLIC - 0x20;
431   else if (EQ (charset, Vcharset_hebrew_iso8859_8))
432     return c1 + MIN_CHAR_HEBREW - 0x20;
433   else if (EQ (charset, Vcharset_thai_tis620))
434     return c1 + MIN_CHAR_THAI - 0x20;
435   else if (EQ (charset, Vcharset_katakana_jisx0201))
436     if (c1 < 0x60)
437       return c1 + MIN_CHAR_HALFWIDTH_KATAKANA - 0x20;
438     else
439       return 32;
440   else if (XCHARSET_DIMENSION (charset) == 1)
441     {
442       switch (XCHARSET_CHARS (charset))
443         {
444         case 94:
445           return MIN_CHAR_94
446             + (XCHARSET_FINAL (charset) - '0') * 94 + (c1 - 33);
447         case 96:
448           return MIN_CHAR_96
449             + (XCHARSET_FINAL (charset) - '0') * 96 + (c1 - 32);
450         default:
451           abort ();
452         }
453     }
454   else
455     {
456       switch (XCHARSET_CHARS (charset))
457         {
458         case 94:
459           return MIN_CHAR_94x94
460             + (XCHARSET_FINAL (charset) - '0') * 94 * 94
461             + (c1 - 33) * 94 + (c2 - 33);
462         case 96:
463           return MIN_CHAR_96x96
464             + (XCHARSET_FINAL (charset) - '0') * 96 * 96
465             + (c1 - 32) * 96 + (c2 - 32);
466         default:
467           abort ();
468         }
469     }
470 }
471
472 extern Charset_ID    latin_a_char_to_charset[128];
473 extern unsigned char latin_a_char_to_byte1[128];
474 extern unsigned char latin_a_char_to_byte2[128];
475
476 INLINE void breakup_char_1 (Emchar c, Lisp_Object *charset, int *c1, int *c2);
477 INLINE void
478 breakup_char_1 (Emchar c, Lisp_Object *charset, int *c1, int *c2)
479 {
480   if (CHAR_ASCII_P (c))
481     {
482       *charset = Vcharset_ascii;
483       *c1 = c;
484       *c2 = 0;
485     }
486   else if (c < 0xA0)
487     {
488       *charset = Vcharset_control_1;
489       *c1 = CHAR_FIELD3_INTERNAL (c);
490       *c2 = 0;
491     }
492   else if (c <= 0xff)
493     {
494       *charset = Vcharset_latin_iso8859_1;
495       *c1 = CHAR_FIELD3_INTERNAL (c);
496       *c2 = 0;
497     }
498   else if (c <= 0x17f)
499     {
500       *charset
501         = CHARSET_BY_LEADING_BYTE (latin_a_char_to_charset[c - 0x100]);
502       *c1 = latin_a_char_to_byte1[c - 0x100];
503       *c2 = latin_a_char_to_byte2[c - 0x100];
504     }
505   else if (c < MIN_CHAR_GREEK)
506     {
507       printf("not break up u+%x", c);
508       abort ();
509     }
510   else if (c <= MAX_CHAR_GREEK)
511     {
512       *charset = Vcharset_greek_iso8859_7;
513       *c1 = c - MIN_CHAR_GREEK + 0x20;
514       *c2 = 0;
515     }
516   else if (c < MIN_CHAR_CYRILLIC)
517     {
518       printf("not break up u+%x", c);
519       abort ();
520     }
521   else if (c <= MAX_CHAR_CYRILLIC)
522     {
523       *charset = Vcharset_cyrillic_iso8859_5;
524       *c1 = c - MIN_CHAR_CYRILLIC + 0x20;
525       *c2 = 0;
526     }
527   else if (c < MIN_CHAR_HEBREW)
528     {
529       printf("not break up u+%x", c);
530       abort ();
531     }
532   else if (c <= MAX_CHAR_HEBREW)
533     {
534       *charset = Vcharset_hebrew_iso8859_8;
535       *c1 = c - MIN_CHAR_HEBREW + 0x20;
536       *c2 = 0;
537     }
538   else if (c < MIN_CHAR_THAI)
539     {
540       printf("not break up u+%x", c);
541       abort ();
542     }
543   else if (c <= MAX_CHAR_THAI)
544     {
545       *charset = Vcharset_thai_tis620;
546       *c1 = c - MIN_CHAR_THAI + 0x20;
547       *c2 = 0;
548     }
549   else if (c < MIN_CHAR_HALFWIDTH_KATAKANA)
550     {
551       printf("not break up u+%x", c);
552       abort ();
553     }
554   else if (c <= MAX_CHAR_HALFWIDTH_KATAKANA)
555     {
556       *charset = Vcharset_katakana_jisx0201;
557       *c1 = c - MIN_CHAR_HALFWIDTH_KATAKANA + 0x20;
558       *c2 = 0;
559     }
560   else if (c <= MAX_CHAR_94)
561     {
562       *charset
563         = CHARSET_BY_ATTRIBUTES (CHARSET_TYPE_94,
564                                  ((c - MIN_CHAR_94) / 94) + '0',
565                                  CHARSET_LEFT_TO_RIGHT);
566       *c1 = ((c - MIN_CHAR_94) % 94) + 33;
567       *c2 = 0;
568     }
569   else if (c <= MAX_CHAR_96)
570     {
571       *charset
572         = CHARSET_BY_ATTRIBUTES (CHARSET_TYPE_96,
573                                  ((c - MIN_CHAR_96) / 96) + '0',
574                                  CHARSET_LEFT_TO_RIGHT);
575       *c1 = ((c - MIN_CHAR_96) % 96) + 32;
576       *c2 = 0;
577     }
578   else if (c <= MAX_CHAR_94x94)
579     {
580       *charset
581         = CHARSET_BY_ATTRIBUTES (CHARSET_TYPE_94X94,
582                                  ((c - MIN_CHAR_94x94) / (94 * 94)) + '0',
583                                  CHARSET_LEFT_TO_RIGHT);
584       *c1 = (((c - MIN_CHAR_94x94) / 94) % 94) + 33;
585       *c2 = ((c - MIN_CHAR_94x94) % 94) + 33;
586     }
587   else if (c <= MAX_CHAR_96x96)
588     {
589       *charset
590         = CHARSET_BY_ATTRIBUTES (CHARSET_TYPE_96X96,
591                                  ((c - MIN_CHAR_96x96) / (96 * 96)) + '0',
592                                  CHARSET_LEFT_TO_RIGHT);
593       *c1 = (((c - MIN_CHAR_96x96) / 96) % 96) + 32;
594       *c2 = ((c - MIN_CHAR_96x96) % 96) + 32;
595     }
596   else
597     {
598       printf("u+%x", c);
599       abort();
600     }
601 }
602
603 #define BREAKUP_CHAR(c, charset, c1, c2) \
604   breakup_char_1 (c, &(charset), &(c1), &(c2))
605
606 INLINE Lisp_Object CHAR_CHARSET (Emchar c);
607 INLINE Lisp_Object
608 CHAR_CHARSET (Emchar c)
609 {
610   Lisp_Object charset;
611   int c1, c2;
612
613   BREAKUP_CHAR(c, charset, c1, c2);
614   return charset;
615 }
616
617 #define CHAR_LEADING_BYTE(c) (XCHARSET_LEADING_BYTE(CHAR_CHARSET(c)))
618
619 \f
620 #ifdef ENABLE_COMPOSITE_CHARS
621 /************************************************************************/
622 /*                           Composite characters                       */
623 /************************************************************************/
624
625 Emchar lookup_composite_char (Bufbyte *str, int len);
626 Lisp_Object composite_char_string (Emchar ch);
627 #endif /* ENABLE_COMPOSITE_CHARS */
628
629 \f
630 /************************************************************************/
631 /*                            Exported functions                        */
632 /************************************************************************/
633
634 EXFUN (Ffind_charset, 1);
635 EXFUN (Fget_charset, 1);
636
637 extern Lisp_Object Vcharset_chinese_big5_1;
638 extern Lisp_Object Vcharset_chinese_big5_2;
639 extern Lisp_Object Vcharset_japanese_jisx0208;
640 extern Lisp_Object Vcharset_japanese_jisx0212;
641
642 Emchar Lstream_get_emchar_1 (Lstream *stream, int first_char);
643 int Lstream_fput_emchar (Lstream *stream, Emchar ch);
644 void Lstream_funget_emchar (Lstream *stream, Emchar ch);
645
646 int copy_internal_to_external (CONST Bufbyte *internal, Bytecount len,
647                                unsigned char *external);
648 Bytecount copy_external_to_internal (CONST unsigned char *external,
649                                      int len, Bufbyte *internal);
650
651 #endif /* CHAR_IS_UCS4 */
652 #endif /* _XEMACS_CHARACTER_H */