(default-coded-charset-priority-list):
[chise/xemacs-chise.git.1] / lisp / mule / mule-charset.el
1 ;;; mule-charset.el --- Charset functions for Mule.
2
3 ;; Copyright (C) 1992 Free Software Foundation, Inc.
4 ;; Copyright (C) 1995 Amdahl Corporation.
5 ;; Copyright (C) 1996 Sun Microsystems.
6 ;; Copyright (C) 1999, 2000, 2001, 2002, 2003, 2004, 2005, 2007, 2008,
7 ;;   2009, 2010, 2011, 2012, 2013, 2014, 2015, 2016, 2017 MORIOKA Tomohiko
8
9 ;; Author: Unknown
10 ;; Keywords: i18n, mule, internal
11
12 ;; This file is part of XEmacs.
13
14 ;; XEmacs is free software; you can redistribute it and/or modify it
15 ;; under the terms of the GNU General Public License as published by
16 ;; the Free Software Foundation; either version 2, or (at your option)
17 ;; any later version.
18
19 ;; XEmacs is distributed in the hope that it will be useful, but
20 ;; WITHOUT ANY WARRANTY; without even the implied warranty of
21 ;; MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
22 ;; General Public License for more details.
23
24 ;; You should have received a copy of the GNU General Public License
25 ;; along with XEmacs; see the file COPYING.  If not, write to the 
26 ;; Free Software Foundation, Inc., 59 Temple Place - Suite 330,
27 ;; Boston, MA 02111-1307, USA.
28
29 ;;; Synched up with: Not synched.  API at source level synched with FSF 20.3.9.
30
31 ;;; Commentary:
32
33 ;; These functions are not compatible at the bytecode level with Emacs/Mule,
34 ;; and they never will be.  -sb [1999-05-26]
35
36 ;;; Code:
37 \f
38 ;;;; Classifying text according to charsets
39
40 (defun charsets-in-region (start end &optional buffer)
41   "Return a list of the charsets in the region between START and END.
42 BUFFER defaults to the current buffer if omitted."
43   (let (list)
44     (save-excursion
45       (if buffer
46           (set-buffer buffer))
47       (save-restriction
48         (narrow-to-region start end)
49         (goto-char (point-min))
50         (while (not (eobp))
51           (let* (prev-charset
52                  (ch (char-after (point)))
53                  (charset (char-charset ch)))
54             (if (not (eq prev-charset charset))
55                 (progn
56                   (setq prev-charset charset)
57                   (or (memq charset list)
58                       (setq list (cons charset list))))))
59           (forward-char))))
60     list))
61
62 (defun charsets-in-string (string)
63   "Return a list of the charsets in STRING."
64   (let ((i 0)
65         (len (length string))
66         prev-charset charset list)
67     (while (< i len)
68       (setq charset (char-charset (aref string i)))
69       (if (not (eq prev-charset charset))
70           (progn
71             (setq prev-charset charset)
72             (or (memq charset list)
73                 (setq list (cons charset list)))))
74       (setq i (1+ i)))
75     list))
76
77 \f
78 ;;;; Charset accessors
79
80 (defun charset-iso-graphic-plane (charset)
81   "Return the `graphic' property of CHARSET.
82 See `make-charset'."
83   (charset-property charset 'graphic))
84
85 (defun charset-iso-final-char (charset)
86   "Return the final byte of the ISO 2022 escape sequence designating CHARSET."
87   (charset-property charset 'final))
88
89 (defun charset-chars (charset)
90   "Return the number of characters per dimension of CHARSET."
91   (charset-property charset 'chars))
92
93 (defun charset-width (charset)
94   "Return the number of display columns per character of CHARSET.
95 This only applies to TTY mode (under X, the actual display width can
96 be automatically determined)."
97   (charset-property charset 'columns))
98
99 ;; #### FSFmacs returns 0
100 (defun charset-direction (charset)
101   "Return the display direction (0 for `l2r' or 1 for `r2l') of CHARSET.
102 Only left-to-right is currently implemented."
103   (if (eq (charset-property charset 'direction) 'l2r)
104       0
105     1))
106
107 ;; Not in Emacs/Mule
108 (defun charset-registry (charset)
109   "Return the registry of CHARSET.
110 This is a regular expression matching the registry field of fonts
111 that can display the characters in CHARSET."
112   (charset-property charset 'registry))
113
114 (defun charset-ccl-program (charset)
115   "Return the CCL program of CHARSET.
116 See `make-charset'."
117   (charset-property charset 'ccl-program))
118
119 (defun charset-bytes (charset)
120   "Useless in XEmacs, returns 1."
121    1)
122
123 (define-obsolete-function-alias 'charset-columns 'charset-width) ;; 19990409
124 (define-obsolete-function-alias 'charset-final 'charset-iso-final-char) ;; 19990409
125 (define-obsolete-function-alias 'charset-graphic 'charset-iso-graphic-plane) ;; 19990409
126 (define-obsolete-function-alias 'charset-doc-string 'charset-description) ;; 19990409
127
128 ;;;; Define setf methods for all settable Charset properties
129
130 (defsetf charset-registry    set-charset-registry)
131 (defsetf charset-ccl-program set-charset-ccl-program)
132
133 ;;; FSF compatibility functions
134 (defun charset-after (&optional pos)
135   "Return charset of a character in current buffer at position POS.
136 If POS is nil, it defauls to the current point.
137 If POS is out of range, the value is nil."
138   (when (null pos)
139     (setq pos (point)))
140   (check-argument-type 'integerp pos)
141   (unless (or (< pos (point-min))
142               (> pos (point-max)))
143     (char-charset (char-after pos))))
144
145 ;; Yuck!
146 ;; We're not going to support this.
147 ;(defun charset-info (charset)
148 ;  "Return a vector of information of CHARSET.
149 ;The elements of the vector are:
150 ;        CHARSET-ID, BYTES, DIMENSION, CHARS, WIDTH, DIRECTION,
151 ;        LEADING-CODE-BASE, LEADING-CODE-EXT,
152 ;        ISO-FINAL-CHAR, ISO-GRAPHIC-PLANE,
153 ;        REVERSE-CHARSET, SHORT-NAME, LONG-NAME, DESCRIPTION,
154 ;        PLIST,
155 ;where
156 ;CHARSET-ID (integer) is the identification number of the charset.
157 ;BYTES (integer) is the length of multi-byte form of a character in
158 ;  the charset: one of 1, 2, 3, and 4.
159 ;DIMENSION (integer) is the number of bytes to represent a character of
160 ;the charset: 1 or 2.
161 ;CHARS (integer) is the number of characters in a dimension: 94 or 96.
162 ;WIDTH (integer) is the number of columns a character in the charset
163 ;  occupies on the screen: one of 0, 1, and 2.
164 ;DIRECTION (integer) is the rendering direction of characters in the
165 ;  charset when rendering.  If 0, render from left to right, else
166 ;  render from right to left.
167 ;LEADING-CODE-BASE (integer) is the base leading-code for the
168 ;  charset.
169 ;LEADING-CODE-EXT (integer) is the extended leading-code for the
170 ;  charset.  All charsets of less than 0xA0 has the value 0.
171 ;ISO-FINAL-CHAR (character) is the final character of the
172 ;  corresponding ISO 2022 charset.
173 ;ISO-GRAPHIC-PLANE (integer) is the graphic plane to be invoked
174 ;  while encoding to variants of ISO 2022 coding system, one of the
175 ;  following: 0/graphic-plane-left(GL), 1/graphic-plane-right(GR).
176 ;REVERSE-CHARSET (integer) is the charset which differs only in
177 ;  LEFT-TO-RIGHT value from the charset.  If there's no such a
178 ;  charset, the value is -1.
179 ;SHORT-NAME (string) is the short name to refer to the charset.
180 ;LONG-NAME (string) is the long name to refer to the charset
181 ;DESCRIPTION (string) is the description string of the charset.
182 ;PLIST (property list) may contain any type of information a user
183 ;  want to put and get by functions `put-charset-property' and
184 ;  `get-charset-property' respectively."
185 ;  (vector
186 ;   (charset-id charset)
187 ;   1
188 ;   (charset-dimension charset)
189 ;   (charset-chars charset)
190 ;   (charset-width charset)
191 ;   (charset-direction charset)
192 ;   nil ;; (charset-leading-code-base (charset))
193 ;   nil ;; (charset-leading-code-ext (charset))
194 ;   (charset-iso-final-char charset)
195 ;   (charset-iso-graphic-plane charset)
196 ;   -1
197 ;   (charset-short-name charset)
198 ;   (charset-long-name charset)
199 ;   (charset-description charset)
200 ;   (charset-plist charset)))
201
202 ;(make-compatible 'charset-info "Don't use this if you can help it.")
203
204 (defun define-charset (charset-id charset property-vector)
205   "Define CHARSET-ID as the identification number of CHARSET with INFO-VECTOR.
206 If CHARSET-ID is nil, it is decided automatically, which means CHARSET is
207  treated as a private charset.
208 INFO-VECTOR is a vector of the format:
209    [DIMENSION CHARS WIDTH DIRECTION ISO-FINAL-CHAR ISO-GRAPHIC-PLANE
210     SHORT-NAME LONG-NAME DESCRIPTION]
211 The meanings of each elements is as follows:
212 DIMENSION (integer) is the number of bytes to represent a character: 1 or 2.
213 CHARS (integer) is the number of characters in a dimension: 94 or 96.
214 WIDTH (integer) is the number of columns a character in the charset
215 occupies on the screen: one of 0, 1, and 2.
216
217 DIRECTION (integer) is the rendering direction of characters in the
218 charset when rendering.  If 0, render from left to right, else
219 render from right to left.
220
221 ISO-FINAL-CHAR (character) is the final character of the
222 corresponding ISO 2022 charset.
223
224 ISO-GRAPHIC-PLANE (integer) is the graphic plane to be invoked
225 while encoding to variants of ISO 2022 coding system, one of the
226 following: 0/graphic-plane-left(GL), 1/graphic-plane-right(GR).
227
228
229 SHORT-NAME (string) is the short name to refer to the charset.
230
231 LONG-NAME (string) is the long name to refer to the charset.
232
233 DESCRIPTION (string) is the description string of the charset."
234   (make-charset charset (aref property-vector 8)
235                 (list
236                  'short-name (aref property-vector 6)
237                  'long-name (aref property-vector 7)
238                  'dimension (aref property-vector 0)
239                  'columns (aref property-vector 2)
240                  'chars (aref property-vector 1)
241                  'final (aref property-vector 4)
242                  'graphic (aref property-vector 5)
243                  'direction (aref property-vector 3))))
244
245 (make-compatible 'define-charset "")
246
247 ;;; Charset property
248
249 (defalias 'get-charset-property 'get)
250 (defalias 'put-charset-property 'put)
251 (defalias 'charset-plist 'object-plist)
252 (defalias 'set-charset-plist 'setplist)
253
254 ;; Setup auto-fill-chars for charsets that should invoke auto-filling.
255 ;; SPACE and NEWLIE are already set.
256 ;; (let ((l '(katakana-jisx0201
257 ;;            japanese-jisx0208 japanese-jisx0212
258 ;;            chinese-gb2312 chinese-big5-1 chinese-big5-2)))
259 ;;   (while l
260 ;;     (put-char-table (car l) t auto-fill-chars)
261 ;;     (setq l (cdr l))))
262
263
264 ;;; @ Coded character set
265 ;;;
266
267 (when (featurep 'utf-2000)
268   (setq default-coded-charset-priority-list
269         '(ascii
270           control-1
271           latin-iso8859-1
272           latin-iso8859-2
273           latin-iso8859-3
274           latin-iso8859-4
275           latin-iso8859-9
276           latin-jisx0201
277           cyrillic-iso8859-5
278           greek-iso8859-7
279           thai-tis620
280           =jis-x0208
281           =ucs-radicals
282           =ucs-radicals@unicode
283           ;; =ucs-bmp-cjk@JP
284           =ucs-bmp-cjk@JP/hanazono
285           =mj-0
286           =mj-1
287           =ucs-bmp-cjk@gb
288           =jis-x0208@1983
289           chinese-gb2312
290           =jis-x0208-1990
291           japanese-jisx0208-1978
292           =jis-x0212
293           chinese-cns11643-1
294           chinese-cns11643-2
295           chinese-cns11643-3
296           chinese-cns11643-4
297           chinese-cns11643-5
298           chinese-cns11643-6
299           chinese-cns11643-7
300           =adobe-japan1-0
301           =adobe-japan1-1
302           =adobe-japan1-2
303           =adobe-japan1-3
304           =adobe-japan1-4
305           =adobe-japan1-5
306           =adobe-japan1-6
307           =big5-cdp
308           =hanyo-denshi/ja
309           =hanyo-denshi/jb
310           =hanyo-denshi/jc
311           =hanyo-denshi/jd
312           =hanyo-denshi/ft
313           =hanyo-denshi/ia
314           =hanyo-denshi/ib
315           =hanyo-denshi/hg
316           =hanyo-denshi/ip
317           =hanyo-denshi/jt
318           =hanyo-denshi/ks/mf
319           =hanyo-denshi/tk/mf-01
320           =gt-pj-2
321           =gt-pj-3
322           =gt-pj-4
323           =gt-pj-5
324           =gt-pj-6
325           =gt-pj-7
326           =gt-pj-8
327           =gt-pj-9
328           =gt-pj-10
329           =gt-pj-11
330           =gt-pj-k1
331           =gt-pj-k2
332           chinese-big5-eten-a
333           chinese-big5-eten-b
334           chinese-big5
335           =jis-x0213-1-2000
336           =jis-x0213-2-2000
337           ;; chinese-gb12345
338           =gt-pj-1
339           =ucs-bmp-cjk
340           =ucs-sip-ext-b
341           =ruimoku-v6
342           =zinbun-oracle
343           =hanziku-1
344           =hanziku-2
345           =hanziku-3
346           =hanziku-4
347           =hanziku-5
348           =hanziku-6
349           =hanziku-7
350           =hanziku-8
351           =hanziku-9
352           =hanziku-10
353           =hanziku-11
354           =hanziku-12
355           =ucs-sip-ext-b@iso
356           =ucs-sip@iso
357           ideograph-daikanwa-2
358           ideograph-daikanwa
359           korean-ksc5601
360           katakana-jisx0201
361           hebrew-iso8859-8
362           latin-viscii
363           latin-viscii-lower
364           latin-viscii-upper
365           ipa
366           lao
367           ethiopic-ucs
368           ethiopic
369           arabic-digit
370           arabic-1-column
371           arabic-2-column
372           arabic-iso8859-6
373           chinese-big5-1
374           chinese-big5-2
375           ;; =zihai-17xx
376           =ucs-bmp-var-001
377           =ucs-sip-var-001
378           =ucs-bmp-var-002
379           =ucs-sip-var-002
380           =ucs-bmp-var-003
381           =ucs-sip-var-003
382           =ucs-bmp-var-004
383           =ucs-sip-var-004
384           =ucs-bmp-var-005
385           =ucs-bmp-var-006
386           =ucs-sip-var-006
387           =ucs-bmp-var-008
388           =ucs-bmp-var-010
389           =ucs-bmp-itaiji-001
390           =ucs-sip-itaiji-001
391           =ucs-bmp-itaiji-002
392           =ucs-sip-itaiji-002
393           =ucs-bmp-itaiji-003
394           =ucs-sip-itaiji-003
395           =ucs-bmp-itaiji-004
396           =ucs-bmp-itaiji-005
397           =ucs-bmp-itaiji-006
398           =ucs-bmp-itaiji-007
399           =ucs-sip-itaiji-007
400           =ucs-bmp-itaiji-008
401           =ucs-bmp-itaiji-009
402           =ucs-bmp-itaiji-010
403           =ucs-bmp-itaiji-011
404           =ucs-sip-itaiji-011
405           =ucs-bmp-itaiji-084
406           =big5-cdp-itaiji-001
407           =big5-cdp-itaiji-002
408           =big5-cdp-itaiji-003
409           =big5-cdp-var-001
410           =big5-cdp-var-002
411           =big5-cdp-var-003
412           =big5-cdp-var-004
413           =big5-cdp-var-005
414           =cbeta
415           =jef-china3
416           chinese-isoir165
417           =ucs-bmp-cjk-compat
418           =ucs-bmp-cjk-compat@unicode
419           =ucs-sip@JP/hanazono
420           ==jis-x0208@1990
421           ==ucs-radicals@unicode
422           ==ucs-bmp-cjk@JP/hanazono
423           ==mj-0
424           ==mj-1
425           ==ucs-bmp-cjk@gb
426           ==ucs-sip-ext-b@iso
427           ==ucs-sip@JP/hanazono
428           ==ucs-bmp-itaiji-002
429           ==ucs-sip-itaiji-002
430           ==ucs-bmp-itaiji-003
431           ==ucs-sip-itaiji-003
432           ==ucs-bmp-itaiji-005
433           ==ucs-bmp-var-002
434           ==hanyo-denshi/ja
435           ==hanyo-denshi/jb
436           ==hanyo-denshi/jc
437           ==hanyo-denshi/jd
438           ==hanyo-denshi/ft
439           ==hanyo-denshi/ia
440           ==hanyo-denshi/ib
441           ==hanyo-denshi/hg
442           ==hanyo-denshi/ip
443           ==hanyo-denshi/jt
444           ==adobe-japan1-6
445           ==big5-cdp
446           ==big5-cdp-itaiji-001
447           ==cns11643-1
448           ==cns11643-2
449           ==cns11643-3
450           ==cns11643-4
451           ==cns11643-5
452           ==cns11643-6
453           ==cns11643-7
454           ==ucs-sip@iso
455           ==jis-x0208@1983
456           ==jis-x0208@1978
457           ==jis-x0213-1@2000
458           ==jis-x0213-2
459           ==jis-x0212
460           ==ks-x1001
461           ==ruimoku-v6
462           ==gt-pj-k1
463           ==gt-pj-k2
464           ==daikanwa
465           ==cbeta
466           ==jef-china3
467           ==ucs-bmp-cjk-compat@JP
468           ==ucs-bmp-cjk-compat@gb
469           ===mj-0
470           ===mj-1
471           ===jis-x0208
472           ===jis-x0208@1990
473           ===big5-cdp
474           ===ucs-bmp-cjk@gb
475           ===adobe-japan1-6
476           ===cns11643-1
477           ===cns11643-2
478           ===cns11643-3
479           ===cns11643-4
480           ===cns11643-5
481           ===cns11643-6
482           ===cns11643-7
483           ;; ===hanyo-denshi/ja
484           ===hanyo-denshi/jb
485           ===hanyo-denshi/jc
486           ===hanyo-denshi/jd
487           ===hanyo-denshi/ft
488           ===hanyo-denshi/ia
489           ===hanyo-denshi/ib
490           ===hanyo-denshi/hg
491           ===hanyo-denshi/ip
492           ===hanyo-denshi/jt
493           ===jis-x0213-1
494           ===jis-x0213-1@2004
495           ===jis-x0213-2
496           ===jis-x0208@1983
497           ===jis-x0208@1978
498           ===jis-x0212
499           ===ks-x1001
500           ===daikanwa
501           ===ucs-sip-ext-b@iso
502           ===ucs-sip@iso
503           ===ruimoku-v6
504           ===hng-jou ; 01
505           ===hng-keg ; 02
506           ===hng-dng ; 03
507           ===hng-mam ; 05
508           ===hng-drt ; 06
509           ===hng-kgk ; 07
510           ===hng-myz ; 08
511           ===hng-kda ; 09
512           ===hng-khi ; 10
513           ===hng-khm ; 11
514           ===hng-hok ; 13
515           ===hng-kyd ; 14
516           ===hng-sok ; 15
517           ===hng-yhk ; 16
518           ===hng-kak ; 17
519           ===hng-kar ; 18
520           ===hng-kae ; 19
521           ===hng-sys ; 22
522           ===hng-tsu ; 24
523           ===hng-tzj ; 25
524           ===hng-hos ; 26
525           ===hng-nak ; 28
526           ===hng-jhk ; 29
527           ===hng-hod ; 30
528           ===hng-gok ; 31
529           ===hng-ink ; 33
530           ===hng-nto ; 34
531           ===hng-nkm ; 36
532           ===hng-k24 ; 37
533           ===hng-nkk ; 39
534           ===hng-kcc ; 41
535           ===hng-kcj ; 42
536           ===hng-kbk ; 43
537           ===hng-sik ; 44
538           ===hng-skk ; 46
539           ===hng-kyu ; 47
540           ===hng-ksk ; 48
541           ===hng-wan ; 49
542           ===hng-okd ; 50
543           ===hng-wad ; 54
544           ===hng-kmi ; 55
545           ===hng-zkd ; 56
546           ===hng-doh ; 57
547           ===hng-jyu ; 58
548           ===hng-tzs ; 60
549           ===hng-kss ; 64
550           ===hng-kyo ; 66
551           ===hng-smk ; 74
552           ===cbeta
553           ===jef-china3
554           ===ucs-bmp-cjk-compat@unicode
555           ;; ucs-sip
556           =>>big5-cdp
557           =>>jis-x0208
558           =>>jis-x0208@1990
559           =>>jis-x0213-1
560           =>>jis-x0213-1@2004
561           =>>jis-x0213-2
562           =>jis-x0208
563           =>jis-x0213-1
564           =>mj-0
565           =>big5-cdp
566           =>ruimoku-v6
567           =>big5-cdp-itaiji-001
568           =>ucs-bmp-itaiji-001
569           =>ucs-sip-itaiji-001
570           =>ucs-bmp-itaiji-002
571           =>ucs-sip-itaiji-002
572           =>ucs-bmp-itaiji-003
573           =>ucs-bmp-itaiji-005
574           =>ucs-bmp-itaiji-006
575           =>ucs-sip-itaiji-007
576           =>daikanwa
577           ucs-bmp
578           ==>ucs-bmp-cjk@bucs
579           =>ucs-bmp-cjk@unicode
580           =>ucs-bmp-cjk@component
581           =>ucs-sip@component
582           =>ucs-bmp-cjk@iwds-1
583           =>ucs-sip@iwds-1
584           =+>ucs-bmp-cjk@unicode
585           =+>ucs-bmp-cjk-compat@jis
586           =+>jis-x0213-2
587           =+>jis-x0213-1@2004
588           ;; =>>ucs@unicode
589           =adobe-japan1-base
590           =>jis-x0208@1997
591           =>>hanyo-denshi/ft
592           =>>hanyo-denshi/jt
593           =>>gt
594           =>>adobe-japan1-6
595           =>>cbeta
596           =>cns11643-7
597           =>cbeta
598           =+>adobe-japan1-6
599           =+>jis-x0208@1978
600           )))
601
602 ;;; mule-charset.el ends here