git.chise.org Git - chise/xemacs-chise.git.1/blob - lisp/utf-2000/char-db-util.el

   1 ;;; char-db-util.el --- Character Database utility -*- coding: utf-8-er; -*-
   2
   3 ;; Copyright (C) 1998,1999,2000,2001,2002,2003,2004,2005 MORIOKA Tomohiko.
   4
   5 ;; Author: MORIOKA Tomohiko <tomo@kanji.zinbun.kyoto-u.ac.jp>
   6 ;; Keywords: CHISE, Character Database, ISO/IEC 10646, UCS, Unicode, MULE.
   7
   8 ;; This file is part of XEmacs CHISE.
   9
  10 ;; XEmacs CHISE is free software; you can redistribute it and/or
  11 ;; modify it under the terms of the GNU General Public License as
  12 ;; published by the Free Software Foundation; either version 2, or (at
  13 ;; your option) any later version.
  14
  15 ;; XEmacs CHISE is distributed in the hope that it will be useful,
  16 ;; but WITHOUT ANY WARRANTY; without even the implied warranty of
  17 ;; MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  18 ;; General Public License for more details.
  19
  20 ;; You should have received a copy of the GNU General Public License
  21 ;; along with XEmacs CHISE; see the file COPYING.  If not, write to
  22 ;; the Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  23 ;; Boston, MA 02111-1307, USA.
  24
  25 ;;; Code:
  26
  27 (require 'alist)
  28
  29 (defconst unidata-normative-category-alist
  30   '(("Lu" letter        uppercase)
  31     ("Ll" letter        lowercase)
  32     ("Lt" letter        titlecase)
  33     ("Mn" mark          non-spacing)
  34     ("Mc" mark          spacing-combining)
  35     ("Me" mark          enclosing)
  36     ("Nd" number        decimal-digit)
  37     ("Nl" number        letter)
  38     ("No" number        other)
  39     ("Zs" separator     space)
  40     ("Zl" separator     line)
  41     ("Zp" separator     paragraph)
  42     ("Cc" other         control)
  43     ("Cf" other         format)
  44     ("Cs" other         surrogate)
  45     ("Co" other         private-use)
  46     ("Cn" other         not-assigned)))
  47
  48 (defconst unidata-informative-category-alist
  49   '(("Lm" letter        modifier)
  50     ("Lo" letter        other)
  51     ("Pc" punctuation   connector)
  52     ("Pd" punctuation   dash)
  53     ("Ps" punctuation   open)
  54     ("Pe" punctuation   close)
  55     ("Pi" punctuation   initial-quote)
  56     ("Pf" punctuation   final-quote)
  57     ("Po" punctuation   other)
  58     ("Sm" symbol        math)
  59     ("Sc" symbol        currency)
  60     ("Sk" symbol        modifier)
  61     ("So" symbol        other)
  62     ))
  63
  64 (defconst ideographic-radicals
  65   (let ((v (make-vector 215 nil))
  66         (i 1))
  67     (while (< i 215)
  68       (aset v i (decode-char '=ucs (+ #x2EFF i)))
  69       (setq i (1+ i)))
  70     v))
  71
  72 (defun ideographic-radical (number)
  73   (aref ideographic-radicals number))
  74
  75 (defconst shuowen-radicals
  76   [?一 ?上 ?示 ?三 ?王 ?玉 ?玨 ?气 ?士 ?丨
  77    ?屮 ?艸 ?茻 ?小 ?八 ?釆 ?牛 ?告 ?口])
  78
  79 (defun shuowen-radical (number)
  80   (aref shuowen-radicals (1- number)))
  81
  82 (defvar char-db-file-coding-system 'utf-8-mcs-er)
  83
  84 (defvar char-db-feature-domains
  85   '(ucs daikanwa cns gt jis jis/alt jis/a jis/b
  86         jis-x0212 jis-x0213 cdp shinjigen misc unknown))
  87
  88 (defvar char-db-ignored-attributes '(ideographic-products))
  89
  90 (defun char-attribute-name< (ka kb)
  91   (cond
  92    ((eq '->denotational kb)
  93     t)
  94    ((eq '->subsumptive kb)
  95     (not (eq '->denotational ka)))
  96    ((eq '->denotational ka)
  97     nil)
  98    ((eq '->subsumptive ka)
  99     nil)
 100    ((and (symbolp ka)
 101          (string-match "^->" (symbol-name ka)))
 102     (cond ((and (symbolp kb)
 103                 (string-match "^->" (symbol-name kb)))
 104            (string< (symbol-name ka)
 105                     (symbol-name kb))
 106            ))
 107     )
 108    ((and (symbolp kb)
 109          (string-match "^->" (symbol-name kb)))
 110     t)
 111    ((and (symbolp ka)
 112          (string-match "^<-" (symbol-name ka)))
 113     (cond ((symbolp kb)
 114            (cond ((string-match "^<-" (symbol-name kb))
 115                   (string< (symbol-name ka)
 116                            (symbol-name kb))
 117                   )
 118                  ;; ((string-match "^->" (symbol-name kb))
 119                  ;;  t)
 120                  )))
 121     )
 122    ((and (symbolp kb)
 123          (string-match "^<-" (symbol-name kb)))
 124     t
 125     ;; (not (string-match "^->" (symbol-name ka)))
 126     )
 127    ((find-charset ka)
 128     (if (find-charset kb)
 129         (if (<= (charset-id ka) 1)
 130             (if (<= (charset-id kb) 1)
 131                 (cond
 132                  ((= (charset-dimension ka)
 133                      (charset-dimension kb))
 134                   (> (charset-id ka)(charset-id kb)))
 135                  (t
 136                   (> (charset-dimension ka)
 137                      (charset-dimension kb))
 138                   ))
 139               t)
 140           (if (<= (charset-id kb) 1)
 141               nil
 142             (< (charset-id ka)(charset-id kb))))
 143       nil))
 144    ((find-charset kb)
 145     t)
 146    ((symbolp ka)
 147     (cond ((symbolp kb)
 148            (string< (symbol-name ka)
 149                     (symbol-name kb)))
 150           (t)))
 151    ((symbolp kb)
 152     nil)))
 153
 154 (defvar char-db-coded-charset-priority-list
 155   '(ascii
 156     control-1
 157     latin-iso8859-1
 158     latin-iso8859-2
 159     latin-iso8859-3
 160     latin-iso8859-4
 161     latin-iso8859-9
 162     latin-jisx0201
 163     cyrillic-iso8859-5
 164     greek-iso8859-7
 165     thai-tis620
 166     =jis-x0208
 167     =jis-x0208@1978
 168     =jis-x0208@1983
 169     japanese-jisx0212
 170     chinese-gb2312
 171     =jis-x0208@1990
 172     chinese-cns11643-1
 173     chinese-cns11643-2
 174     chinese-cns11643-3
 175     chinese-cns11643-4
 176     chinese-cns11643-5
 177     chinese-cns11643-6
 178     chinese-cns11643-7
 179     =jis-x0213-1-2000
 180     =jis-x0213-2-2000
 181     korean-ksc5601
 182     chinese-isoir165
 183     katakana-jisx0201
 184     hebrew-iso8859-8
 185     chinese-gb12345
 186     latin-viscii
 187     ethiopic-ucs
 188     =big5-cdp
 189     =gt
 190     ideograph-daikanwa-2
 191     ideograph-daikanwa
 192     =cbeta
 193     ideograph-hanziku-1
 194     ideograph-hanziku-2
 195     ideograph-hanziku-3
 196     ideograph-hanziku-4
 197     ideograph-hanziku-5
 198     ideograph-hanziku-6
 199     ideograph-hanziku-7
 200     ideograph-hanziku-8
 201     ideograph-hanziku-9
 202     ideograph-hanziku-10
 203     ideograph-hanziku-11
 204     ideograph-hanziku-12
 205     =gt-k
 206     =ucs@iso
 207     =ucs@unicode
 208     =big5
 209     =big5-eten
 210     =jis-x0208@1997
 211     =zinbun-oracle
 212     =ruimoku-v6
 213     =jef-china3))
 214
 215 (defun char-db-make-char-spec (char)
 216   (let (ret char-spec)
 217     (cond ((characterp char)
 218            (cond ((and (setq ret (encode-char char '=ucs 'defined-only))
 219                        (not (and (<= #xE000 ret)(<= ret #xF8FF))))
 220                   (setq char-spec (list (cons '=ucs ret)))
 221                   (cond ((setq ret (get-char-attribute char 'name))
 222                          (setq char-spec (cons (cons 'name ret) char-spec))
 223                          )
 224                         ((setq ret (get-char-attribute char 'name*))
 225                          (setq char-spec (cons (cons 'name* ret) char-spec))
 226                          ))
 227                   )
 228                  ((setq ret
 229                         (catch 'tag
 230                           (let ((rest char-db-coded-charset-priority-list)
 231                                 ccs)
 232                             (while rest
 233                               (setq ccs (charset-name
 234                                          (find-charset (car rest))))
 235                               (if (setq ret
 236                                         (encode-char char ccs
 237                                                      'defined-only))
 238                                   (throw 'tag (cons ccs ret)))
 239                               (setq rest (cdr rest))))))
 240                   (setq char-spec (list ret))
 241                   (dolist (ccs (delq (car ret) (charset-list)))
 242                     (if (and (or (charset-iso-final-char ccs)
 243                                  (memq ccs
 244                                        '(=daikanwa
 245                                          =daikanwa@rev2
 246                                          ;; =gt-k
 247                                          =jis-x0208@1997
 248                                          )))
 249                              (setq ccs (charset-name ccs))
 250                              (null (assq ccs char-spec))
 251                              (setq ret (encode-char char ccs 'defined-only)))
 252                         (setq char-spec (cons (cons ccs ret) char-spec))))
 253                   (if (null char-spec)
 254                       (setq char-spec (split-char char)))
 255                   (cond ((setq ret (get-char-attribute char 'name))
 256                          (setq char-spec (cons (cons 'name ret) char-spec))
 257                          )
 258                         ((setq ret (get-char-attribute char 'name*))
 259                          (setq char-spec (cons (cons 'name* ret) char-spec))
 260                          ))
 261                   ))
 262            char-spec)
 263           ((consp char)
 264            char))))
 265
 266 (defun char-db-insert-char-spec (char &optional readable column
 267                                       required-features)
 268   (unless column
 269     (setq column (current-column)))
 270   (let (char-spec temp-char)
 271     (setq char-spec (char-db-make-char-spec char))
 272     (unless (or (characterp char) ; char
 273                 (condition-case nil
 274                     (setq char (find-char char-spec))
 275                   (error nil)))
 276       ;; define temporary character
 277       ;;   Current implementation is dirty.
 278       (setq temp-char (define-char (cons '(ideograph-daikanwa . 0)
 279                                          char-spec)))
 280       (remove-char-attribute temp-char 'ideograph-daikanwa)
 281       (setq char temp-char))
 282     (insert-char-attributes char
 283                             readable
 284                             (union (mapcar #'car char-spec)
 285                                    required-features))
 286     (when temp-char
 287       ;; undefine temporary character
 288       ;;   Current implementation is dirty.
 289       (setq char-spec (char-attribute-alist temp-char))
 290       (while char-spec
 291         (remove-char-attribute temp-char (car (car char-spec)))
 292         (setq char-spec (cdr char-spec))))))
 293
 294 (defun char-db-insert-alist (alist &optional readable column)
 295   (unless column
 296     (setq column (current-column)))
 297   (let ((line-breaking
 298          (concat "\n" (make-string (1+ column) ?\ )))
 299         name value
 300         ret al ; cal
 301         key
 302         lbs cell rest separator)
 303     (insert "(")
 304     (while alist
 305       (setq name (car (car alist))
 306             value (cdr (car alist)))
 307       (cond ((eq name 'char)
 308              (insert "(char . ")
 309              (if (setq ret (condition-case nil
 310                                (find-char value)
 311                              (error nil)))
 312                  (progn
 313                    (setq al nil
 314                          ;; cal nil
 315                          )
 316                    (while value
 317                      (setq key (car (car value)))
 318                      ;; (if (find-charset key)
 319                      ;;     (setq cal (cons key cal))
 320                      (setq al (cons key al))
 321                      ;; )
 322                      (setq value (cdr value)))
 323                    (insert-char-attributes ret
 324                                            readable
 325                                            (or al 'none) ; cal
 326                                            ))
 327                (insert (prin1-to-string value)))
 328              (insert ")")
 329              (insert line-breaking))
 330             ((consp value)
 331              (insert (format "(%-18s " name))
 332              (setq lbs (concat "\n" (make-string (current-column) ?\ )))
 333              (while (consp value)
 334                (setq cell (car value))
 335                (if (and (consp cell)
 336                         (consp (car cell))
 337                         (setq ret (condition-case nil
 338                                       (find-char cell)
 339                                     (error nil)))
 340                         )
 341                    (progn
 342                      (setq rest cell
 343                            al nil
 344                            ;; cal nil
 345                            )
 346                      (while rest
 347                        (setq key (car (car rest)))
 348                        ;; (if (find-charset key)
 349                        ;;     (setq cal (cons key cal))
 350                        (setq al (cons key al))
 351                        ;; )
 352                        (setq rest (cdr rest)))
 353                      (if separator
 354                          (insert lbs))
 355                      (insert-char-attributes ret
 356                                              readable
 357                                              al ; cal
 358                                              )
 359                      (setq separator lbs))
 360                  (if separator
 361                      (insert separator))
 362                  (insert (prin1-to-string cell))
 363                  (setq separator " "))
 364                (setq value (cdr value)))
 365              (insert ")")
 366              (insert line-breaking))
 367             (t
 368              (insert (format "(%-18s . %S)%s"
 369                              name value
 370                              line-breaking))))
 371       (setq alist (cdr alist))))
 372   (insert ")"))
 373
 374 (defun char-db-insert-char-reference (plist &optional readable column)
 375   (unless column
 376     (setq column (current-column)))
 377   (let ((line-breaking
 378          (concat "\n" (make-string (1+ column) ?\ )))
 379         (separator "")
 380         name value)
 381     (insert "(")
 382     (while plist
 383       (setq name (pop plist))
 384       (setq value (pop plist))
 385       (cond ((eq name :char)
 386              (insert separator)
 387              (insert ":char\t")
 388              (cond ((numberp value)
 389                     (setq value (decode-char '=ucs value)))
 390                    ;; ((consp value)
 391                    ;;  (setq value (or (find-char value)
 392                    ;;                  value)))
 393                    )
 394              (char-db-insert-char-spec value readable)
 395              (insert line-breaking)
 396              (setq separator ""))
 397             ((eq name :radical)
 398              (insert (format "%s%s\t%d ; %c%s"
 399                              separator
 400                              name value
 401                              (ideographic-radical value)
 402                              line-breaking))
 403              (setq separator ""))
 404             (t
 405              (insert (format "%s%s\t%S" separator name value))
 406              (setq separator line-breaking)))
 407       ))
 408   (insert ")"))
 409
 410 (defun char-db-decode-isolated-char (ccs code-point)
 411   (let (ret)
 412     (setq ret
 413           (cond ((eq ccs 'arabic-iso8859-6)
 414                  (decode-char ccs code-point))
 415                 ((and (memq ccs '(=gt-pj-1
 416                                   =gt-pj-2
 417                                   =gt-pj-3
 418                                   =gt-pj-4
 419                                   =gt-pj-5
 420                                   =gt-pj-6
 421                                   =gt-pj-7
 422                                   =gt-pj-8
 423                                   =gt-pj-9
 424                                   =gt-pj-10
 425                                   =gt-pj-11))
 426                       (setq ret (decode-char ccs code-point))
 427                       (setq ret (encode-char ret '=gt 'defined-only)))
 428                  (decode-builtin-char '=gt ret))
 429                 (t
 430                  (decode-builtin-char ccs code-point))))
 431     (cond ((and (<= 0 (char-int ret))
 432                 (<= (char-int ret) #x1F))
 433            (decode-char '=ucs (+ #x2400 (char-int ret))))
 434           ((= (char-int ret) #x7F)
 435            ?\u2421)
 436           (t ret))))
 437
 438 (defvar char-db-convert-obsolete-format t)
 439
 440 (defun char-db-insert-ccs-feature (name value line-breaking)
 441   (insert
 442    (format
 443     (cond ((or (memq name '(=daikanwa
 444                             =daikanwa@rev1 =daikanwa@rev2
 445                             =gt =gt-k =cbeta =zinbun-oracle))
 446                (string-match "^=adobe-" (symbol-name name)))
 447            "(%-18s . %05d)\t; %c")
 448           ((eq name 'mojikyo)
 449            "(%-18s . %06d)\t; %c")
 450           ((>= (charset-dimension name) 2)
 451            "(%-18s . #x%04X)\t; %c")
 452           (t
 453            "(%-18s . #x%02X)\t; %c"))
 454     name
 455     (if (= (charset-iso-graphic-plane name) 1)
 456         (logior value
 457                 (cond ((= (charset-dimension name) 1)
 458                        #x80)
 459                       ((= (charset-dimension name) 2)
 460                        #x8080)
 461                       ((= (charset-dimension name) 3)
 462                        #x808080)
 463                       (t 0)))
 464       value)
 465     (char-db-decode-isolated-char name value)))
 466   (if (and (= (charset-chars name) 94)
 467            (= (charset-dimension name) 2))
 468       (insert (format " [%02d-%02d]"
 469                       (- (lsh value -8) 32)
 470                       (- (logand value 255) 32))))
 471   (insert line-breaking))
 472
 473 (defun char-db-insert-relation-feature (char name value line-breaking
 474                                              ccss readable)
 475   (insert (format "(%-18s%s " name line-breaking))
 476   (let ((lbs (concat "\n" (make-string (current-column) ?\ )))
 477         separator cell sources required-features
 478         ret)
 479     (while (consp value)
 480       (setq cell (car value))
 481       (if (integerp cell)
 482           (setq cell (decode-char '=ucs cell)))
 483       (cond
 484        ((eq name '->subsumptive)
 485         (when (or (not (some (lambda (atr)
 486                                (get-char-attribute cell atr))
 487                              char-db-ignored-attributes))
 488                   (some (lambda (ccs)
 489                           (encode-char cell ccs 'defined-only))
 490                         ccss))
 491           (if separator
 492               (insert lbs))
 493           (let ((char-db-ignored-attributes
 494                  (cons '<-subsumptive
 495                        char-db-ignored-attributes)))
 496             (insert-char-attributes cell readable))
 497           (setq separator lbs))
 498         )
 499        ((characterp cell)
 500         (setq sources
 501               (get-char-attribute
 502                char (intern (format "%s*sources" name))))
 503         (setq required-features nil)
 504         (dolist (source sources)
 505           (cond
 506            ((memq source '(JP JP/Jouyou shinjigen-1))
 507             (setq required-features
 508                   (union required-features
 509                          '(=jis-x0208
 510                            =jis-x0208@1990
 511                            =jis-x0213-1-2000
 512                            =jis-x0213-2-2000
 513                            =jis-x0212
 514                            =jis-x0208@1983
 515                            =jis-x0208@1978))))
 516            ((eq source 'CN)
 517             (setq required-features
 518                   (union required-features
 519                          '(=gb2312
 520                            =gb12345
 521                            =iso-ir165)))))
 522           (cond
 523            ((find-charset (setq ret (intern (format "=%s" source))))
 524             (setq required-features
 525                   (cons ret required-features)))
 526            (t (setq required-features
 527                     (cons source required-features)))))
 528         (cond ((string-match "@JP" (symbol-name name))
 529                (setq required-features
 530                      (union required-features
 531                             '(=jis-x0208
 532                               =jis-x0208@1990
 533                               =jis-x0213-1-2000
 534                               =jis-x0213-2-2000
 535                               =jis-x0212
 536                               =jis-x0208@1983
 537                               =jis-x0208@1978))))
 538               ((string-match "@CN" (symbol-name name))
 539                (setq required-features
 540                      (union required-features
 541                             '(=gb2312
 542                               =gb12345
 543                               =iso-ir165)))))
 544         (if separator
 545             (insert lbs))
 546         (if readable
 547             (insert (format "%S" cell))
 548           (char-db-insert-char-spec cell readable
 549                                     nil
 550                                     required-features))
 551         (setq separator lbs))
 552        ((consp cell)
 553         (if separator
 554             (insert lbs))
 555         (if (consp (car cell))
 556             (char-db-insert-char-spec cell readable)
 557           (char-db-insert-char-reference cell readable))
 558         (setq separator lbs))
 559        (t
 560         (if separator
 561             (insert separator))
 562         (insert (prin1-to-string cell))
 563         (setq separator " ")))
 564       (setq value (cdr value)))
 565     (insert ")")
 566     (insert line-breaking)))
 567
 568 (defun insert-char-attributes (char &optional readable attributes column)
 569   (unless column
 570     (setq column (current-column)))
 571   (let (name value ; has-long-ccs-name
 572         rest
 573         radical strokes
 574         (line-breaking
 575          (concat "\n" (make-string (1+ column) ?\ )))
 576         lbs cell separator ret
 577         key al cal
 578         dest-ccss ; sources required-features
 579         ccss)
 580     (let (atr-d)
 581       (setq attributes
 582             (sort (if attributes
 583                       (if (consp attributes)
 584                           (progn
 585                             (dolist (name attributes)
 586                               (unless (memq name char-db-ignored-attributes)
 587                                 (if (find-charset name)
 588                                     (push name ccss))
 589                                 (push name atr-d)))
 590                             atr-d))
 591                     (dolist (name (char-attribute-list))
 592                       (unless (memq name char-db-ignored-attributes)
 593                         (if (find-charset name)
 594                             (push name ccss))
 595                         (push name atr-d)))
 596                     atr-d)
 597                   #'char-attribute-name<)))
 598     (insert "(")
 599     (when (memq '<-subsumptive attributes)
 600       (when readable
 601         (when (setq value (get-char-attribute char '<-subsumptive))
 602           (char-db-insert-relation-feature char '<-subsumptive value
 603                                            line-breaking
 604                                            ccss readable)))
 605       (setq attributes (delq '<-subsumptive attributes)))
 606     (when (and (memq '<-denotational attributes)
 607                (setq value (get-char-attribute char '<-denotational)))
 608       (char-db-insert-relation-feature char '<-denotational value
 609                                        line-breaking
 610                                        ccss readable)
 611       (setq attributes (delq '<-denotational attributes)))
 612     (when (and (memq 'name attributes)
 613                (setq value (get-char-attribute char 'name)))
 614       (insert (format
 615                (if (> (+ (current-column) (length value)) 48)
 616                    "(name . %S)%s"
 617                  "(name               . %S)%s")
 618                value line-breaking))
 619       (setq attributes (delq 'name attributes))
 620       )
 621     (when (and (memq 'name* attributes)
 622                (setq value (get-char-attribute char 'name*)))
 623       (insert (format
 624                (if (> (+ (current-column) (length value)) 48)
 625                    "(name* . %S)%s"
 626                  "(name*              . %S)%s")
 627                value line-breaking))
 628       (setq attributes (delq 'name* attributes))
 629       )
 630     (when (and (memq 'script attributes)
 631                (setq value (get-char-attribute char 'script)))
 632       (insert (format "(script\t\t%s)%s"
 633                       (mapconcat (function prin1-to-string)
 634                                  value " ")
 635                       line-breaking))
 636       (setq attributes (delq 'script attributes))
 637       )
 638     (dolist (name '(=>ucs =>ucs*))
 639       (when (and (memq name attributes)
 640                  (setq value (get-char-attribute char name)))
 641         (insert (format "(%-18s . #x%04X)\t; %c%s"
 642                         name value (decode-char '=ucs value)
 643                         line-breaking))
 644         (setq attributes (delq name attributes))))
 645     (dolist (name '(=>ucs@gb =>ucs@cns =>ucs@jis =>ucs@ks =>ucs@big5))
 646       (when (and (memq name attributes)
 647                  (setq value (get-char-attribute char name)))
 648         (insert (format "(%-18s . #x%04X)\t; %c%s"
 649                         name value
 650                         (decode-char (intern
 651                                       (concat "="
 652                                               (substring
 653                                                (symbol-name name) 2)))
 654                                      value)
 655                         line-breaking))
 656         (setq attributes (delq name attributes))
 657         ))
 658     (dolist (name '(=>daikanwa))
 659       (when (and (memq name attributes)
 660                  (setq value (get-char-attribute char name)))
 661         (insert
 662          (if (integerp value)
 663              (format "(%-18s . %05d)\t; %c%s"
 664                      name value (decode-char '=daikanwa value)
 665                      line-breaking)
 666            (format "(%-18s %s)\t; %c%s"
 667                    name
 668                    (mapconcat (function prin1-to-string)
 669                               value " ")
 670                    (char-representative-of-daikanwa char)
 671                    line-breaking)))
 672         (setq attributes (delq name attributes))))
 673     (when (and (memq 'general-category attributes)
 674                (setq value (get-char-attribute char 'general-category)))
 675       (insert (format
 676                "(general-category\t%s) ; %s%s"
 677                (mapconcat (lambda (cell)
 678                             (format "%S" cell))
 679                           value " ")
 680                (cond ((rassoc value unidata-normative-category-alist)
 681                       "Normative Category")
 682                      ((rassoc value unidata-informative-category-alist)
 683                       "Informative Category")
 684                      (t
 685                       "Unknown Category"))
 686                line-breaking))
 687       (setq attributes (delq 'general-category attributes))
 688       )
 689     (when (and (memq 'bidi-category attributes)
 690                (setq value (get-char-attribute char 'bidi-category)))
 691       (insert (format "(bidi-category\t. %S)%s"
 692                       value
 693                       line-breaking))
 694       (setq attributes (delq 'bidi-category attributes))
 695       )
 696     (unless (or (not (memq 'mirrored attributes))
 697                 (eq (setq value (get-char-attribute char 'mirrored 'empty))
 698                     'empty))
 699       (insert (format "(mirrored\t\t. %S)%s"
 700                       value
 701                       line-breaking))
 702       (setq attributes (delq 'mirrored attributes))
 703       )
 704     (cond
 705      ((and (memq 'decimal-digit-value attributes)
 706            (setq value (get-char-attribute char 'decimal-digit-value)))
 707       (insert (format "(decimal-digit-value . %S)%s"
 708                       value
 709                       line-breaking))
 710       (setq attributes (delq 'decimal-digit-value attributes))
 711       (when (and (memq 'digit-value attributes)
 712                  (setq value (get-char-attribute char 'digit-value)))
 713         (insert (format "(digit-value\t . %S)%s"
 714                         value
 715                         line-breaking))
 716         (setq attributes (delq 'digit-value attributes))
 717         )
 718       (when (and (memq 'numeric-value attributes)
 719                  (setq value (get-char-attribute char 'numeric-value)))
 720         (insert (format "(numeric-value\t . %S)%s"
 721                         value
 722                         line-breaking))
 723         (setq attributes (delq 'numeric-value attributes))
 724         )
 725       )
 726      (t
 727       (when (and (memq 'digit-value attributes)
 728                  (setq value (get-char-attribute char 'digit-value)))
 729         (insert (format "(digit-value\t. %S)%s"
 730                         value
 731                         line-breaking))
 732         (setq attributes (delq 'digit-value attributes))
 733         )
 734       (when (and (memq 'numeric-value attributes)
 735                  (setq value (get-char-attribute char 'numeric-value)))
 736         (insert (format "(numeric-value\t. %S)%s"
 737                         value
 738                         line-breaking))
 739         (setq attributes (delq 'numeric-value attributes))
 740         )))
 741     (when (and (memq 'iso-10646-comment attributes)
 742                (setq value (get-char-attribute char 'iso-10646-comment)))
 743       (insert (format "(iso-10646-comment\t. %S)%s"
 744                       value
 745                       line-breaking))
 746       (setq attributes (delq 'iso-10646-comment attributes))
 747       )
 748     (when (and (memq 'morohashi-daikanwa attributes)
 749                (setq value (get-char-attribute char 'morohashi-daikanwa)))
 750       (insert (format "(morohashi-daikanwa\t%s)%s"
 751                       (mapconcat (function prin1-to-string) value " ")
 752                       line-breaking))
 753       (setq attributes (delq 'morohashi-daikanwa attributes))
 754       )
 755     (setq radical nil
 756           strokes nil)
 757     (when (and (memq 'ideographic-radical attributes)
 758                (setq value (get-char-attribute char 'ideographic-radical)))
 759       (setq radical value)
 760       (insert (format "(ideographic-radical . %S)\t; %c%s"
 761                       radical
 762                       (ideographic-radical radical)
 763                       line-breaking))
 764       (setq attributes (delq 'ideographic-radical attributes))
 765       )
 766     (when (and (memq 'shuowen-radical attributes)
 767                (setq value (get-char-attribute char 'shuowen-radical)))
 768       (insert (format "(shuowen-radical\t. %S)\t; %c%s"
 769                       value
 770                       (shuowen-radical value)
 771                       line-breaking))
 772       (setq attributes (delq 'shuowen-radical attributes))
 773       )
 774     (let (key)
 775       (dolist (domain
 776                (append
 777                 char-db-feature-domains
 778                 (let (dest domain)
 779                   (dolist (feature (char-attribute-list))
 780                     (setq feature (symbol-name feature))
 781                     (when (string-match
 782                            "\\(radical\\|strokes\\)@\\([^@*]+\\)\\(\\*\\|$\\)"
 783                            feature)
 784                       (setq domain (intern (match-string 2 feature)))
 785                      (unless (memq domain dest)
 786                        (setq dest (cons domain dest)))))
 787                   (sort dest #'string<))))
 788         (setq key (intern (format "%s@%s" 'ideographic-radical domain)))
 789         (when (and (memq key attributes)
 790                    (setq value (get-char-attribute char key)))
 791           (setq radical value)
 792           (insert (format "(%s . %S)\t; %c%s"
 793                           key
 794                           radical
 795                           (ideographic-radical radical)
 796                           line-breaking))
 797           (setq attributes (delq key attributes))
 798           )
 799         (setq key (intern (format "%s@%s" 'ideographic-strokes domain)))
 800         (when (and (memq key attributes)
 801                    (setq value (get-char-attribute char key)))
 802           (setq strokes value)
 803           (insert (format "(%s . %S)%s"
 804                           key
 805                           strokes
 806                           line-breaking))
 807           (setq attributes (delq key attributes))
 808           )
 809         (setq key (intern (format "%s@%s" 'total-strokes domain)))
 810         (when (and (memq key attributes)
 811                    (setq value (get-char-attribute char key)))
 812           (insert (format "(%s       . %S)%s"
 813                           key
 814                           value
 815                           line-breaking))
 816           (setq attributes (delq key attributes))
 817           )
 818         (dolist (feature '(ideographic-radical
 819                            ideographic-strokes
 820                            total-strokes))
 821           (setq key (intern (format "%s@%s*sources" feature domain)))
 822           (when (and (memq key attributes)
 823                      (setq value (get-char-attribute char key)))
 824             (insert (format "(%s%s" key line-breaking))
 825             (dolist (cell value)
 826               (insert (format " %s" cell)))
 827             (insert ")")
 828             (insert line-breaking)
 829             (setq attributes (delq key attributes))
 830             ))
 831         ))
 832     (when (and (memq 'ideographic-strokes attributes)
 833                (setq value (get-char-attribute char 'ideographic-strokes)))
 834       (setq strokes value)
 835       (insert (format "(ideographic-strokes . %S)%s"
 836                       strokes
 837                       line-breaking))
 838       (setq attributes (delq 'ideographic-strokes attributes))
 839       )
 840     (when (and (memq 'kangxi-radical attributes)
 841                (setq value (get-char-attribute char 'kangxi-radical)))
 842       (unless (eq value radical)
 843         (insert (format "(kangxi-radical\t . %S)\t; %c%s"
 844                         value
 845                         (ideographic-radical value)
 846                         line-breaking))
 847         (or radical
 848             (setq radical value)))
 849       (setq attributes (delq 'kangxi-radical attributes))
 850       )
 851     (when (and (memq 'kangxi-strokes attributes)
 852                (setq value (get-char-attribute char 'kangxi-strokes)))
 853       (unless (eq value strokes)
 854         (insert (format "(kangxi-strokes\t . %S)%s"
 855                         value
 856                         line-breaking))
 857         (or strokes
 858             (setq strokes value)))
 859       (setq attributes (delq 'kangxi-strokes attributes))
 860       )
 861     (when (and (memq 'japanese-radical attributes)
 862                (setq value (get-char-attribute char 'japanese-radical)))
 863       (unless (eq value radical)
 864         (insert (format "(japanese-radical\t . %S)\t; %c%s"
 865                         value
 866                         (ideographic-radical value)
 867                         line-breaking))
 868         (or radical
 869             (setq radical value)))
 870       (setq attributes (delq 'japanese-radical attributes))
 871       )
 872     (when (and (memq 'japanese-strokes attributes)
 873                (setq value (get-char-attribute char 'japanese-strokes)))
 874       (unless (eq value strokes)
 875         (insert (format "(japanese-strokes\t . %S)%s"
 876                         value
 877                         line-breaking))
 878         (or strokes
 879             (setq strokes value)))
 880       (setq attributes (delq 'japanese-strokes attributes))
 881       )
 882     (when (and (memq 'cns-radical attributes)
 883                (setq value (get-char-attribute char 'cns-radical)))
 884       (insert (format "(cns-radical\t . %S)\t; %c%s"
 885                       value
 886                       (ideographic-radical value)
 887                       line-breaking))
 888       (setq attributes (delq 'cns-radical attributes))
 889       )
 890     (when (and (memq 'cns-strokes attributes)
 891                (setq value (get-char-attribute char 'cns-strokes)))
 892       (unless (eq value strokes)
 893         (insert (format "(cns-strokes\t . %S)%s"
 894                         value
 895                         line-breaking))
 896         (or strokes
 897             (setq strokes value)))
 898       (setq attributes (delq 'cns-strokes attributes))
 899       )
 900     (when (and (memq 'shinjigen-1-radical attributes)
 901                (setq value (get-char-attribute char 'shinjigen-1-radical)))
 902       (unless (eq value radical)
 903         (insert (format "(shinjigen-1-radical . %S)\t; %c%s"
 904                         value
 905                         (ideographic-radical value)
 906                         line-breaking))
 907         (or radical
 908             (setq radical value)))
 909       (setq attributes (delq 'shinjigen-1-radical attributes))
 910       )
 911     (when (and (memq 'ideographic- attributes)
 912                (setq value (get-char-attribute char 'ideographic-)))
 913       (insert "(ideographic-       ")
 914       (setq lbs (concat "\n" (make-string (current-column) ?\ ))
 915             separator nil)
 916       (while (consp value)
 917         (setq cell (car value))
 918         (if (integerp cell)
 919             (setq cell (decode-char '=ucs cell)))
 920         (cond ((characterp cell)
 921                (if separator
 922                    (insert lbs))
 923                (if readable
 924                    (insert (format "%S" cell))
 925                  (char-db-insert-char-spec cell readable))
 926                (setq separator lbs))
 927               ((consp cell)
 928                (if separator
 929                    (insert lbs))
 930                (if (consp (car cell))
 931                    (char-db-insert-char-spec cell readable)
 932                  (char-db-insert-char-reference cell readable))
 933                (setq separator lbs))
 934               (t
 935                (if separator
 936                    (insert separator))
 937                (insert (prin1-to-string cell))
 938                (setq separator " ")))
 939         (setq value (cdr value)))
 940       (insert ")")
 941       (insert line-breaking)
 942       (setq attributes (delq 'ideographic- attributes)))
 943     (when (and (memq 'total-strokes attributes)
 944                (setq value (get-char-attribute char 'total-strokes)))
 945       (insert (format "(total-strokes       . %S)%s"
 946                       value
 947                       line-breaking))
 948       (setq attributes (delq 'total-strokes attributes))
 949       )
 950     (when (and (memq '->ideograph attributes)
 951                (setq value (get-char-attribute char '->ideograph)))
 952       (insert (format "(->ideograph\t%s)%s"
 953                       (mapconcat (lambda (code)
 954                                    (cond ((symbolp code)
 955                                           (symbol-name code))
 956                                          ((integerp code)
 957                                           (format "#x%04X" code))
 958                                          (t
 959                                           (format "%s %S"
 960                                                   line-breaking code))))
 961                                  value " ")
 962                       line-breaking))
 963       (setq attributes (delq '->ideograph attributes))
 964       )
 965     ;; (when (and (memq '->decomposition attributes)
 966     ;;            (setq value (get-char-attribute char '->decomposition)))
 967     ;;   (insert (format "(->decomposition\t%s)%s"
 968     ;;                   (mapconcat (lambda (code)
 969     ;;                                (cond ((symbolp code)
 970     ;;                                       (symbol-name code))
 971     ;;                                      ((characterp code)
 972     ;;                                       (if readable
 973     ;;                                           (format "%S" code)
 974     ;;                                         (format "#x%04X"
 975     ;;                                                 (char-int code))
 976     ;;                                         ))
 977     ;;                                      ((integerp code)
 978     ;;                                       (format "#x%04X" code))
 979     ;;                                      (t
 980     ;;                                       (format "%s%S" line-breaking code))))
 981     ;;                              value " ")
 982     ;;                   line-breaking))
 983     ;;   (setq attributes (delq '->decomposition attributes))
 984     ;;   )
 985     (if (equal (get-char-attribute char '->titlecase)
 986                (get-char-attribute char '->uppercase))
 987         (setq attributes (delq '->titlecase attributes)))
 988     (when (and (memq '->mojikyo attributes)
 989                (setq value (get-char-attribute char '->mojikyo)))
 990       (insert (format "(->mojikyo\t\t. %06d)\t; %c%s"
 991                       value (decode-char 'mojikyo value)
 992                       line-breaking))
 993       (setq attributes (delq '->mojikyo attributes))
 994       )
 995     (when (and (memq 'hanyu-dazidian-vol attributes)
 996                (setq value (get-char-attribute char 'hanyu-dazidian-vol)))
 997       (insert (format "(hanyu-dazidian-vol  . %d)%s"
 998                       value line-breaking))
 999       (setq attributes (delq 'hanyu-dazidian-vol attributes))
1000       )
1001     (when (and (memq 'hanyu-dazidian-page attributes)
1002                (setq value (get-char-attribute char 'hanyu-dazidian-page)))
1003       (insert (format "(hanyu-dazidian-page . %d)%s"
1004                       value line-breaking))
1005       (setq attributes (delq 'hanyu-dazidian-page attributes))
1006       )
1007     (when (and (memq 'hanyu-dazidian-char attributes)
1008                (setq value (get-char-attribute char 'hanyu-dazidian-char)))
1009       (insert (format "(hanyu-dazidian-char . %d)%s"
1010                       value line-breaking))
1011       (setq attributes (delq 'hanyu-dazidian-char attributes))
1012       )
1013     (unless readable
1014       (dolist (ignored '(composition
1015                          ->denotational <-subsumptive ->ucs-unified
1016                          ->ideographic-component-forms))
1017         (setq attributes (delq ignored attributes))))
1018     (while attributes
1019       (setq name (car attributes))
1020       (if (setq value (get-char-attribute char name))
1021           (cond ((setq ret (find-charset name))
1022                  (setq name (charset-name ret))
1023                  (if (and (not (memq name dest-ccss))
1024                           (prog1
1025                               (setq value (get-char-attribute char name))
1026                             (setq dest-ccss (cons name dest-ccss))))
1027                      (char-db-insert-ccs-feature name value line-breaking))
1028                  )
1029                 ((string-match "^=>ucs@" (symbol-name name))
1030                  (insert (format "(%-18s . #x%04X)\t; %c%s"
1031                                  name value (decode-char '=ucs value)
1032                                  line-breaking))
1033                  )
1034                 ((eq name 'jisx0208-1978/4X)
1035                  (insert (format "(%-18s . #x%04X)%s"
1036                                  name value
1037                                  line-breaking))
1038                  )
1039                 ((and
1040                   (not readable)
1041                   (not (eq name '->subsumptive))
1042                   (not (eq name '->uppercase))
1043                   (not (eq name '->lowercase))
1044                   (not (eq name '->titlecase))
1045                   (not (eq name '->canonical))
1046                   (not (eq name '->Bopomofo))
1047                   (not (eq name '->mistakable))
1048                   (not (eq name '->ideographic-variants))
1049                   (null (get-char-attribute
1050                          char (intern (format "%s*sources" name))))
1051                   (not (string-match "\\*sources$" (symbol-name name)))
1052                   (null (get-char-attribute
1053                          char (intern (format "%s*note" name))))
1054                   (not (string-match "\\*note$" (symbol-name name)))
1055                   (or (eq name '<-identical)
1056                       (eq name '<-uppercase)
1057                       (eq name '<-lowercase)
1058                       (eq name '<-titlecase)
1059                       (eq name '<-canonical)
1060                       (eq name '<-ideographic-variants)
1061                       ;; (eq name '<-synonyms)
1062                       (string-match "^<-synonyms" (symbol-name name))
1063                       (eq name '<-mistakable)
1064                       (when (string-match "^->" (symbol-name name))
1065                         (cond
1066                          ((string-match "^->fullwidth" (symbol-name name))
1067                           (not (and (consp value)
1068                                     (characterp (car value))
1069                                     (encode-char
1070                                      (car value) '=ucs 'defined-only)))
1071                           )
1072                          (t)))
1073                       ))
1074                  )
1075                 ((or (eq name 'ideographic-structure)
1076                      (eq name 'ideographic-combination)
1077                      (eq name 'ideographic-)
1078                      (eq name '=decomposition)
1079                      (string-match "^=>decomposition" (symbol-name name))
1080                      (string-match "^\\(->\\|<-\\)[^*]*$" (symbol-name name))
1081                      (string-match "^\\(->\\|<-\\)[^*]*\\*sources$"
1082                                    (symbol-name name))
1083                      )
1084                  (char-db-insert-relation-feature char name value
1085                                                   line-breaking
1086                                                   ccss readable))
1087                 ((memq name '(ideograph=
1088                               original-ideograph-of
1089                               ancient-ideograph-of
1090                               vulgar-ideograph-of
1091                               wrong-ideograph-of
1092                               ;; simplified-ideograph-of
1093                               ideographic-variants
1094                               ;; ideographic-different-form-of
1095                               ))
1096                  (insert (format "(%-18s%s " name line-breaking))
1097                  (setq lbs (concat "\n" (make-string (current-column) ?\ ))
1098                        separator nil)
1099                  (while (consp value)
1100                    (setq cell (car value))
1101                    (if (and (consp cell)
1102                             (consp (car cell)))
1103                        (progn
1104                          (if separator
1105                              (insert lbs))
1106                          (char-db-insert-alist cell readable)
1107                          (setq separator lbs))
1108                      (if separator
1109                          (insert separator))
1110                      (insert (prin1-to-string cell))
1111                      (setq separator " "))
1112                    (setq value (cdr value)))
1113                  (insert ")")
1114                  (insert line-breaking))
1115                 ((consp value)
1116                  (insert (format "(%-18s " name))
1117                  (setq lbs (concat "\n" (make-string (current-column) ?\ ))
1118                        separator nil)
1119                  (while (consp value)
1120                    (setq cell (car value))
1121                    (if (and (consp cell)
1122                             (consp (car cell))
1123                             (setq ret (condition-case nil
1124                                           (find-char cell)
1125                                         (error nil))))
1126                        (progn
1127                          (setq rest cell
1128                                al nil
1129                                cal nil)
1130                          (while rest
1131                            (setq key (car (car rest)))
1132                            (if (find-charset key)
1133                                (setq cal (cons key cal))
1134                              (setq al (cons key al)))
1135                            (setq rest (cdr rest)))
1136                          (if separator
1137                              (insert lbs))
1138                          (insert-char-attributes ret
1139                                                  readable
1140                                                  al cal)
1141                          (setq separator lbs))
1142                      (setq ret (prin1-to-string cell))
1143                      (if separator
1144                          (if (< (+ (current-column)
1145                                    (length ret)
1146                                    (length separator))
1147                                 76)
1148                              (insert separator)
1149                            (insert lbs)))
1150                      (insert ret)
1151                      (setq separator " "))
1152                    (setq value (cdr value)))
1153                  (insert ")")
1154                  (insert line-breaking))
1155                 (t
1156                  (insert (format "(%-18s" name))
1157                  (setq ret (prin1-to-string value))
1158                  (unless (< (+ (current-column)
1159                                (length ret)
1160                                3)
1161                             76)
1162                    (insert line-breaking))
1163                  (insert " . " ret ")" line-breaking)
1164                  ;; (insert (format "(%-18s . %S)%s"
1165                  ;;                 name value
1166                  ;;                 line-breaking))
1167                  )
1168                 ))
1169       (setq attributes (cdr attributes)))
1170     (insert ")")))
1171
1172 (defun insert-char-data (char &optional readable
1173                               attributes)
1174   (save-restriction
1175     (narrow-to-region (point)(point))
1176     (insert "(define-char
1177   '")
1178     (insert-char-attributes char readable attributes)
1179     (insert ")\n")
1180     (goto-char (point-min))
1181     (while (re-search-forward "[ \t]+$" nil t)
1182       (replace-match ""))
1183     ;; from tabify.
1184     (goto-char (point-min))
1185     (while (re-search-forward "[ \t][ \t][ \t]*" nil t)
1186       (let ((column (current-column))
1187             (indent-tabs-mode t))
1188         (delete-region (match-beginning 0) (point))
1189         (indent-to column)))
1190     (goto-char (point-max))
1191     ;; (tabify (point-min)(point-max))
1192     ))
1193
1194 (defun insert-char-data-with-variant (char &optional printable
1195                                            no-ucs-unified
1196                                            script excluded-script)
1197   (insert-char-data char printable)
1198   (let ((variants (char-variants char))
1199         rest
1200         variant vs ret)
1201     (setq variants (sort variants #'<))
1202     (setq rest variants)
1203     (setq variants (cons char variants))
1204     (while rest
1205       (setq variant (car rest))
1206       (unless (get-char-attribute variant '<-subsumptive)
1207         (if (and (or (null script)
1208                      (null (setq vs (get-char-attribute variant 'script)))
1209                      (memq script vs))
1210                  (or (null excluded-script)
1211                      (null (setq vs (get-char-attribute variant 'script)))
1212                      (not (memq excluded-script vs))))
1213             (unless (and no-ucs-unified (get-char-attribute variant '=ucs))
1214               (insert-char-data variant printable)
1215               (if (setq ret (char-variants variant))
1216                   (while ret
1217                     (or (memq (car ret) variants)
1218                         ;; (get-char-attribute (car ret) '<-subsumptive)
1219                         (setq rest (nconc rest (list (car ret)))))
1220                     (setq ret (cdr ret)))))))
1221       (setq rest (cdr rest)))))
1222
1223 (defun insert-char-range-data (min max &optional script excluded-script)
1224   (let ((code min)
1225         char)
1226     (while (<= code max)
1227       (setq char (decode-char '=ucs code))
1228       (if (encode-char char '=ucs 'defined-only)
1229           (insert-char-data-with-variant char nil 'no-ucs-unified
1230                                          script excluded-script))
1231       (setq code (1+ code)))))
1232
1233 (defun write-char-range-data-to-file (min max file
1234                                           &optional script excluded-script)
1235   (let ((coding-system-for-write char-db-file-coding-system))
1236     (with-temp-buffer
1237       (insert (format ";; -*- coding: %s -*-\n"
1238                       char-db-file-coding-system))
1239       (insert-char-range-data min max script excluded-script)
1240       (write-region (point-min)(point-max) file))))
1241
1242 (defvar what-character-original-window-configuration)
1243
1244 ;;;###autoload
1245 (defun what-char-definition (char)
1246   (interactive (list (char-after)))
1247   (let ((buf (get-buffer-create "*Character Description*"))
1248         (the-buf (current-buffer))
1249         (win-conf (current-window-configuration)))
1250     (pop-to-buffer buf)
1251     (make-local-variable 'what-character-original-window-configuration)
1252     (setq what-character-original-window-configuration win-conf)
1253     (setq buffer-read-only nil)
1254     (erase-buffer)
1255     (condition-case err
1256         (progn
1257           (insert-char-data-with-variant char 'printable)
1258           (unless (char-attribute-alist char)
1259             (insert (format ";; = %c\n"
1260                             (let* ((rest (split-char char))
1261                                    (ccs (pop rest))
1262                                    (code (pop rest)))
1263                               (while rest
1264                                 (setq code (logior (lsh code 8)
1265                                                    (pop rest))))
1266                               (decode-char ccs code)))))
1267           ;; (char-db-update-comment)
1268           (set-buffer-modified-p nil)
1269           (view-mode the-buf (lambda (buf)
1270                                (set-window-configuration
1271                                 what-character-original-window-configuration)
1272                                ))
1273           (goto-char (point-min)))
1274       (error (progn
1275                (set-window-configuration
1276                 what-character-original-window-configuration)
1277                (signal (car err) (cdr err)))))))
1278
1279 (provide 'char-db-util)
1280
1281 ;;; char-db-util.el ends here