git.chise.org Git - chise/xemacs-chise.git.1/blob - lisp/utf-2000/char-db-util.el

   1 ;;; char-db-util.el --- Character Database utility -*- coding: utf-8-er; -*-
   2
   3 ;; Copyright (C) 1998, 1999, 2000, 2001, 2002, 2003, 2004, 2005, 2006,
   4 ;;   2007 MORIOKA Tomohiko.
   5
   6 ;; Author: MORIOKA Tomohiko <tomo@kanji.zinbun.kyoto-u.ac.jp>
   7 ;; Keywords: CHISE, Character Database, ISO/IEC 10646, UCS, Unicode, MULE.
   8
   9 ;; This file is part of XEmacs CHISE.
  10
  11 ;; XEmacs CHISE is free software; you can redistribute it and/or
  12 ;; modify it under the terms of the GNU General Public License as
  13 ;; published by the Free Software Foundation; either version 2, or (at
  14 ;; your option) any later version.
  15
  16 ;; XEmacs CHISE is distributed in the hope that it will be useful,
  17 ;; but WITHOUT ANY WARRANTY; without even the implied warranty of
  18 ;; MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  19 ;; General Public License for more details.
  20
  21 ;; You should have received a copy of the GNU General Public License
  22 ;; along with XEmacs CHISE; see the file COPYING.  If not, write to
  23 ;; the Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  24 ;; Boston, MA 02111-1307, USA.
  25
  26 ;;; Code:
  27
  28 (require 'alist)
  29
  30 (defconst unidata-normative-category-alist
  31   '(("Lu" letter        uppercase)
  32     ("Ll" letter        lowercase)
  33     ("Lt" letter        titlecase)
  34     ("Mn" mark          non-spacing)
  35     ("Mc" mark          spacing-combining)
  36     ("Me" mark          enclosing)
  37     ("Nd" number        decimal-digit)
  38     ("Nl" number        letter)
  39     ("No" number        other)
  40     ("Zs" separator     space)
  41     ("Zl" separator     line)
  42     ("Zp" separator     paragraph)
  43     ("Cc" other         control)
  44     ("Cf" other         format)
  45     ("Cs" other         surrogate)
  46     ("Co" other         private-use)
  47     ("Cn" other         not-assigned)))
  48
  49 (defconst unidata-informative-category-alist
  50   '(("Lm" letter        modifier)
  51     ("Lo" letter        other)
  52     ("Pc" punctuation   connector)
  53     ("Pd" punctuation   dash)
  54     ("Ps" punctuation   open)
  55     ("Pe" punctuation   close)
  56     ("Pi" punctuation   initial-quote)
  57     ("Pf" punctuation   final-quote)
  58     ("Po" punctuation   other)
  59     ("Sm" symbol        math)
  60     ("Sc" symbol        currency)
  61     ("Sk" symbol        modifier)
  62     ("So" symbol        other)
  63     ))
  64
  65 (defconst ideographic-radicals
  66   (let ((v (make-vector 215 nil))
  67         (i 1))
  68     (while (< i 215)
  69       (aset v i (decode-char '=ucs (+ #x2EFF i)))
  70       (setq i (1+ i)))
  71     v))
  72
  73 (defun ideographic-radical (number)
  74   (aref ideographic-radicals number))
  75
  76 (defconst shuowen-radicals
  77   [?一 ?上 ?示 ?三 ?王 ?玉 ?玨 ?气 ?士 ?丨
  78    ?屮 ?艸 ?茻 ?小 ?八 ?釆 ?牛 ?告 ?口])
  79
  80 (defun shuowen-radical (number)
  81   (aref shuowen-radicals (1- number)))
  82
  83 (defvar char-db-file-coding-system 'utf-8-mcs-er)
  84
  85 (defvar char-db-feature-domains
  86   '(ucs ucs/compat daikanwa cns gt jis jis/alt jis/a jis/b
  87         jis-x0212 jis-x0213 cdp shinjigen misc unknown))
  88
  89 (defvar char-db-ignored-attributes '(ideographic-products))
  90
  91 (defun char-attribute-name< (ka kb)
  92   (cond
  93    ((eq '->denotational kb)
  94     t)
  95    ((eq '->subsumptive kb)
  96     (not (eq '->denotational ka)))
  97    ((eq '->denotational ka)
  98     nil)
  99    ((eq '->subsumptive ka)
 100     nil)
 101    ((and (symbolp ka)
 102          (string-match "^->" (symbol-name ka)))
 103     (cond ((and (symbolp kb)
 104                 (string-match "^->" (symbol-name kb)))
 105            (string< (symbol-name ka)
 106                     (symbol-name kb))
 107            ))
 108     )
 109    ((and (symbolp kb)
 110          (string-match "^->" (symbol-name kb)))
 111     t)
 112    ((and (symbolp ka)
 113          (string-match "^<-" (symbol-name ka)))
 114     (cond ((symbolp kb)
 115            (cond ((string-match "^<-" (symbol-name kb))
 116                   (string< (symbol-name ka)
 117                            (symbol-name kb))
 118                   )
 119                  ;; ((string-match "^->" (symbol-name kb))
 120                  ;;  t)
 121                  )))
 122     )
 123    ((and (symbolp kb)
 124          (string-match "^<-" (symbol-name kb)))
 125     t
 126     ;; (not (string-match "^->" (symbol-name ka)))
 127     )
 128    ((find-charset ka)
 129     (if (find-charset kb)
 130         (if (<= (charset-id ka) 1)
 131             (if (<= (charset-id kb) 1)
 132                 (cond
 133                  ((= (charset-dimension ka)
 134                      (charset-dimension kb))
 135                   (> (charset-id ka)(charset-id kb)))
 136                  (t
 137                   (> (charset-dimension ka)
 138                      (charset-dimension kb))
 139                   ))
 140               t)
 141           (if (<= (charset-id kb) 1)
 142               nil
 143             (< (charset-id ka)(charset-id kb))))
 144       nil))
 145    ((find-charset kb)
 146     t)
 147    ((symbolp ka)
 148     (cond ((symbolp kb)
 149            (string< (symbol-name ka)
 150                     (symbol-name kb)))
 151           (t)))
 152    ((symbolp kb)
 153     nil)))
 154
 155 (defvar char-db-coded-charset-priority-list
 156   '(ascii
 157     control-1
 158     latin-iso8859-1
 159     latin-iso8859-2
 160     latin-iso8859-3
 161     latin-iso8859-4
 162     latin-iso8859-9
 163     latin-jisx0201
 164     cyrillic-iso8859-5
 165     greek-iso8859-7
 166     thai-tis620
 167     =jis-x0208
 168     =jis-x0208@1978
 169     =jis-x0208@1983
 170     japanese-jisx0212
 171     chinese-gb2312
 172     =jis-x0208@1990
 173     chinese-cns11643-1
 174     chinese-cns11643-2
 175     chinese-cns11643-3
 176     chinese-cns11643-4
 177     chinese-cns11643-5
 178     chinese-cns11643-6
 179     chinese-cns11643-7
 180     =jis-x0213-1-2000
 181     =jis-x0213-2-2000
 182     korean-ksc5601
 183     chinese-isoir165
 184     katakana-jisx0201
 185     hebrew-iso8859-8
 186     chinese-gb12345
 187     latin-viscii
 188     ethiopic-ucs
 189     =big5-cdp
 190     =gt
 191     ideograph-daikanwa-2
 192     ideograph-daikanwa
 193     =cbeta
 194     ideograph-hanziku-1
 195     ideograph-hanziku-2
 196     ideograph-hanziku-3
 197     ideograph-hanziku-4
 198     ideograph-hanziku-5
 199     ideograph-hanziku-6
 200     ideograph-hanziku-7
 201     ideograph-hanziku-8
 202     ideograph-hanziku-9
 203     ideograph-hanziku-10
 204     ideograph-hanziku-11
 205     ideograph-hanziku-12
 206     =gt-k
 207     =ucs@iso
 208     =ucs@unicode
 209     =big5
 210     =big5-eten
 211     =jis-x0208@1997
 212     =zinbun-oracle
 213     =ruimoku-v6
 214     =jef-china3))
 215
 216 (defun char-db-make-char-spec (char)
 217   (let (ret char-spec)
 218     (cond ((characterp char)
 219            (cond ((and (setq ret (encode-char char '=ucs 'defined-only))
 220                        (not (and (<= #xE000 ret)(<= ret #xF8FF))))
 221                   (setq char-spec (list (cons '=ucs ret)))
 222                   (cond ((setq ret (get-char-attribute char 'name))
 223                          (setq char-spec (cons (cons 'name ret) char-spec))
 224                          )
 225                         ((setq ret (get-char-attribute char 'name*))
 226                          (setq char-spec (cons (cons 'name* ret) char-spec))
 227                          ))
 228                   )
 229                  ((setq ret
 230                         (catch 'tag
 231                           (let ((rest char-db-coded-charset-priority-list)
 232                                 ccs)
 233                             (while rest
 234                               (setq ccs (charset-name
 235                                          (find-charset (car rest))))
 236                               (if (setq ret
 237                                         (encode-char char ccs
 238                                                      'defined-only))
 239                                   (throw 'tag (cons ccs ret)))
 240                               (setq rest (cdr rest))))))
 241                   (setq char-spec (list ret))
 242                   (dolist (ccs (delq (car ret) (charset-list)))
 243                     (if (and (or (charset-iso-final-char ccs)
 244                                  (memq ccs
 245                                        '(=daikanwa
 246                                          =daikanwa@rev2
 247                                          ;; =gt-k
 248                                          =jis-x0208@1997
 249                                          )))
 250                              (setq ccs (charset-name ccs))
 251                              (null (assq ccs char-spec))
 252                              (setq ret (encode-char char ccs 'defined-only)))
 253                         (setq char-spec (cons (cons ccs ret) char-spec))))
 254                   (if (null char-spec)
 255                       (setq char-spec (split-char char)))
 256                   (cond ((setq ret (get-char-attribute char 'name))
 257                          (setq char-spec (cons (cons 'name ret) char-spec))
 258                          )
 259                         ((setq ret (get-char-attribute char 'name*))
 260                          (setq char-spec (cons (cons 'name* ret) char-spec))
 261                          ))
 262                   ))
 263            char-spec)
 264           ((consp char)
 265            char))))
 266
 267 (defun char-db-insert-char-spec (char &optional readable column
 268                                       required-features)
 269   (unless column
 270     (setq column (current-column)))
 271   (let (char-spec temp-char)
 272     (setq char-spec (char-db-make-char-spec char))
 273     (unless (or (characterp char) ; char
 274                 (condition-case nil
 275                     (setq char (find-char char-spec))
 276                   (error nil)))
 277       ;; define temporary character
 278       ;;   Current implementation is dirty.
 279       (setq temp-char (define-char (cons '(ideograph-daikanwa . 0)
 280                                          char-spec)))
 281       (remove-char-attribute temp-char 'ideograph-daikanwa)
 282       (setq char temp-char))
 283     (insert-char-attributes char
 284                             readable
 285                             (union (mapcar #'car char-spec)
 286                                    required-features))
 287     (when temp-char
 288       ;; undefine temporary character
 289       ;;   Current implementation is dirty.
 290       (setq char-spec (char-attribute-alist temp-char))
 291       (while char-spec
 292         (remove-char-attribute temp-char (car (car char-spec)))
 293         (setq char-spec (cdr char-spec))))))
 294
 295 (defun char-db-insert-alist (alist &optional readable column)
 296   (unless column
 297     (setq column (current-column)))
 298   (let ((line-breaking
 299          (concat "\n" (make-string (1+ column) ?\ )))
 300         name value
 301         ret al ; cal
 302         key
 303         lbs cell rest separator)
 304     (insert "(")
 305     (while alist
 306       (setq name (car (car alist))
 307             value (cdr (car alist)))
 308       (cond ((eq name 'char)
 309              (insert "(char . ")
 310              (if (setq ret (condition-case nil
 311                                (find-char value)
 312                              (error nil)))
 313                  (progn
 314                    (setq al nil
 315                          ;; cal nil
 316                          )
 317                    (while value
 318                      (setq key (car (car value)))
 319                      ;; (if (find-charset key)
 320                      ;;     (setq cal (cons key cal))
 321                      (setq al (cons key al))
 322                      ;; )
 323                      (setq value (cdr value)))
 324                    (insert-char-attributes ret
 325                                            readable
 326                                            (or al 'none) ; cal
 327                                            ))
 328                (insert (prin1-to-string value)))
 329              (insert ")")
 330              (insert line-breaking))
 331             ((consp value)
 332              (insert (format "(%-18s " name))
 333              (setq lbs (concat "\n" (make-string (current-column) ?\ )))
 334              (while (consp value)
 335                (setq cell (car value))
 336                (if (and (consp cell)
 337                         (consp (car cell))
 338                         (setq ret (condition-case nil
 339                                       (find-char cell)
 340                                     (error nil)))
 341                         )
 342                    (progn
 343                      (setq rest cell
 344                            al nil
 345                            ;; cal nil
 346                            )
 347                      (while rest
 348                        (setq key (car (car rest)))
 349                        ;; (if (find-charset key)
 350                        ;;     (setq cal (cons key cal))
 351                        (setq al (cons key al))
 352                        ;; )
 353                        (setq rest (cdr rest)))
 354                      (if separator
 355                          (insert lbs))
 356                      (insert-char-attributes ret
 357                                              readable
 358                                              al ; cal
 359                                              )
 360                      (setq separator lbs))
 361                  (if separator
 362                      (insert separator))
 363                  (insert (prin1-to-string cell))
 364                  (setq separator " "))
 365                (setq value (cdr value)))
 366              (insert ")")
 367              (insert line-breaking))
 368             (t
 369              (insert (format "(%-18s . %S)%s"
 370                              name value
 371                              line-breaking))))
 372       (setq alist (cdr alist))))
 373   (insert ")"))
 374
 375 (defun char-db-insert-char-reference (plist &optional readable column)
 376   (unless column
 377     (setq column (current-column)))
 378   (let ((line-breaking
 379          (concat "\n" (make-string (1+ column) ?\ )))
 380         (separator "")
 381         name value)
 382     (insert "(")
 383     (while plist
 384       (setq name (pop plist))
 385       (setq value (pop plist))
 386       (cond ((eq name :char)
 387              (insert separator)
 388              (insert ":char\t")
 389              (cond ((numberp value)
 390                     (setq value (decode-char '=ucs value)))
 391                    ;; ((consp value)
 392                    ;;  (setq value (or (find-char value)
 393                    ;;                  value)))
 394                    )
 395              (char-db-insert-char-spec value readable)
 396              (insert line-breaking)
 397              (setq separator ""))
 398             ((eq name :radical)
 399              (insert (format "%s%s\t%d ; %c%s"
 400                              separator
 401                              name value
 402                              (ideographic-radical value)
 403                              line-breaking))
 404              (setq separator ""))
 405             (t
 406              (insert (format "%s%s\t%S" separator name value))
 407              (setq separator line-breaking)))
 408       ))
 409   (insert ")"))
 410
 411 (defun char-db-decode-isolated-char (ccs code-point)
 412   (let (ret)
 413     (setq ret
 414           (cond ((eq ccs 'arabic-iso8859-6)
 415                  (decode-char ccs code-point))
 416                 ((and (memq ccs '(=gt-pj-1
 417                                   =gt-pj-2
 418                                   =gt-pj-3
 419                                   =gt-pj-4
 420                                   =gt-pj-5
 421                                   =gt-pj-6
 422                                   =gt-pj-7
 423                                   =gt-pj-8
 424                                   =gt-pj-9
 425                                   =gt-pj-10
 426                                   =gt-pj-11))
 427                       (setq ret (decode-char ccs code-point))
 428                       (setq ret (encode-char ret '=gt 'defined-only)))
 429                  (decode-builtin-char '=gt ret))
 430                 (t
 431                  (decode-builtin-char ccs code-point))))
 432     (cond ((and (<= 0 (char-int ret))
 433                 (<= (char-int ret) #x1F))
 434            (decode-char '=ucs (+ #x2400 (char-int ret))))
 435           ((= (char-int ret) #x7F)
 436            ?\u2421)
 437           (t ret))))
 438
 439 (defvar char-db-convert-obsolete-format t)
 440
 441 (defun char-db-insert-ccs-feature (name value line-breaking)
 442   (insert
 443    (format
 444     (cond ((or (memq name '(=daikanwa
 445                             =daikanwa@rev1 =daikanwa@rev2
 446                             =gt =gt-k =cbeta =zinbun-oracle))
 447                (string-match "^=adobe-" (symbol-name name)))
 448            "(%-18s . %05d)\t; %c")
 449           ((eq name 'mojikyo)
 450            "(%-18s . %06d)\t; %c")
 451           ((>= (charset-dimension name) 2)
 452            "(%-18s . #x%04X)\t; %c")
 453           (t
 454            "(%-18s . #x%02X)\t; %c"))
 455     name
 456     (if (= (charset-iso-graphic-plane name) 1)
 457         (logior value
 458                 (cond ((= (charset-dimension name) 1)
 459                        #x80)
 460                       ((= (charset-dimension name) 2)
 461                        #x8080)
 462                       ((= (charset-dimension name) 3)
 463                        #x808080)
 464                       (t 0)))
 465       value)
 466     (char-db-decode-isolated-char name value)))
 467   (if (and (= (charset-chars name) 94)
 468            (= (charset-dimension name) 2))
 469       (insert (format " [%02d-%02d]"
 470                       (- (lsh value -8) 32)
 471                       (- (logand value 255) 32))))
 472   (insert line-breaking))
 473
 474 (defun char-db-insert-relation-feature (char name value line-breaking
 475                                              ccss readable)
 476   (insert (format "(%-18s%s " name line-breaking))
 477   (let ((lbs (concat "\n" (make-string (current-column) ?\ )))
 478         separator cell sources required-features
 479         ret)
 480     (while (consp value)
 481       (setq cell (car value))
 482       (if (integerp cell)
 483           (setq cell (decode-char '=ucs cell)))
 484       (cond
 485        ((eq name '->subsumptive)
 486         (when (or (not (some (lambda (atr)
 487                                (get-char-attribute cell atr))
 488                              char-db-ignored-attributes))
 489                   (some (lambda (ccs)
 490                           (encode-char cell ccs 'defined-only))
 491                         ccss))
 492           (if separator
 493               (insert lbs))
 494           (let ((char-db-ignored-attributes
 495                  (cons '<-subsumptive
 496                        char-db-ignored-attributes)))
 497             (insert-char-attributes cell readable))
 498           (setq separator lbs))
 499         )
 500        ((characterp cell)
 501         (setq sources
 502               (get-char-attribute
 503                char (intern (format "%s*sources" name))))
 504         (setq required-features nil)
 505         (dolist (source sources)
 506           (cond
 507            ((memq source '(JP JP/Jouyou shinjigen-1))
 508             (setq required-features
 509                   (union required-features
 510                          '(=jis-x0208
 511                            =jis-x0208@1990
 512                            =jis-x0213-1-2000
 513                            =jis-x0213-2-2000
 514                            =jis-x0212
 515                            =jis-x0208@1983
 516                            =jis-x0208@1978))))
 517            ((eq source 'CN)
 518             (setq required-features
 519                   (union required-features
 520                          '(=gb2312
 521                            =gb12345
 522                            =iso-ir165)))))
 523           (cond
 524            ((find-charset (setq ret (intern (format "=%s" source))))
 525             (setq required-features
 526                   (cons ret required-features)))
 527            (t (setq required-features
 528                     (cons source required-features)))))
 529         (cond ((string-match "@JP" (symbol-name name))
 530                (setq required-features
 531                      (union required-features
 532                             '(=jis-x0208
 533                               =jis-x0208@1990
 534                               =jis-x0213-1-2000
 535                               =jis-x0213-2-2000
 536                               =jis-x0212
 537                               =jis-x0208@1983
 538                               =jis-x0208@1978))))
 539               ((string-match "@CN" (symbol-name name))
 540                (setq required-features
 541                      (union required-features
 542                             '(=gb2312
 543                               =gb12345
 544                               =iso-ir165)))))
 545         (if separator
 546             (insert lbs))
 547         (if readable
 548             (insert (format "%S" cell))
 549           (char-db-insert-char-spec cell readable
 550                                     nil
 551                                     required-features))
 552         (setq separator lbs))
 553        ((consp cell)
 554         (if separator
 555             (insert lbs))
 556         (if (consp (car cell))
 557             (char-db-insert-char-spec cell readable)
 558           (char-db-insert-char-reference cell readable))
 559         (setq separator lbs))
 560        (t
 561         (if separator
 562             (insert separator))
 563         (insert (prin1-to-string cell))
 564         (setq separator " ")))
 565       (setq value (cdr value)))
 566     (insert ")")
 567     (insert line-breaking)))
 568
 569 (defun insert-char-attributes (char &optional readable attributes column)
 570   (unless column
 571     (setq column (current-column)))
 572   (let (name value ; has-long-ccs-name
 573         rest
 574         radical strokes
 575         (line-breaking
 576          (concat "\n" (make-string (1+ column) ?\ )))
 577         lbs cell separator ret
 578         key al cal
 579         dest-ccss ; sources required-features
 580         ccss)
 581     (let (atr-d)
 582       (setq attributes
 583             (sort (if attributes
 584                       (if (consp attributes)
 585                           (progn
 586                             (dolist (name attributes)
 587                               (unless (memq name char-db-ignored-attributes)
 588                                 (if (find-charset name)
 589                                     (push name ccss))
 590                                 (push name atr-d)))
 591                             atr-d))
 592                     (dolist (name (char-attribute-list))
 593                       (unless (memq name char-db-ignored-attributes)
 594                         (if (find-charset name)
 595                             (push name ccss))
 596                         (push name atr-d)))
 597                     atr-d)
 598                   #'char-attribute-name<)))
 599     (insert "(")
 600     (when (memq '<-subsumptive attributes)
 601       (when readable
 602         (when (setq value (get-char-attribute char '<-subsumptive))
 603           (char-db-insert-relation-feature char '<-subsumptive value
 604                                            line-breaking
 605                                            ccss readable)))
 606       (setq attributes (delq '<-subsumptive attributes)))
 607     (when (and (memq '<-denotational attributes)
 608                (setq value (get-char-attribute char '<-denotational)))
 609       (char-db-insert-relation-feature char '<-denotational value
 610                                        line-breaking
 611                                        ccss readable)
 612       (setq attributes (delq '<-denotational attributes)))
 613     (when (and (memq 'name attributes)
 614                (setq value (get-char-attribute char 'name)))
 615       (insert (format
 616                (if (> (+ (current-column) (length value)) 48)
 617                    "(name . %S)%s"
 618                  "(name               . %S)%s")
 619                value line-breaking))
 620       (setq attributes (delq 'name attributes))
 621       )
 622     (when (and (memq 'name* attributes)
 623                (setq value (get-char-attribute char 'name*)))
 624       (insert (format
 625                (if (> (+ (current-column) (length value)) 48)
 626                    "(name* . %S)%s"
 627                  "(name*              . %S)%s")
 628                value line-breaking))
 629       (setq attributes (delq 'name* attributes))
 630       )
 631     (when (and (memq 'script attributes)
 632                (setq value (get-char-attribute char 'script)))
 633       (insert (format "(script\t\t%s)%s"
 634                       (mapconcat (function prin1-to-string)
 635                                  value " ")
 636                       line-breaking))
 637       (setq attributes (delq 'script attributes))
 638       )
 639     (dolist (name '(=>ucs =>ucs*))
 640       (when (and (memq name attributes)
 641                  (setq value (get-char-attribute char name)))
 642         (insert (format "(%-18s . #x%04X)\t; %c%s"
 643                         name value (decode-char '=ucs value)
 644                         line-breaking))
 645         (setq attributes (delq name attributes))))
 646     (dolist (name '(=>ucs@gb =>ucs@cns =>ucs@jis =>ucs@ks =>ucs@big5))
 647       (when (and (memq name attributes)
 648                  (setq value (get-char-attribute char name)))
 649         (insert (format "(%-18s . #x%04X)\t; %c%s"
 650                         name value
 651                         (decode-char (intern
 652                                       (concat "="
 653                                               (substring
 654                                                (symbol-name name) 2)))
 655                                      value)
 656                         line-breaking))
 657         (setq attributes (delq name attributes))
 658         ))
 659     (dolist (name '(=>daikanwa))
 660       (when (and (memq name attributes)
 661                  (setq value (get-char-attribute char name)))
 662         (insert
 663          (if (integerp value)
 664              (format "(%-18s . %05d)\t; %c%s"
 665                      name value (decode-char '=daikanwa value)
 666                      line-breaking)
 667            (format "(%-18s %s)\t; %c%s"
 668                    name
 669                    (mapconcat (function prin1-to-string)
 670                               value " ")
 671                    (char-representative-of-daikanwa char)
 672                    line-breaking)))
 673         (setq attributes (delq name attributes))))
 674     (when (and (memq 'general-category attributes)
 675                (setq value (get-char-attribute char 'general-category)))
 676       (insert (format
 677                "(general-category\t%s) ; %s%s"
 678                (mapconcat (lambda (cell)
 679                             (format "%S" cell))
 680                           value " ")
 681                (cond ((rassoc value unidata-normative-category-alist)
 682                       "Normative Category")
 683                      ((rassoc value unidata-informative-category-alist)
 684                       "Informative Category")
 685                      (t
 686                       "Unknown Category"))
 687                line-breaking))
 688       (setq attributes (delq 'general-category attributes))
 689       )
 690     (when (and (memq 'bidi-category attributes)
 691                (setq value (get-char-attribute char 'bidi-category)))
 692       (insert (format "(bidi-category\t. %S)%s"
 693                       value
 694                       line-breaking))
 695       (setq attributes (delq 'bidi-category attributes))
 696       )
 697     (unless (or (not (memq 'mirrored attributes))
 698                 (eq (setq value (get-char-attribute char 'mirrored 'empty))
 699                     'empty))
 700       (insert (format "(mirrored\t\t. %S)%s"
 701                       value
 702                       line-breaking))
 703       (setq attributes (delq 'mirrored attributes))
 704       )
 705     (cond
 706      ((and (memq 'decimal-digit-value attributes)
 707            (setq value (get-char-attribute char 'decimal-digit-value)))
 708       (insert (format "(decimal-digit-value . %S)%s"
 709                       value
 710                       line-breaking))
 711       (setq attributes (delq 'decimal-digit-value attributes))
 712       (when (and (memq 'digit-value attributes)
 713                  (setq value (get-char-attribute char 'digit-value)))
 714         (insert (format "(digit-value\t . %S)%s"
 715                         value
 716                         line-breaking))
 717         (setq attributes (delq 'digit-value attributes))
 718         )
 719       (when (and (memq 'numeric-value attributes)
 720                  (setq value (get-char-attribute char 'numeric-value)))
 721         (insert (format "(numeric-value\t . %S)%s"
 722                         value
 723                         line-breaking))
 724         (setq attributes (delq 'numeric-value attributes))
 725         )
 726       )
 727      (t
 728       (when (and (memq 'digit-value attributes)
 729                  (setq value (get-char-attribute char 'digit-value)))
 730         (insert (format "(digit-value\t. %S)%s"
 731                         value
 732                         line-breaking))
 733         (setq attributes (delq 'digit-value attributes))
 734         )
 735       (when (and (memq 'numeric-value attributes)
 736                  (setq value (get-char-attribute char 'numeric-value)))
 737         (insert (format "(numeric-value\t. %S)%s"
 738                         value
 739                         line-breaking))
 740         (setq attributes (delq 'numeric-value attributes))
 741         )))
 742     (when (and (memq 'iso-10646-comment attributes)
 743                (setq value (get-char-attribute char 'iso-10646-comment)))
 744       (insert (format "(iso-10646-comment\t. %S)%s"
 745                       value
 746                       line-breaking))
 747       (setq attributes (delq 'iso-10646-comment attributes))
 748       )
 749     (when (and (memq 'morohashi-daikanwa attributes)
 750                (setq value (get-char-attribute char 'morohashi-daikanwa)))
 751       (insert (format "(morohashi-daikanwa\t%s)%s"
 752                       (mapconcat (function prin1-to-string) value " ")
 753                       line-breaking))
 754       (setq attributes (delq 'morohashi-daikanwa attributes))
 755       )
 756     (setq radical nil
 757           strokes nil)
 758     (when (and (memq 'ideographic-radical attributes)
 759                (setq value (get-char-attribute char 'ideographic-radical)))
 760       (setq radical value)
 761       (insert (format "(ideographic-radical . %S)\t; %c%s"
 762                       radical
 763                       (ideographic-radical radical)
 764                       line-breaking))
 765       (setq attributes (delq 'ideographic-radical attributes))
 766       )
 767     (when (and (memq 'shuowen-radical attributes)
 768                (setq value (get-char-attribute char 'shuowen-radical)))
 769       (insert (format "(shuowen-radical\t. %S)\t; %c%s"
 770                       value
 771                       (shuowen-radical value)
 772                       line-breaking))
 773       (setq attributes (delq 'shuowen-radical attributes))
 774       )
 775     (let (key)
 776       (dolist (domain
 777                (append
 778                 char-db-feature-domains
 779                 (let (dest domain)
 780                   (dolist (feature (char-attribute-list))
 781                     (setq feature (symbol-name feature))
 782                     (when (string-match
 783                            "\\(radical\\|strokes\\)@\\([^@*]+\\)\\(\\*\\|$\\)"
 784                            feature)
 785                       (setq domain (intern (match-string 2 feature)))
 786                      (unless (memq domain dest)
 787                        (setq dest (cons domain dest)))))
 788                   (sort dest #'string<))))
 789         (setq key (intern (format "%s@%s" 'ideographic-radical domain)))
 790         (when (and (memq key attributes)
 791                    (setq value (get-char-attribute char key)))
 792           (setq radical value)
 793           (insert (format "(%s . %S)\t; %c%s"
 794                           key
 795                           radical
 796                           (ideographic-radical radical)
 797                           line-breaking))
 798           (setq attributes (delq key attributes))
 799           )
 800         (setq key (intern (format "%s@%s" 'ideographic-strokes domain)))
 801         (when (and (memq key attributes)
 802                    (setq value (get-char-attribute char key)))
 803           (setq strokes value)
 804           (insert (format "(%s . %S)%s"
 805                           key
 806                           strokes
 807                           line-breaking))
 808           (setq attributes (delq key attributes))
 809           )
 810         (setq key (intern (format "%s@%s" 'total-strokes domain)))
 811         (when (and (memq key attributes)
 812                    (setq value (get-char-attribute char key)))
 813           (insert (format "(%s       . %S)%s"
 814                           key
 815                           value
 816                           line-breaking))
 817           (setq attributes (delq key attributes))
 818           )
 819         (dolist (feature '(ideographic-radical
 820                            ideographic-strokes
 821                            total-strokes))
 822           (setq key (intern (format "%s@%s*sources" feature domain)))
 823           (when (and (memq key attributes)
 824                      (setq value (get-char-attribute char key)))
 825             (insert (format "(%s%s" key line-breaking))
 826             (dolist (cell value)
 827               (insert (format " %s" cell)))
 828             (insert ")")
 829             (insert line-breaking)
 830             (setq attributes (delq key attributes))
 831             ))
 832         ))
 833     (when (and (memq 'ideographic-strokes attributes)
 834                (setq value (get-char-attribute char 'ideographic-strokes)))
 835       (setq strokes value)
 836       (insert (format "(ideographic-strokes . %S)%s"
 837                       strokes
 838                       line-breaking))
 839       (setq attributes (delq 'ideographic-strokes attributes))
 840       )
 841     (when (and (memq 'kangxi-radical attributes)
 842                (setq value (get-char-attribute char 'kangxi-radical)))
 843       (unless (eq value radical)
 844         (insert (format "(kangxi-radical\t . %S)\t; %c%s"
 845                         value
 846                         (ideographic-radical value)
 847                         line-breaking))
 848         (or radical
 849             (setq radical value)))
 850       (setq attributes (delq 'kangxi-radical attributes))
 851       )
 852     (when (and (memq 'kangxi-strokes attributes)
 853                (setq value (get-char-attribute char 'kangxi-strokes)))
 854       (unless (eq value strokes)
 855         (insert (format "(kangxi-strokes\t . %S)%s"
 856                         value
 857                         line-breaking))
 858         (or strokes
 859             (setq strokes value)))
 860       (setq attributes (delq 'kangxi-strokes attributes))
 861       )
 862     (when (and (memq 'japanese-radical attributes)
 863                (setq value (get-char-attribute char 'japanese-radical)))
 864       (unless (eq value radical)
 865         (insert (format "(japanese-radical\t . %S)\t; %c%s"
 866                         value
 867                         (ideographic-radical value)
 868                         line-breaking))
 869         (or radical
 870             (setq radical value)))
 871       (setq attributes (delq 'japanese-radical attributes))
 872       )
 873     (when (and (memq 'japanese-strokes attributes)
 874                (setq value (get-char-attribute char 'japanese-strokes)))
 875       (unless (eq value strokes)
 876         (insert (format "(japanese-strokes\t . %S)%s"
 877                         value
 878                         line-breaking))
 879         (or strokes
 880             (setq strokes value)))
 881       (setq attributes (delq 'japanese-strokes attributes))
 882       )
 883     (when (and (memq 'cns-radical attributes)
 884                (setq value (get-char-attribute char 'cns-radical)))
 885       (insert (format "(cns-radical\t . %S)\t; %c%s"
 886                       value
 887                       (ideographic-radical value)
 888                       line-breaking))
 889       (setq attributes (delq 'cns-radical attributes))
 890       )
 891     (when (and (memq 'cns-strokes attributes)
 892                (setq value (get-char-attribute char 'cns-strokes)))
 893       (unless (eq value strokes)
 894         (insert (format "(cns-strokes\t . %S)%s"
 895                         value
 896                         line-breaking))
 897         (or strokes
 898             (setq strokes value)))
 899       (setq attributes (delq 'cns-strokes attributes))
 900       )
 901     (when (and (memq 'shinjigen-1-radical attributes)
 902                (setq value (get-char-attribute char 'shinjigen-1-radical)))
 903       (unless (eq value radical)
 904         (insert (format "(shinjigen-1-radical . %S)\t; %c%s"
 905                         value
 906                         (ideographic-radical value)
 907                         line-breaking))
 908         (or radical
 909             (setq radical value)))
 910       (setq attributes (delq 'shinjigen-1-radical attributes))
 911       )
 912     (when (and (memq 'ideographic- attributes)
 913                (setq value (get-char-attribute char 'ideographic-)))
 914       (insert "(ideographic-       ")
 915       (setq lbs (concat "\n" (make-string (current-column) ?\ ))
 916             separator nil)
 917       (while (consp value)
 918         (setq cell (car value))
 919         (if (integerp cell)
 920             (setq cell (decode-char '=ucs cell)))
 921         (cond ((characterp cell)
 922                (if separator
 923                    (insert lbs))
 924                (if readable
 925                    (insert (format "%S" cell))
 926                  (char-db-insert-char-spec cell readable))
 927                (setq separator lbs))
 928               ((consp cell)
 929                (if separator
 930                    (insert lbs))
 931                (if (consp (car cell))
 932                    (char-db-insert-char-spec cell readable)
 933                  (char-db-insert-char-reference cell readable))
 934                (setq separator lbs))
 935               (t
 936                (if separator
 937                    (insert separator))
 938                (insert (prin1-to-string cell))
 939                (setq separator " ")))
 940         (setq value (cdr value)))
 941       (insert ")")
 942       (insert line-breaking)
 943       (setq attributes (delq 'ideographic- attributes)))
 944     (when (and (memq 'total-strokes attributes)
 945                (setq value (get-char-attribute char 'total-strokes)))
 946       (insert (format "(total-strokes       . %S)%s"
 947                       value
 948                       line-breaking))
 949       (setq attributes (delq 'total-strokes attributes))
 950       )
 951     (when (and (memq '->ideograph attributes)
 952                (setq value (get-char-attribute char '->ideograph)))
 953       (insert (format "(->ideograph\t%s)%s"
 954                       (mapconcat (lambda (code)
 955                                    (cond ((symbolp code)
 956                                           (symbol-name code))
 957                                          ((integerp code)
 958                                           (format "#x%04X" code))
 959                                          (t
 960                                           (format "%s %S"
 961                                                   line-breaking code))))
 962                                  value " ")
 963                       line-breaking))
 964       (setq attributes (delq '->ideograph attributes))
 965       )
 966     ;; (when (and (memq '->decomposition attributes)
 967     ;;            (setq value (get-char-attribute char '->decomposition)))
 968     ;;   (insert (format "(->decomposition\t%s)%s"
 969     ;;                   (mapconcat (lambda (code)
 970     ;;                                (cond ((symbolp code)
 971     ;;                                       (symbol-name code))
 972     ;;                                      ((characterp code)
 973     ;;                                       (if readable
 974     ;;                                           (format "%S" code)
 975     ;;                                         (format "#x%04X"
 976     ;;                                                 (char-int code))
 977     ;;                                         ))
 978     ;;                                      ((integerp code)
 979     ;;                                       (format "#x%04X" code))
 980     ;;                                      (t
 981     ;;                                       (format "%s%S" line-breaking code))))
 982     ;;                              value " ")
 983     ;;                   line-breaking))
 984     ;;   (setq attributes (delq '->decomposition attributes))
 985     ;;   )
 986     (if (equal (get-char-attribute char '->titlecase)
 987                (get-char-attribute char '->uppercase))
 988         (setq attributes (delq '->titlecase attributes)))
 989     (when (and (memq '->mojikyo attributes)
 990                (setq value (get-char-attribute char '->mojikyo)))
 991       (insert (format "(->mojikyo\t\t. %06d)\t; %c%s"
 992                       value (decode-char 'mojikyo value)
 993                       line-breaking))
 994       (setq attributes (delq '->mojikyo attributes))
 995       )
 996     (when (and (memq 'hanyu-dazidian-vol attributes)
 997                (setq value (get-char-attribute char 'hanyu-dazidian-vol)))
 998       (insert (format "(hanyu-dazidian-vol  . %d)%s"
 999                       value line-breaking))
1000       (setq attributes (delq 'hanyu-dazidian-vol attributes))
1001       )
1002     (when (and (memq 'hanyu-dazidian-page attributes)
1003                (setq value (get-char-attribute char 'hanyu-dazidian-page)))
1004       (insert (format "(hanyu-dazidian-page . %d)%s"
1005                       value line-breaking))
1006       (setq attributes (delq 'hanyu-dazidian-page attributes))
1007       )
1008     (when (and (memq 'hanyu-dazidian-char attributes)
1009                (setq value (get-char-attribute char 'hanyu-dazidian-char)))
1010       (insert (format "(hanyu-dazidian-char . %d)%s"
1011                       value line-breaking))
1012       (setq attributes (delq 'hanyu-dazidian-char attributes))
1013       )
1014     (unless readable
1015       (dolist (ignored '(composition
1016                          ->denotational <-subsumptive ->ucs-unified
1017                          ->ideographic-component-forms))
1018         (setq attributes (delq ignored attributes))))
1019     (while attributes
1020       (setq name (car attributes))
1021       (if (setq value (get-char-attribute char name))
1022           (cond ((setq ret (find-charset name))
1023                  (setq name (charset-name ret))
1024                  (if (and (not (memq name dest-ccss))
1025                           (prog1
1026                               (setq value (get-char-attribute char name))
1027                             (setq dest-ccss (cons name dest-ccss))))
1028                      (char-db-insert-ccs-feature name value line-breaking))
1029                  )
1030                 ((string-match "^=>ucs@" (symbol-name name))
1031                  (insert (format "(%-18s . #x%04X)\t; %c%s"
1032                                  name value (decode-char '=ucs value)
1033                                  line-breaking))
1034                  )
1035                 ((eq name 'jisx0208-1978/4X)
1036                  (insert (format "(%-18s . #x%04X)%s"
1037                                  name value
1038                                  line-breaking))
1039                  )
1040                 ((and
1041                   (not readable)
1042                   (not (eq name '->subsumptive))
1043                   (not (eq name '->uppercase))
1044                   (not (eq name '->lowercase))
1045                   (not (eq name '->titlecase))
1046                   (not (eq name '->canonical))
1047                   (not (eq name '->Bopomofo))
1048                   (not (eq name '->mistakable))
1049                   (not (eq name '->ideographic-variants))
1050                   (null (get-char-attribute
1051                          char (intern (format "%s*sources" name))))
1052                   (not (string-match "\\*sources$" (symbol-name name)))
1053                   (null (get-char-attribute
1054                          char (intern (format "%s*note" name))))
1055                   (not (string-match "\\*note$" (symbol-name name)))
1056                   (or (eq name '<-identical)
1057                       (eq name '<-uppercase)
1058                       (eq name '<-lowercase)
1059                       (eq name '<-titlecase)
1060                       (eq name '<-canonical)
1061                       (eq name '<-ideographic-variants)
1062                       ;; (eq name '<-synonyms)
1063                       (string-match "^<-synonyms" (symbol-name name))
1064                       (eq name '<-mistakable)
1065                       (when (string-match "^->" (symbol-name name))
1066                         (cond
1067                          ((string-match "^->fullwidth" (symbol-name name))
1068                           (not (and (consp value)
1069                                     (characterp (car value))
1070                                     (encode-char
1071                                      (car value) '=ucs 'defined-only)))
1072                           )
1073                          (t)))
1074                       ))
1075                  )
1076                 ((or (eq name 'ideographic-structure)
1077                      (eq name 'ideographic-combination)
1078                      (eq name 'ideographic-)
1079                      (eq name '=decomposition)
1080                      (string-match "^=>decomposition" (symbol-name name))
1081                      (string-match "^\\(->\\|<-\\)[^*]*$" (symbol-name name))
1082                      (string-match "^\\(->\\|<-\\)[^*]*\\*sources$"
1083                                    (symbol-name name))
1084                      )
1085                  (char-db-insert-relation-feature char name value
1086                                                   line-breaking
1087                                                   ccss readable))
1088                 ((memq name '(ideograph=
1089                               original-ideograph-of
1090                               ancient-ideograph-of
1091                               vulgar-ideograph-of
1092                               wrong-ideograph-of
1093                               ;; simplified-ideograph-of
1094                               ideographic-variants
1095                               ;; ideographic-different-form-of
1096                               ))
1097                  (insert (format "(%-18s%s " name line-breaking))
1098                  (setq lbs (concat "\n" (make-string (current-column) ?\ ))
1099                        separator nil)
1100                  (while (consp value)
1101                    (setq cell (car value))
1102                    (if (and (consp cell)
1103                             (consp (car cell)))
1104                        (progn
1105                          (if separator
1106                              (insert lbs))
1107                          (char-db-insert-alist cell readable)
1108                          (setq separator lbs))
1109                      (if separator
1110                          (insert separator))
1111                      (insert (prin1-to-string cell))
1112                      (setq separator " "))
1113                    (setq value (cdr value)))
1114                  (insert ")")
1115                  (insert line-breaking))
1116                 ((consp value)
1117                  (insert (format "(%-18s " name))
1118                  (setq lbs (concat "\n" (make-string (current-column) ?\ ))
1119                        separator nil)
1120                  (while (consp value)
1121                    (setq cell (car value))
1122                    (if (and (consp cell)
1123                             (consp (car cell))
1124                             (setq ret (condition-case nil
1125                                           (find-char cell)
1126                                         (error nil))))
1127                        (progn
1128                          (setq rest cell
1129                                al nil
1130                                cal nil)
1131                          (while rest
1132                            (setq key (car (car rest)))
1133                            (if (find-charset key)
1134                                (setq cal (cons key cal))
1135                              (setq al (cons key al)))
1136                            (setq rest (cdr rest)))
1137                          (if separator
1138                              (insert lbs))
1139                          (insert-char-attributes ret
1140                                                  readable
1141                                                  al cal)
1142                          (setq separator lbs))
1143                      (setq ret (prin1-to-string cell))
1144                      (if separator
1145                          (if (< (+ (current-column)
1146                                    (length ret)
1147                                    (length separator))
1148                                 76)
1149                              (insert separator)
1150                            (insert lbs)))
1151                      (insert ret)
1152                      (setq separator " "))
1153                    (setq value (cdr value)))
1154                  (insert ")")
1155                  (insert line-breaking))
1156                 (t
1157                  (insert (format "(%-18s" name))
1158                  (setq ret (prin1-to-string value))
1159                  (unless (< (+ (current-column)
1160                                (length ret)
1161                                3)
1162                             76)
1163                    (insert line-breaking))
1164                  (insert " . " ret ")" line-breaking)
1165                  ;; (insert (format "(%-18s . %S)%s"
1166                  ;;                 name value
1167                  ;;                 line-breaking))
1168                  )
1169                 ))
1170       (setq attributes (cdr attributes)))
1171     (insert ")")))
1172
1173 (defun insert-char-data (char &optional readable
1174                               attributes)
1175   (save-restriction
1176     (narrow-to-region (point)(point))
1177     (insert "(define-char
1178   '")
1179     (insert-char-attributes char readable attributes)
1180     (insert ")\n")
1181     (goto-char (point-min))
1182     (while (re-search-forward "[ \t]+$" nil t)
1183       (replace-match ""))
1184     ;; from tabify.
1185     (goto-char (point-min))
1186     (while (re-search-forward "[ \t][ \t][ \t]*" nil t)
1187       (let ((column (current-column))
1188             (indent-tabs-mode t))
1189         (delete-region (match-beginning 0) (point))
1190         (indent-to column)))
1191     (goto-char (point-max))
1192     ;; (tabify (point-min)(point-max))
1193     ))
1194
1195 (defun insert-char-data-with-variant (char &optional printable
1196                                            no-ucs-unified
1197                                            script excluded-script)
1198   (insert-char-data char printable)
1199   (let ((variants (char-variants char))
1200         rest
1201         variant vs ret)
1202     (setq variants (sort variants #'<))
1203     (setq rest variants)
1204     (setq variants (cons char variants))
1205     (while rest
1206       (setq variant (car rest))
1207       (unless (get-char-attribute variant '<-subsumptive)
1208         (if (and (or (null script)
1209                      (null (setq vs (get-char-attribute variant 'script)))
1210                      (memq script vs))
1211                  (or (null excluded-script)
1212                      (null (setq vs (get-char-attribute variant 'script)))
1213                      (not (memq excluded-script vs))))
1214             (unless (and no-ucs-unified (get-char-attribute variant '=ucs))
1215               (insert-char-data variant printable)
1216               (if (setq ret (char-variants variant))
1217                   (while ret
1218                     (or (memq (car ret) variants)
1219                         ;; (get-char-attribute (car ret) '<-subsumptive)
1220                         (setq rest (nconc rest (list (car ret)))))
1221                     (setq ret (cdr ret)))))))
1222       (setq rest (cdr rest)))))
1223
1224 (defun insert-char-range-data (min max &optional script excluded-script)
1225   (let ((code min)
1226         char)
1227     (while (<= code max)
1228       (setq char (decode-char '=ucs code))
1229       (if (encode-char char '=ucs 'defined-only)
1230           (insert-char-data-with-variant char nil 'no-ucs-unified
1231                                          script excluded-script))
1232       (setq code (1+ code)))))
1233
1234 (defun write-char-range-data-to-file (min max file
1235                                           &optional script excluded-script)
1236   (let ((coding-system-for-write char-db-file-coding-system))
1237     (with-temp-buffer
1238       (insert (format ";; -*- coding: %s -*-\n"
1239                       char-db-file-coding-system))
1240       (insert-char-range-data min max script excluded-script)
1241       (write-region (point-min)(point-max) file))))
1242
1243 (defvar what-character-original-window-configuration)
1244
1245 ;;;###autoload
1246 (defun what-char-definition (char)
1247   (interactive (list (char-after)))
1248   (let ((buf (get-buffer-create "*Character Description*"))
1249         (the-buf (current-buffer))
1250         (win-conf (current-window-configuration)))
1251     (pop-to-buffer buf)
1252     (make-local-variable 'what-character-original-window-configuration)
1253     (setq what-character-original-window-configuration win-conf)
1254     (setq buffer-read-only nil)
1255     (erase-buffer)
1256     (condition-case err
1257         (progn
1258           (insert-char-data-with-variant char 'printable)
1259           (unless (char-attribute-alist char)
1260             (insert (format ";; = %c\n"
1261                             (let* ((rest (split-char char))
1262                                    (ccs (pop rest))
1263                                    (code (pop rest)))
1264                               (while rest
1265                                 (setq code (logior (lsh code 8)
1266                                                    (pop rest))))
1267                               (decode-char ccs code)))))
1268           ;; (char-db-update-comment)
1269           (set-buffer-modified-p nil)
1270           (view-mode the-buf (lambda (buf)
1271                                (set-window-configuration
1272                                 what-character-original-window-configuration)
1273                                ))
1274           (goto-char (point-min)))
1275       (error (progn
1276                (set-window-configuration
1277                 what-character-original-window-configuration)
1278                (signal (car err) (cdr err)))))))
1279
1280 (provide 'char-db-util)
1281
1282 ;;; char-db-util.el ends here