XEmacs 21.4.9 "Informed Management".
[chise/xemacs-chise.git.1] / lisp / font-lock.el
1 ;;; font-lock.el --- decorating source files with fonts/colors based on syntax
2
3 ;; Copyright (C) 1992-1995, 1997 Free Software Foundation, Inc.
4 ;; Copyright (C) 1995 Amdahl Corporation.
5 ;; Copyright (C) 1996, 2000, 2001 Ben Wing.
6
7 ;; Author: Jamie Zawinski <jwz@jwz.org>, for the LISPM Preservation Society.
8 ;; Minimally merged with FSF 19.34 by Barry Warsaw <bwarsaw@python.org>
9 ;; Then (partially) synched with FSF 19.30, leading to:
10 ;; Next Author: RMS
11 ;; Next Author: Simon Marshall <simon@gnu.ai.mit.edu>
12 ;; Latest XEmacs Author: Ben Wing
13 ;; Maintainer: XEmacs Development Team
14 ;; Keywords: languages, faces
15
16 ;; This file is part of XEmacs.
17
18 ;; XEmacs is free software; you can redistribute it and/or modify it
19 ;; under the terms of the GNU General Public License as published by
20 ;; the Free Software Foundation; either version 2, or (at your option)
21 ;; any later version.
22
23 ;; XEmacs is distributed in the hope that it will be useful, but
24 ;; WITHOUT ANY WARRANTY; without even the implied warranty of
25 ;; MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
26 ;; General Public License for more details.
27
28 ;; You should have received a copy of the GNU General Public License
29 ;; along with XEmacs; see the file COPYING.  If not, write to the 
30 ;; Free Software Foundation, Inc., 59 Temple Place - Suite 330,
31 ;; Boston, MA 02111-1307, USA.
32
33 ;;; Synched up with: FSF 19.30 except for the code to initialize the faces.
34
35 ;;; Commentary:
36
37 ;; Font-lock-mode is a minor mode that causes your comments to be
38 ;; displayed in one face, strings in another, reserved words in another,
39 ;; documentation strings in another, and so on.
40 ;;
41 ;; Comments will be displayed in `font-lock-comment-face'.
42 ;; Strings will be displayed in `font-lock-string-face'.
43 ;; Doc strings will be displayed in `font-lock-doc-string-face'.
44 ;; Function and variable names (in their defining forms) will be
45 ;;  displayed in `font-lock-function-name-face'.
46 ;; Reserved words will be displayed in `font-lock-keyword-face'.
47 ;;
48 ;; Don't let the name fool you: you can highlight things using different
49 ;; colors or background stipples instead of fonts, though that is not the
50 ;; default.  See the variables `font-lock-use-colors' and
51 ;; `font-lock-use-fonts' for broad control over this, or see the
52 ;; documentation on faces and how to change their attributes for
53 ;; fine-grained control.
54 ;;
55 ;; To make the text you type be fontified, use M-x font-lock-mode.  When
56 ;; this minor mode is on, the fonts of the current line will be updated
57 ;; with every insertion or deletion.
58 ;;
59 ;; By default, font-lock will automatically put newly loaded files
60 ;; into font-lock-mode if it knows about the file's mode.  See the
61 ;; variables `font-lock-auto-fontify', `font-lock-mode-enable-list',
62 ;; and `font-lock-mode-disable-list' for control over this.
63 ;;
64 ;; The `font-lock-keywords' variable defines other patterns to highlight.
65 ;; The default font-lock-mode-hook sets it to the value of the variables
66 ;; lisp-font-lock-keywords, c-font-lock-keywords, etc, as appropriate.
67 ;; The easiest way to change the highlighting patterns is to change the
68 ;; values of c-font-lock-keywords and related variables.  See the doc
69 ;; string of the variable `font-lock-keywords' for the appropriate syntax.
70 ;;
71 ;; The default value for `lisp-font-lock-keywords' is the value of the variable
72 ;; `lisp-font-lock-keywords-1'.  You may like `lisp-font-lock-keywords-2' 
73 ;; better; it highlights many more words, but is slower and makes your buffers
74 ;; be very visually noisy.
75 ;;
76 ;; The same is true of `c-font-lock-keywords-1' and `c-font-lock-keywords-2';
77 ;; the former is subdued, the latter is loud.
78 ;;
79 ;; You can make font-lock default to the gaudier variety of keyword
80 ;; highlighting by setting the variable `font-lock-maximum-decoration'
81 ;; before loading font-lock, or by calling the functions
82 ;; `font-lock-use-default-maximal-decoration' or
83 ;; `font-lock-use-default-minimal-decoration'.
84 ;;
85 ;; On a Sparc10, the initial fontification takes about 6 seconds for a typical
86 ;; 140k file of C code, using the default configuration.  The actual speed
87 ;; depends heavily on the type of code in the file, and how many non-syntactic
88 ;; patterns match; for example, Xlib.h takes 23 seconds for 101k, because many
89 ;; patterns match in it.  You can speed this up substantially by removing some
90 ;; of the patterns that are highlighted by default.  Fontifying lisp code is
91 ;; significantly faster, because lisp has a more regular syntax than C, so the
92 ;; regular expressions don't have to be as complicated.
93 ;;
94 ;; It's called font-lock-mode here because on the Lispms it was called
95 ;; "Electric Font Lock Mode."  It was called that because there was an older
96 ;; mode called "Electric Caps Lock Mode" which had the function of causing all
97 ;; of your source code to be in upper case except for strings and comments,
98 ;; without you having to blip the caps lock key by hand all the time (thus the
99 ;; "electric", as in `electric-c-brace'.)
100
101 ;; See also the related packages `fast-lock' and `lazy-lock'.  Both
102 ;; attempt to speed up the initial fontification.  `fast-lock' saves
103 ;; the fontification info when you exit Emacs and reloads it next time
104 ;; you load the file, so that the file doesn't have to be fontified
105 ;; again.  `lazy-lock' does "lazy" fontification -- i.e. it only
106 ;; fontifies the text as it becomes visible rather than fontifying
107 ;; the whole file when it's first loaded in.
108
109 ;; Further comments from the FSF:
110
111 ;; Nasty regexps of the form "bar\\(\\|lo\\)\\|f\\(oo\\|u\\(\\|bar\\)\\)\\|lo"
112 ;; are made thusly: (regexp-opt '("foo" "fu" "fubar" "bar" "barlo" "lo")) for
113 ;; efficiency.
114
115 ;; What is fontification for?  You might say, "It's to make my code look nice."
116 ;; I think it should be for adding information in the form of cues.  These cues
117 ;; should provide you with enough information to both (a) distinguish between
118 ;; different items, and (b) identify the item meanings, without having to read
119 ;; the items and think about it.  Therefore, fontification allows you to think
120 ;; less about, say, the structure of code, and more about, say, why the code
121 ;; doesn't work.  Or maybe it allows you to think less and drift off to sleep.
122 ;;
123 ;; So, here are my opinions/advice/guidelines:
124 ;; 
125 ;; - Use the same face for the same conceptual object, across all modes.
126 ;;   i.e., (b) above, all modes that have items that can be thought of as, say,
127 ;;   keywords, should be highlighted with the same face, etc.
128 ;; - Keep the faces distinct from each other as far as possible.
129 ;;   i.e., (a) above.
130 ;; - Make the face attributes fit the concept as far as possible.
131 ;;   i.e., function names might be a bold color such as blue, comments might
132 ;;   be a bright color such as red, character strings might be brown, because,
133 ;;   err, strings are brown (that was not the reason, please believe me).
134 ;; - Don't use a non-nil OVERRIDE unless you have a good reason.
135 ;;   Only use OVERRIDE for special things that are easy to define, such as the
136 ;;   way `...' quotes are treated in strings and comments in Emacs Lisp mode.
137 ;;   Don't use it to, say, highlight keywords in commented out code or strings.
138 ;; - Err, that's it.
139
140 \f
141 ;;; Code:
142
143 (require 'fontl-hooks)
144
145 ;;;;;;;;;;;;;;;;;;;;;;      user variables       ;;;;;;;;;;;;;;;;;;;;;;
146
147 (defgroup font-lock nil
148   "Decorate source files with fonts/colors based on syntax.
149 Font-lock-mode is a minor mode that causes your comments to be
150 displayed in one face, strings in another, reserved words in another,
151 documentation strings in another, and so on.
152
153 Comments will be displayed in `font-lock-comment-face'.
154 Strings will be displayed in `font-lock-string-face'.
155 Doc strings will be displayed in `font-lock-doc-string-face'.
156 Function and variable names (in their defining forms) will be displayed
157  in `font-lock-function-name-face'.
158 Reserved words will be displayed in `font-lock-keyword-face'.
159 Preprocessor conditionals will be displayed in `font-lock-preprocessor-face'."
160   :group 'languages)
161
162 (defgroup font-lock-faces nil
163   "Faces used by the font-lock package."
164   :group 'font-lock
165   :group 'faces)
166
167
168 (defcustom font-lock-verbose t
169   "*If non-nil, means show status messages when fontifying.
170 See also `font-lock-message-threshold'."
171   :type 'boolean
172   :group 'font-lock)
173
174 (defcustom font-lock-message-threshold 6000
175   "*Minimum size of region being fontified for status messages to appear.
176
177 The size is measured in characters.  This affects `font-lock-fontify-region'
178 but not `font-lock-fontify-buffer'. (In other words, when you first visit
179 a file and it gets fontified, you will see status messages no matter what
180 size the file is.  However, if you do something else like paste a
181 chunk of text, you will see status messages only if the changed region is
182 large enough.)
183
184 Note that setting `font-lock-verbose' to nil disables the status
185 messages entirely."
186   :type 'integer
187   :group 'font-lock)
188
189 ;;;###autoload
190 (defcustom font-lock-auto-fontify t
191   "*Whether font-lock should automatically fontify files as they're loaded.
192 This will only happen if font-lock has fontifying keywords for the major
193 mode of the file.  You can get finer-grained control over auto-fontification
194 by using this variable in combination with `font-lock-mode-enable-list' or
195 `font-lock-mode-disable-list'."
196   :type 'boolean
197   :group 'font-lock)
198
199 ;;;###autoload
200 (defcustom font-lock-mode-enable-list nil
201   "*List of modes to auto-fontify, if `font-lock-auto-fontify' is nil."
202   :type '(repeat (symbol :tag "Mode"))
203   :group 'font-lock)
204
205 ;;;###autoload
206 (defcustom font-lock-mode-disable-list nil
207   "*List of modes not to auto-fontify, if `font-lock-auto-fontify' is t."
208   :type '(repeat (symbol :tag "Mode"))
209   :group 'font-lock)
210
211 ;;;###autoload
212 (defcustom font-lock-use-colors '(color)
213   "*Specification for when Font Lock will set up color defaults.
214 Normally this should be '(color), meaning that Font Lock will set up
215 color defaults that are only used on color displays.  Set this to nil
216 if you don't want Font Lock to set up color defaults at all.  This
217 should be one of
218
219 -- a list of valid tags, meaning that the color defaults will be used
220    when all of the tags apply. (e.g. '(color x))
221 -- a list whose first element is 'or and whose remaining elements are
222    lists of valid tags, meaning that the defaults will be used when
223    any of the tag lists apply.
224 -- nil, meaning that the defaults should not be set up at all.
225
226 \(If you specify face values in your init file, they will override any
227 that Font Lock specifies, regardless of whether you specify the face
228 values before or after loading Font Lock.)
229
230 See also `font-lock-use-fonts'.  If you want more control over the faces
231 used for fontification, see the documentation of `font-lock-mode' for
232 how to do it."
233   ;; Hard to do right.
234   :type 'sexp
235   :group 'font-lock)
236
237 ;;;###autoload
238 (defcustom font-lock-use-fonts '(or (mono) (grayscale))
239   "*Specification for when Font Lock will set up non-color defaults.
240
241 Normally this should be '(or (mono) (grayscale)), meaning that Font
242 Lock will set up non-color defaults that are only used on either mono
243 or grayscale displays.  Set this to nil if you don't want Font Lock to
244 set up non-color defaults at all.  This should be one of
245
246 -- a list of valid tags, meaning that the non-color defaults will be used
247    when all of the tags apply. (e.g. '(grayscale x))
248 -- a list whose first element is 'or and whose remaining elements are
249    lists of valid tags, meaning that the defaults will be used when
250    any of the tag lists apply.
251 -- nil, meaning that the defaults should not be set up at all.
252
253 \(If you specify face values in your init file, they will override any
254 that Font Lock specifies, regardless of whether you specify the face
255 values before or after loading Font Lock.)
256
257 See also `font-lock-use-colors'.  If you want more control over the faces
258 used for fontification, see the documentation of `font-lock-mode' for
259 how to do it."
260   :type 'sexp
261   :group 'font-lock)
262
263 ;;;###autoload
264 (defcustom font-lock-maximum-decoration t
265   "*If non-nil, the maximum decoration level for fontifying.
266 If nil, use the minimum decoration (equivalent to level 0).
267 If t, use the maximum decoration available.
268 If a number, use that level of decoration (or if not available the maximum).
269 If a list, each element should be a cons pair of the form (MAJOR-MODE . LEVEL),
270 where MAJOR-MODE is a symbol or t (meaning the default).  For example:
271  ((c++-mode . 2) (c-mode . t) (t . 1))
272 means use level 2 decoration for buffers in `c++-mode', the maximum decoration
273 available for buffers in `c-mode', and level 1 decoration otherwise."
274   :type '(choice (const :tag "default" nil)
275                  (const :tag "maximum" t)
276                  (integer :tag "level" 1)
277                  (repeat :menu-tag "mode specific" :tag "mode specific"
278                          :value ((t . t))
279                          (cons :tag "Instance"
280                                (radio :tag "Mode"
281                                       (const :tag "all" t)
282                                       (symbol :tag "name"))
283                                (radio :tag "Decoration"
284                                       (const :tag "default" nil)
285                                       (const :tag "maximum" t)
286                                       (integer :tag "level" 1)))))
287   :group 'font-lock)
288
289 ;;;###autoload
290 (define-obsolete-variable-alias 'font-lock-use-maximal-decoration
291   'font-lock-maximum-decoration)
292
293 ;;;###autoload
294 (defcustom font-lock-maximum-size (* 250 1024)
295   "*If non-nil, the maximum size for buffers for fontifying.
296 Only buffers less than this can be fontified when Font Lock mode is turned on.
297 If nil, means size is irrelevant.
298 If a list, each element should be a cons pair of the form (MAJOR-MODE . SIZE),
299 where MAJOR-MODE is a symbol or t (meaning the default).  For example:
300  ((c++-mode . 256000) (c-mode . 256000) (rmail-mode . 1048576))
301 means that the maximum size is 250K for buffers in `c++-mode' or `c-mode', one
302 megabyte for buffers in `rmail-mode', and size is irrelevant otherwise."
303   :type '(choice (const :tag "none" nil)
304                  (integer :tag "size")
305                  (repeat :menu-tag "mode specific" :tag "mode specific"
306                          :value ((t . nil))
307                          (cons :tag "Instance"
308                                (radio :tag "Mode"
309                                       (const :tag "all" t)
310                                       (symbol :tag "name"))
311                                (radio :tag "Size"
312                                       (const :tag "none" nil)
313                                       (integer :tag "size")))))
314   :group 'font-lock)
315
316 ;;;###autoload
317 (defcustom font-lock-fontify-string-delimiters nil
318   "*If non-nil, apply font-lock-string-face to string delimiters as well as
319 string text when fontifying."
320   :type 'boolean
321   :group 'font-lock)
322 \f
323 ;; Fontification variables:
324
325 ;;;###autoload
326 (defvar font-lock-keywords nil
327   "A list defining the keywords for `font-lock-mode' to highlight.
328
329  FONT-LOCK-KEYWORDS := List of FONT-LOCK-FORM's.
330
331  FONT-LOCK-FORM     :== MATCHER
332                       | (MATCHER . MATCH)
333                       | (MATCHER . FACE-FORM)
334                       | (MATCHER . HIGHLIGHT)
335                       | (MATCHER HIGHLIGHT ...)
336                       | (eval . FORM)
337
338  MATCHER            :== A string containing a regexp.
339                       | A variable containing a regexp to search for.
340                       | A function to call to make the search.
341                         It is called with one arg, the limit of the search,
342                         and should leave MATCH results in the XEmacs global
343                         match data.
344
345  MATCH              :== An integer match subexpression number from MATCHER.
346
347  FACE-FORM           :== The symbol naming a defined face.
348                       | Expression whos value is the face name to use.  If you
349                         want FACE-FORM to be a symbol that evaluates to a face,
350                         use a form like \"(progn sym)\".
351
352  HIGHLIGHT          :== MATCH-HIGHLIGHT
353                       | MATCH-ANCHORED
354
355  FORM               :== Expression returning a FONT-LOCK-FORM, evaluated when
356                         the FONT-LOCK-FORM is first used in a buffer.  This
357                         feature can be used to provide a FONT-LOCK-FORM that
358                         can only be generated when Font Lock mode is actually
359                         turned on.
360
361  MATCH-HIGHLIGHT    :== (MATCH FACE-FORM OVERRIDE LAXMATCH)
362
363  OVERRIDE           :== t        - overwrite existing fontification
364                       | 'keep    - only parts not already fontified are
365                                    highlighted.
366                       | 'prepend - merge faces, this fontification has
367                                    precedence over existing
368                       | 'append  - merge faces, existing fontification has
369                                    precedence over
370                                    this face.
371
372  LAXMATCH           :== If non-nil, no error is signalled if there is no MATCH
373                         in MATCHER.
374
375  MATCH-ANCHORED     :== (ANCHOR-MATCHER PRE-MATCH-FORM \\
376                                           POST-MATCH-FORM MATCH-HIGHLIGHT ...)
377
378  ANCHOR-MATCHER     :== Like a MATCHER, except that the limit of the search
379                         defaults to the end of the line after PRE-MATCH-FORM
380                         is evaluated.  However, if PRE-MATCH-FORM returns a
381                         position greater than the end of the line, that
382                         position is used as the limit of the search.  It is
383                         generally a bad idea to return a position greater than
384                         the end of the line, i.e., cause the ANCHOR-MATCHER
385                         search to span lines.
386
387  PRE-MATCH-FORM     :== Evaluated before the ANCHOR-MATCHER is used, therefore
388                         can be used to initialize before, ANCHOR-MATCHER is
389                         used.  Typically, PRE-MATCH-FORM is used to move to
390                         some position relative to the original MATCHER, before
391                         starting with the ANCHOR-MATCHER.
392
393  POST-MATCH-FORM    :== Like PRE-MATCH-FORM, but used to clean up after the
394                         ANCHOR-MATCHER.  It might be used to move, before
395                         resuming with MATCH-ANCHORED's parent's MATCHER.
396
397 For example, an element of the first form highlights (if not already highlighted):
398
399   \"\\\\\\=<foo\\\\\\=>\"                    Discrete occurrences of \"foo\" in the value
400                                  of the variable `font-lock-keyword-face'.
401
402   (\"fu\\\\(bar\\\\)\" . 1)            Substring \"bar\" within all occurrences of
403                                  \"fubar\" in the value of
404                                  `font-lock-keyword-face'.
405
406   (\"fubar\" . fubar-face)         Occurrences of \"fubar\" in the value of
407                                  `fubar-face'.
408
409   (\"foo\\\\|bar\" 0 foo-bar-face t) Occurrences of either \"foo\" or \"bar\" in the
410                                  value of `foo-bar-face', even if already
411                                  highlighted.
412
413   (fubar-match 1 fubar-face)     The first subexpression within all
414                                  occurrences of whatever the function
415                                  `fubar-match' finds and matches in the value
416                                  of `fubar-face'.
417
418   (\"\\\\\\=<anchor\\\\\\=>\" (0 anchor-face) (\"\\\\\\=<item\\\\\\=>\" nil nil (0 item-face)))
419    -------------- ---------------  ------------ --- --- -------------
420        |            |               |            |   |          |
421    MATCHER          |         ANCHOR-MATCHER     |   +------+ MATCH-HIGHLIGHT
422              MATCH-HIGHLIGHT                 PRE-MATCH-FORM |
423                                                            POST-MATCH-FORM
424
425   Discrete occurrences of \"anchor\" in the value of `anchor-face', and
426   subsequent discrete occurrences of \"item\" (on the same line) in the value
427   of `item-face'.  (Here PRE-MATCH-FORM and POST-MATCH-FORM are nil.
428   Therefore \"item\" is initially searched for starting from the end of the
429   match of \"anchor\", and searching for subsequent instance of \"anchor\"
430   resumes from where searching for \"item\" concluded.)
431
432 For highlighting single items, typically only MATCH-HIGHLIGHT is required.
433 However, if an item or (typically) several items are to be highlighted
434 following the instance of another item (the anchor) then MATCH-ANCHORED may be
435 required.
436
437 These regular expressions should not match text which spans lines.  While
438 \\[font-lock-fontify-buffer] handles multi-line patterns correctly, updating when you
439 edit the buffer does not, since it considers text one line at a time.
440
441 Be very careful composing regexps for this list; the wrong pattern can
442 dramatically slow things down!
443 ")
444 ;;;###autoload
445 (make-variable-buffer-local 'font-lock-keywords)
446
447 ;;;###autoload
448 (defvar font-lock-syntactic-keywords nil
449   "A list of the syntactic keywords to highlight.
450 Can be the list or the name of a function or variable whose value is the list.
451 See `font-lock-keywords' for a description of the form of this list;
452 the differences are listed below.  MATCH-HIGHLIGHT should be of the form:
453
454  (MATCH SYNTAX OVERRIDE LAXMATCH)
455
456 where SYNTAX can be of the form (SYNTAX-CODE . MATCHING-CHAR), the name of a
457 syntax table, or an expression whose value is such a form or a syntax table.
458 OVERRIDE cannot be `prepend' or `append'.
459
460 For example, an element of the form highlights syntactically:
461
462  (\"\\\\$\\\\(#\\\\)\" 1 (1 . nil))
463
464  a hash character when following a dollar character, with a SYNTAX-CODE of
465  1 (meaning punctuation syntax).  Assuming that the buffer syntax table does
466  specify hash characters to have comment start syntax, the element will only
467  highlight hash characters that do not follow dollar characters as comments
468  syntactically.
469
470  (\"\\\\('\\\\).\\\\('\\\\)\"
471   (1 (7 . ?'))
472   (2 (7 . ?')))
473
474  both single quotes which surround a single character, with a SYNTAX-CODE of
475  7 (meaning string quote syntax) and a MATCHING-CHAR of a single quote (meaning
476  a single quote matches a single quote).  Assuming that the buffer syntax table
477  does not specify single quotes to have quote syntax, the element will only
478  highlight single quotes of the form 'c' as strings syntactically.
479  Other forms, such as foo'bar or 'fubar', will not be highlighted as strings.
480
481 This is normally set via `font-lock-defaults'."
482 )
483 ;;;###autoload
484 (make-variable-buffer-local 'font-lock-syntactic-keywords)
485
486 (defvar font-lock-defaults nil
487   "The defaults font Font Lock mode for the current buffer.
488 Normally, do not set this directly.  If you are writing a major mode,
489 put a property of `font-lock-defaults' on the major-mode symbol with
490 the desired value.
491
492 It should be a list
493
494 \(KEYWORDS KEYWORDS-ONLY CASE-FOLD SYNTAX-ALIST SYNTAX-BEGIN)
495
496 KEYWORDS may be a symbol (a variable or function whose value is the keywords
497 to use for fontification) or a list of symbols.  If KEYWORDS-ONLY is non-nil,
498 syntactic fontification (strings and comments) is not performed.  If CASE-FOLD
499 is non-nil, the case of the keywords is ignored when fontifying.  If
500 SYNTAX-ALIST is non-nil, it should be a list of cons pairs of the form (CHAR
501 . STRING) used to set the local Font Lock syntax table, for keyword and
502 syntactic fontification (see `modify-syntax-entry').
503
504 If SYNTAX-BEGIN is non-nil, it should be a function with no args used to move
505 backwards outside any enclosing syntactic block, for syntactic fontification.
506 Typical values are `beginning-of-line' (i.e., the start of the line is known to
507 be outside a syntactic block), or `beginning-of-defun' for programming modes or
508 `backward-paragraph' for textual modes (i.e., the mode-dependent function is
509 known to move outside a syntactic block).  If nil, the beginning of the buffer
510 is used as a position outside of a syntactic block, in the worst case.
511
512 These item elements are used by Font Lock mode to set the variables
513 `font-lock-keywords', `font-lock-keywords-only',
514 `font-lock-keywords-case-fold-search', `font-lock-syntax-table' and
515 `font-lock-beginning-of-syntax-function', respectively.
516
517 Alternatively, if the value is a symbol, it should name a major mode,
518 and the defaults for that mode will apply.")
519 (make-variable-buffer-local 'font-lock-defaults)
520
521 ;; FSF uses `font-lock-defaults-alist' and expects the major mode to
522 ;; set a value for `font-lock-defaults', but I don't like either of
523 ;; these -- requiring the mode to set `font-lock-defaults' makes it
524 ;; impossible to have defaults for a minor mode, and using an alist is
525 ;; generally a bad idea for information that really should be
526 ;; decentralized. (Who knows what strange modes might want
527 ;; font-locking?)
528
529 (defvar font-lock-keywords-only nil
530   "Non-nil means Font Lock should not do syntactic fontification.
531 This is normally set via `font-lock-defaults'.
532
533 This should be nil for all ``language'' modes, but other modes, like
534 dired, do not have anything useful in the syntax tables (no comment
535 or string delimiters, etc) and so there is no need to use them and
536 this variable should have a value of t.
537
538 You should not set this variable directly; its value is computed
539 from `font-lock-defaults', or (if that does not specify anything)
540 by examining the syntax table to see whether it appears to contain
541 anything useful.")
542 (make-variable-buffer-local 'font-lock-keywords-only)
543
544 (defvar font-lock-keywords-case-fold-search nil
545   "Whether the strings in `font-lock-keywords' should be case-folded.
546 This variable is automatically buffer-local, as the correct value depends
547 on the language in use.")
548 (make-variable-buffer-local 'font-lock-keywords-case-fold-search)
549
550 (defvar font-lock-after-fontify-buffer-hook nil
551   "Function or functions to run after completion of font-lock-fontify-buffer.")
552
553 (defvar font-lock-syntax-table nil
554   "Non-nil means use this syntax table for fontifying.
555 If this is nil, the major mode's syntax table is used.
556 This is normally set via `font-lock-defaults'.")
557 (make-variable-buffer-local 'font-lock-syntax-table)
558
559 ;; These record the parse state at a particular position, always the start of a
560 ;; line.  Used to make `font-lock-fontify-syntactically-region' faster.
561 ;; Previously, `font-lock-cache-position' was just a buffer position.  However,
562 ;; under certain situations, this occasionally resulted in mis-fontification.
563 ;; I think the "situations" were deletion with Lazy Lock mode's deferral.  sm.
564 (defvar font-lock-cache-state nil)
565 (defvar font-lock-cache-position nil)
566 (make-variable-buffer-local 'font-lock-cache-state)
567 (make-variable-buffer-local 'font-lock-cache-position)
568
569 ;; If this is nil, we only use the beginning of the buffer if we can't use
570 ;; `font-lock-cache-position' and `font-lock-cache-state'.
571 (defvar font-lock-beginning-of-syntax-function nil
572   "Non-nil means use this function to move back outside of a syntactic block.
573 If this is nil, the beginning of the buffer is used (in the worst case).
574 This is normally set via `font-lock-defaults'.")
575 (make-variable-buffer-local 'font-lock-beginning-of-syntax-function)
576
577 (defvar font-lock-fontify-buffer-function 'font-lock-default-fontify-buffer
578   "Function to use for fontifying the buffer.
579 This is normally set via `font-lock-defaults'.")
580
581 (defvar font-lock-unfontify-buffer-function 'font-lock-default-unfontify-buffer
582   "Function to use for unfontifying the buffer.
583 This is used when turning off Font Lock mode.
584 This is normally set via `font-lock-defaults'.")
585
586 (defvar font-lock-fontify-region-function 'font-lock-default-fontify-region
587   "Function to use for fontifying a region.
588 It should take two args, the beginning and end of the region, and an optional
589 third arg VERBOSE.  If non-nil, the function should print status messages.
590 This is normally set via `font-lock-defaults'.")
591
592 (defvar font-lock-unfontify-region-function 'font-lock-default-unfontify-region
593   "Function to use for unfontifying a region.
594 It should take two args, the beginning and end of the region.
595 This is normally set via `font-lock-defaults'.")
596
597 (defvar font-lock-inhibit-thing-lock nil
598   "List of Font Lock mode related modes that should not be turned on.
599 Currently, valid mode names as `fast-lock-mode' and `lazy-lock-mode'.
600 This is normally set via `font-lock-defaults'.")
601
602 ;;;###autoload
603 (defcustom font-lock-mode nil ;; customized for the option menu. dverna
604   "Non nil means `font-lock-mode' is on"
605   :group 'font-lock
606   :type 'boolean
607   :initialize 'custom-initialize-default
608   :require 'font-lock
609   :set #'(lambda (var val) (font-lock-mode (or val 0)))
610   )
611
612 (defvar font-lock-fontified nil) ; whether we have hacked this buffer
613 (put 'font-lock-fontified 'permanent-local t)
614
615 ;;;###autoload
616 (defvar font-lock-mode-hook nil
617   "Function or functions to run on entry to font-lock-mode.")
618
619 ; whether font-lock-set-defaults has already been run.
620 (defvar font-lock-defaults-computed nil)
621 (make-variable-buffer-local 'font-lock-defaults-computed)
622
623 \f
624 ;;; Initialization of faces.
625
626 ;; #### barf gag retch.  Horrid FSF lossage that we need to
627 ;; keep around for compatibility with font-lock-keywords that
628 ;; forget to properly quote their faces.  I tried just let-binding
629 ;; them when we eval the face expression, but that fails because
630 ;; some files actually use the variables directly in their init code
631 ;; without quoting them. --ben
632 (defvar font-lock-comment-face 'font-lock-comment-face
633   "This variable should not be set.
634 It is present only for horrid FSF compatibility reasons.
635 The corresponding face should be set using `edit-faces' or the
636 `set-face-*' functions.")
637 (defvar font-lock-doc-string-face 'font-lock-doc-string-face
638   "This variable should not be set.
639 It is present only for horrid FSF compatibility reasons.
640 The corresponding face should be set using `edit-faces' or the
641 `set-face-*' functions.")
642 ;; GNU compatibility
643 (define-compatible-variable-alias
644   'font-lock-doc-face 'font-lock-doc-string-face)
645 (defvar font-lock-string-face 'font-lock-string-face
646   "This variable should not be set.
647 It is present only for horrid FSF compatibility reasons.
648 The corresponding face should be set using `edit-faces' or the
649 `set-face-*' functions.")
650 (defvar font-lock-keyword-face 'font-lock-keyword-face
651   "This variable should not be set.
652 It is present only for horrid FSF compatibility reasons.
653 The corresponding face should be set using `edit-faces' or the
654 `set-face-*' functions.")
655 (defvar font-lock-builtin-face 'font-lock-builtin-face
656   "This variable should not be set.
657 It is present only for horrid FSF compatibility reasons.
658 The corresponding face should be set using `edit-faces' or the
659 `set-face-*' functions.")
660 (defvar font-lock-function-name-face 'font-lock-function-name-face
661   "This variable should not be set.
662 It is present only for horrid FSF compatibility reasons.
663 The corresponding face should be set using `edit-faces' or the
664 `set-face-*' functions.")
665 (defvar font-lock-variable-name-face 'font-lock-variable-name-face
666   "This variable should not be set.
667 It is present only for horrid FSF compatibility reasons.
668 The corresponding face should be set using `edit-faces' or the
669 `set-face-*' functions.")
670 (defvar font-lock-type-face 'font-lock-type-face
671   "This variable should not be set.
672 It is present only for horrid FSF compatibility reasons.
673 The corresponding face should be set using `edit-faces' or the
674 `set-face-*' functions.")
675 (defvar font-lock-constant-face 'font-lock-constant-face
676   "This variable should not be set.
677 It is present only for horrid FSF compatibility reasons.
678 The corresponding face should be set using `edit-faces' or the
679 `set-face-*' functions.")
680 (defvar font-lock-reference-face 'font-lock-reference-face
681   "This variable should not be set.
682 It is present only for horrid FSF compatibility reasons.
683 The corresponding face should be set using `edit-faces' or the
684 `set-face-*' functions.")
685 (defvar font-lock-preprocessor-face 'font-lock-preprocessor-face
686   "This variable should not be set.
687 It is present only for horrid FSF compatibility reasons.
688 The corresponding face should be set using `edit-faces' or the
689 `set-face-*' functions.")
690
691 (defconst font-lock-face-list
692   '(font-lock-comment-face
693     font-lock-string-face
694     font-lock-doc-string-face
695     font-lock-keyword-face
696     font-lock-builtin-face
697     font-lock-function-name-face
698     font-lock-variable-name-face
699     font-lock-type-face
700     font-lock-constant-face
701     font-lock-reference-face
702     font-lock-preprocessor-face
703     font-lock-warning-face))
704
705 (defface font-lock-comment-face
706   '((((class color) (background dark)) (:foreground "gray80"))
707     ;; blue4 is hardly different from black on windows.
708     (((class color) (background light) (type mswindows)) (:foreground "blue"))
709     (((class color) (background light)) (:foreground "blue4"))
710     (((class grayscale) (background light))
711      (:foreground "DimGray" :bold t :italic t))
712     (((class grayscale) (background dark))
713      (:foreground "LightGray" :bold t :italic t))
714     (t (:bold t)))
715   "Font Lock mode face used to highlight comments."
716   :group 'font-lock-faces)
717
718 (defface font-lock-string-face
719   '((((class color) (background dark)) (:foreground "tan"))
720     (((class color) (background light)) (:foreground "green4"))
721     (((class grayscale) (background light)) (:foreground "DimGray" :italic t))
722     (((class grayscale) (background dark)) (:foreground "LightGray" :italic t))
723     (t (:bold t)))
724   "Font Lock mode face used to highlight strings."
725   :group 'font-lock-faces)
726
727 (defface font-lock-doc-string-face
728   '((((class color) (background dark)) (:foreground "light coral"))
729     (((class color) (background light)) (:foreground "green4"))
730     (t (:bold t)))
731   "Font Lock mode face used to highlight documentation strings.
732 This is currently supported only in Lisp-like modes, which are those
733 with \"lisp\" or \"scheme\" in their name.  You can explicitly make
734 a mode Lisp-like by putting a non-nil `font-lock-lisp-like' property
735 on the major mode's symbol."
736   :group 'font-lock-faces)
737
738 (defface font-lock-keyword-face
739   '((((class color) (background dark)) (:foreground "cyan"))
740     ;; red4 is hardly different from black on windows.
741     (((class color) (background light) (type mswindows)) (:foreground "red"))
742     (((class color) (background light)) (:foreground "red4"))
743     (((class grayscale) (background light)) (:foreground "LightGray" :bold t))
744     (((class grayscale) (background dark)) (:foreground "DimGray" :bold t))
745     (t (:bold t)))
746   "Font Lock mode face used to highlight keywords."
747   :group 'font-lock-faces)
748
749 (defface font-lock-builtin-face
750   '((((class color) (background light)) (:foreground "Purple"))
751     (((class color) (background dark)) (:foreground "Cyan"))
752     (((class grayscale) (background light)) (:foreground "LightGray" :bold t))
753     (((class grayscale) (background dark)) (:foreground "DimGray" :bold t))
754     (t (:bold t)))
755   "Font Lock mode face used to highlight builtins."
756 :group 'font-lock-faces)
757
758 (defface font-lock-function-name-face
759   '((((class color) (background dark)) (:foreground "aquamarine"))
760     ;; brown4 is hardly different from black on windows.
761     ;; I changed it to red because IMO it's pointless and ugly to
762     ;; use a million slightly different colors for niggly syntactic
763     ;; differences. --ben
764     (((class color) (background light) (type mswindows)) (:foreground "red"))
765     (((class color) (background light)) (:foreground "brown4"))
766     (t (:bold t :underline t)))
767   "Font Lock mode face used to highlight function names."
768   :group 'font-lock-faces)
769
770 (defface font-lock-variable-name-face
771   '((((class color) (background dark)) (:foreground "cyan3"))
772     (((class color) (background light)) (:foreground "magenta4"))
773     (((class grayscale) (background light))
774      (:foreground "Gray90" :bold t :italic t))
775     (((class grayscale) (background dark))
776      (:foreground "DimGray" :bold t :italic t))
777     (t (:underline t)))
778   "Font Lock mode face used to highlight variable names."
779   :group 'font-lock-faces)
780
781 (defface font-lock-type-face
782   '((((class color) (background dark)) (:foreground "wheat"))
783     (((class color) (background light)) (:foreground "steelblue"))
784     (((class grayscale) (background light)) (:foreground "Gray90" :bold t))
785     (((class grayscale) (background dark)) (:foreground "DimGray" :bold t))
786     (t (:bold t)))
787   "Font Lock mode face used to highlight types."
788   :group 'font-lock-faces)
789
790 (defface font-lock-constant-face
791   '((((class color) (background light)) (:foreground "CadetBlue"))
792     (((class color) (background dark)) (:foreground "Aquamarine"))
793     (((class grayscale) (background light))
794      (:foreground "LightGray" :bold t :underline t))
795     (((class grayscale) (background dark))
796      (:foreground "Gray50" :bold t :underline t))
797     (t (:bold t :underline t)))
798   "Font Lock mode face used to highlight constants and labels."
799 :group 'font-lock-faces)
800
801 (defface font-lock-reference-face
802   '((((class color) (background dark)) (:foreground "cadetblue2"))
803     (((class color) (background light)) (:foreground "red3"))
804     (((class grayscale) (background light))
805      (:foreground "LightGray" :bold t :underline t))
806     (((class grayscale) (background dark))
807      (:foreground "Gray50" :bold t :underline t)))
808   "Font Lock mode face used to highlight references."
809   :group 'font-lock-faces)
810
811 (defface font-lock-preprocessor-face
812   '((((class color) (background dark)) (:foreground "steelblue1"))
813     (((class color) (background light)) (:foreground "blue3"))
814     (t (:underline t)))
815   "Font Lock Mode face used to highlight preprocessor conditionals."
816   :group 'font-lock-faces)
817
818 (defface font-lock-warning-face
819   '((((class color) (background light)) (:foreground "Red" :bold t))
820     (((class color) (background dark)) (:foreground "Pink" :bold t))
821     (t (:inverse-video t :bold t)))
822   "Font Lock mode face used to highlight warnings."
823   :group 'font-lock-faces)
824
825 (defun font-lock-recompute-variables ()
826   ;; Is this a Draconian thing to do?
827   (mapc #'(lambda (buffer)
828             (with-current-buffer buffer
829               (font-lock-mode 0)
830               (font-lock-set-defaults t)))
831         (buffer-list)))
832
833 ;; Backwards-compatible crud.
834
835 (defun font-lock-reset-all-faces ()
836   (dolist (face font-lock-face-list)
837     (face-spec-set face (get face 'face-defface-spec))))
838
839 (defun font-lock-use-default-fonts ()
840   "Reset the font-lock faces to a default set of fonts."
841   (interactive)
842   ;; #### !!!!
843   (font-lock-reset-all-faces))
844
845 (defun font-lock-use-default-colors ()
846   "Reset the font-lock faces to a default set of colors."
847   (interactive)
848   ;; #### !!!!
849   (font-lock-reset-all-faces))
850
851 (defun font-lock-use-default-minimal-decoration ()
852   "Reset the font-lock patterns to a fast, minimal set of decorations."
853   (and font-lock-maximum-decoration
854        (setq font-lock-maximum-decoration nil)
855        (font-lock-recompute-variables)))
856
857 (defun font-lock-use-default-maximal-decoration ()
858   "Reset the font-lock patterns to a larger set of decorations."
859   (and (not (eq t font-lock-maximum-decoration))
860        (setq font-lock-maximum-decoration t)
861        (font-lock-recompute-variables)))
862
863 \f
864 ;;;;;;;;;;;;;;;;;;;;;;        actual code        ;;;;;;;;;;;;;;;;;;;;;;
865
866 ;;; To fontify the whole buffer by language syntax, we go through it a
867 ;;; character at a time, creating extents on the boundary of each syntactic
868 ;;; unit (that is, one extent for each block comment, one for each line
869 ;;; comment, one for each string, etc.)  This is done with the C function
870 ;;; syntactically-sectionize.  It's in C for speed (the speed of lisp function
871 ;;; calls was a real bottleneck for this task since it involves examining each
872 ;;; character in turn.)
873 ;;;
874 ;;; Then we make a second pass, to fontify the buffer based on other patterns
875 ;;; specified by regexp.  When we find a match for a region of text, we need
876 ;;; to change the fonts on those characters.  This is done with the
877 ;;; put-text-property function, which knows how to efficiently share extents.
878 ;;; Conceptually, we are attaching some particular face to each of the
879 ;;; characters in a range, but the implementation of this involves creating
880 ;;; extents, or resizing existing ones.
881 ;;;
882 ;;; Each time a modification happens to a line, we re-fontify the entire line.
883 ;;; We do this by first removing the extents (text properties) on the line,
884 ;;; and then doing the syntactic and keyword passes again on that line.  (More
885 ;;; generally, each modified region is extended to include the preceding and
886 ;;; following BOL or EOL.)
887 ;;;
888 ;;; This means that, as the user types, we repeatedly go back to the beginning
889 ;;; of the line, doing more work the longer the line gets.  This doesn't cost
890 ;;; much in practice, and if we don't, then we incorrectly fontify things when,
891 ;;; for example, inserting spaces into `intfoo () {}'.
892 ;;;
893
894 \f
895 ;; The user level functions
896
897 ;;;###autoload
898 (defun font-lock-mode (&optional arg)
899   "Toggle Font Lock Mode.
900 With arg, turn font-lock mode on if and only if arg is positive.
901
902 When Font Lock mode is enabled, text is fontified as you type it:
903
904  - Comments are displayed in `font-lock-comment-face';
905  - Strings are displayed in `font-lock-string-face';
906  - Documentation strings (in Lisp-like languages) are displayed in
907    `font-lock-doc-string-face';
908  - Language keywords (\"reserved words\") are displayed in
909    `font-lock-keyword-face';
910  - Function names in their defining form are displayed in
911    `font-lock-function-name-face';
912  - Variable names in their defining form are displayed in
913    `font-lock-variable-name-face';
914  - Type names are displayed in `font-lock-type-face';
915  - References appearing in help files and the like are displayed
916    in `font-lock-reference-face';
917  - Preprocessor declarations are displayed in
918   `font-lock-preprocessor-face';
919
920    and
921
922  - Certain other expressions are displayed in other faces according
923    to the value of the variable `font-lock-keywords'.
924
925 Where modes support different levels of fontification, you can use the variable
926 `font-lock-maximum-decoration' to specify which level you generally prefer.
927 When you turn Font Lock mode on/off the buffer is fontified/defontified, though
928 fontification occurs only if the buffer is less than `font-lock-maximum-size'.
929 To fontify a buffer without turning on Font Lock mode, and regardless of buffer
930 size, you can use \\[font-lock-fontify-buffer].
931
932 See the variable `font-lock-keywords' for customization."
933   (interactive "P")
934   (let ((on-p (if arg (> (prefix-numeric-value arg) 0) (not font-lock-mode)))
935         (maximum-size (if (not (consp font-lock-maximum-size))
936                           font-lock-maximum-size
937                         (cdr (or (assq major-mode font-lock-maximum-size)
938                                  (assq t font-lock-maximum-size))))))
939     ;; Font-lock mode will refuse to turn itself on if in batch mode
940     ;; to avoid potential (probably not actual, though) slowdown.  We
941     ;; used to try to "be nice" by avoiding doing this in temporary
942     ;; buffers.  But with the deferral code we don't need this, and it
943     ;; definitely screws some things up.
944     (if (noninteractive)
945         (setq on-p nil))
946     (cond (on-p
947            (make-local-hook 'after-change-functions)
948            (add-hook 'after-change-functions
949                      'font-lock-after-change-function nil t)
950            (add-hook 'pre-idle-hook 'font-lock-pre-idle-hook))
951           (t
952            (remove-hook 'after-change-functions
953                         'font-lock-after-change-function t)
954            (setq font-lock-defaults-computed nil
955                  font-lock-keywords nil)
956            ;; We have no business doing this here, since 
957            ;; pre-idle-hook is global.  Other buffers may
958            ;; still be in font-lock mode.  -dkindred@cs.cmu.edu
959            ;; (remove-hook 'pre-idle-hook 'font-lock-pre-idle-hook)
960            ))
961     (set (make-local-variable 'font-lock-mode) on-p)
962     (cond (on-p
963            (font-lock-set-defaults-1)
964            (run-hooks 'font-lock-mode-hook)
965            (cond (font-lock-fontified
966                   nil)
967                  ((or (null maximum-size) (<= (buffer-size) maximum-size))
968                   (font-lock-fontify-buffer))
969                  (font-lock-verbose
970                   (progress-feedback-with-label
971                    'font-lock
972                    "Fontifying %s... buffer too big." 'abort
973                    (buffer-name)))))
974           (font-lock-fontified
975            (setq font-lock-fontified nil)
976            (font-lock-unfontify-region (point-min) (point-max))
977            (font-lock-thing-lock-cleanup))
978           (t
979            (font-lock-thing-lock-cleanup)))
980     (redraw-modeline)))
981
982 ;; For init-file hooks
983 ;;;###autoload
984 (defun turn-on-font-lock ()
985   "Unconditionally turn on Font Lock mode."
986   (interactive)
987   (font-lock-mode 1))
988
989 ;;;###autoload
990 (defun turn-off-font-lock ()
991   "Unconditionally turn off Font Lock mode."
992   (interactive)
993   (font-lock-mode 0))
994
995 ;;; FSF has here:
996
997 ;; support for add-keywords, global-font-lock-mode and
998 ;; font-lock-support-mode (unified support for various *-lock modes).
999
1000 \f
1001 ;; Fontification functions.
1002
1003 ;; We first define some defsubsts to encapsulate the way we add
1004 ;; faces to a region of text.  I am planning on modifying the
1005 ;; text-property mechanism so that multiple independent classes
1006 ;; of text properties can exist.  That way, for example, ediff's
1007 ;; face text properties don't interfere with font lock's face
1008 ;; text properties.  Due to the XEmacs implementation of text
1009 ;; properties in terms of extents, doing this is fairly trivial:
1010 ;; instead of using the `text-prop' property, you just use a
1011 ;; specified property.
1012
1013 (defsubst font-lock-set-face (start end face)
1014   ;; Set the face on the characters in the range.
1015   (put-nonduplicable-text-property start end 'face face)
1016   (put-nonduplicable-text-property start end 'font-lock t))
1017
1018 (defsubst font-lock-remove-face (start end)
1019   ;; Remove any syntax highlighting on the characters in the range.
1020   (put-nonduplicable-text-property start end 'face nil)
1021   (put-nonduplicable-text-property start end 'font-lock nil)
1022   (if lookup-syntax-properties
1023       (put-nonduplicable-text-property start end 'syntax-table nil)))
1024
1025 (defsubst font-lock-set-syntax (start end syntax)
1026   ;; Set the face on the characters in the range.
1027   (put-nonduplicable-text-property start end 'syntax-table syntax)
1028   (put-nonduplicable-text-property start end 'font-lock t))
1029
1030 (defsubst font-lock-any-faces-p (start end)
1031   ;; Return non-nil if we've put any syntax highlighting on
1032   ;; the characters in the range.
1033   ;;
1034   ;; used to look for 'text-prop property, but this has problems if
1035   ;; you put any other text properties in the vicinity.  Simon
1036   ;; Marshall suggested looking for the 'face property (this is what
1037   ;; FSF Emacs does) but that's equally bogus.  Only reliable way is
1038   ;; for font-lock to specially mark its extents.
1039   ;;
1040   ;; FSF's (equivalent) definition of this defsubst would be
1041   ;; (text-property-not-all start end 'font-lock nil)
1042   ;;
1043   ;; Perhaps our `map-extents' is faster than our definition
1044   ;; of `text-property-not-all'.  #### If so, `text-property-not-all'
1045   ;; should be fixed ...
1046   ;;
1047   (map-extents 'extent-property (current-buffer) start (1- end) 'font-lock))
1048
1049 \f
1050 ;; Fontification functions.
1051
1052 ;; Rather than the function, e.g., `font-lock-fontify-region' containing the
1053 ;; code to fontify a region, the function runs the function whose name is the
1054 ;; value of the variable, e.g., `font-lock-fontify-region-function'.  Normally,
1055 ;; the value of this variable is, e.g., `font-lock-default-fontify-region'
1056 ;; which does contain the code to fontify a region.  However, the value of the
1057 ;; variable could be anything and thus, e.g., `font-lock-fontify-region' could
1058 ;; do anything.  The indirection of the fontification functions gives major
1059 ;; modes the capability of modifying the way font-lock.el fontifies.  Major
1060 ;; modes can modify the values of, e.g., `font-lock-fontify-region-function',
1061 ;; via the variable `font-lock-defaults'.
1062 ;;
1063 ;; For example, Rmail mode sets the variable `font-lock-defaults' so that
1064 ;; font-lock.el uses its own function for buffer fontification.  This function
1065 ;; makes fontification be on a message-by-message basis and so visiting an
1066 ;; RMAIL file is much faster.  A clever implementation of the function might
1067 ;; fontify the headers differently than the message body.  (It should, and
1068 ;; correspondingly for Mail mode, but I can't be bothered to do the work.  Can
1069 ;; you?)  This hints at a more interesting use...
1070 ;;
1071 ;; Languages that contain text normally contained in different major modes
1072 ;; could define their own fontification functions that treat text differently
1073 ;; depending on its context.  For example, Perl mode could arrange that here
1074 ;; docs are fontified differently than Perl code.  Or Yacc mode could fontify
1075 ;; rules one way and C code another.  Neat!
1076 ;;
1077 ;; A further reason to use the fontification indirection feature is when the
1078 ;; default syntactual fontification, or the default fontification in general,
1079 ;; is not flexible enough for a particular major mode.  For example, perhaps
1080 ;; comments are just too hairy for `font-lock-fontify-syntactically-region' to
1081 ;; cope with.  You need to write your own version of that function, e.g.,
1082 ;; `hairy-fontify-syntactically-region', and make your own version of
1083 ;; `hairy-fontify-region' call that function before calling
1084 ;; `font-lock-fontify-keywords-region' for the normal regexp fontification
1085 ;; pass.  And Hairy mode would set `font-lock-defaults' so that font-lock.el
1086 ;; would call your region fontification function instead of its own.  For
1087 ;; example, TeX modes could fontify {\foo ...} and \bar{...}  etc. multi-line
1088 ;; directives correctly and cleanly.  (It is the same problem as fontifying
1089 ;; multi-line strings and comments; regexps are not appropriate for the job.)
1090
1091 ;;;###autoload
1092 (defun font-lock-fontify-buffer ()
1093   "Fontify the current buffer the way `font-lock-mode' would.
1094 See `font-lock-mode' for details.
1095
1096 This can take a while for large buffers."
1097   (interactive)
1098   (let ((font-lock-verbose (or font-lock-verbose (interactive-p))))
1099     (funcall font-lock-fontify-buffer-function)))
1100
1101 (defun font-lock-unfontify-buffer ()
1102   (funcall font-lock-unfontify-buffer-function))
1103
1104 (defun font-lock-fontify-region (beg end &optional loudly)
1105   (funcall font-lock-fontify-region-function beg end loudly))
1106
1107 (defun font-lock-unfontify-region (beg end &optional loudly)
1108   (funcall font-lock-unfontify-region-function beg end loudly))
1109
1110 (defun font-lock-default-fontify-buffer ()
1111   (interactive)
1112   ;; if we don't widen, then the C code will fail to
1113   ;; realize that we're inside a comment.
1114   (save-restriction
1115     (widen)
1116     (let ((was-on font-lock-mode)
1117           (font-lock-verbose (or font-lock-verbose (interactive-p)))
1118           (font-lock-message-threshold 0)
1119           (aborted nil))
1120       ;; Turn it on to run hooks and get the right font-lock-keywords.
1121       (or was-on (font-lock-mode 1))
1122       (font-lock-unfontify-region (point-min) (point-max) t)
1123       ;;    (buffer-syntactic-context-flush-cache)
1124     
1125       ;; If a ^G is typed during fontification, abort the fontification, but
1126       ;; return normally (do not signal.)  This is to make it easy to abort
1127       ;; fontification if it's taking a long time, without also causing the
1128       ;; buffer not to pop up.  If a real abort is desired, the user can ^G
1129       ;; again.
1130       ;;
1131       ;; Possibly this should happen down in font-lock-fontify-region instead
1132       ;; of here, but since that happens from the after-change-hook (meaning
1133       ;; much more frequently) I'm afraid of the bad consequences of stealing
1134       ;; the interrupt character at inopportune times.
1135       ;;
1136       (condition-case nil
1137           (save-excursion
1138             (font-lock-fontify-region (point-min) (point-max)))
1139         (t
1140          (setq aborted t)))
1141
1142       (or was-on                        ; turn it off if it was off.
1143           (let ((font-lock-fontified nil)) ; kludge to prevent defontification
1144             (font-lock-mode 0)))
1145       (set (make-local-variable 'font-lock-fontified) t)
1146       (when (and aborted font-lock-verbose)
1147         (progress-feedback-with-label 'font-lock "Fontifying %s... aborted."
1148                                       'abort (buffer-name))))
1149     (run-hooks 'font-lock-after-fontify-buffer-hook)))
1150
1151 (defun font-lock-default-unfontify-buffer ()
1152   (font-lock-unfontify-region (point-min) (point-max))
1153   (set (make-local-variable 'font-lock-fontified) nil))
1154
1155 ;; This used to be `font-lock-fontify-region', and before that,
1156 ;; `font-lock-fontify-region' used to be the name used for what is now
1157 ;; `font-lock-fontify-syntactically-region'.
1158 (defun font-lock-default-fontify-region (beg end &optional loudly)
1159   (let ((modified (buffer-modified-p))
1160         (buffer-undo-list t) (inhibit-read-only t)
1161         (old-syntax-table (syntax-table))
1162         buffer-file-name buffer-file-truename)
1163     (unwind-protect
1164         (progn
1165           ;; Use the fontification syntax table, if any.
1166           (if font-lock-syntax-table (set-syntax-table font-lock-syntax-table))
1167           ;; Now do the fontification.
1168           (font-lock-unfontify-region beg end)
1169           (when font-lock-syntactic-keywords
1170             (font-lock-fontify-syntactic-keywords-region beg end))
1171           (unless font-lock-keywords-only
1172             (font-lock-fontify-syntactically-region beg end loudly))
1173           (font-lock-fontify-keywords-region beg end loudly))
1174       ;; Clean up.
1175       (set-syntax-table old-syntax-table)
1176       (and (not modified) (buffer-modified-p) (set-buffer-modified-p nil)))))
1177
1178 ;; The following must be rethought, since keywords can override fontification.
1179 ;      ;; Now scan for keywords, but not if we are inside a comment now.
1180 ;      (or (and (not font-lock-keywords-only)
1181 ;              (let ((state (parse-partial-sexp beg end nil nil 
1182 ;                                               font-lock-cache-state)))
1183 ;                (or (nth 4 state) (nth 7 state))))
1184 ;         (font-lock-fontify-keywords-region beg end))
1185
1186 (defun font-lock-default-unfontify-region (beg end &optional maybe-loudly)
1187   (when (and maybe-loudly font-lock-verbose
1188              (>= (- end beg) font-lock-message-threshold))
1189     (progress-feedback-with-label 'font-lock "Fontifying %s..." 0
1190                                   (buffer-name)))
1191   (let ((modified (buffer-modified-p))
1192         (buffer-undo-list t) (inhibit-read-only t)
1193         buffer-file-name buffer-file-truename)
1194     (font-lock-remove-face beg end)
1195     (and (not modified) (buffer-modified-p) (set-buffer-modified-p nil))))
1196
1197 ;; Following is the original FSF version (similar to our original
1198 ;; version, before the deferred stuff was added).
1199 ;;
1200 ;; I think that lazy-lock v2 tries to do something similar.
1201 ;; Those efforts should be merged.
1202
1203 ;; Called when any modification is made to buffer text.
1204 ;(defun font-lock-after-change-function (beg end old-len)
1205 ;  (save-excursion
1206 ;    (save-match-data
1207 ;      ;; Rescan between start of line from `beg' and start of line after `end'.
1208 ;      (font-lock-fontify-region
1209 ;       (progn (goto-char beg) (beginning-of-line) (point))
1210 ;       (progn (goto-char end) (forward-line 1) (point))))))
1211
1212 (defvar font-lock-always-fontify-immediately nil
1213   "Set this to non-nil to disable font-lock deferral.
1214 Otherwise, changes to existing text will not be processed until the
1215 next redisplay cycle, avoiding excessive fontification when many
1216 buffer modifications are performed or a buffer is reverted.")
1217
1218 ;; list of buffers in which there is a pending change.
1219 (defvar font-lock-pending-buffer-table (make-hash-table :weakness 'key))
1220 ;; table used to keep track of ranges needing fontification.
1221 (defvar font-lock-range-table (make-range-table))
1222
1223 (defun font-lock-pre-idle-hook ()
1224   (condition-case font-lock-error
1225       (if (> (hash-table-count font-lock-pending-buffer-table) 0)
1226           (font-lock-fontify-pending-extents))
1227     (error (warn "Error caught in `font-lock-pre-idle-hook': %s"
1228                  font-lock-error))))
1229
1230 ;;; called when any modification is made to buffer text.  This function
1231 ;;; remembers the changed ranges until the next redisplay, at which point
1232 ;;; the extents are merged and pruned, and the resulting ranges fontified.
1233 ;;; This function could easily be adapted to other after-change-functions.
1234
1235 (defun font-lock-after-change-function (beg end old-len)
1236   (when font-lock-mode
1237     ;; treat deletions as if the following character (or previous, if
1238     ;; there is no following) were inserted. (also use the previous
1239     ;; character at end of line.  this avoids a problem when you
1240     ;; insert a comment on the line before a line of code: if we use
1241     ;; the following char, then when you hit backspace, the following
1242     ;; line of code turns the comment color.) this is a bit of a hack
1243     ;; but allows us to use text properties for everything.
1244     (if (= beg end)
1245         (cond ((not (save-excursion (goto-char end) (eolp)))
1246                (setq end (1+ end)))
1247               ((/= beg (point-min)) (setq beg (1- beg)))
1248               (t nil)))
1249     (put-text-property beg end 'font-lock-pending t)
1250     (puthash (current-buffer) t font-lock-pending-buffer-table)
1251     (if font-lock-always-fontify-immediately
1252         (font-lock-fontify-pending-extents))))
1253
1254 (defun font-lock-fontify-pending-extents ()
1255   ;; ah, the beauty of mapping functions.
1256   ;; this function is actually shorter than the old version, which handled
1257   ;; only one buffer and one contiguous region!
1258   (save-match-data
1259     (maphash
1260      #'(lambda (buffer dummy)
1261          ;; remove first, to avoid infinite reprocessing if error
1262          (remhash buffer font-lock-pending-buffer-table)
1263          (when (buffer-live-p buffer)
1264            (clear-range-table font-lock-range-table)
1265            (with-current-buffer buffer
1266              (save-excursion
1267                (save-restriction
1268                  ;; if we don't widen, then the C code in
1269                  ;; syntactically-sectionize will fail to realize that
1270                  ;; we're inside a comment. #### We don't actually use
1271                  ;; syntactically-sectionize any more.  Do we still
1272                  ;; need the widen?
1273                  (widen)
1274                  (let ((zmacs-region-stays
1275                         zmacs-region-stays)) ; protect from change!
1276                    (map-extents
1277                     #'(lambda (ex dummy-maparg)
1278                         ;; first expand the ranges to full lines,
1279                         ;; because that is what will be fontified;
1280                         ;; then use a range table to merge the
1281                         ;; ranges. (we could also do this simply using
1282                         ;; text properties.  the range table code was
1283                         ;; here from a previous version of this code
1284                         ;; and works just as well.)
1285                         (let* ((beg (extent-start-position ex))
1286                                (end (extent-end-position ex))
1287                                (beg (progn (goto-char beg)
1288                                            (beginning-of-line)
1289                                            (point)))
1290                                (end (progn (goto-char end)
1291                                            (forward-line 1)
1292                                            (point))))
1293                           (put-range-table beg end t
1294                                            font-lock-range-table)))
1295                     nil nil nil nil nil 'font-lock-pending t)
1296                    ;; clear all pending extents first in case of error below.
1297                    (put-text-property (point-min) (point-max)
1298                                       'font-lock-pending nil)
1299                    (map-range-table
1300                     #'(lambda (beg end val)
1301                         ;; This creates some unnecessary progress gauges.
1302 ;;                      (if (and (= beg (point-min))
1303 ;;                               (= end (point-max)))
1304 ;;                          (font-lock-fontify-buffer)
1305 ;;                        (font-lock-fontify-region beg end)))
1306                         (font-lock-fontify-region beg end))
1307                     font-lock-range-table)))))))
1308      font-lock-pending-buffer-table)))
1309 \f
1310 ;; Syntactic fontification functions.
1311
1312 (defun font-lock-lisp-like (mode)
1313   ;; Note: (or (get mode 'font-lock-lisp-like) (string-match ...)) is
1314   ;; not enough because the property needs to be able to specify a nil
1315   ;; value.
1316   (if (plist-member (symbol-plist mode) 'font-lock-lisp-like)
1317       (get mode 'font-lock-lisp-like)
1318     ;; If the property is not specified, guess.  Similar logic exists
1319     ;; in add-log, but I think this encompasses more modes.
1320     (string-match "lisp\\|scheme" (symbol-name mode))))
1321
1322 ;; fontify-syntactically-region used to use syntactically-sectionize, which
1323 ;; was supposedly much faster than the FSF version because it was written in
1324 ;; C. However, the FSF version uses parse-partial-sexp, which is also
1325 ;; written in C, and the benchmarking I did showed the
1326 ;; syntactically-sectionize code to be slower overall. So here's the FSF
1327 ;; version, modified to support font-lock-doc-string-face.
1328 ;; -- mct 2000-12-29
1329 (defun font-lock-fontify-syntactically-region (start end &optional loudly)
1330   "Put proper face on each string and comment between START and END.
1331 START should be at the beginning of a line."
1332   (if font-lock-keywords-only
1333       nil
1334
1335     ;; #### Shouldn't this just be using 'loudly??
1336     (when (and font-lock-verbose
1337                (>= (- end start) font-lock-message-threshold))
1338       (progress-feedback-with-label 'font-lock
1339                                     "Fontifying %s... (syntactically)" 5
1340                                     (buffer-name)))
1341     (goto-char start)
1342
1343     (let ((lisp-like (font-lock-lisp-like major-mode))
1344           (cache (marker-position font-lock-cache-position))
1345           state string beg depth)
1346       ;;
1347       ;; Find the state at the `beginning-of-line' before `start'.
1348       (if (eq start cache)
1349           ;; Use the cache for the state of `start'.
1350           (setq state font-lock-cache-state)
1351         ;; Find the state of `start'.
1352         (if (null font-lock-beginning-of-syntax-function)
1353             ;; Use the state at the previous cache position, if any, or
1354             ;; otherwise calculate from `point-min'.
1355             (if (or (null cache) (< start cache))
1356                 (setq state (parse-partial-sexp (point-min) start))
1357               (setq state (parse-partial-sexp cache start nil nil
1358                                               font-lock-cache-state)))
1359           ;; Call the function to move outside any syntactic block.
1360           (funcall font-lock-beginning-of-syntax-function)
1361           (setq state (parse-partial-sexp (point) start)))
1362         ;; Cache the state and position of `start'.
1363         (setq font-lock-cache-state state)
1364         (set-marker font-lock-cache-position start))
1365       ;;
1366       ;; If the region starts inside a string or comment, show the extent of it.
1367       (when (or (nth 3 state) (nth 4 state))
1368         (setq string (nth 3 state) beg (point))
1369         (setq state (parse-partial-sexp (point) end nil nil state 'syntax-table))
1370         (font-lock-set-face beg (point) (if string 
1371                                             font-lock-string-face
1372                                           font-lock-comment-face)))
1373       ;;
1374       ;; Find each interesting place between here and `end'.
1375       (while (and (< (point) end)
1376                   (progn
1377                     (setq state (parse-partial-sexp (point) end nil nil state
1378                                                     'syntax-table))
1379                     (or (nth 3 state) (nth 4 state))))
1380         (setq depth (nth 0 state) string (nth 3 state) beg (nth 8 state))
1381         (setq state (parse-partial-sexp (point) end nil nil state 'syntax-table))
1382         (if string
1383             ;; #### It would be nice if we handled Python and other
1384             ;; non-Lisp languages with docstrings correctly.
1385             (let ((face (if (and lisp-like (= depth 1))
1386                             'font-lock-doc-string-face
1387                           'font-lock-string-face)))
1388               (if font-lock-fontify-string-delimiters
1389                   (font-lock-set-face beg (point) face)
1390                 (font-lock-set-face (+ beg 1) (- (point) 1) face)))
1391           (font-lock-set-face beg (point)
1392                               font-lock-comment-face))))))
1393 \f
1394 ;;; Additional text property functions.
1395
1396 ;; The following three text property functions are not generally available (and
1397 ;; it's not certain that they should be) so they are inlined for speed.
1398 ;; The case for `fillin-text-property' is simple; it may or not be generally
1399 ;; useful.  (Since it is used here, it is useful in at least one place.;-)
1400 ;; However, the case for `append-text-property' and `prepend-text-property' is
1401 ;; more complicated.  Should they remove duplicate property values or not?  If
1402 ;; so, should the first or last duplicate item remain?  Or the one that was
1403 ;; added?  In our implementation, the first duplicate remains.
1404
1405 ;; XEmacs: modified all these functions to use
1406 ;; `put-nonduplicable-text-property' instead of `put-text-property', and
1407 ;; the first one to take both SETPROP and MARKPROP, in accordance with the
1408 ;; changed definitions of `font-lock-any-faces-p' and `font-lock-set-face'.
1409
1410 (defsubst font-lock-fillin-text-property (start end setprop markprop value &optional object)
1411   "Fill in one property of the text from START to END.
1412 Arguments PROP and VALUE specify the property and value to put where none are
1413 already in place.  Therefore existing property values are not overwritten.
1414 Optional argument OBJECT is the string or buffer containing the text."
1415   (let ((start (text-property-any start end markprop nil object)) next)
1416     (while start
1417       (setq next (next-single-property-change start markprop object end))
1418       (put-nonduplicable-text-property start next setprop value object)
1419       (put-nonduplicable-text-property start next markprop value object)
1420       (setq start (text-property-any next end markprop nil object)))))
1421
1422 ;; This function (from simon's unique.el) is rewritten and inlined for speed.
1423 ;(defun unique (list function)
1424 ;  "Uniquify LIST, deleting elements using FUNCTION.
1425 ;Return the list with subsequent duplicate items removed by side effects.
1426 ;FUNCTION is called with an element of LIST and a list of elements from LIST,
1427 ;and should return the list of elements with occurrences of the element removed,
1428 ;i.e., a function such as `delete' or `delq'.
1429 ;This function will work even if LIST is unsorted.  See also `uniq'."
1430 ;  (let ((list list))
1431 ;    (while list
1432 ;      (setq list (setcdr list (funcall function (car list) (cdr list))))))
1433 ;  list)
1434
1435 (defsubst font-lock-unique (list)
1436   "Uniquify LIST, deleting elements using `delq'.
1437 Return the list with subsequent duplicate items removed by side effects."
1438   (let ((list list))
1439     (while list
1440       (setq list (setcdr list (delq (car list) (cdr list))))))
1441   list)
1442
1443 ;; A generalisation of `facemenu-add-face' for any property, but without the
1444 ;; removal of inactive faces via `facemenu-discard-redundant-faces' and special
1445 ;; treatment of `default'.  Uses `unique' to remove duplicate property values.
1446 (defsubst font-lock-prepend-text-property (start end prop value &optional object)
1447   "Prepend to one property of the text from START to END.
1448 Arguments PROP and VALUE specify the property and value to prepend to the value
1449 already in place.  The resulting property values are always lists, and unique.
1450 Optional argument OBJECT is the string or buffer containing the text."
1451   (let ((val (if (listp value) value (list value))) next prev)
1452     (while (/= start end)
1453       (setq next (next-single-property-change start prop object end)
1454             prev (get-text-property start prop object))
1455       (put-text-property
1456        start next prop
1457        (font-lock-unique (append val (if (listp prev) prev (list prev))))
1458        object)
1459       (setq start next))))
1460
1461 (defsubst font-lock-append-text-property (start end prop value &optional object)
1462   "Append to one property of the text from START to END.
1463 Arguments PROP and VALUE specify the property and value to append to the value
1464 already in place.  The resulting property values are always lists, and unique.
1465 Optional argument OBJECT is the string or buffer containing the text."
1466   (let ((val (if (listp value) value (list value))) next prev)
1467     (while (/= start end)
1468       (setq next (next-single-property-change start prop object end)
1469             prev (get-text-property start prop object))
1470       (put-text-property
1471        start next prop
1472        (font-lock-unique (append (if (listp prev) prev (list prev)) val))
1473        object)
1474       (setq start next))))
1475 \f
1476 ;;; Syntactic regexp fontification functions (taken from FSF Emacs 20.7.1)
1477
1478 ;; These syntactic keyword pass functions are identical to those keyword pass
1479 ;; functions below, with the following exceptions; (a) they operate on
1480 ;; `font-lock-syntactic-keywords' of course, (b) they are all `defun' as speed
1481 ;; is less of an issue, (c) eval of property value does not occur JIT as speed
1482 ;; is less of an issue, (d) OVERRIDE cannot be `prepend' or `append' as it
1483 ;; makes no sense for `syntax-table' property values, (e) they do not do it
1484 ;; LOUDLY as it is not likely to be intensive.
1485
1486 (defun font-lock-apply-syntactic-highlight (highlight)
1487   "Apply HIGHLIGHT following a match.
1488 HIGHLIGHT should be of the form MATCH-HIGHLIGHT,
1489 see `font-lock-syntactic-keywords'."
1490   (let* ((match (nth 0 highlight))
1491          (start (match-beginning match)) (end (match-end match))
1492          (value (nth 1 highlight))
1493          (override (nth 2 highlight)))
1494     (unless (numberp (car-safe value))
1495       (setq value (eval value)))
1496     (cond ((not start)
1497            ;; No match but we might not signal an error.
1498            (or (nth 3 highlight)
1499                (error "No match %d in highlight %S" match highlight)))
1500           ((not override)
1501            ;; Cannot override existing fontification.
1502            (or (map-extents 'extent-property (current-buffer)
1503                             start end 'syntax-table)
1504                (font-lock-set-syntax start end value)))
1505           ((eq override t)
1506            ;; Override existing fontification.
1507            (font-lock-set-syntax start end value))
1508           ((eq override 'keep)
1509            ;; Keep existing fontification.
1510            (font-lock-fillin-text-property start end
1511                                            'syntax-table 'font-lock value)))))
1512
1513 (defun font-lock-fontify-syntactic-anchored-keywords (keywords limit)
1514   "Fontify according to KEYWORDS until LIMIT.
1515  KEYWORDS should be of the form MATCH-ANCHORED, see `font-lock-keywords',
1516  LIMIT can be modified by the value of its PRE-MATCH-FORM."
1517   (let ((matcher (nth 0 keywords)) (lowdarks (nthcdr 3 keywords)) highlights
1518         ;; Evaluate PRE-MATCH-FORM.
1519         (pre-match-value (eval (nth 1 keywords))))
1520     ;; Set LIMIT to value of PRE-MATCH-FORM or the end of line.
1521     (if (and (numberp pre-match-value) (> pre-match-value (point)))
1522         (setq limit pre-match-value)
1523       (save-excursion (end-of-line) (setq limit (point))))
1524     (save-match-data
1525       ;; Find an occurrence of `matcher' before `limit'.
1526       (while (if (stringp matcher)
1527                  (re-search-forward matcher limit t)
1528                (funcall matcher limit))
1529         ;; Apply each highlight to this instance of `matcher'.
1530         (setq highlights lowdarks)
1531         (while highlights
1532           (font-lock-apply-syntactic-highlight (car highlights))
1533           (setq highlights (cdr highlights)))))
1534     ;; Evaluate POST-MATCH-FORM.
1535     (eval (nth 2 keywords))))
1536
1537 (defun font-lock-fontify-syntactic-keywords-region (start end)
1538   "Fontify according to `font-lock-syntactic-keywords' between START and END.
1539 START should be at the beginning of a line."
1540 ;;  ;; If `font-lock-syntactic-keywords' is a symbol, get the real keywords.
1541   (when (symbolp font-lock-syntactic-keywords)
1542     (setq font-lock-syntactic-keywords (font-lock-eval-keywords
1543                                         font-lock-syntactic-keywords)))
1544   ;; If `font-lock-syntactic-keywords' is not compiled, compile it.
1545   (unless (eq (car font-lock-syntactic-keywords) t)
1546     (setq font-lock-syntactic-keywords (font-lock-compile-keywords
1547                                         font-lock-syntactic-keywords)))
1548   ;; Get down to business.
1549   (let ((case-fold-search font-lock-keywords-case-fold-search)
1550         (keywords (cdr font-lock-syntactic-keywords))
1551         keyword matcher highlights)
1552     (while keywords
1553       ;; Find an occurrence of `matcher' from `start' to `end'.
1554       (setq keyword (car keywords) matcher (car keyword))
1555       (goto-char start)
1556       (while (if (stringp matcher)
1557                  (re-search-forward matcher end t)
1558                (funcall matcher end))
1559         ;; Apply each highlight to this instance of `matcher', which may be
1560         ;; specific highlights or more keywords anchored to `matcher'.
1561         (setq highlights (cdr keyword))
1562         (while highlights
1563           (if (numberp (car (car highlights)))
1564               (font-lock-apply-syntactic-highlight (car highlights))
1565             (font-lock-fontify-syntactic-anchored-keywords (car highlights)
1566                                                            end))
1567           (setq highlights (cdr highlights))))
1568       (setq keywords (cdr keywords)))))
1569 \f
1570 ;;; Regexp fontification functions.
1571
1572 (defsubst font-lock-apply-highlight (highlight)
1573   "Apply HIGHLIGHT following a match.
1574 HIGHLIGHT should be of the form MATCH-HIGHLIGHT, see `font-lock-keywords'."
1575   (let* ((match (nth 0 highlight))
1576          (start (match-beginning match)) (end (match-end match))
1577          (override (nth 2 highlight)))
1578     (let ((newface (nth 1 highlight)))
1579       (or (symbolp newface)
1580           (setq newface (eval newface)))
1581       (cond ((not start)
1582              ;; No match but we might not signal an error.
1583              (or (nth 3 highlight)
1584                  (error "No match %d in highlight %S" match highlight)))
1585             ((= start end) nil)
1586             ((not override)
1587              ;; Cannot override existing fontification.
1588              (or (font-lock-any-faces-p start end)
1589                  (font-lock-set-face start end newface)))
1590             ((eq override t)
1591              ;; Override existing fontification.
1592              (font-lock-set-face start end newface))
1593             ((eq override 'keep)
1594              ;; Keep existing fontification.
1595              (font-lock-fillin-text-property start end 'face 'font-lock
1596                                              newface))
1597             ((eq override 'prepend)
1598              ;; Prepend to existing fontification.
1599              (font-lock-prepend-text-property start end 'face newface))
1600             ((eq override 'append)
1601              ;; Append to existing fontification.
1602              (font-lock-append-text-property start end 'face newface))))))
1603
1604 (defsubst font-lock-fontify-anchored-keywords (keywords limit)
1605   "Fontify according to KEYWORDS until LIMIT.
1606 KEYWORDS should be of the form MATCH-ANCHORED, see `font-lock-keywords',
1607 LIMIT can be modified by the value of its PRE-MATCH-FORM."
1608   (let ((matcher (nth 0 keywords)) (lowdarks (nthcdr 3 keywords)) highlights
1609         ;; Evaluate PRE-MATCH-FORM.
1610         (pre-match-value (eval (nth 1 keywords))))
1611     ;; Set LIMIT to value of PRE-MATCH-FORM or the end of line.
1612     (if (and (numberp pre-match-value) (> pre-match-value (point)))
1613         (setq limit pre-match-value)
1614       (save-excursion (end-of-line) (setq limit (point))))
1615     (save-match-data
1616       ;; Find an occurrence of `matcher' before `limit'.
1617       (while (if (stringp matcher)
1618                  (re-search-forward matcher limit t)
1619                (funcall matcher limit))
1620         ;; Apply each highlight to this instance of `matcher'.
1621         (setq highlights lowdarks)
1622         (while highlights
1623           (font-lock-apply-highlight (car highlights))
1624           (setq highlights (cdr highlights)))))
1625     ;; Evaluate POST-MATCH-FORM.
1626     (eval (nth 2 keywords))))
1627
1628 (defun font-lock-fontify-keywords-region (start end &optional loudvar)
1629   "Fontify according to `font-lock-keywords' between START and END.
1630 START should be at the beginning of a line."
1631   (let ((loudly (and font-lock-verbose
1632                      (>= (- end start) font-lock-message-threshold))))
1633     (let* ((case-fold-search font-lock-keywords-case-fold-search)
1634            (keywords (cdr (if (eq (car-safe font-lock-keywords) t)
1635                               font-lock-keywords
1636                             (font-lock-compile-keywords))))
1637            (bufname (buffer-name)) 
1638            (progress 5) (old-progress 5)
1639            (iter 0)
1640            (nkeywords (length keywords))
1641            keyword matcher highlights)
1642       ;;
1643       ;; Fontify each item in `font-lock-keywords' from `start' to `end'.
1644       ;; In order to measure progress accurately we need to know how
1645       ;; many keywords we have and how big the region is. Then progress
1646       ;; is ((pos - start)/ (end - start) * nkeywords 
1647       ;;        + iteration / nkeywords) * 100
1648       (while keywords
1649         ;;
1650         ;; Find an occurrence of `matcher' from `start' to `end'.
1651         (setq keyword (car keywords) matcher (car keyword))
1652         (goto-char start)
1653         (while (and (< (point) end)
1654                     (if (stringp matcher)
1655                         (re-search-forward matcher end t)
1656                       (funcall matcher end)))
1657           ;; calculate progress
1658           (setq progress
1659                 (+ (/ (* (- (point) start) 95) (* (- end start) nkeywords))
1660                    (/ (* iter 95) nkeywords) 5))
1661           (when (and loudly (> progress old-progress))
1662             (progress-feedback-with-label 'font-lock
1663                                           "Fontifying %s... (regexps)"
1664                                           progress bufname))
1665           (setq old-progress progress)
1666           ;; Apply each highlight to this instance of `matcher', which may be
1667           ;; specific highlights or more keywords anchored to `matcher'.
1668           (setq highlights (cdr keyword))
1669           (while highlights
1670             (if (numberp (car (car highlights)))
1671                 (let ((end (match-end (car (car highlights)))))
1672                   (font-lock-apply-highlight (car highlights))
1673                   ;; restart search just after the end of the
1674                   ;; keyword so keywords can share bracketing
1675                   ;; expressions.
1676                   (and end (goto-char end)))
1677               (font-lock-fontify-anchored-keywords (car highlights) end))
1678             (setq highlights (cdr highlights))))
1679         (setq iter (1+ iter))
1680         (setq keywords (cdr keywords))))
1681     (if loudly
1682         (progress-feedback-with-label 'font-lock "Fontifying %s... " 100
1683                                       (buffer-name)))))
1684
1685 \f
1686 ;; Various functions.
1687
1688 ;; Turn off other related packages if they're on.  I prefer a hook. --sm.
1689 ;; These explicit calls are easier to understand
1690 ;; because people know what they will do.
1691 ;; A hook is a mystery because it might do anything whatever. --rms.
1692 (defun font-lock-thing-lock-cleanup ()
1693   (cond ((and (boundp 'fast-lock-mode) fast-lock-mode)
1694          (fast-lock-mode -1))
1695         ((and (boundp 'lazy-lock-mode) lazy-lock-mode)
1696          (lazy-lock-mode -1))
1697         ((and (boundp 'lazy-shot-mode) lazy-shot-mode)
1698          (lazy-shot-mode -1))))
1699
1700 ;; Do something special for these packages after fontifying.  I prefer a hook.
1701 (defun font-lock-after-fontify-buffer ()
1702   (cond ((and (boundp 'fast-lock-mode) fast-lock-mode)
1703          (fast-lock-after-fontify-buffer))
1704         ((and (boundp 'lazy-lock-mode) lazy-lock-mode)
1705          (lazy-lock-after-fontify-buffer))))
1706
1707 \f
1708 ;; Various functions.
1709
1710 (defun font-lock-compile-keywords (&optional keywords)
1711   "Compile KEYWORDS into the form (t KEYWORD ...).
1712 Here KEYWORD is of the form (MATCHER HIGHLIGHT ...) as shown in the
1713 `font-lock-keywords' doc string."
1714   (let ((keywords (or keywords font-lock-keywords)))
1715     (setq font-lock-keywords 
1716      (if (eq (car-safe keywords) t)
1717          keywords
1718        (cons t (mapcar 'font-lock-compile-keyword keywords))))))
1719
1720 (defun font-lock-compile-keyword (keyword)
1721   (cond ((nlistp keyword)               ; Just MATCHER
1722          (list keyword '(0 font-lock-keyword-face)))
1723         ((eq (car keyword) 'eval)       ; Specified (eval . FORM)
1724          (font-lock-compile-keyword (eval (cdr keyword))))
1725         ((numberp (cdr keyword))        ; Specified (MATCHER . MATCH)
1726          (list (car keyword) (list (cdr keyword) 'font-lock-keyword-face)))
1727         ((symbolp (cdr keyword))        ; Specified (MATCHER . FACENAME)
1728          (list (car keyword) (list 0 (cdr keyword))))
1729         ((nlistp (nth 1 keyword))       ; Specified (MATCHER . HIGHLIGHT)
1730          (list (car keyword) (cdr keyword)))
1731         (t                              ; Hopefully (MATCHER HIGHLIGHT ...)
1732          keyword)))
1733
1734 (defun font-lock-eval-keywords (keywords)
1735   "Evaluate KEYWORDS if a function (funcall) or variable (eval) name."
1736   (if (listp keywords)
1737       keywords
1738     (font-lock-eval-keywords (if (fboundp keywords)
1739                                  (funcall keywords)
1740                                (eval keywords)))))
1741
1742 (defun font-lock-choose-keywords (keywords level)
1743   ;; Return LEVELth element of KEYWORDS.  A LEVEL of nil is equal to a
1744   ;; LEVEL of 0, a LEVEL of t is equal to (1- (length KEYWORDS)).
1745   (let ((level (if (not (consp level))
1746                    level
1747                  (cdr (or (assq major-mode level) (assq t level))))))
1748     (cond ((symbolp keywords)
1749            keywords)
1750           ((numberp level)
1751            (or (nth level keywords) (car (reverse keywords))))
1752           ((eq level t)
1753            (car (reverse keywords)))
1754           (t
1755            (car keywords)))))
1756
1757 \f
1758 ;;; Determining which set of font-lock keywords to use.
1759
1760 (defun font-lock-find-font-lock-defaults (modesym)
1761   ;; Get the defaults based on the major mode.
1762   (let (raw-defaults)
1763     ;; I want a do-while loop!
1764     (while (progn
1765              (setq raw-defaults (get modesym 'font-lock-defaults))
1766              (and raw-defaults (symbolp raw-defaults)
1767                   (setq modesym raw-defaults)))
1768       )
1769     raw-defaults))
1770
1771 (defun font-lock-examine-syntax-table ()
1772   ; Computes the value of font-lock-keywords-only for this buffer.
1773   (if (eq (syntax-table) (standard-syntax-table))
1774       ;; Assume that modes which haven't bothered to install their own
1775       ;; syntax table don't do anything syntactically interesting.
1776       ;; Really, the standard-syntax-table shouldn't have comments and
1777       ;; strings in it, but changing that now might break things.
1778       nil
1779     ;; else map over the syntax table looking for strings or comments.
1780     (let (got-one)
1781       ;; XEmacs 20.0 ...
1782       (if (fboundp 'map-syntax-table)
1783           (setq got-one
1784                 (map-syntax-table
1785                  #'(lambda (key value)
1786                      (memq (char-syntax-from-code value)
1787                            '(?\" ?\< ?\> ?\$)))
1788                  (syntax-table)))
1789         ;; older Emacsen.
1790         (let ((i (1- (length (syntax-table)))))
1791           (while (>= i 0)
1792             (if (memq (char-syntax i) '(?\" ?\< ?\> ?\$))
1793                 (setq got-one t i 0))
1794             (setq i (1- i)))))
1795       (set (make-local-variable 'font-lock-keywords-only) (not got-one)))))
1796
1797 ;; font-lock-set-defaults is in fontl-hooks.el.
1798
1799 ;;;###autoload
1800 (defun font-lock-set-defaults-1 (&optional explicit-defaults)
1801   ;; does everything that font-lock-set-defaults does except
1802   ;; enable font-lock-mode.  This is called by `font-lock-mode'.
1803   ;; Note that the return value is used!
1804
1805   (if (and font-lock-defaults-computed (not explicit-defaults))
1806       ;; nothing to do.
1807       nil
1808
1809     (or font-lock-keywords
1810         (let* ((defaults (or (and (not (eq t explicit-defaults))
1811                                   explicit-defaults)
1812                              ;; in case modes decide to set
1813                              ;; `font-lock-defaults' themselves,
1814                              ;; as in FSF Emacs.
1815                              font-lock-defaults
1816                              (font-lock-find-font-lock-defaults major-mode)))
1817                (keywords (font-lock-choose-keywords
1818                           (nth 0 defaults) font-lock-maximum-decoration)))
1819
1820           ;; Keywords?
1821           (setq font-lock-keywords (if (fboundp keywords)
1822                                        (funcall keywords)
1823                                      (eval keywords)))
1824           (or font-lock-keywords
1825               ;; older way:
1826               ;; try to look for a variable `foo-mode-font-lock-keywords',
1827               ;; or similar.
1828               (let ((major (symbol-name major-mode))
1829                     (try #'(lambda (n)
1830                              (if (stringp n) (setq n (intern-soft n)))
1831                              (if (and n
1832                                       (boundp n))
1833                                  n
1834                                nil))))
1835                 (setq font-lock-keywords 
1836                       (symbol-value
1837                        (or (funcall try (get major-mode 'font-lock-keywords))
1838                            (funcall try (concat major "-font-lock-keywords"))
1839                            (funcall try (and (string-match "-mode\\'" major)
1840                                              (concat (substring 
1841                                                       major 0 
1842                                                       (match-beginning 0))
1843                                                      "-font-lock-keywords")))
1844                            'font-lock-keywords)))))
1845
1846           ;; Case fold?
1847           (if (>= (length defaults) 3)
1848               (setq font-lock-keywords-case-fold-search (nth 2 defaults))
1849             ;; older way:
1850             ;; look for a property 'font-lock-keywords-case-fold-search on
1851             ;; the major-mode symbol.
1852             (let* ((nonexist (make-symbol ""))
1853                    (value (get major-mode 'font-lock-keywords-case-fold-search
1854                                nonexist)))
1855               (if (not (eq nonexist value))
1856                   (setq font-lock-keywords-case-fold-search value))))
1857
1858           ;; Syntactic?
1859           (if (>= (length defaults) 2)
1860               (setq font-lock-keywords-only (nth 1 defaults))
1861             ;; older way:
1862             ;; cleverly examine the syntax table.
1863             (font-lock-examine-syntax-table))
1864            
1865           ;; Syntax table?
1866           (if (nth 3 defaults)
1867               (let ((slist (nth 3 defaults)))
1868                 (setq font-lock-syntax-table
1869                       (copy-syntax-table (syntax-table)))
1870                 (while slist
1871                   (modify-syntax-entry (car (car slist)) (cdr (car slist))
1872                                        font-lock-syntax-table)
1873                   (setq slist (cdr slist)))))
1874
1875           ;; Syntax function?
1876           (cond (defaults
1877                   (setq font-lock-beginning-of-syntax-function
1878                         (nth 4 defaults)))
1879                 (t
1880                  ;; older way:
1881                  ;; defaults not specified at all, so use `beginning-of-defun'.
1882                  (setq font-lock-beginning-of-syntax-function
1883                        'beginning-of-defun)))))
1884
1885     (setq font-lock-cache-position (make-marker))
1886     (setq font-lock-defaults-computed t)))
1887
1888 \f
1889 ;;;;;;;;;;;;;;;;;;;;;;         keywords         ;;;;;;;;;;;;;;;;;;;;;;
1890
1891 ;;; Various major-mode interfaces.
1892 ;;; Probably these should go in with the source of the respective major modes.
1893
1894 ;; The defaults and keywords listed here should perhaps be moved into
1895 ;; mode-specific files.
1896
1897 ;; For C and Lisp modes we use `beginning-of-defun', rather than nil,
1898 ;; for SYNTAX-BEGIN.  Thus the calculation of the cache is usually
1899 ;; faster but not infallible, so we risk mis-fontification.  --sm.
1900
1901 (put 'c-mode 'font-lock-defaults 
1902      '((c-font-lock-keywords
1903         c-font-lock-keywords-1 c-font-lock-keywords-2 c-font-lock-keywords-3)
1904        nil nil ((?_ . "w")) beginning-of-defun))
1905 (put 'c++-c-mode 'font-lock-defaults 'c-mode)
1906 (put 'elec-c-mode 'font-lock-defaults 'c-mode)
1907
1908 (put 'c++-mode 'font-lock-defaults
1909      '((c++-font-lock-keywords
1910         c++-font-lock-keywords-1 c++-font-lock-keywords-2
1911         c++-font-lock-keywords-3)
1912        nil nil ((?_ . "w") (?~ . "w")) beginning-of-defun))
1913
1914 (put 'java-mode 'font-lock-defaults 
1915      '((java-font-lock-keywords
1916         java-font-lock-keywords-1 java-font-lock-keywords-2
1917         java-font-lock-keywords-3)
1918        nil nil ((?_ . "w")) beginning-of-defun
1919        (font-lock-mark-block-function . mark-defun)))
1920
1921 (put 'lisp-mode 'font-lock-defaults
1922      '((lisp-font-lock-keywords
1923         lisp-font-lock-keywords-1 lisp-font-lock-keywords-2)
1924        nil nil
1925        ((?: . "w") (?- . "w") (?* . "w") (?+ . "w") (?. . "w") (?< . "w")
1926         (?> . "w") (?= . "w") (?! . "w") (?? . "w") (?$ . "w") (?% . "w")
1927         (?_ . "w") (?& . "w") (?~ . "w") (?^ . "w") (?/ . "w"))
1928        beginning-of-defun))
1929 (put 'emacs-lisp-mode 'font-lock-defaults 'lisp-mode)
1930 (put 'lisp-interaction-mode 'font-lock-defaults 'lisp-mode)
1931
1932 (put 'scheme-mode 'font-lock-defaults
1933      '(scheme-font-lock-keywords
1934        nil t
1935        ((?: . "w") (?- . "w") (?* . "w") (?+ . "w") (?. . "w") (?< . "w")
1936         (?> . "w") (?= . "w") (?! . "w") (?? . "w") (?$ . "w") (?% . "w")
1937         (?_ . "w") (?& . "w") (?~ . "w") (?^ . "w") (?/ . "w"))
1938        beginning-of-defun))
1939 (put 'inferior-scheme-mode 'font-lock-defaults 'scheme-mode)
1940 (put 'scheme-interaction-mode 'font-lock-defaults 'scheme-mode)
1941
1942 (put 'tex-mode 'font-lock-defaults
1943      ;; For TeX modes we could use `backward-paragraph' for the same reason.
1944      '(tex-font-lock-keywords nil nil ((?$ . "\""))))
1945 ;; the nine billion names of TeX mode...
1946 (put 'bibtex-mode       'font-lock-defaults 'tex-mode)
1947 (put 'plain-tex-mode    'font-lock-defaults 'tex-mode)
1948 (put 'slitex-tex-mode   'font-lock-defaults 'tex-mode)
1949 (put 'SliTeX-mode       'font-lock-defaults 'tex-mode)
1950 (put 'slitex-mode       'font-lock-defaults 'tex-mode)
1951 (put 'latex-tex-mode    'font-lock-defaults 'tex-mode)
1952 (put 'LaTex-tex-mode    'font-lock-defaults 'tex-mode)
1953 (put 'latex-mode        'font-lock-defaults 'tex-mode)
1954 (put 'LaTeX-mode        'font-lock-defaults 'tex-mode)
1955 (put 'japanese-LaTeX-mode 'font-lock-defaults 'tex-mode)
1956 (put 'japanese-SliTeX-mode 'font-lock-defaults 'tex-mode)
1957 (put 'FoilTeX-mode      'font-lock-defaults 'tex-mode)
1958 (put 'LATeX-MoDe        'font-lock-defaults 'tex-mode)
1959 (put 'lATEx-mODe        'font-lock-defaults 'tex-mode)
1960 ;; ok, this is getting a bit silly ...
1961 (put 'eDOm-xETAl        'font-lock-defaults 'tex-mode)
1962
1963 ;;; Various regexp information shared by several modes.
1964 ;;; Information specific to a single mode should go in its load library.
1965
1966 (defconst lisp-font-lock-keywords-1
1967   (list
1968    ;; Anything not a variable or type declaration is fontified as a function.
1969    ;; It would be cleaner to allow preceding whitespace, but it would also be
1970    ;; about five times slower.
1971    (list (concat "^(\\(def\\("
1972                   ;; Variable declarations.
1973                   "\\(const\\(\\|ant\\)\\|ine-key\\(\\|-after\\)\\|var\\|custom\\)\\|"
1974                   ;; Structure declarations.
1975                   "\\(class\\|struct\\|type\\)\\|"
1976                   ;; Everything else is a function declaration.
1977                   "\\([^ \t\n\(\)]+\\)"
1978                   "\\)\\)\\>"
1979                   ;; Any whitespace and declared object.
1980                   "[ \t'\(]*"
1981                   "\\([^ \t\n\)]+\\)?")
1982           '(1 font-lock-keyword-face)
1983           '(8 (cond ((match-beginning 3) 'font-lock-variable-name-face)
1984                     ((match-beginning 6) 'font-lock-type-face)
1985                     (t 'font-lock-function-name-face))
1986               nil t))
1987    )
1988  "Subdued level highlighting Lisp modes.")
1989
1990 (defconst lisp-font-lock-keywords-2
1991   (append lisp-font-lock-keywords-1
1992    (list
1993     ;;
1994     ;; Control structures.  ELisp and CLisp combined.
1995     ;;
1996     (cons
1997      (concat
1998       "(\\("
1999       ;; beginning of generated stuff
2000       ;; to regenerate, use the regexp-opt below, then delete the outermost
2001       ;; grouping, then use the macro below to break up the string.
2002       ;; (regexp-opt
2003       ;;   '("cond" "if" "while" "let" "let*" "prog" "progn" "prog1"
2004       ;;     "prog2" "progv" "catch" "throw" "save-restriction"
2005       ;;     "save-excursion" "save-window-excursion"
2006       ;;     "save-current-buffer" "with-current-buffer"
2007       ;;     "save-selected-window" "with-selected-window"
2008       ;;     "save-selected-frame" "with-selected-frame"
2009       ;;     "with-temp-file" "with-temp-buffer" "with-output-to-string"
2010       ;;     "with-string-as-buffer-contents"
2011       ;;     "save-match-data" "unwind-protect" "call-with-condition-handler"
2012       ;;     "condition-case" "track-mouse" "autoload"
2013       ;;     "eval-after-load" "eval-and-compile" "eval-when-compile"
2014       ;;     "when" "unless" "do" "dolist" "dotimes" "flet" "labels"
2015       ;;     "lambda" "block" "return" "return-from" "loop") t)
2016       ;; (setq last-kbd-macro
2017       ;;   (read-kbd-macro "\" C-7 C-1 <right> C-r \\\\| 3*<right> \" RET"))
2018       "autoload\\|block\\|c\\(?:a\\(?:ll-with-condition-handler\\|tch\\)\\|"
2019       "ond\\(?:ition-case\\)?\\)\\|do\\(?:list\\|times\\)?\\|"
2020       "eval-\\(?:a\\(?:fter-load\\|nd-compile\\)\\|when-compile\\)\\|flet\\|"
2021       "if\\|l\\(?:a\\(?:bels\\|mbda\\)\\|et\\*?\\|oop\\)\\|prog[12nv]?\\|"
2022       "return\\(?:-from\\)?\\|save-\\(?:current-buffer\\|excursion\\|"
2023       "match-data\\|restriction\\|selected-\\(?:frame\\|window\\)\\|"
2024       "window-excursion\\)\\|t\\(?:hrow\\|rack-mouse\\)\\|un\\(?:less\\|"
2025       "wind-protect\\)\\|w\\(?:h\\(?:en\\|ile\\)\\|ith-\\(?:current-buffer\\|"
2026       "output-to-string\\|s\\(?:elected-\\(?:frame\\|window\\)\\|"
2027       "tring-as-buffer-contents\\)\\|temp-\\(?:buffer\\|file\\)\\)\\)"
2028       ;; end of generated stuff
2029       "\\)\\>") 1)
2030     ;;
2031     ;; Feature symbols as references.
2032     '("(\\(featurep\\|provide\\|require\\)\\>[ \t']*\\(\\sw+\\)?"
2033       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2034     ;;
2035     ;; Words inside \\[] tend to be for `substitute-command-keys'.
2036     '("\\\\\\\\\\[\\(\\sw+\\)]" 1 font-lock-reference-face prepend)
2037     ;;
2038     ;; Words inside `' tend to be symbol names.
2039     '("`\\(\\sw\\sw+\\)'" 1 font-lock-reference-face prepend)
2040     ;;
2041     ;; CLisp `:' keywords as references.
2042     '("\\<:\\sw+\\>" 0 font-lock-reference-face prepend)
2043     ;;
2044     ;; ELisp and CLisp `&' keywords as types.
2045     '("\\<\\&\\(optional\\|rest\\|whole\\)\\>" . font-lock-type-face)
2046     ))
2047   "Gaudy level highlighting for Lisp modes.")
2048
2049 (defvar lisp-font-lock-keywords lisp-font-lock-keywords-1
2050   "Default expressions to highlight in Lisp modes.")
2051
2052 ;; The previous version, before replacing it with the FSF version.
2053 ;(defconst lisp-font-lock-keywords-1 (purecopy
2054 ; '(;;
2055 ;   ;; highlight defining forms.  This doesn't work too nicely for
2056 ;   ;; (defun (setf foo) ...) but it does work for (defvar foo) which
2057 ;   ;; is more important.
2058 ;   ("^(def[-a-z]+\\s +\\([^ \t\n\)]+\\)" 1 font-lock-function-name-face)
2059 ;   ;;
2060 ;   ;; highlight CL keywords (three clauses seems faster than one)
2061 ;   ("\\s :\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2062 ;   ("(:\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2063 ;   ("':\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2064 ;   ;;
2065 ;   ;; this is highlights things like (def* (setf foo) (bar baz)), but may
2066 ;   ;; be slower (I haven't really thought about it)
2067 ;;   ("^(def[-a-z]+\\s +\\(\\s(\\S)*\\s)\\|\\S(\\S *\\)"
2068 ;;    1 font-lock-function-name-face)
2069 ;   ))
2070 ; "For consideration as a value of `lisp-font-lock-keywords'.
2071 ;This does fairly subdued highlighting.")
2072 ;
2073 ;(defconst lisp-font-lock-keywords-2 (purecopy
2074 ;  (append lisp-font-lock-keywords-1
2075 ;   '(;;
2076 ;     ;; Highlight control structures
2077 ;     ("(\\(cond\\|if\\|when\\|unless\\|[ec]?\\(type\\)?case\\)[ \t\n]" . 1)
2078 ;     ("(\\(while\\|do\\|let\\*?\\|flet\\|labels\\|prog[nv12*]?\\)[ \t\n]" . 1)
2079 ;     ("(\\(do\\*\\|dotimes\\|dolist\\|loop\\)[ \t\n]" . 1)
2080 ;     ("(\\(catch\\|\\throw\\|block\\|return\\|return-from\\)[ \t\n]" . 1)
2081 ;     ("(\\(save-restriction\\|save-window-restriction\\)[ \t\n]" . 1)
2082 ;     ("(\\(save-excursion\\|unwind-protect\\|condition-case\\)[ \t\n]" . 1)
2083 ;     ;;
2084 ;     ;; highlight function names in emacs-lisp docstrings (in the syntax
2085 ;     ;; that substitute-command-keys understands.)
2086 ;     ("\\\\\\\\\\[\\([^]\\\n]+\\)]" 1 font-lock-keyword-face t)
2087 ;     ;;
2088 ;     ;; highlight words inside `' which tend to be function names
2089 ;     ("`\\([-a-zA-Z0-9_][-a-zA-Z0-9_][-a-zA-Z0-9_.]+\\)'"
2090 ;      1 font-lock-keyword-face t)
2091 ;     )))
2092 ; "For consideration as a value of `lisp-font-lock-keywords'.
2093 ;
2094 ;This does a lot more highlighting.")
2095
2096 (defvar scheme-font-lock-keywords
2097   (eval-when-compile
2098     (list
2099      ;;
2100      ;; Declarations.  Hannes Haug <hannes.haug@student.uni-tuebingen.de> says
2101      ;; this works for SOS, STklos, SCOOPS, Meroon and Tiny CLOS.
2102      (list (concat "(\\(define\\("
2103                    ;; Function names.
2104                    "\\(\\|-\\(generic\\(\\|-procedure\\)\\|method\\)\\)\\|"
2105                    ;; Macro names, as variable names.  A bit dubious, this.
2106                    "\\(-syntax\\)\\|"
2107                    ;; Class names.
2108                    "\\(-class\\)"
2109                    "\\)\\)\\>"
2110                    ;; Any whitespace and declared object.
2111                    "[ \t]*(?"
2112                    "\\(\\sw+\\)?")
2113            '(1 font-lock-keyword-face)
2114            '(8 (cond ((match-beginning 3) 'font-lock-function-name-face)
2115                      ((match-beginning 6) 'font-lock-variable-name-face)
2116                      (t 'font-lock-type-face))
2117                nil t))
2118      ;;
2119      ;; Control structures.
2120 ;(regexp-opt '("begin" "call-with-current-continuation" "call/cc"
2121 ;              "call-with-input-file" "call-with-output-file" "case" "cond"
2122 ;              "do" "else" "for-each" "if" "lambda"
2123 ;              "let\\*?" "let-syntax" "letrec" "letrec-syntax"
2124 ;              ;; Hannes Haug <hannes.haug@student.uni-tuebingen.de> wants:
2125 ;              "and" "or" "delay"
2126 ;              ;; Stefan Monnier <stefan.monnier@epfl.ch> says don't bother:
2127 ;              ;;"quasiquote" "quote" "unquote" "unquote-splicing"
2128 ;              "map" "syntax" "syntax-rules"))
2129      (cons
2130       (concat "(\\("
2131               "and\\|begin\\|c\\(a\\(ll\\(-with-\\(current-continuation\\|"
2132               "input-file\\|output-file\\)\\|/cc\\)\\|se\\)\\|ond\\)\\|"
2133               "d\\(elay\\|o\\)\\|else\\|for-each\\|if\\|"
2134               "l\\(ambda\\|et\\(-syntax\\|\\*?\\|rec\\(\\|-syntax\\)\\)\\)\\|"
2135               "map\\|or\\|syntax\\(\\|-rules\\)"
2136               "\\)\\>") 1)
2137      ;;
2138      ;; David Fox <fox@graphics.cs.nyu.edu> for SOS/STklos class specifiers.
2139      '("\\<<\\sw+>\\>" . font-lock-type-face)
2140      ;;
2141      ;; Scheme `:' keywords as references.
2142      '("\\<:\\sw+\\>" . font-lock-reference-face)
2143      ))
2144 "Default expressions to highlight in Scheme modes.")
2145
2146 ;; The previous version, before replacing it with the FSF version.
2147 ;(defconst scheme-font-lock-keywords (purecopy
2148 ; '(("(define[ \t]+(?\\([^ \t\n\)]+\\)" 1 font-lock-function-name-face)
2149 ;   ("(\\(cond\\|lambda\\|begin\\|if\\|else\\|case\\|do\\)[ \t\n]" . 1)
2150 ;   ("(\\(\\|letrec\\|let\\*?\\|set!\\|and\\|or\\)[ \t\n]" . 1)
2151 ;   ("(\\(quote\\|unquote\\|quasiquote\\|unquote-splicing\\)[ \t\n]" . 1)
2152 ;   ("(\\(syntax\\|syntax-rules\\|define-syntax\\|let-syntax\\|letrec-syntax\\)[ \t\n]" . 1)))
2153 ;  "Expressions to highlight in Scheme buffers.")
2154
2155 (defconst c-font-lock-keywords-1 nil
2156   "Subdued level highlighting for C modes.")
2157
2158 (defconst c-font-lock-keywords-2 nil
2159   "Medium level highlighting for C modes.")
2160
2161 (defconst c-font-lock-keywords-3 nil
2162   "Gaudy level highlighting for C modes.")
2163
2164 (defconst c++-font-lock-keywords-1 nil
2165   "Subdued level highlighting for C++ modes.")
2166
2167 (defconst c++-font-lock-keywords-2 nil
2168   "Medium level highlighting for C++ modes.")
2169
2170 (defconst c++-font-lock-keywords-3 nil
2171   "Gaudy level highlighting for C++ modes.")
2172
2173 (defun font-lock-match-c++-style-declaration-item-and-skip-to-next (limit)
2174   ;; Match, and move over, any declaration/definition item after point.
2175   ;; The expect syntax of an item is "word" or "word::word", possibly ending
2176   ;; with optional whitespace and a "(".  Everything following the item (but
2177   ;; belonging to it) is expected to by skip-able by `forward-sexp', and items
2178   ;; are expected to be separated with a "," or ";".
2179   (if (looking-at "[ \t*&]*\\(\\(?:\\sw\\|\\s_\\)+\\)\\(::\\(\\(?:\\sw\\|\\s_\\)+\\)\\)?[ \t]*\\((\\)?")
2180       (save-match-data
2181         (condition-case nil
2182             (save-restriction
2183               ;; Restrict to the end of line, currently guaranteed to be LIMIT.
2184               (narrow-to-region (point-min) limit)
2185               (goto-char (match-end 1))
2186               ;; Move over any item value, etc., to the next item.
2187               (while (not (looking-at "[ \t]*\\([,;]\\|$\\)"))
2188                 (goto-char (or (scan-sexps (point) 1) (point-max))))
2189               (goto-char (match-end 0)))
2190           (error t)))))
2191
2192 (let ((c-keywords
2193 ;      ("break" "continue" "do" "else" "for" "if" "return" "switch" "while")
2194        "break\\|continue\\|do\\|else\\|for\\|if\\|return\\|switch\\|while")
2195       (c-type-types
2196 ;      ("auto" "extern" "register" "static" "typedef" "struct" "union" "enum"
2197 ;       "signed" "unsigned" "short" "long" "int" "char" "float" "double"
2198 ;       "void" "volatile" "const")
2199        (concat "auto\\|c\\(har\\|onst\\)\\|double\\|e\\(num\\|xtern\\)\\|"
2200                "float\\|int\\|long\\|register\\|"
2201                "s\\(hort\\|igned\\|t\\(atic\\|ruct\\)\\)\\|typedef\\|"
2202                "un\\(ion\\|signed\\)\\|vo\\(id\\|latile\\)"))   ; 6 ()s deep.
2203       (c++-keywords
2204 ;      ("break" "continue" "do" "else" "for" "if" "return" "switch" "while"
2205 ;       "asm" "catch" "delete" "new" "operator" "sizeof" "this" "throw" "try"
2206 ;       "protected" "private" "public" "const_cast" "dynamic_cast" "reinterpret_cast"
2207 ;       "static_cast" "and" "bitor" "or" "xor" "compl" "bitand" "and_eq"
2208 ;       "or_eq" "xor_eq" "not" "not_eq" "typeid" "false" "true")
2209        (concat "a\\(nd\\(\\|_eq\\)\\|sm\\)\\|"
2210                "b\\(it\\(or\\|and\\)\\|reak\\)\\|"
2211                "c\\(atch\\|o\\(mpl\\|n\\(tinue\\|st_cast\\)\\)\\)\\|"
2212                "d\\(elete\\|o\\|ynamic_cast\\)\\|"
2213                "else\\|"
2214                "f\\(alse\\|or\\)\\|if\\|"
2215                "n\\(ew\\|ot\\(\\|_eq\\)\\)\\|"
2216                "p\\(r\\(ivate\\|otected\\)\\|ublic\\)\\|"
2217                "or\\(\\|_eq\\)\\|"
2218                "re\\(interpret_cast\\|turn\\)\\|"
2219                "s\\(izeof\\|tatic_cast\\|witch\\)\\|"
2220                "t\\(h\\(is\\|row\\)\\|r\\(ue\\|y\\)\\|ypeid\\)\\|"
2221                "xor\\(\\|_eq\\)\\|while"))
2222       (c++-type-types
2223 ;      ("auto" "extern" "register" "static" "typedef" "struct" "union" "enum"
2224 ;       "signed" "unsigned" "short" "long" "int" "char" "float" "double"
2225 ;       "void" "volatile" "const" "class" "inline" "friend" "bool"
2226 ;       "virtual" "complex" "template" "explicit" "mutable" "export" "namespace"
2227 ;       "using" "typename" "wchar_t")
2228        (concat "auto\\|bool\\|c\\(har\\|lass\\|o\\(mplex\\|nst\\)\\)\\|"
2229                "double\\|"
2230                "e\\(num\\|x\\(p\\(licit\\|ort\\)\\|tern\\)\\)\\|"
2231                "f\\(loat\\|riend\\)\\|"
2232                "in\\(line\\|t\\)\\|long\\|mutable\\|namespace\\|register\\|"
2233                "s\\(hort\\|igned\\|t\\(atic\\|ruct\\)\\)\\|"
2234                "t\\(emplate\\|ype\\(def\\|name\\)\\)\\|"
2235                "u\\(\\(n\\(ion\\|signed\\)\\|sing\\)\\)\\|"
2236                "v\\(irtual\\|o\\(id\\|latile\\)\\)\\|"
2237                "wchar_t"))              ; 11 ()s deep.
2238       (ctoken "\\(\\sw\\|\\s_\\|[:~*&]\\)+")
2239       )
2240  (setq c-font-lock-keywords-1
2241   (list
2242    ;;
2243    ;; These are all anchored at the beginning of line for speed.
2244    ;;
2245    ;; Fontify function name definitions (GNU style; without type on line).
2246    
2247    ;; In FSF this has the simpler definition of "\\sw+" for ctoken.
2248    ;; I'm not sure if ours is more correct.
2249    ;; This is a subset of the next rule, and is slower when present. --dmoore
2250    ;; (list (concat "^\\(" ctoken "\\)[ \t]*(") 1 'font-lock-function-name-face)
2251    ;;
2252    ;; fontify the names of functions being defined.
2253    ;; FSF doesn't have this but I think it should be fast for us because
2254    ;; our regexp routines are more intelligent than FSF's about handling
2255    ;; anchored-at-newline. (When I added this hack in regex.c, it halved
2256    ;; the time to do the regexp phase of font-lock for a C file!) Not
2257    ;; including this discriminates against those who don't follow the
2258    ;; GNU coding style. --ben
2259    ;; x?x?x?y?z should always be: (x(xx?)?)?y?z --dmoore
2260    (list (concat
2261           "^\\("
2262           "\\(" ctoken "[ \t]+\\)"      ; type specs; there can be no
2263           "\\("
2264           "\\(" ctoken "[ \t]+\\)"      ; more than 3 tokens, right?
2265           "\\(" ctoken "[ \t]+\\)"
2266           "?\\)?\\)?"
2267           "\\([*&]+[ \t]*\\)?"          ; pointer
2268           "\\(" ctoken "\\)[ \t]*(")    ; name
2269          10 'font-lock-function-name-face)
2270    ;;
2271    ;; This is faster but not by much.  I don't see why not.
2272    ;(list (concat "^\\(" ctoken "\\)[ \t]*(") 1 'font-lock-function-name-face)
2273    ;;
2274    ;; Added next two; they're both jolly-good fastmatch candidates so
2275    ;; should be fast. --ben
2276    ;;
2277    ;; Fontify structure names (in structure definition form).
2278    (list (concat "^\\(typedef[ \t]+struct\\|struct\\|static[ \t]+struct\\)"
2279            "[ \t]+\\(" ctoken "\\)[ \t]*\\(\{\\|$\\)")
2280          2 'font-lock-function-name-face)
2281    ;;
2282    ;; Fontify case clauses.  This is fast because its anchored on the left.
2283    '("case[ \t]+\\(\\(\\sw\\|\\s_\\)+\\)[ \t]+:". 1)
2284    ;;
2285    '("\\<\\(default\\):". 1)
2286    ;; Fontify filenames in #include <...> preprocessor directives as strings.
2287    '("^#[ \t]*include[ \t]+\\(<[^>\"\n]+>\\)" 1 font-lock-string-face)
2288    ;;
2289    ;; Fontify function macro names.
2290    '("^#[ \t]*define[ \t]+\\(\\(\\sw+\\)(\\)" 2 font-lock-function-name-face)
2291    ;;
2292    ;; Fontify symbol names in #if ... defined preprocessor directives.
2293    '("^#[ \t]*if\\>"
2294      ("\\<\\(defined\\)\\>[ \t]*(?\\(\\sw+\\)?" nil nil
2295       (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t)))
2296    ;;
2297    ;; Fontify symbol names in #elif ... defined preprocessor directives.
2298    '("^#[ \t]*elif\\>"
2299      ("\\<\\(defined\\)\\>[ \t]*(?\\(\\sw+\\)?" nil nil
2300       (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t)))
2301    ;;
2302    ;; Fontify otherwise as symbol names, and the preprocessor directive names.
2303    '("^\\(#[ \t]*[a-z]+\\)\\>[ \t]*\\(\\sw+\\)?"
2304      (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t))
2305    ))
2306
2307  (setq c-font-lock-keywords-2
2308   (append c-font-lock-keywords-1
2309    (list
2310     ;;
2311     ;; Simple regexps for speed.
2312     ;;
2313     ;; Fontify all type specifiers.
2314     (cons (concat "\\<\\(" c-type-types "\\)\\>") 'font-lock-type-face)
2315     ;;
2316     ;; Fontify all builtin keywords (except case, default and goto; see below).
2317     (cons (concat "\\<\\(" c-keywords "\\)\\>") 'font-lock-keyword-face)
2318     ;;
2319     ;; Fontify case/goto keywords and targets, and case default/goto tags.
2320     '("\\<\\(case\\|goto\\)\\>[ \t]*\\([^ \t\n:;]+\\)?"
2321       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2322     '("^[ \t]*\\(\\sw+\\)[ \t]*:" 1 font-lock-reference-face)
2323     )))
2324
2325  (setq c-font-lock-keywords-3
2326   (append c-font-lock-keywords-2
2327    ;;
2328    ;; More complicated regexps for more complete highlighting for types.
2329    ;; We still have to fontify type specifiers individually, as C is so hairy.
2330    (list
2331     ;;
2332     ;; Fontify all storage classes and type specifiers, plus their items.
2333     (list (concat "\\<\\(" c-type-types "\\)\\>"
2334                   "\\([ \t*&]+\\sw+\\>\\)*")
2335           ;; Fontify each declaration item.
2336           '(font-lock-match-c++-style-declaration-item-and-skip-to-next
2337             ;; Start with point after all type specifiers.
2338             (goto-char (or (match-beginning 8) (match-end 1)))
2339             ;; Finish with point after first type specifier.
2340             (goto-char (match-end 1))
2341             ;; Fontify as a variable or function name.
2342             (1 (if (match-beginning 4)
2343                    font-lock-function-name-face
2344                  font-lock-variable-name-face))))
2345     ;;
2346     ;; Fontify structures, or typedef names, plus their items.
2347     '("\\(}\\)[ \t*]*\\sw"
2348       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2349        (goto-char (match-end 1)) nil
2350        (1 (if (match-beginning 4)
2351               font-lock-function-name-face
2352             font-lock-variable-name-face))))
2353     ;;
2354     ;; Fontify anything at beginning of line as a declaration or definition.
2355     '("^\\(\\sw+\\)\\>\\([ \t*]+\\sw+\\>\\)*"
2356       (1 font-lock-type-face)
2357       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2358        (goto-char (or (match-beginning 2) (match-end 1))) nil
2359        (1 (if (match-beginning 4)
2360               font-lock-function-name-face
2361             font-lock-variable-name-face))))
2362     )))
2363
2364  (setq c++-font-lock-keywords-1
2365   (append
2366    ;;
2367    ;; The list `c-font-lock-keywords-1' less that for function names.
2368    ;; the simple function form regexp has been removed. --dmoore
2369    ;;(cdr c-font-lock-keywords-1)
2370    c-font-lock-keywords-1
2371    ;;
2372    ;; Fontify function name definitions, possibly incorporating class name.
2373    (list
2374     '("^\\(\\sw+\\)\\(::\\(\\sw+\\)\\)?[ \t]*("
2375       (1 (if (match-beginning 2)
2376              font-lock-type-face
2377            font-lock-function-name-face))
2378       (3 (if (match-beginning 2) font-lock-function-name-face) nil t))
2379     )))
2380
2381  (setq c++-font-lock-keywords-2
2382   (append c++-font-lock-keywords-1
2383    (list
2384     ;;
2385     ;; The list `c-font-lock-keywords-2' for C++ plus operator overloading.
2386     (cons (concat "\\<\\(" c++-type-types "\\)\\>") 'font-lock-type-face)
2387     ;;
2388     ;; Fontify operator function name overloading.
2389     '("\\<\\(operator\\)\\>[ \t]*\\([][)(><!=+-][][)(><!=+-]?\\)?"
2390       (1 font-lock-keyword-face) (2 font-lock-function-name-face nil t))
2391     ;;
2392     ;; Fontify case/goto keywords and targets, and case default/goto tags.
2393     '("\\<\\(case\\|goto\\)\\>[ \t]*\\([^ \t\n:;]+\\)?"
2394       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2395     '("^[ \t]*\\(\\sw+\\)[ \t]*:[^:]" 1 font-lock-reference-face)
2396     ;;
2397     ;; Fontify other builtin keywords.
2398     (cons (concat "\\<\\(" c++-keywords "\\)\\>") 'font-lock-keyword-face)
2399     )))
2400
2401  (setq c++-font-lock-keywords-3
2402   (append c++-font-lock-keywords-2
2403    ;;
2404    ;; More complicated regexps for more complete highlighting for types.
2405    (list
2406     ;;
2407     ;; Fontify all storage classes and type specifiers, plus their items.
2408     (list (concat "\\<\\(" c++-type-types "\\)\\>"
2409                   "\\([ \t*&]+\\sw+\\>\\)*")
2410           ;; Fontify each declaration item.
2411           '(font-lock-match-c++-style-declaration-item-and-skip-to-next
2412             ;; Start with point after all type specifiers.
2413             (goto-char (or (match-beginning 13) (match-end 1)))
2414             ;; Finish with point after first type specifier.
2415             (goto-char (match-end 1))
2416             ;; Fontify as a variable or function name.
2417             (1 (cond ((match-beginning 2) 'font-lock-type-face)
2418                      ((match-beginning 4) 'font-lock-function-name-face)
2419                      (t 'font-lock-variable-name-face)))
2420             (3 (if (match-beginning 4)
2421                    'font-lock-function-name-face
2422                  'font-lock-variable-name-face) nil t)))
2423     ;;
2424     ;; Fontify structures, or typedef names, plus their items.
2425     '("\\(}\\)[ \t*]*\\sw"
2426       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2427        (goto-char (match-end 1)) nil
2428        (1 (if (match-beginning 4)
2429               font-lock-function-name-face
2430             font-lock-variable-name-face))))
2431     ;;
2432     ;; Fontify anything at beginning of line as a declaration or definition.
2433     '("^\\(\\sw+\\)\\>\\([ \t*]+\\sw+\\>\\)*"
2434       (1 font-lock-type-face)
2435       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2436        (goto-char (or (match-beginning 2) (match-end 1))) nil
2437        (1 (cond ((match-beginning 2) 'font-lock-type-face)
2438                 ((match-beginning 4) 'font-lock-function-name-face)
2439                 (t 'font-lock-variable-name-face)))
2440        (3 (if (match-beginning 4)
2441               'font-lock-function-name-face
2442             'font-lock-variable-name-face) nil t)))
2443     )))
2444  )
2445
2446 (defvar c-font-lock-keywords c-font-lock-keywords-1
2447   "Default expressions to highlight in C mode.")
2448
2449 (defvar c++-font-lock-keywords c++-font-lock-keywords-1
2450   "Default expressions to highlight in C++ mode.")
2451 \f
2452 ;;; Java.
2453
2454 ;; Java support has been written by XEmacs people, and it's apparently
2455 ;; totally divergent from the FSF.  I don't know if it's better or
2456 ;; worse, so I'm leaving it in until someone convinces me the FSF
2457 ;; version is better.  --hniksic
2458
2459 (defconst java-font-lock-keywords-1 nil
2460  "For consideration as a value of `java-font-lock-keywords'.
2461 This does fairly subdued highlighting.")
2462
2463 (defconst java-font-lock-keywords-2 nil
2464  "For consideration as a value of `java-font-lock-keywords'.
2465 This adds highlighting of types and identifier names.")
2466
2467 (defconst java-font-lock-keywords-3 nil
2468  "For consideration as a value of `java-font-lock-keywords'.
2469 This adds highlighting of Java documentation tags, such as @see.")
2470
2471 (defvar java-font-lock-type-regexp
2472   (concat "\\<\\(boolean\\|byte\\|char\\|double\\|float\\|int"
2473          "\\|long\\|short\\|void\\)\\>")
2474   "Regexp which should match a primitive type.")
2475
2476 (defvar java-font-lock-identifier-regexp
2477   (let ((letter "a-zA-Z_$\300-\326\330-\366\370-\377")
2478         (digit  "0-9"))
2479     (concat "\\<\\([" letter "][" letter digit "]*\\)\\>"))
2480   "Regexp which should match all Java identifiers.")
2481
2482 (defvar java-font-lock-class-name-regexp
2483   (let ((capital-letter "A-Z\300-\326\330-\337")
2484         (letter "a-zA-Z_$\300-\326\330-\366\370-\377")
2485         (digit  "0-9"))
2486     (concat "\\<\\([" capital-letter "][" letter digit "]*\\)\\>"))
2487   "Regexp which should match a class or an interface name.
2488 The name is assumed to begin with a capital letter.")
2489
2490 (let ((java-modifier-regexp
2491        (concat "\\<\\(abstract\\|const\\|final\\|native\\|"
2492                "private\\|protected\\|public\\|"
2493                "static\\|synchronized\\|transient\\|volatile\\)\\>")))
2494
2495   ;; Basic font-lock support:
2496   (setq java-font-lock-keywords-1
2497         (list
2498          ;; Keywords:
2499          (list        
2500           (concat
2501            "\\<\\("
2502            "break\\|byvalue\\|"
2503            "case\\|cast\\|catch\\|class\\|continue\\|"
2504            "do\\|else\\|extends\\|"
2505            "finally\\|for\\|future\\|"
2506            "generic\\|goto\\|"
2507            "if\\|implements\\|import\\|"
2508            "instanceof\\|interface\\|"
2509            "new\\|package\\|return\\|switch\\|"
2510            "throws?\\|try\\|while\\)\\>")
2511           1 'font-lock-keyword-face)
2512
2513          ;; Modifiers:
2514          (list java-modifier-regexp 1 font-lock-type-face)
2515
2516          ;; Special constants:
2517          '("\\<\\(this\\|super\\)\\>" (1 font-lock-reference-face))
2518          '("\\<\\(false\\|null\\|true\\)\\>" (1 font-lock-keyword-face))
2519
2520          ;; Class names:
2521          (list (concat "\\<\\(class\\|interface\\)\\>\\s *"
2522                        java-font-lock-identifier-regexp)
2523                2 'font-lock-function-name-face)
2524         
2525          ;; Package declarations:
2526          (list (concat "\\<\\(package\\|import\\)\\>\\s *"
2527                        java-font-lock-identifier-regexp)
2528                '(2 font-lock-reference-face)
2529                (list (concat
2530                       "\\=\\.\\(" java-font-lock-identifier-regexp "\\)")
2531                      nil nil '(1 (if (equal (char-after (match-end 0)) ?.)
2532                                      'font-lock-reference-face
2533                                    'font-lock-type-face))))
2534          
2535          ;; Constructors:
2536          (list (concat
2537                 "^\\s *\\(" java-modifier-regexp "\\s +\\)*"
2538                 java-font-lock-class-name-regexp "\\s *\(")
2539                (list 3
2540                      '(condition-case nil
2541                           (save-excursion
2542                             (goto-char (scan-sexps (- (match-end 0) 1) 1))
2543                             (parse-partial-sexp (point) (point-max) nil t)
2544                             (and (looking-at "\\($\\|\\<throws\\>\\|{\\)")
2545                                  'font-lock-function-name-face))
2546                         (error 'font-lock-function-name-face))))
2547
2548          ;; Methods:
2549          (list (concat "\\(" java-font-lock-type-regexp "\\|"
2550                        java-font-lock-class-name-regexp "\\)"
2551                        "\\s *\\(\\[\\s *\\]\\s *\\)*"
2552                        java-font-lock-identifier-regexp "\\s *\(")
2553                5
2554                'font-lock-function-name-face)
2555
2556          ;; Labels:
2557          (list ":"
2558                (list
2559                 (concat "^\\s *" java-font-lock-identifier-regexp "\\s *:")
2560                 '(beginning-of-line) '(end-of-line)
2561                 '(1 font-lock-reference-face)))
2562
2563          ;; `break' and continue' destination labels:
2564          (list (concat "\\<\\(break\\|continue\\)\\>\\s *"
2565                        java-font-lock-identifier-regexp)
2566                2 'font-lock-reference-face)
2567
2568          ;; Case statements:
2569          ;; In Java, any constant expression is allowed.
2570          '("\\<case\\>\\s *\\(.*\\):" 1 font-lock-reference-face)))
2571
2572   ;; Types and declared variable names:
2573   (setq java-font-lock-keywords-2
2574         (append 
2575
2576          java-font-lock-keywords-1
2577          (list
2578           ;; Keywords followed by a type:
2579           (list (concat "\\<\\(extends\\|instanceof\\|new\\)\\>\\s *"
2580                         java-font-lock-identifier-regexp)
2581                 '(2 (if (equal (char-after (match-end 0)) ?.)
2582                         'font-lock-reference-face 'font-lock-type-face))
2583                 (list (concat "\\=\\." java-font-lock-identifier-regexp)
2584                       '(goto-char (match-end 0)) nil
2585                       '(1 (if (equal (char-after (match-end 0)) ?.)
2586                               'font-lock-reference-face 'font-lock-type-face))))
2587
2588           ;; Keywords followed by a type list:
2589           (list (concat "\\<\\(implements\\|throws\\)\\>\\ s*"
2590                         java-font-lock-identifier-regexp)
2591                 '(2 (if (equal (char-after (match-end 0)) ?.)
2592                         font-lock-reference-face font-lock-type-face))
2593                 (list (concat "\\=\\(\\.\\|\\s *\\(,\\)\\s *\\)"
2594                               java-font-lock-identifier-regexp)
2595                       '(goto-char (match-end 0)) nil
2596                       '(3 (if (equal (char-after (match-end 0)) ?.)
2597                               font-lock-reference-face font-lock-type-face))))
2598
2599           ;; primitive types, can't be confused with anything else.
2600           (list java-font-lock-type-regexp
2601                 '(1 font-lock-type-face)
2602                 '(font-lock-match-java-declarations
2603                   (goto-char (match-end 0))
2604                   (goto-char (match-end 0))
2605                   (0 font-lock-variable-name-face)))
2606
2607           ;; Declarations, class types and capitalized variables:
2608           ;;
2609           ;; Declarations are easy to recognize.  Capitalized words
2610           ;; followed by a closing parenthesis are treated as casts if they
2611           ;; also are followed by an expression.  Expressions beginning with
2612           ;; a unary numerical operator, e.g. +, can't be cast to an object
2613           ;; type.
2614           ;;
2615           ;; The path of a fully qualified type, e.g. java.lang.Foo, is
2616           ;; fontified in the reference face.
2617           ;;
2618           ;; An access to a static field, e.g. System.out.println, is
2619           ;; not fontified since it can't be distinguished from the
2620           ;; usage of a capitalized variable, e.g. Foo.out.println.
2621
2622           (list (concat java-font-lock-class-name-regexp
2623                         "\\s *\\(\\[\\s *\\]\\s *\\)*"
2624                         "\\(\\<\\|$\\|)\\s *\\([\(\"]\\|\\<\\)\\)")
2625                 '(1 (save-match-data
2626                       (save-excursion
2627                         (goto-char
2628                          (match-beginning 3))
2629                         (if (not (looking-at "\\<instanceof\\>"))
2630                             'font-lock-type-face))))
2631                 (list (concat "\\=" java-font-lock-identifier-regexp "\\.")
2632                       '(progn
2633                          (goto-char (match-beginning 0))
2634                          (while (or (= (preceding-char) ?.)
2635                                     (= (char-syntax (preceding-char)) ?w))
2636                            (backward-char)))
2637                       '(goto-char (match-end 0))
2638                       '(1 font-lock-reference-face)
2639                       '(0 nil))         ; Workaround for bug in XEmacs.
2640                 '(font-lock-match-java-declarations
2641                   (goto-char (match-end 1))
2642                   (goto-char (match-end 0))
2643                   (1 font-lock-variable-name-face))))))
2644         
2645   ;; Modifier keywords and Java doc tags
2646   (setq java-font-lock-keywords-3
2647         (append
2648  
2649          '(
2650            ;; Feature scoping:
2651            ;; These must come first or the Modifiers from keywords-1 will
2652            ;; catch them.  We don't want to use override fontification here
2653            ;; because then these terms will be fontified within comments.
2654            ("\\<private\\>"   0 font-lock-string-face)
2655            ("\\<protected\\>" 0 font-lock-preprocessor-face)
2656            ("\\<public\\>"    0 font-lock-reference-face))
2657          java-font-lock-keywords-2
2658  
2659          (list
2660
2661           ;; Javadoc tags
2662           '("@\\(author\\|deprecated\\|exception\\|throws\\|param\\|return\\|see\\|since\\|version\\|serial\\|serialData\\|serialField\\)\\s "
2663             0 font-lock-keyword-face t)
2664
2665           ;; Doc tag - Parameter identifiers
2666           (list (concat "@param\\s +" java-font-lock-identifier-regexp)
2667                 1 'font-lock-variable-name-face t)
2668
2669           ;; Doc tag - Exception types
2670           (list (concat "@\\(exception\\|throws\\)\\s +"
2671                         java-font-lock-identifier-regexp)
2672                 '(2 (if (equal (char-after (match-end 0)) ?.)
2673                         font-lock-reference-face font-lock-type-face) t)
2674                 (list (concat "\\=\\." java-font-lock-identifier-regexp)
2675                       '(goto-char (match-end 0)) nil
2676                       '(1 (if (equal (char-after (match-end 0)) ?.)
2677                               'font-lock-reference-face 'font-lock-type-face) t)))
2678     
2679           ;; Doc tag - Cross-references, usually to methods 
2680           '("@see\\s +\\(\\S *[^][ \t\n\r\f(){},.;:]\\)"
2681             1 font-lock-function-name-face t)
2682     
2683           ;; Doc tag - docRoot (1.3)
2684           '("\\({ *@docRoot *}\\)"
2685             0 font-lock-keyword-face t)
2686           ;; Doc tag - beaninfo, unofficial but widely used, even by Sun
2687           '("\\(@beaninfo\\)"
2688             0 font-lock-keyword-face t)
2689           ;; Doc tag - Links
2690           '("{ *@link\\s +\\([^}]+\\)}"
2691             0 font-lock-keyword-face t)
2692           ;; Doc tag - Links
2693           '("{ *@link\\s +\\(\\(\\S +\\)\\|\\(\\S +\\s +\\S +\\)\\) *}"
2694             1 font-lock-function-name-face t)
2695     
2696           )))
2697   )
2698
2699 (defvar java-font-lock-keywords java-font-lock-keywords-1
2700   "Additional expressions to highlight in Java mode.")
2701
2702 ;; Match and move over any declaration/definition item after
2703 ;; point.  Does not match items which look like a type declaration
2704 ;; (primitive types and class names, i.e. capitalized words.)
2705 ;; Should the variable name be followed by a comma, we reposition
2706 ;; the cursor to fontify more identifiers.
2707 (defun font-lock-match-java-declarations (limit)
2708   "Match and skip over variable definitions."
2709   (if (looking-at "\\s *\\(\\[\\s *\\]\\s *\\)*")
2710       (goto-char (match-end 0)))
2711   (and
2712    (looking-at java-font-lock-identifier-regexp)
2713    (save-match-data
2714      (not (string-match java-font-lock-type-regexp
2715                         (buffer-substring (match-beginning 1)
2716                                           (match-end 1)))))
2717    (save-match-data
2718      (save-excursion
2719        (goto-char (match-beginning 1))
2720        (not (looking-at
2721              (concat java-font-lock-class-name-regexp
2722                      "\\s *\\(\\[\\s *\\]\\s *\\)*\\<")))))
2723    (save-match-data
2724      (condition-case nil
2725          (save-restriction
2726            (narrow-to-region (point-min) limit)
2727            (goto-char (match-end 0))
2728            ;; Note: Both `scan-sexps' and the second goto-char can
2729            ;; generate an error which is caught by the
2730            ;; `condition-case' expression.
2731            (while (not (looking-at "\\s *\\(\\(,\\)\\|;\\|$\\)"))
2732              (goto-char (or (scan-sexps (point) 1) (point-max))))
2733            (goto-char (match-end 2)))   ; non-nil
2734        (error t)))))
2735
2736
2737 (defvar tex-font-lock-keywords
2738 ;  ;; Regexps updated with help from Ulrik Dickow <dickow@nbi.dk>.
2739 ;  '(("\\\\\\(begin\\|end\\|newcommand\\){\\([a-zA-Z0-9\\*]+\\)}"
2740 ;     2 font-lock-function-name-face)
2741 ;    ("\\\\\\(cite\\|label\\|pageref\\|ref\\){\\([^} \t\n]+\\)}"
2742 ;     2 font-lock-reference-face)
2743 ;    ;; It seems a bit dubious to use `bold' and `italic' faces since we might
2744 ;    ;; not be able to display those fonts.
2745 ;    ("{\\\\bf\\([^}]+\\)}" 1 'bold keep)
2746 ;    ("{\\\\\\(em\\|it\\|sl\\)\\([^}]+\\)}" 2 'italic keep)
2747 ;    ("\\\\\\([a-zA-Z@]+\\|.\\)" . font-lock-keyword-face)
2748 ;    ("^[ \t\n]*\\\\def[\\\\@]\\(\\w+\\)" 1 font-lock-function-name-face keep))
2749   ;; Rewritten and extended for LaTeX2e by Ulrik Dickow <dickow@nbi.dk>.
2750   '(("\\\\\\(begin\\|end\\|newcommand\\){\\([a-zA-Z0-9\\*]+\\)}"
2751      2 font-lock-function-name-face)
2752     ("\\\\\\(cite\\|label\\|pageref\\|ref\\){\\([^} \t\n]+\\)}"
2753      2 font-lock-reference-face)
2754     ("^[ \t]*\\\\def\\\\\\(\\(\\w\\|@\\)+\\)" 1 font-lock-function-name-face)
2755     "\\\\\\([a-zA-Z@]+\\|.\\)"
2756     ;; It seems a bit dubious to use `bold' and `italic' faces since we might
2757     ;; not be able to display those fonts.
2758     ;; LaTeX2e: \emph{This is emphasized}.
2759     ("\\\\emph{\\([^}]+\\)}" 1 'italic keep)
2760     ;; LaTeX2e: \textbf{This is bold}, \textit{...}, \textsl{...}
2761     ("\\\\text\\(\\(bf\\)\\|it\\|sl\\){\\([^}]+\\)}"
2762      3 (if (match-beginning 2) 'bold 'italic) keep)
2763     ;; Old-style bf/em/it/sl. Stop at `\\' and un-escaped `&', for good tables.
2764     ("\\\\\\(\\(bf\\)\\|em\\|it\\|sl\\)\\>\\(\\([^}&\\]\\|\\\\[^\\]\\)+\\)"
2765      3 (if (match-beginning 2) 'bold 'italic) keep))
2766   "Default expressions to highlight in TeX modes.")
2767
2768 (defconst ksh-font-lock-keywords 
2769   (list
2770    '("\\(^\\|[^\$\\\]\\)#.*" . font-lock-comment-face)
2771    '("\\<\\(if\\|then\\|else\\|elif\\|fi\\|case\\|esac\\|for\\|do\\|done\\|foreach\\|in\\|end\\|select\\|while\\|repeat\\|time\\|function\\|until\\|exec\\|command\\|coproc\\|noglob\\|nohup\\|nocorrect\\|source\\|autoload\\|alias\\|unalias\\|export\\|set\\|echo\\|eval\\|cd\\|log\\|compctl\\)\\>" . font-lock-keyword-face)
2772    '("\\<\\[\\[.*\\]\\]\\>" . font-lock-type-face)
2773    '("\$\(.*\)" . font-lock-type-face)
2774    )
2775   "Additional expressions to highlight in ksh-mode.")
2776
2777 (defconst sh-font-lock-keywords 
2778   (list
2779    '("\\(^\\|[^\$\\\]\\)#.*" . font-lock-comment-face)
2780    '("\\<\\(if\\|then\\|else\\|elif\\|fi\\|case\\|esac\\|for\\|do\\|done\\|in\\|while\\|exec\\|export\\|set\\|echo\\|eval\\|cd\\)\\>" . font-lock-keyword-face)
2781    '("\\[.*\\]" . font-lock-type-face)
2782    '("`.*`" . font-lock-type-face)
2783    )
2784   "Additional expressions to highlight in sh-mode.")
2785
2786 \f
2787 ;; Install ourselves:
2788
2789 (add-hook 'find-file-hooks 'font-lock-set-defaults t)
2790
2791 ;;;###autoload
2792 (add-minor-mode 'font-lock-mode " Font")
2793
2794 ;; Provide ourselves:
2795
2796 (provide 'font-lock)
2797
2798 ;;; font-lock.el ends here