XEmacs 21.4.5 "Civil Service".
[chise/xemacs-chise.git.1] / lisp / font-lock.el
1 ;;; font-lock.el --- decorating source files with fonts/colors based on syntax
2
3 ;; Copyright (C) 1992-1995, 1997 Free Software Foundation, Inc.
4 ;; Copyright (C) 1995 Amdahl Corporation.
5 ;; Copyright (C) 1996, 2000, 2001 Ben Wing.
6
7 ;; Author: Jamie Zawinski <jwz@jwz.org>, for the LISPM Preservation Society.
8 ;; Minimally merged with FSF 19.34 by Barry Warsaw <bwarsaw@python.org>
9 ;; Then (partially) synched with FSF 19.30, leading to:
10 ;; Next Author: RMS
11 ;; Next Author: Simon Marshall <simon@gnu.ai.mit.edu>
12 ;; Latest XEmacs Author: Ben Wing
13 ;; Maintainer: XEmacs Development Team
14 ;; Keywords: languages, faces
15
16 ;; This file is part of XEmacs.
17
18 ;; XEmacs is free software; you can redistribute it and/or modify it
19 ;; under the terms of the GNU General Public License as published by
20 ;; the Free Software Foundation; either version 2, or (at your option)
21 ;; any later version.
22
23 ;; XEmacs is distributed in the hope that it will be useful, but
24 ;; WITHOUT ANY WARRANTY; without even the implied warranty of
25 ;; MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
26 ;; General Public License for more details.
27
28 ;; You should have received a copy of the GNU General Public License
29 ;; along with XEmacs; see the file COPYING.  If not, write to the 
30 ;; Free Software Foundation, Inc., 59 Temple Place - Suite 330,
31 ;; Boston, MA 02111-1307, USA.
32
33 ;;; Synched up with: FSF 19.30 except for the code to initialize the faces.
34
35 ;;; Commentary:
36
37 ;; Font-lock-mode is a minor mode that causes your comments to be
38 ;; displayed in one face, strings in another, reserved words in another,
39 ;; documentation strings in another, and so on.
40 ;;
41 ;; Comments will be displayed in `font-lock-comment-face'.
42 ;; Strings will be displayed in `font-lock-string-face'.
43 ;; Doc strings will be displayed in `font-lock-doc-string-face'.
44 ;; Function and variable names (in their defining forms) will be
45 ;;  displayed in `font-lock-function-name-face'.
46 ;; Reserved words will be displayed in `font-lock-keyword-face'.
47 ;;
48 ;; Don't let the name fool you: you can highlight things using different
49 ;; colors or background stipples instead of fonts, though that is not the
50 ;; default.  See the variables `font-lock-use-colors' and
51 ;; `font-lock-use-fonts' for broad control over this, or see the
52 ;; documentation on faces and how to change their attributes for
53 ;; fine-grained control.
54 ;;
55 ;; To make the text you type be fontified, use M-x font-lock-mode.  When
56 ;; this minor mode is on, the fonts of the current line will be updated
57 ;; with every insertion or deletion.
58 ;;
59 ;; By default, font-lock will automatically put newly loaded files
60 ;; into font-lock-mode if it knows about the file's mode.  See the
61 ;; variables `font-lock-auto-fontify', `font-lock-mode-enable-list',
62 ;; and `font-lock-mode-disable-list' for control over this.
63 ;;
64 ;; The `font-lock-keywords' variable defines other patterns to highlight.
65 ;; The default font-lock-mode-hook sets it to the value of the variables
66 ;; lisp-font-lock-keywords, c-font-lock-keywords, etc, as appropriate.
67 ;; The easiest way to change the highlighting patterns is to change the
68 ;; values of c-font-lock-keywords and related variables.  See the doc
69 ;; string of the variable `font-lock-keywords' for the appropriate syntax.
70 ;;
71 ;; The default value for `lisp-font-lock-keywords' is the value of the variable
72 ;; `lisp-font-lock-keywords-1'.  You may like `lisp-font-lock-keywords-2' 
73 ;; better; it highlights many more words, but is slower and makes your buffers
74 ;; be very visually noisy.
75 ;;
76 ;; The same is true of `c-font-lock-keywords-1' and `c-font-lock-keywords-2';
77 ;; the former is subdued, the latter is loud.
78 ;;
79 ;; You can make font-lock default to the gaudier variety of keyword
80 ;; highlighting by setting the variable `font-lock-maximum-decoration'
81 ;; before loading font-lock, or by calling the functions
82 ;; `font-lock-use-default-maximal-decoration' or
83 ;; `font-lock-use-default-minimal-decoration'.
84 ;;
85 ;; On a Sparc10, the initial fontification takes about 6 seconds for a typical
86 ;; 140k file of C code, using the default configuration.  The actual speed
87 ;; depends heavily on the type of code in the file, and how many non-syntactic
88 ;; patterns match; for example, Xlib.h takes 23 seconds for 101k, because many
89 ;; patterns match in it.  You can speed this up substantially by removing some
90 ;; of the patterns that are highlighted by default.  Fontifying lisp code is
91 ;; significantly faster, because lisp has a more regular syntax than C, so the
92 ;; regular expressions don't have to be as complicated.
93 ;;
94 ;; It's called font-lock-mode here because on the Lispms it was called
95 ;; "Electric Font Lock Mode."  It was called that because there was an older
96 ;; mode called "Electric Caps Lock Mode" which had the function of causing all
97 ;; of your source code to be in upper case except for strings and comments,
98 ;; without you having to blip the caps lock key by hand all the time (thus the
99 ;; "electric", as in `electric-c-brace'.)
100
101 ;; See also the related packages `fast-lock' and `lazy-lock'.  Both
102 ;; attempt to speed up the initial fontification.  `fast-lock' saves
103 ;; the fontification info when you exit Emacs and reloads it next time
104 ;; you load the file, so that the file doesn't have to be fontified
105 ;; again.  `lazy-lock' does "lazy" fontification -- i.e. it only
106 ;; fontifies the text as it becomes visible rather than fontifying
107 ;; the whole file when it's first loaded in.
108
109 ;; Further comments from the FSF:
110
111 ;; Nasty regexps of the form "bar\\(\\|lo\\)\\|f\\(oo\\|u\\(\\|bar\\)\\)\\|lo"
112 ;; are made thusly: (regexp-opt '("foo" "fu" "fubar" "bar" "barlo" "lo")) for
113 ;; efficiency.
114
115 ;; What is fontification for?  You might say, "It's to make my code look nice."
116 ;; I think it should be for adding information in the form of cues.  These cues
117 ;; should provide you with enough information to both (a) distinguish between
118 ;; different items, and (b) identify the item meanings, without having to read
119 ;; the items and think about it.  Therefore, fontification allows you to think
120 ;; less about, say, the structure of code, and more about, say, why the code
121 ;; doesn't work.  Or maybe it allows you to think less and drift off to sleep.
122 ;;
123 ;; So, here are my opinions/advice/guidelines:
124 ;; 
125 ;; - Use the same face for the same conceptual object, across all modes.
126 ;;   i.e., (b) above, all modes that have items that can be thought of as, say,
127 ;;   keywords, should be highlighted with the same face, etc.
128 ;; - Keep the faces distinct from each other as far as possible.
129 ;;   i.e., (a) above.
130 ;; - Make the face attributes fit the concept as far as possible.
131 ;;   i.e., function names might be a bold color such as blue, comments might
132 ;;   be a bright color such as red, character strings might be brown, because,
133 ;;   err, strings are brown (that was not the reason, please believe me).
134 ;; - Don't use a non-nil OVERRIDE unless you have a good reason.
135 ;;   Only use OVERRIDE for special things that are easy to define, such as the
136 ;;   way `...' quotes are treated in strings and comments in Emacs Lisp mode.
137 ;;   Don't use it to, say, highlight keywords in commented out code or strings.
138 ;; - Err, that's it.
139
140 \f
141 ;;; Code:
142
143 (require 'fontl-hooks)
144
145 ;;;;;;;;;;;;;;;;;;;;;;      user variables       ;;;;;;;;;;;;;;;;;;;;;;
146
147 (defgroup font-lock nil
148   "Decorate source files with fonts/colors based on syntax.
149 Font-lock-mode is a minor mode that causes your comments to be
150 displayed in one face, strings in another, reserved words in another,
151 documentation strings in another, and so on.
152
153 Comments will be displayed in `font-lock-comment-face'.
154 Strings will be displayed in `font-lock-string-face'.
155 Doc strings will be displayed in `font-lock-doc-string-face'.
156 Function and variable names (in their defining forms) will be displayed
157  in `font-lock-function-name-face'.
158 Reserved words will be displayed in `font-lock-keyword-face'.
159 Preprocessor conditionals will be displayed in `font-lock-preprocessor-face'."
160   :group 'languages)
161
162 (defgroup font-lock-faces nil
163   "Faces used by the font-lock package."
164   :group 'font-lock
165   :group 'faces)
166
167
168 (defcustom font-lock-verbose t
169   "*If non-nil, means show status messages when fontifying.
170 See also `font-lock-message-threshold'."
171   :type 'boolean
172   :group 'font-lock)
173
174 (defcustom font-lock-message-threshold 6000
175   "*Minimum size of region being fontified for status messages to appear.
176
177 The size is measured in characters.  This affects `font-lock-fontify-region'
178 but not `font-lock-fontify-buffer'. (In other words, when you first visit
179 a file and it gets fontified, you will see status messages no matter what
180 size the file is.  However, if you do something else like paste a
181 chunk of text, you will see status messages only if the changed region is
182 large enough.)
183
184 Note that setting `font-lock-verbose' to nil disables the status
185 messages entirely."
186   :type 'integer
187   :group 'font-lock)
188
189 ;;;###autoload
190 (defcustom font-lock-auto-fontify t
191   "*Whether font-lock should automatically fontify files as they're loaded.
192 This will only happen if font-lock has fontifying keywords for the major
193 mode of the file.  You can get finer-grained control over auto-fontification
194 by using this variable in combination with `font-lock-mode-enable-list' or
195 `font-lock-mode-disable-list'."
196   :type 'boolean
197   :group 'font-lock)
198
199 ;;;###autoload
200 (defcustom font-lock-mode-enable-list nil
201   "*List of modes to auto-fontify, if `font-lock-auto-fontify' is nil."
202   :type '(repeat (symbol :tag "Mode"))
203   :group 'font-lock)
204
205 ;;;###autoload
206 (defcustom font-lock-mode-disable-list nil
207   "*List of modes not to auto-fontify, if `font-lock-auto-fontify' is t."
208   :type '(repeat (symbol :tag "Mode"))
209   :group 'font-lock)
210
211 ;;;###autoload
212 (defcustom font-lock-use-colors '(color)
213   "*Specification for when Font Lock will set up color defaults.
214 Normally this should be '(color), meaning that Font Lock will set up
215 color defaults that are only used on color displays.  Set this to nil
216 if you don't want Font Lock to set up color defaults at all.  This
217 should be one of
218
219 -- a list of valid tags, meaning that the color defaults will be used
220    when all of the tags apply. (e.g. '(color x))
221 -- a list whose first element is 'or and whose remaining elements are
222    lists of valid tags, meaning that the defaults will be used when
223    any of the tag lists apply.
224 -- nil, meaning that the defaults should not be set up at all.
225
226 \(If you specify face values in your init file, they will override any
227 that Font Lock specifies, regardless of whether you specify the face
228 values before or after loading Font Lock.)
229
230 See also `font-lock-use-fonts'.  If you want more control over the faces
231 used for fontification, see the documentation of `font-lock-mode' for
232 how to do it."
233   ;; Hard to do right.
234   :type 'sexp
235   :group 'font-lock)
236
237 ;;;###autoload
238 (defcustom font-lock-use-fonts '(or (mono) (grayscale))
239   "*Specification for when Font Lock will set up non-color defaults.
240
241 Normally this should be '(or (mono) (grayscale)), meaning that Font
242 Lock will set up non-color defaults that are only used on either mono
243 or grayscale displays.  Set this to nil if you don't want Font Lock to
244 set up non-color defaults at all.  This should be one of
245
246 -- a list of valid tags, meaning that the non-color defaults will be used
247    when all of the tags apply. (e.g. '(grayscale x))
248 -- a list whose first element is 'or and whose remaining elements are
249    lists of valid tags, meaning that the defaults will be used when
250    any of the tag lists apply.
251 -- nil, meaning that the defaults should not be set up at all.
252
253 \(If you specify face values in your init file, they will override any
254 that Font Lock specifies, regardless of whether you specify the face
255 values before or after loading Font Lock.)
256
257 See also `font-lock-use-colors'.  If you want more control over the faces
258 used for fontification, see the documentation of `font-lock-mode' for
259 how to do it."
260   :type 'sexp
261   :group 'font-lock)
262
263 ;;;###autoload
264 (defcustom font-lock-maximum-decoration t
265   "*If non-nil, the maximum decoration level for fontifying.
266 If nil, use the minimum decoration (equivalent to level 0).
267 If t, use the maximum decoration available.
268 If a number, use that level of decoration (or if not available the maximum).
269 If a list, each element should be a cons pair of the form (MAJOR-MODE . LEVEL),
270 where MAJOR-MODE is a symbol or t (meaning the default).  For example:
271  ((c++-mode . 2) (c-mode . t) (t . 1))
272 means use level 2 decoration for buffers in `c++-mode', the maximum decoration
273 available for buffers in `c-mode', and level 1 decoration otherwise."
274   :type '(choice (const :tag "default" nil)
275                  (const :tag "maximum" t)
276                  (integer :tag "level" 1)
277                  (repeat :menu-tag "mode specific" :tag "mode specific"
278                          :value ((t . t))
279                          (cons :tag "Instance"
280                                (radio :tag "Mode"
281                                       (const :tag "all" t)
282                                       (symbol :tag "name"))
283                                (radio :tag "Decoration"
284                                       (const :tag "default" nil)
285                                       (const :tag "maximum" t) 
286                                       (integer :tag "level" 1)))))
287   :group 'font-lock)
288
289 ;;;###autoload
290 (define-obsolete-variable-alias 'font-lock-use-maximal-decoration
291   'font-lock-maximum-decoration)
292
293 ;;;###autoload
294 (defcustom font-lock-maximum-size (* 250 1024)
295   "*If non-nil, the maximum size for buffers for fontifying.
296 Only buffers less than this can be fontified when Font Lock mode is turned on.
297 If nil, means size is irrelevant.
298 If a list, each element should be a cons pair of the form (MAJOR-MODE . SIZE),
299 where MAJOR-MODE is a symbol or t (meaning the default).  For example:
300  ((c++-mode . 256000) (c-mode . 256000) (rmail-mode . 1048576))
301 means that the maximum size is 250K for buffers in `c++-mode' or `c-mode', one
302 megabyte for buffers in `rmail-mode', and size is irrelevant otherwise."
303   :type '(choice (const :tag "none" nil)
304                  (integer :tag "size")
305                  (repeat :menu-tag "mode specific" :tag "mode specific"
306                          :value ((t . nil))
307                          (cons :tag "Instance"
308                                (radio :tag "Mode"
309                                       (const :tag "all" t)
310                                       (symbol :tag "name"))
311                                (radio :tag "Size"
312                                       (const :tag "none" nil)
313                                       (integer :tag "size")))))
314   :group 'font-lock)
315
316 ;;;###autoload
317 (defcustom font-lock-fontify-string-delimiters nil
318   "*If non-nil, apply font-lock-string-face to string delimiters as well as
319 string text when fontifying."
320   :type 'boolean
321   :group 'font-lock)
322 \f
323 ;; Fontification variables:
324
325 ;;;###autoload
326 (defvar font-lock-keywords nil
327   "A list defining the keywords for `font-lock-mode' to highlight.
328
329  FONT-LOCK-KEYWORDS := List of FONT-LOCK-FORM's.
330
331  FONT-LOCK-FORM     :== MATCHER
332                       | (MATCHER . MATCH)
333                       | (MATCHER . FACE-FORM)
334                       | (MATCHER . HIGHLIGHT)
335                       | (MATCHER HIGHLIGHT ...)
336                       | (eval . FORM)
337
338  MATCHER            :== A string containing a regexp.
339                       | A variable containing a regexp to search for.
340                       | A function to call to make the search.
341                         It is called with one arg, the limit of the search,
342                         and should leave MATCH results in the XEmacs global
343                         match data.
344
345  MATCH              :== An integer match subexpression number from MATCHER.
346
347  FACE-FORM           :== The symbol naming a defined face.
348                       | Expression whos value is the face name to use.  If you
349                         want FACE-FORM to be a symbol that evaluates to a face,
350                         use a form like \"(progn sym)\".
351
352  HIGHLIGHT          :== MATCH-HIGHLIGHT
353                       | MATCH-ANCHORED
354
355  FORM               :== Expression returning a FONT-LOCK-FORM, evaluated when
356                         the FONT-LOCK-FORM is first used in a buffer.  This
357                         feature can be used to provide a FONT-LOCK-FORM that
358                         can only be generated when Font Lock mode is actually
359                         turned on.
360
361  MATCH-HIGHLIGHT    :== (MATCH FACE-FORM OVERRIDE LAXMATCH)
362
363  OVERRIDE           :== t        - overwrite existing fontification
364                       | 'keep    - only parts not already fontified are
365                                    highlighted.
366                       | 'prepend - merge faces, this fontification has
367                                    precedence over existing
368                       | 'append  - merge faces, existing fontification has
369                                    precedence over
370                                    this face.
371
372  LAXMATCH           :== If non-nil, no error is signalled if there is no MATCH
373                         in MATCHER.
374
375  MATCH-ANCHORED     :== (ANCHOR-MATCHER PRE-MATCH-FORM \\
376                                           POST-MATCH-FORM MATCH-HIGHLIGHT ...)
377
378  ANCHOR-MATCHER     :== Like a MATCHER, except that the limit of the search
379                         defaults to the end of the line after PRE-MATCH-FORM
380                         is evaluated.  However, if PRE-MATCH-FORM returns a
381                         position greater than the end of the line, that
382                         position is used as the limit of the search.  It is
383                         generally a bad idea to return a position greater than
384                         the end of the line, i.e., cause the ANCHOR-MATCHER
385                         search to span lines.
386
387  PRE-MATCH-FORM     :== Evaluated before the ANCHOR-MATCHER is used, therefore
388                         can be used to initialize before, ANCHOR-MATCHER is
389                         used.  Typically, PRE-MATCH-FORM is used to move to
390                         some position relative to the original MATCHER, before
391                         starting with the ANCHOR-MATCHER.
392
393  POST-MATCH-FORM    :== Like PRE-MATCH-FORM, but used to clean up after the
394                         ANCHOR-MATCHER.  It might be used to move, before
395                         resuming with MATCH-ANCHORED's parent's MATCHER.
396
397 For example, an element of the first form highlights (if not already highlighted):
398
399   \"\\\\\\=<foo\\\\\\=>\"                    Discrete occurrences of \"foo\" in the value
400                                  of the variable `font-lock-keyword-face'.
401
402   (\"fu\\\\(bar\\\\)\" . 1)            Substring \"bar\" within all occurrences of
403                                  \"fubar\" in the value of
404                                  `font-lock-keyword-face'.
405
406   (\"fubar\" . fubar-face)         Occurrences of \"fubar\" in the value of
407                                  `fubar-face'.
408
409   (\"foo\\\\|bar\" 0 foo-bar-face t) Occurrences of either \"foo\" or \"bar\" in the
410                                  value of `foo-bar-face', even if already
411                                  highlighted.
412
413   (fubar-match 1 fubar-face)     The first subexpression within all
414                                  occurrences of whatever the function
415                                  `fubar-match' finds and matches in the value
416                                  of `fubar-face'.
417
418   (\"\\\\\\=<anchor\\\\\\=>\" (0 anchor-face) (\"\\\\\\=<item\\\\\\=>\" nil nil (0 item-face)))
419    -------------- ---------------  ------------ --- --- -------------
420        |            |               |            |   |          |
421    MATCHER          |         ANCHOR-MATCHER     |   +------+ MATCH-HIGHLIGHT
422              MATCH-HIGHLIGHT                 PRE-MATCH-FORM |
423                                                            POST-MATCH-FORM
424
425   Discrete occurrences of \"anchor\" in the value of `anchor-face', and
426   subsequent discrete occurrences of \"item\" (on the same line) in the value
427   of `item-face'.  (Here PRE-MATCH-FORM and POST-MATCH-FORM are nil.
428   Therefore \"item\" is initially searched for starting from the end of the
429   match of \"anchor\", and searching for subsequent instance of \"anchor\"
430   resumes from where searching for \"item\" concluded.)
431
432 For highlighting single items, typically only MATCH-HIGHLIGHT is required.
433 However, if an item or (typically) several items are to be highlighted
434 following the instance of another item (the anchor) then MATCH-ANCHORED may be
435 required.
436
437 These regular expressions should not match text which spans lines.  While
438 \\[font-lock-fontify-buffer] handles multi-line patterns correctly, updating when you
439 edit the buffer does not, since it considers text one line at a time.
440
441 Be very careful composing regexps for this list; the wrong pattern can
442 dramatically slow things down!
443 ")
444 ;;;###autoload
445 (make-variable-buffer-local 'font-lock-keywords)
446
447 ;;;###autoload
448 (defvar font-lock-syntactic-keywords nil
449   "A list of the syntactic keywords to highlight.
450 Can be the list or the name of a function or variable whose value is the list.
451 See `font-lock-keywords' for a description of the form of this list;
452 the differences are listed below.  MATCH-HIGHLIGHT should be of the form:
453
454  (MATCH SYNTAX OVERRIDE LAXMATCH)
455
456 where SYNTAX can be of the form (SYNTAX-CODE . MATCHING-CHAR), the name of a
457 syntax table, or an expression whose value is such a form or a syntax table.
458 OVERRIDE cannot be `prepend' or `append'.
459
460 For example, an element of the form highlights syntactically:
461
462  (\"\\\\$\\\\(#\\\\)\" 1 (1 . nil))
463
464  a hash character when following a dollar character, with a SYNTAX-CODE of
465  1 (meaning punctuation syntax).  Assuming that the buffer syntax table does
466  specify hash characters to have comment start syntax, the element will only
467  highlight hash characters that do not follow dollar characters as comments
468  syntactically.
469
470  (\"\\\\('\\\\).\\\\('\\\\)\"
471   (1 (7 . ?'))
472   (2 (7 . ?')))
473
474  both single quotes which surround a single character, with a SYNTAX-CODE of
475  7 (meaning string quote syntax) and a MATCHING-CHAR of a single quote (meaning
476  a single quote matches a single quote).  Assuming that the buffer syntax table
477  does not specify single quotes to have quote syntax, the element will only
478  highlight single quotes of the form 'c' as strings syntactically.
479  Other forms, such as foo'bar or 'fubar', will not be highlighted as strings.
480
481 This is normally set via `font-lock-defaults'."
482 )
483 ;;;###autoload
484 (make-variable-buffer-local 'font-lock-syntactic-keywords)
485
486 (defvar font-lock-defaults nil
487   "The defaults font Font Lock mode for the current buffer.
488 Normally, do not set this directly.  If you are writing a major mode,
489 put a property of `font-lock-defaults' on the major-mode symbol with
490 the desired value.
491
492 It should be a list
493
494 \(KEYWORDS KEYWORDS-ONLY CASE-FOLD SYNTAX-ALIST SYNTAX-BEGIN)
495
496 KEYWORDS may be a symbol (a variable or function whose value is the keywords
497 to use for fontification) or a list of symbols.  If KEYWORDS-ONLY is non-nil,
498 syntactic fontification (strings and comments) is not performed.  If CASE-FOLD
499 is non-nil, the case of the keywords is ignored when fontifying.  If
500 SYNTAX-ALIST is non-nil, it should be a list of cons pairs of the form (CHAR
501 . STRING) used to set the local Font Lock syntax table, for keyword and
502 syntactic fontification (see `modify-syntax-entry').
503
504 If SYNTAX-BEGIN is non-nil, it should be a function with no args used to move
505 backwards outside any enclosing syntactic block, for syntactic fontification.
506 Typical values are `beginning-of-line' (i.e., the start of the line is known to
507 be outside a syntactic block), or `beginning-of-defun' for programming modes or
508 `backward-paragraph' for textual modes (i.e., the mode-dependent function is
509 known to move outside a syntactic block).  If nil, the beginning of the buffer
510 is used as a position outside of a syntactic block, in the worst case.
511
512 These item elements are used by Font Lock mode to set the variables
513 `font-lock-keywords', `font-lock-keywords-only',
514 `font-lock-keywords-case-fold-search', `font-lock-syntax-table' and
515 `font-lock-beginning-of-syntax-function', respectively.
516
517 Alternatively, if the value is a symbol, it should name a major mode,
518 and the defaults for that mode will apply.")
519 (make-variable-buffer-local 'font-lock-defaults)
520
521 ;; FSF uses `font-lock-defaults-alist' and expects the major mode to
522 ;; set a value for `font-lock-defaults', but I don't like either of
523 ;; these -- requiring the mode to set `font-lock-defaults' makes it
524 ;; impossible to have defaults for a minor mode, and using an alist is
525 ;; generally a bad idea for information that really should be
526 ;; decentralized. (Who knows what strange modes might want
527 ;; font-locking?)
528
529 (defvar font-lock-keywords-only nil
530   "Non-nil means Font Lock should not do syntactic fontification.
531 This is normally set via `font-lock-defaults'.
532
533 This should be nil for all ``language'' modes, but other modes, like
534 dired, do not have anything useful in the syntax tables (no comment
535 or string delimiters, etc) and so there is no need to use them and
536 this variable should have a value of t.
537
538 You should not set this variable directly; its value is computed
539 from `font-lock-defaults', or (if that does not specify anything)
540 by examining the syntax table to see whether it appears to contain
541 anything useful.")
542 (make-variable-buffer-local 'font-lock-keywords-only)
543
544 (defvar font-lock-keywords-case-fold-search nil
545   "Whether the strings in `font-lock-keywords' should be case-folded.
546 This variable is automatically buffer-local, as the correct value depends
547 on the language in use.")
548 (make-variable-buffer-local 'font-lock-keywords-case-fold-search)
549
550 (defvar font-lock-after-fontify-buffer-hook nil
551   "Function or functions to run after completion of font-lock-fontify-buffer.")
552
553 (defvar font-lock-syntax-table nil
554   "Non-nil means use this syntax table for fontifying.
555 If this is nil, the major mode's syntax table is used.
556 This is normally set via `font-lock-defaults'.")
557 (make-variable-buffer-local 'font-lock-syntax-table)
558
559 ;; These record the parse state at a particular position, always the start of a
560 ;; line.  Used to make `font-lock-fontify-syntactically-region' faster.
561 ;; Previously, `font-lock-cache-position' was just a buffer position.  However,
562 ;; under certain situations, this occasionally resulted in mis-fontification.
563 ;; I think the "situations" were deletion with Lazy Lock mode's deferral.  sm.
564 (defvar font-lock-cache-state nil)
565 (defvar font-lock-cache-position nil)
566 (make-variable-buffer-local 'font-lock-cache-state)
567 (make-variable-buffer-local 'font-lock-cache-position)
568
569 ;; If this is nil, we only use the beginning of the buffer if we can't use
570 ;; `font-lock-cache-position' and `font-lock-cache-state'.
571 (defvar font-lock-beginning-of-syntax-function nil
572   "Non-nil means use this function to move back outside of a syntactic block.
573 If this is nil, the beginning of the buffer is used (in the worst case).
574 This is normally set via `font-lock-defaults'.")
575 (make-variable-buffer-local 'font-lock-beginning-of-syntax-function)
576
577 (defvar font-lock-fontify-buffer-function 'font-lock-default-fontify-buffer
578   "Function to use for fontifying the buffer.
579 This is normally set via `font-lock-defaults'.")
580
581 (defvar font-lock-unfontify-buffer-function 'font-lock-default-unfontify-buffer
582   "Function to use for unfontifying the buffer.
583 This is used when turning off Font Lock mode.
584 This is normally set via `font-lock-defaults'.")
585
586 (defvar font-lock-fontify-region-function 'font-lock-default-fontify-region
587   "Function to use for fontifying a region.
588 It should take two args, the beginning and end of the region, and an optional
589 third arg VERBOSE.  If non-nil, the function should print status messages.
590 This is normally set via `font-lock-defaults'.")
591
592 (defvar font-lock-unfontify-region-function 'font-lock-default-unfontify-region
593   "Function to use for unfontifying a region.
594 It should take two args, the beginning and end of the region.
595 This is normally set via `font-lock-defaults'.")
596
597 (defvar font-lock-inhibit-thing-lock nil
598   "List of Font Lock mode related modes that should not be turned on.
599 Currently, valid mode names as `fast-lock-mode' and `lazy-lock-mode'.
600 This is normally set via `font-lock-defaults'.")
601
602 ;;;###autoload
603 (defcustom font-lock-mode nil ;; customized for the option menu. dverna
604   "Non nil means `font-lock-mode' is on"
605   :group 'font-lock
606   :type 'boolean
607   :initialize 'custom-initialize-default
608   :require 'font-lock
609   :set #'(lambda (var val) (font-lock-mode (or val 0)))
610   )
611
612 (defvar font-lock-fontified nil) ; whether we have hacked this buffer
613 (put 'font-lock-fontified 'permanent-local t)
614
615 ;;;###autoload
616 (defvar font-lock-mode-hook nil
617   "Function or functions to run on entry to font-lock-mode.")
618
619 ; whether font-lock-set-defaults has already been run.
620 (defvar font-lock-defaults-computed nil)
621 (make-variable-buffer-local 'font-lock-defaults-computed)
622
623 \f
624 ;;; Initialization of faces.
625
626 ;; #### barf gag retch.  Horrid FSF lossage that we need to
627 ;; keep around for compatibility with font-lock-keywords that
628 ;; forget to properly quote their faces.  I tried just let-binding
629 ;; them when we eval the face expression, but that failes because
630 ;; some files actually use the variables directly in their init code
631 ;; without quoting them. --ben
632 (defvar font-lock-comment-face 'font-lock-comment-face
633   "This variable should not be set.
634 It is present only for horrid FSF compatibility reasons.
635 The corresponding face should be set using `edit-faces' or the
636 `set-face-*' functions.")
637 (defvar font-lock-doc-string-face 'font-lock-doc-string-face
638   "This variable should not be set.
639 It is present only for horrid FSF compatibility reasons.
640 The corresponding face should be set using `edit-faces' or the
641 `set-face-*' functions.")
642 (defvar font-lock-string-face 'font-lock-string-face
643   "This variable should not be set.
644 It is present only for horrid FSF compatibility reasons.
645 The corresponding face should be set using `edit-faces' or the
646 `set-face-*' functions.")
647 (defvar font-lock-keyword-face 'font-lock-keyword-face
648   "This variable should not be set.
649 It is present only for horrid FSF compatibility reasons.
650 The corresponding face should be set using `edit-faces' or the
651 `set-face-*' functions.")
652 (defvar font-lock-function-name-face 'font-lock-function-name-face
653   "This variable should not be set.
654 It is present only for horrid FSF compatibility reasons.
655 The corresponding face should be set using `edit-faces' or the
656 `set-face-*' functions.")
657 (defvar font-lock-variable-name-face 'font-lock-variable-name-face
658   "This variable should not be set.
659 It is present only for horrid FSF compatibility reasons.
660 The corresponding face should be set using `edit-faces' or the
661 `set-face-*' functions.")
662 (defvar font-lock-type-face 'font-lock-type-face
663   "This variable should not be set.
664 It is present only for horrid FSF compatibility reasons.
665 The corresponding face should be set using `edit-faces' or the
666 `set-face-*' functions.")
667 (defvar font-lock-reference-face 'font-lock-reference-face
668   "This variable should not be set.
669 It is present only for horrid FSF compatibility reasons.
670 The corresponding face should be set using `edit-faces' or the
671 `set-face-*' functions.")
672 (defvar font-lock-preprocessor-face 'font-lock-preprocessor-face
673   "This variable should not be set.
674 It is present only for horrid FSF compatibility reasons.
675 The corresponding face should be set using `edit-faces' or the
676 `set-face-*' functions.")
677
678 (defconst font-lock-face-list
679   '(font-lock-comment-face
680     font-lock-string-face
681     font-lock-doc-string-face
682     font-lock-keyword-face
683     font-lock-function-name-face
684     font-lock-variable-name-face
685     font-lock-type-face
686     font-lock-reference-face
687     font-lock-preprocessor-face
688     font-lock-warning-face))
689
690 (defface font-lock-comment-face
691   '((((class color) (background dark)) (:foreground "gray80"))
692     ;; blue4 is hardly different from black on windows.
693     (((class color) (background light) (type mswindows)) (:foreground "blue"))
694     (((class color) (background light)) (:foreground "blue4"))
695     (((class grayscale) (background light))
696      (:foreground "DimGray" :bold t :italic t))
697     (((class grayscale) (background dark))
698      (:foreground "LightGray" :bold t :italic t))
699     (t (:bold t)))
700   "Font Lock mode face used to highlight comments."
701   :group 'font-lock-faces)
702
703 (defface font-lock-string-face
704   '((((class color) (background dark)) (:foreground "tan"))
705     (((class color) (background light)) (:foreground "green4"))
706     (((class grayscale) (background light)) (:foreground "DimGray" :italic t))
707     (((class grayscale) (background dark)) (:foreground "LightGray" :italic t))
708     (t (:bold t)))
709   "Font Lock mode face used to highlight strings."
710   :group 'font-lock-faces)
711
712 (defface font-lock-doc-string-face
713   '((((class color) (background dark)) (:foreground "light coral"))
714     (((class color) (background light)) (:foreground "green4"))
715     (t (:bold t)))
716   "Font Lock mode face used to highlight documentation strings.
717 This is currently supported only in Lisp-like modes, which are those
718 with \"lisp\" or \"scheme\" in their name.  You can explicitly make
719 a mode Lisp-like by putting a non-nil `font-lock-lisp-like' property
720 on the major mode's symbol."
721   :group 'font-lock-faces)
722
723 (defface font-lock-keyword-face
724   '((((class color) (background dark)) (:foreground "cyan"))
725     ;; red4 is hardly different from black on windows.
726     (((class color) (background light) (type mswindows)) (:foreground "red"))
727     (((class color) (background light)) (:foreground "red4"))
728     (((class grayscale) (background light)) (:foreground "LightGray" :bold t))
729     (((class grayscale) (background dark)) (:foreground "DimGray" :bold t))
730     (t (:bold t)))
731   "Font Lock mode face used to highlight keywords."
732   :group 'font-lock-faces)
733
734 (defface font-lock-function-name-face
735   '((((class color) (background dark)) (:foreground "aquamarine"))
736     ;; brown4 is hardly different from black on windows.
737     ;; I changed it to red because IMO it's pointless and ugly to
738     ;; use a million slightly different colors for niggly syntactic
739     ;; differences. --ben
740     (((class color) (background light) (type mswindows)) (:foreground "red"))
741     (((class color) (background light)) (:foreground "brown4"))
742     (t (:bold t :underline t)))
743   "Font Lock mode face used to highlight function names."
744   :group 'font-lock-faces)
745
746 (defface font-lock-variable-name-face
747   '((((class color) (background dark)) (:foreground "cyan3"))
748     (((class color) (background light)) (:foreground "magenta4"))
749     (((class grayscale) (background light))
750      (:foreground "Gray90" :bold t :italic t))
751     (((class grayscale) (background dark))
752      (:foreground "DimGray" :bold t :italic t))
753     (t (:underline t)))
754   "Font Lock mode face used to highlight variable names."
755   :group 'font-lock-faces)
756
757 (defface font-lock-type-face
758   '((((class color) (background dark)) (:foreground "wheat"))
759     (((class color) (background light)) (:foreground "steelblue"))
760     (((class grayscale) (background light)) (:foreground "Gray90" :bold t))
761     (((class grayscale) (background dark)) (:foreground "DimGray" :bold t))
762     (t (:bold t)))
763   "Font Lock mode face used to highlight types."
764   :group 'font-lock-faces)
765
766 (defface font-lock-reference-face
767   '((((class color) (background dark)) (:foreground "cadetblue2"))
768     (((class color) (background light)) (:foreground "red3"))
769     (((class grayscale) (background light))
770      (:foreground "LightGray" :bold t :underline t))
771     (((class grayscale) (background dark))
772      (:foreground "Gray50" :bold t :underline t)))
773   "Font Lock mode face used to highlight references."
774   :group 'font-lock-faces)
775
776 ;; #### FSF has font-lock-builtin-face.
777
778 (defface font-lock-preprocessor-face
779   '((((class color) (background dark)) (:foreground "steelblue1"))
780     (((class color) (background light)) (:foreground "blue3"))
781     (t (:underline t)))
782   "Font Lock Mode face used to highlight preprocessor conditionals."
783   :group 'font-lock-faces)
784
785 ;; #### Currently unused
786 (defface font-lock-warning-face
787   '((((class color) (background light)) (:foreground "Red" :bold t))
788     (((class color) (background dark)) (:foreground "Pink" :bold t))
789     (t (:inverse-video t :bold t)))
790   "Font Lock mode face used to highlight warnings."
791   :group 'font-lock-faces)
792
793 (defun font-lock-recompute-variables ()
794   ;; Is this a Draconian thing to do?
795   (mapc #'(lambda (buffer)
796             (with-current-buffer buffer
797               (font-lock-mode 0)
798               (font-lock-set-defaults t)))
799         (buffer-list)))
800
801 ;; Backwards-compatible crud.
802
803 (defun font-lock-reset-all-faces ()
804   (dolist (face font-lock-face-list)
805     (face-spec-set face (get face 'face-defface-spec))))
806
807 (defun font-lock-use-default-fonts ()
808   "Reset the font-lock faces to a default set of fonts."
809   (interactive)
810   ;; #### !!!!
811   (font-lock-reset-all-faces))
812
813 (defun font-lock-use-default-colors ()
814   "Reset the font-lock faces to a default set of colors."
815   (interactive)
816   ;; #### !!!!
817   (font-lock-reset-all-faces))
818
819 (defun font-lock-use-default-minimal-decoration ()
820   "Reset the font-lock patterns to a fast, minimal set of decorations."
821   (and font-lock-maximum-decoration
822        (setq font-lock-maximum-decoration nil)
823        (font-lock-recompute-variables)))
824
825 (defun font-lock-use-default-maximal-decoration ()
826   "Reset the font-lock patterns to a larger set of decorations."
827   (and (not (eq t font-lock-maximum-decoration))
828        (setq font-lock-maximum-decoration t)
829        (font-lock-recompute-variables)))
830
831 \f
832 ;;;;;;;;;;;;;;;;;;;;;;        actual code        ;;;;;;;;;;;;;;;;;;;;;;
833
834 ;;; To fontify the whole buffer by language syntax, we go through it a
835 ;;; character at a time, creating extents on the boundary of each syntactic
836 ;;; unit (that is, one extent for each block comment, one for each line
837 ;;; comment, one for each string, etc.)  This is done with the C function
838 ;;; syntactically-sectionize.  It's in C for speed (the speed of lisp function
839 ;;; calls was a real bottleneck for this task since it involves examining each
840 ;;; character in turn.)
841 ;;;
842 ;;; Then we make a second pass, to fontify the buffer based on other patterns
843 ;;; specified by regexp.  When we find a match for a region of text, we need
844 ;;; to change the fonts on those characters.  This is done with the
845 ;;; put-text-property function, which knows how to efficiently share extents.
846 ;;; Conceptually, we are attaching some particular face to each of the
847 ;;; characters in a range, but the implementation of this involves creating
848 ;;; extents, or resizing existing ones.
849 ;;;
850 ;;; Each time a modification happens to a line, we re-fontify the entire line.
851 ;;; We do this by first removing the extents (text properties) on the line,
852 ;;; and then doing the syntactic and keyword passes again on that line.  (More
853 ;;; generally, each modified region is extended to include the preceding and
854 ;;; following BOL or EOL.)
855 ;;;
856 ;;; This means that, as the user types, we repeatedly go back to the beginning
857 ;;; of the line, doing more work the longer the line gets.  This doesn't cost
858 ;;; much in practice, and if we don't, then we incorrectly fontify things when,
859 ;;; for example, inserting spaces into `intfoo () {}'.
860 ;;;
861
862 \f
863 ;; The user level functions
864
865 ;;;###autoload
866 (defun font-lock-mode (&optional arg)
867   "Toggle Font Lock Mode.
868 With arg, turn font-lock mode on if and only if arg is positive.
869
870 When Font Lock mode is enabled, text is fontified as you type it:
871
872  - Comments are displayed in `font-lock-comment-face';
873  - Strings are displayed in `font-lock-string-face';
874  - Documentation strings (in Lisp-like languages) are displayed in
875    `font-lock-doc-string-face';
876  - Language keywords (\"reserved words\") are displayed in
877    `font-lock-keyword-face';
878  - Function names in their defining form are displayed in
879    `font-lock-function-name-face';
880  - Variable names in their defining form are displayed in
881    `font-lock-variable-name-face';
882  - Type names are displayed in `font-lock-type-face';
883  - References appearing in help files and the like are displayed
884    in `font-lock-reference-face';
885  - Preprocessor declarations are displayed in
886   `font-lock-preprocessor-face';
887
888    and
889
890  - Certain other expressions are displayed in other faces according
891    to the value of the variable `font-lock-keywords'.
892
893 Where modes support different levels of fontification, you can use the variable
894 `font-lock-maximum-decoration' to specify which level you generally prefer.
895 When you turn Font Lock mode on/off the buffer is fontified/defontified, though
896 fontification occurs only if the buffer is less than `font-lock-maximum-size'.
897 To fontify a buffer without turning on Font Lock mode, and regardless of buffer
898 size, you can use \\[font-lock-fontify-buffer].
899
900 See the variable `font-lock-keywords' for customization."
901   (interactive "P")
902   (let ((on-p (if arg (> (prefix-numeric-value arg) 0) (not font-lock-mode)))
903         (maximum-size (if (not (consp font-lock-maximum-size))
904                           font-lock-maximum-size
905                         (cdr (or (assq major-mode font-lock-maximum-size)
906                                  (assq t font-lock-maximum-size))))))
907     ;; Font-lock mode will refuse to turn itself on if in batch mode
908     ;; to avoid potential (probably not actual, though) slowdown.  We
909     ;; used to try to "be nice" by avoiding doing this in temporary
910     ;; buffers.  But with the deferral code we don't need this, and it
911     ;; definitely screws some things up.
912     (if (noninteractive)
913         (setq on-p nil))
914     (cond (on-p
915            (make-local-hook 'after-change-functions)
916            (add-hook 'after-change-functions
917                      'font-lock-after-change-function nil t)
918            (add-hook 'pre-idle-hook 'font-lock-pre-idle-hook))
919           (t
920            (remove-hook 'after-change-functions
921                         'font-lock-after-change-function t)
922            (setq font-lock-defaults-computed nil
923                  font-lock-keywords nil)
924            ;; We have no business doing this here, since 
925            ;; pre-idle-hook is global.  Other buffers may
926            ;; still be in font-lock mode.  -dkindred@cs.cmu.edu
927            ;; (remove-hook 'pre-idle-hook 'font-lock-pre-idle-hook)
928            ))
929     (set (make-local-variable 'font-lock-mode) on-p)
930     (cond (on-p
931            (font-lock-set-defaults-1)
932            (run-hooks 'font-lock-mode-hook)
933            (cond (font-lock-fontified
934                   nil)
935                  ((or (null maximum-size) (<= (buffer-size) maximum-size))
936                   (font-lock-fontify-buffer))
937                  (font-lock-verbose
938                   (progress-feedback-with-label
939                    'font-lock
940                    "Fontifying %s... buffer too big." 'abort
941                    (buffer-name)))))
942           (font-lock-fontified
943            (setq font-lock-fontified nil)
944            (font-lock-unfontify-region (point-min) (point-max))
945            (font-lock-thing-lock-cleanup))
946           (t
947            (font-lock-thing-lock-cleanup)))
948     (redraw-modeline)))
949
950 ;; For init-file hooks
951 ;;;###autoload
952 (defun turn-on-font-lock ()
953   "Unconditionally turn on Font Lock mode."
954   (interactive)
955   (font-lock-mode 1))
956
957 ;;;###autoload
958 (defun turn-off-font-lock ()
959   "Unconditionally turn off Font Lock mode."
960   (interactive)
961   (font-lock-mode 0))
962
963 ;;; FSF has here:
964
965 ;; support for add-keywords, global-font-lock-mode and
966 ;; font-lock-support-mode (unified support for various *-lock modes).
967
968 \f
969 ;; Fontification functions.
970
971 ;; We first define some defsubsts to encapsulate the way we add
972 ;; faces to a region of text.  I am planning on modifying the
973 ;; text-property mechanism so that multiple independent classes
974 ;; of text properties can exist.  That way, for example, ediff's
975 ;; face text properties don't interfere with font lock's face
976 ;; text properties.  Due to the XEmacs implementation of text
977 ;; properties in terms of extents, doing this is fairly trivial:
978 ;; instead of using the `text-prop' property, you just use a
979 ;; specified property.
980
981 (defsubst font-lock-set-face (start end face)
982   ;; Set the face on the characters in the range.
983   (put-nonduplicable-text-property start end 'face face)
984   (put-nonduplicable-text-property start end 'font-lock t))
985
986 (defsubst font-lock-remove-face (start end)
987   ;; Remove any syntax highlighting on the characters in the range.
988   (put-nonduplicable-text-property start end 'face nil)
989   (put-nonduplicable-text-property start end 'font-lock nil)
990   (if lookup-syntax-properties
991       (put-nonduplicable-text-property start end 'syntax-table nil)))
992
993 (defsubst font-lock-set-syntax (start end syntax)
994   ;; Set the face on the characters in the range.
995   (put-nonduplicable-text-property start end 'syntax-table syntax)
996   (put-nonduplicable-text-property start end 'font-lock t))
997
998 (defsubst font-lock-any-faces-p (start end)
999   ;; Return non-nil if we've put any syntax highlighting on
1000   ;; the characters in the range.
1001   ;;
1002   ;; used to look for 'text-prop property, but this has problems if
1003   ;; you put any other text properties in the vicinity.  Simon
1004   ;; Marshall suggested looking for the 'face property (this is what
1005   ;; FSF Emacs does) but that's equally bogus.  Only reliable way is
1006   ;; for font-lock to specially mark its extents.
1007   ;;
1008   ;; FSF's (equivalent) definition of this defsubst would be
1009   ;; (text-property-not-all start end 'font-lock nil)
1010   ;;
1011   ;; Perhaps our `map-extents' is faster than our definition
1012   ;; of `text-property-not-all'.  #### If so, `text-property-not-all'
1013   ;; should be fixed ...
1014   ;;
1015   (map-extents 'extent-property (current-buffer) start (1- end) 'font-lock))
1016
1017 \f
1018 ;; Fontification functions.
1019
1020 ;; Rather than the function, e.g., `font-lock-fontify-region' containing the
1021 ;; code to fontify a region, the function runs the function whose name is the
1022 ;; value of the variable, e.g., `font-lock-fontify-region-function'.  Normally,
1023 ;; the value of this variable is, e.g., `font-lock-default-fontify-region'
1024 ;; which does contain the code to fontify a region.  However, the value of the
1025 ;; variable could be anything and thus, e.g., `font-lock-fontify-region' could
1026 ;; do anything.  The indirection of the fontification functions gives major
1027 ;; modes the capability of modifying the way font-lock.el fontifies.  Major
1028 ;; modes can modify the values of, e.g., `font-lock-fontify-region-function',
1029 ;; via the variable `font-lock-defaults'.
1030 ;;
1031 ;; For example, Rmail mode sets the variable `font-lock-defaults' so that
1032 ;; font-lock.el uses its own function for buffer fontification.  This function
1033 ;; makes fontification be on a message-by-message basis and so visiting an
1034 ;; RMAIL file is much faster.  A clever implementation of the function might
1035 ;; fontify the headers differently than the message body.  (It should, and
1036 ;; correspondingly for Mail mode, but I can't be bothered to do the work.  Can
1037 ;; you?)  This hints at a more interesting use...
1038 ;;
1039 ;; Languages that contain text normally contained in different major modes
1040 ;; could define their own fontification functions that treat text differently
1041 ;; depending on its context.  For example, Perl mode could arrange that here
1042 ;; docs are fontified differently than Perl code.  Or Yacc mode could fontify
1043 ;; rules one way and C code another.  Neat!
1044 ;;
1045 ;; A further reason to use the fontification indirection feature is when the
1046 ;; default syntactual fontification, or the default fontification in general,
1047 ;; is not flexible enough for a particular major mode.  For example, perhaps
1048 ;; comments are just too hairy for `font-lock-fontify-syntactically-region' to
1049 ;; cope with.  You need to write your own version of that function, e.g.,
1050 ;; `hairy-fontify-syntactically-region', and make your own version of
1051 ;; `hairy-fontify-region' call that function before calling
1052 ;; `font-lock-fontify-keywords-region' for the normal regexp fontification
1053 ;; pass.  And Hairy mode would set `font-lock-defaults' so that font-lock.el
1054 ;; would call your region fontification function instead of its own.  For
1055 ;; example, TeX modes could fontify {\foo ...} and \bar{...}  etc. multi-line
1056 ;; directives correctly and cleanly.  (It is the same problem as fontifying
1057 ;; multi-line strings and comments; regexps are not appropriate for the job.)
1058
1059 ;;;###autoload
1060 (defun font-lock-fontify-buffer ()
1061   "Fontify the current buffer the way `font-lock-mode' would.
1062 See `font-lock-mode' for details.
1063
1064 This can take a while for large buffers."
1065   (interactive)
1066   (let ((font-lock-verbose (or font-lock-verbose (interactive-p))))
1067     (funcall font-lock-fontify-buffer-function)))
1068
1069 (defun font-lock-unfontify-buffer ()
1070   (funcall font-lock-unfontify-buffer-function))
1071
1072 (defun font-lock-fontify-region (beg end &optional loudly)
1073   (funcall font-lock-fontify-region-function beg end loudly))
1074
1075 (defun font-lock-unfontify-region (beg end &optional loudly)
1076   (funcall font-lock-unfontify-region-function beg end loudly))
1077
1078 (defun font-lock-default-fontify-buffer ()
1079   (interactive)
1080   ;; if we don't widen, then the C code will fail to
1081   ;; realize that we're inside a comment.
1082   (save-restriction
1083     (widen)
1084     (let ((was-on font-lock-mode)
1085           (font-lock-verbose (or font-lock-verbose (interactive-p)))
1086           (font-lock-message-threshold 0)
1087           (aborted nil))
1088       ;; Turn it on to run hooks and get the right font-lock-keywords.
1089       (or was-on (font-lock-mode 1))
1090       (font-lock-unfontify-region (point-min) (point-max) t)
1091       ;;    (buffer-syntactic-context-flush-cache)
1092     
1093       ;; If a ^G is typed during fontification, abort the fontification, but
1094       ;; return normally (do not signal.)  This is to make it easy to abort
1095       ;; fontification if it's taking a long time, without also causing the
1096       ;; buffer not to pop up.  If a real abort is desired, the user can ^G
1097       ;; again.
1098       ;;
1099       ;; Possibly this should happen down in font-lock-fontify-region instead
1100       ;; of here, but since that happens from the after-change-hook (meaning
1101       ;; much more frequently) I'm afraid of the bad consequences of stealing
1102       ;; the interrupt character at inopportune times.
1103       ;;
1104       (condition-case nil
1105           (save-excursion
1106             (font-lock-fontify-region (point-min) (point-max)))
1107         (t
1108          (setq aborted t)))
1109
1110       (or was-on                        ; turn it off if it was off.
1111           (let ((font-lock-fontified nil)) ; kludge to prevent defontification
1112             (font-lock-mode 0)))
1113       (set (make-local-variable 'font-lock-fontified) t)
1114       (when (and aborted font-lock-verbose)
1115         (progress-feedback-with-label 'font-lock "Fontifying %s... aborted."
1116                                       'abort (buffer-name))))
1117     (run-hooks 'font-lock-after-fontify-buffer-hook)))
1118
1119 (defun font-lock-default-unfontify-buffer ()
1120   (font-lock-unfontify-region (point-min) (point-max))
1121   (set (make-local-variable 'font-lock-fontified) nil))
1122
1123 ;; This used to be `font-lock-fontify-region', and before that,
1124 ;; `font-lock-fontify-region' used to be the name used for what is now
1125 ;; `font-lock-fontify-syntactically-region'.
1126 (defun font-lock-default-fontify-region (beg end &optional loudly)
1127   (let ((modified (buffer-modified-p))
1128         (buffer-undo-list t) (inhibit-read-only t)
1129         (old-syntax-table (syntax-table))
1130         buffer-file-name buffer-file-truename)
1131     (unwind-protect
1132         (progn
1133           ;; Use the fontification syntax table, if any.
1134           (if font-lock-syntax-table (set-syntax-table font-lock-syntax-table))
1135           ;; Now do the fontification.
1136           (font-lock-unfontify-region beg end)
1137           (when font-lock-syntactic-keywords
1138             (font-lock-fontify-syntactic-keywords-region beg end))
1139           (unless font-lock-keywords-only
1140             (font-lock-fontify-syntactically-region beg end loudly))
1141           (font-lock-fontify-keywords-region beg end loudly))
1142       ;; Clean up.
1143       (set-syntax-table old-syntax-table)
1144       (and (not modified) (buffer-modified-p) (set-buffer-modified-p nil)))))
1145
1146 ;; The following must be rethought, since keywords can override fontification.
1147 ;      ;; Now scan for keywords, but not if we are inside a comment now.
1148 ;      (or (and (not font-lock-keywords-only)
1149 ;              (let ((state (parse-partial-sexp beg end nil nil 
1150 ;                                               font-lock-cache-state)))
1151 ;                (or (nth 4 state) (nth 7 state))))
1152 ;         (font-lock-fontify-keywords-region beg end))
1153
1154 (defun font-lock-default-unfontify-region (beg end &optional maybe-loudly)
1155   (when (and maybe-loudly font-lock-verbose
1156              (>= (- end beg) font-lock-message-threshold))
1157     (progress-feedback-with-label 'font-lock "Fontifying %s..." 0
1158                                   (buffer-name)))
1159   (let ((modified (buffer-modified-p))
1160         (buffer-undo-list t) (inhibit-read-only t)
1161         buffer-file-name buffer-file-truename)
1162     (font-lock-remove-face beg end)
1163     (and (not modified) (buffer-modified-p) (set-buffer-modified-p nil))))
1164
1165 ;; Following is the original FSF version (similar to our original
1166 ;; version, before the deferred stuff was added).
1167 ;;
1168 ;; I think that lazy-lock v2 tries to do something similar.
1169 ;; Those efforts should be merged.
1170
1171 ;; Called when any modification is made to buffer text.
1172 ;(defun font-lock-after-change-function (beg end old-len)
1173 ;  (save-excursion
1174 ;    (save-match-data
1175 ;      ;; Rescan between start of line from `beg' and start of line after `end'.
1176 ;      (font-lock-fontify-region
1177 ;       (progn (goto-char beg) (beginning-of-line) (point))
1178 ;       (progn (goto-char end) (forward-line 1) (point))))))
1179
1180 (defvar font-lock-always-fontify-immediately nil
1181   "Set this to non-nil to disable font-lock deferral.
1182 Otherwise, changes to existing text will not be processed until the
1183 next redisplay cycle, avoiding excessive fontification when many
1184 buffer modifications are performed or a buffer is reverted.")
1185
1186 ;; list of buffers in which there is a pending change.
1187 (defvar font-lock-pending-buffer-table (make-hash-table :weakness 'key))
1188 ;; table used to keep track of ranges needing fontification.
1189 (defvar font-lock-range-table (make-range-table))
1190
1191 (defun font-lock-pre-idle-hook ()
1192   (condition-case font-lock-error
1193       (if (> (hash-table-count font-lock-pending-buffer-table) 0)
1194           (font-lock-fontify-pending-extents))
1195     (error (warn "Error caught in `font-lock-pre-idle-hook': %s"
1196                  font-lock-error))))
1197
1198 ;;; called when any modification is made to buffer text.  This function
1199 ;;; remembers the changed ranges until the next redisplay, at which point
1200 ;;; the extents are merged and pruned, and the resulting ranges fontified.
1201 ;;; This function could easily be adapted to other after-change-functions.
1202
1203 (defun font-lock-after-change-function (beg end old-len)
1204   (when font-lock-mode
1205     ;; treat deletions as if the following character (or previous, if
1206     ;; there is no following) were inserted. (also use the previous
1207     ;; character at end of line.  this avoids a problem when you
1208     ;; insert a comment on the line before a line of code: if we use
1209     ;; the following char, then when you hit backspace, the following
1210     ;; line of code turns the comment color.) this is a bit of a hack
1211     ;; but allows us to use text properties for everything.
1212     (if (= beg end)
1213         (cond ((not (save-excursion (goto-char end) (eolp)))
1214                (setq end (1+ end)))
1215               ((/= beg (point-min)) (setq beg (1- beg)))
1216               (t nil)))
1217     (put-text-property beg end 'font-lock-pending t)
1218     (puthash (current-buffer) t font-lock-pending-buffer-table)
1219     (if font-lock-always-fontify-immediately
1220         (font-lock-fontify-pending-extents))))
1221
1222 (defun font-lock-fontify-pending-extents ()
1223   ;; ah, the beauty of mapping functions.
1224   ;; this function is actually shorter than the old version, which handled
1225   ;; only one buffer and one contiguous region!
1226   (save-match-data
1227     (maphash
1228      #'(lambda (buffer dummy)
1229          ;; remove first, to avoid infinite reprocessing if error
1230          (remhash buffer font-lock-pending-buffer-table)
1231          (when (buffer-live-p buffer)
1232            (clear-range-table font-lock-range-table)
1233            (with-current-buffer buffer
1234              (save-excursion
1235                (save-restriction
1236                  ;; if we don't widen, then the C code in
1237                  ;; syntactically-sectionize will fail to realize that
1238                  ;; we're inside a comment. #### We don't actually use
1239                  ;; syntactically-sectionize any more.  Do we still
1240                  ;; need the widen?
1241                  (widen)
1242                  (let ((zmacs-region-stays
1243                         zmacs-region-stays)) ; protect from change!
1244                    (map-extents
1245                     #'(lambda (ex dummy-maparg)
1246                         ;; first expand the ranges to full lines,
1247                         ;; because that is what will be fontified;
1248                         ;; then use a range table to merge the
1249                         ;; ranges. (we could also do this simply using
1250                         ;; text properties.  the range table code was
1251                         ;; here from a previous version of this code
1252                         ;; and works just as well.)
1253                         (let* ((beg (extent-start-position ex))
1254                                (end (extent-end-position ex))
1255                                (beg (progn (goto-char beg)
1256                                            (beginning-of-line)
1257                                            (point)))
1258                                (end (progn (goto-char end)
1259                                            (forward-line 1)
1260                                            (point))))
1261                           (put-range-table beg end t
1262                                            font-lock-range-table)))
1263                     nil nil nil nil nil 'font-lock-pending t)
1264                    ;; clear all pending extents first in case of error below.
1265                    (put-text-property (point-min) (point-max)
1266                                       'font-lock-pending nil)
1267                    (map-range-table
1268                     #'(lambda (beg end val)
1269                         ;; This creates some unnecessary progress gauges.
1270 ;;                      (if (and (= beg (point-min))
1271 ;;                               (= end (point-max)))
1272 ;;                          (font-lock-fontify-buffer)
1273 ;;                        (font-lock-fontify-region beg end)))
1274                         (font-lock-fontify-region beg end))
1275                     font-lock-range-table)))))))
1276      font-lock-pending-buffer-table)))
1277 \f
1278 ;; Syntactic fontification functions.
1279
1280 (defun font-lock-lisp-like (mode)
1281   ;; Note: (or (get mode 'font-lock-lisp-like) (string-match ...)) is
1282   ;; not enough because the property needs to be able to specify a nil
1283   ;; value.
1284   (if (plist-member (symbol-plist mode) 'font-lock-lisp-like)
1285       (get mode 'font-lock-lisp-like)
1286     ;; If the property is not specified, guess.  Similar logic exists
1287     ;; in add-log, but I think this encompasses more modes.
1288     (string-match "lisp\\|scheme" (symbol-name mode))))
1289
1290 ;; fontify-syntactically-region used to use syntactically-sectionize, which
1291 ;; was supposedly much faster than the FSF version because it was written in
1292 ;; C. However, the FSF version uses parse-partial-sexp, which is also
1293 ;; written in C, and the benchmarking I did showed the
1294 ;; syntactically-sectionize code to be slower overall. So here's the FSF
1295 ;; version, modified to support font-lock-doc-string-face.
1296 ;; -- mct 2000-12-29
1297 (defun font-lock-fontify-syntactically-region (start end &optional loudly)
1298   "Put proper face on each string and comment between START and END.
1299 START should be at the beginning of a line."
1300   (if font-lock-keywords-only
1301       nil
1302
1303     ;; #### Shouldn't this just be using 'loudly??
1304     (when (and font-lock-verbose
1305                (>= (- end start) font-lock-message-threshold))
1306       (progress-feedback-with-label 'font-lock
1307                                     "Fontifying %s... (syntactically)" 5
1308                                     (buffer-name)))
1309     (goto-char start)
1310
1311     (let ((lisp-like (font-lock-lisp-like major-mode))
1312           (cache (marker-position font-lock-cache-position))
1313           state string beg depth)
1314       ;;
1315       ;; Find the state at the `beginning-of-line' before `start'.
1316       (if (eq start cache)
1317           ;; Use the cache for the state of `start'.
1318           (setq state font-lock-cache-state)
1319         ;; Find the state of `start'.
1320         (if (null font-lock-beginning-of-syntax-function)
1321             ;; Use the state at the previous cache position, if any, or
1322             ;; otherwise calculate from `point-min'.
1323             (if (or (null cache) (< start cache))
1324                 (setq state (parse-partial-sexp (point-min) start))
1325               (setq state (parse-partial-sexp cache start nil nil
1326                                               font-lock-cache-state)))
1327           ;; Call the function to move outside any syntactic block.
1328           (funcall font-lock-beginning-of-syntax-function)
1329           (setq state (parse-partial-sexp (point) start)))
1330         ;; Cache the state and position of `start'.
1331         (setq font-lock-cache-state state)
1332         (set-marker font-lock-cache-position start))
1333       ;;
1334       ;; If the region starts inside a string or comment, show the extent of it.
1335       (when (or (nth 3 state) (nth 4 state))
1336         (setq string (nth 3 state) beg (point))
1337         (setq state (parse-partial-sexp (point) end nil nil state 'syntax-table))
1338         (font-lock-set-face beg (point) (if string 
1339                                             font-lock-string-face
1340                                           font-lock-comment-face)))
1341       ;;
1342       ;; Find each interesting place between here and `end'.
1343       (while (and (< (point) end)
1344                   (progn
1345                     (setq state (parse-partial-sexp (point) end nil nil state
1346                                                     'syntax-table))
1347                     (or (nth 3 state) (nth 4 state))))
1348         (setq depth (nth 0 state) string (nth 3 state) beg (nth 8 state))
1349         (setq state (parse-partial-sexp (point) end nil nil state 'syntax-table))
1350         (if string
1351             ;; #### It would be nice if we handled Python and other
1352             ;; non-Lisp languages with docstrings correctly.
1353             (let ((face (if (and lisp-like (= depth 1))
1354                             'font-lock-doc-string-face
1355                           'font-lock-string-face)))
1356               (if font-lock-fontify-string-delimiters
1357                   (font-lock-set-face beg (point) face)
1358                 (font-lock-set-face (+ beg 1) (- (point) 1) face)))
1359           (font-lock-set-face beg (point)
1360                               font-lock-comment-face))))))
1361 \f
1362 ;;; Additional text property functions.
1363
1364 ;; The following three text property functions are not generally available (and
1365 ;; it's not certain that they should be) so they are inlined for speed.
1366 ;; The case for `fillin-text-property' is simple; it may or not be generally
1367 ;; useful.  (Since it is used here, it is useful in at least one place.;-)
1368 ;; However, the case for `append-text-property' and `prepend-text-property' is
1369 ;; more complicated.  Should they remove duplicate property values or not?  If
1370 ;; so, should the first or last duplicate item remain?  Or the one that was
1371 ;; added?  In our implementation, the first duplicate remains.
1372
1373 ;; XEmacs: modified all these functions to use
1374 ;; `put-nonduplicable-text-property' instead of `put-text-property', and
1375 ;; the first one to take both SETPROP and MARKPROP, in accordance with the
1376 ;; changed definitions of `font-lock-any-faces-p' and `font-lock-set-face'.
1377
1378 (defsubst font-lock-fillin-text-property (start end setprop markprop value &optional object)
1379   "Fill in one property of the text from START to END.
1380 Arguments PROP and VALUE specify the property and value to put where none are
1381 already in place.  Therefore existing property values are not overwritten.
1382 Optional argument OBJECT is the string or buffer containing the text."
1383   (let ((start (text-property-any start end markprop nil object)) next)
1384     (while start
1385       (setq next (next-single-property-change start markprop object end))
1386       (put-nonduplicable-text-property start next setprop value object)
1387       (put-nonduplicable-text-property start next markprop value object)
1388       (setq start (text-property-any next end markprop nil object)))))
1389
1390 ;; This function (from simon's unique.el) is rewritten and inlined for speed.
1391 ;(defun unique (list function)
1392 ;  "Uniquify LIST, deleting elements using FUNCTION.
1393 ;Return the list with subsequent duplicate items removed by side effects.
1394 ;FUNCTION is called with an element of LIST and a list of elements from LIST,
1395 ;and should return the list of elements with occurrences of the element removed,
1396 ;i.e., a function such as `delete' or `delq'.
1397 ;This function will work even if LIST is unsorted.  See also `uniq'."
1398 ;  (let ((list list))
1399 ;    (while list
1400 ;      (setq list (setcdr list (funcall function (car list) (cdr list))))))
1401 ;  list)
1402
1403 (defsubst font-lock-unique (list)
1404   "Uniquify LIST, deleting elements using `delq'.
1405 Return the list with subsequent duplicate items removed by side effects."
1406   (let ((list list))
1407     (while list
1408       (setq list (setcdr list (delq (car list) (cdr list))))))
1409   list)
1410
1411 ;; A generalisation of `facemenu-add-face' for any property, but without the
1412 ;; removal of inactive faces via `facemenu-discard-redundant-faces' and special
1413 ;; treatment of `default'.  Uses `unique' to remove duplicate property values.
1414 (defsubst font-lock-prepend-text-property (start end prop value &optional object)
1415   "Prepend to one property of the text from START to END.
1416 Arguments PROP and VALUE specify the property and value to prepend to the value
1417 already in place.  The resulting property values are always lists, and unique.
1418 Optional argument OBJECT is the string or buffer containing the text."
1419   (let ((val (if (listp value) value (list value))) next prev)
1420     (while (/= start end)
1421       (setq next (next-single-property-change start prop object end)
1422             prev (get-text-property start prop object))
1423       (put-text-property
1424        start next prop
1425        (font-lock-unique (append val (if (listp prev) prev (list prev))))
1426        object)
1427       (setq start next))))
1428
1429 (defsubst font-lock-append-text-property (start end prop value &optional object)
1430   "Append to one property of the text from START to END.
1431 Arguments PROP and VALUE specify the property and value to append to the value
1432 already in place.  The resulting property values are always lists, and unique.
1433 Optional argument OBJECT is the string or buffer containing the text."
1434   (let ((val (if (listp value) value (list value))) next prev)
1435     (while (/= start end)
1436       (setq next (next-single-property-change start prop object end)
1437             prev (get-text-property start prop object))
1438       (put-text-property
1439        start next prop
1440        (font-lock-unique (append (if (listp prev) prev (list prev)) val))
1441        object)
1442       (setq start next))))
1443 \f
1444 ;;; Syntactic regexp fontification functions (taken from FSF Emacs 20.7.1)
1445
1446 ;; These syntactic keyword pass functions are identical to those keyword pass
1447 ;; functions below, with the following exceptions; (a) they operate on
1448 ;; `font-lock-syntactic-keywords' of course, (b) they are all `defun' as speed
1449 ;; is less of an issue, (c) eval of property value does not occur JIT as speed
1450 ;; is less of an issue, (d) OVERRIDE cannot be `prepend' or `append' as it
1451 ;; makes no sense for `syntax-table' property values, (e) they do not do it
1452 ;; LOUDLY as it is not likely to be intensive.
1453
1454 (defun font-lock-apply-syntactic-highlight (highlight)
1455   "Apply HIGHLIGHT following a match.
1456  HIGHLIGHT should be of the form MATCH-HIGHLIGHT,
1457  see `font-lock-syntactic-keywords'."
1458   (let* ((match (nth 0 highlight))
1459          (start (match-beginning match)) (end (match-end match))
1460          (value (nth 1 highlight))
1461          (override (nth 2 highlight)))
1462     (unless (numberp (car-safe value))
1463       (setq value (eval value)))
1464     (cond ((not start)
1465            ;; No match but we might not signal an error.
1466            (or (nth 3 highlight)
1467                (error "No match %d in highlight %S" match highlight)))
1468           ((not override)
1469            ;; Cannot override existing fontification.
1470            (or (map-extents 'extent-property (current-buffer)
1471                             start end 'syntax-table)
1472                (font-lock-set-syntax start end value)))
1473           ((eq override t)
1474            ;; Override existing fontification.
1475            (font-lock-set-syntax start end value))
1476           ((eq override 'keep)
1477            ;; Keep existing fontification.
1478            (font-lock-fillin-text-property start end
1479                                            'syntax-table 'font-lock value)))))
1480
1481 (defun font-lock-fontify-syntactic-anchored-keywords (keywords limit)
1482   "Fontify according to KEYWORDS until LIMIT.
1483  KEYWORDS should be of the form MATCH-ANCHORED, see `font-lock-keywords',
1484  LIMIT can be modified by the value of its PRE-MATCH-FORM."
1485   (let ((matcher (nth 0 keywords)) (lowdarks (nthcdr 3 keywords)) highlights
1486         ;; Evaluate PRE-MATCH-FORM.
1487         (pre-match-value (eval (nth 1 keywords))))
1488     ;; Set LIMIT to value of PRE-MATCH-FORM or the end of line.
1489     (if (and (numberp pre-match-value) (> pre-match-value (point)))
1490         (setq limit pre-match-value)
1491       (save-excursion (end-of-line) (setq limit (point))))
1492     (save-match-data
1493       ;; Find an occurrence of `matcher' before `limit'.
1494       (while (if (stringp matcher)
1495                  (re-search-forward matcher limit t)
1496                (funcall matcher limit))
1497         ;; Apply each highlight to this instance of `matcher'.
1498         (setq highlights lowdarks)
1499         (while highlights
1500           (font-lock-apply-syntactic-highlight (car highlights))
1501           (setq highlights (cdr highlights)))))
1502     ;; Evaluate POST-MATCH-FORM.
1503     (eval (nth 2 keywords))))
1504
1505 (defun font-lock-fontify-syntactic-keywords-region (start end)
1506   "Fontify according to `font-lock-syntactic-keywords' between START and END.
1507 START should be at the beginning of a line."
1508 ;;  ;; If `font-lock-syntactic-keywords' is a symbol, get the real keywords.
1509   (when (symbolp font-lock-syntactic-keywords)
1510     (setq font-lock-syntactic-keywords (font-lock-eval-keywords
1511                                         font-lock-syntactic-keywords)))
1512   ;; If `font-lock-syntactic-keywords' is not compiled, compile it.
1513   (unless (eq (car font-lock-syntactic-keywords) t)
1514     (setq font-lock-syntactic-keywords (font-lock-compile-keywords
1515                                         font-lock-syntactic-keywords)))
1516   ;; Get down to business.
1517   (let ((case-fold-search font-lock-keywords-case-fold-search)
1518         (keywords (cdr font-lock-syntactic-keywords))
1519         keyword matcher highlights)
1520     (while keywords
1521       ;; Find an occurrence of `matcher' from `start' to `end'.
1522       (setq keyword (car keywords) matcher (car keyword))
1523       (goto-char start)
1524       (while (if (stringp matcher)
1525                  (re-search-forward matcher end t)
1526                (funcall matcher end))
1527         ;; Apply each highlight to this instance of `matcher', which may be
1528         ;; specific highlights or more keywords anchored to `matcher'.
1529         (setq highlights (cdr keyword))
1530         (while highlights
1531           (if (numberp (car (car highlights)))
1532               (font-lock-apply-syntactic-highlight (car highlights))
1533             (font-lock-fontify-syntactic-anchored-keywords (car highlights)
1534                                                            end))
1535           (setq highlights (cdr highlights)))
1536         )
1537       (setq keywords (cdr keywords)))))
1538 \f
1539 ;;; Regexp fontification functions.
1540
1541 (defsubst font-lock-apply-highlight (highlight)
1542   "Apply HIGHLIGHT following a match.
1543 HIGHLIGHT should be of the form MATCH-HIGHLIGHT, see `font-lock-keywords'."
1544   (let* ((match (nth 0 highlight))
1545          (start (match-beginning match)) (end (match-end match))
1546          (override (nth 2 highlight)))
1547     (let ((newface (nth 1 highlight)))
1548       (or (symbolp newface)
1549           (setq newface (eval newface)))
1550       (cond ((not start)
1551              ;; No match but we might not signal an error.
1552              (or (nth 3 highlight)
1553                  (error "No match %d in highlight %S" match highlight)))
1554             ((= start end) nil)
1555             ((not override)
1556              ;; Cannot override existing fontification.
1557              (or (font-lock-any-faces-p start end)
1558                  (font-lock-set-face start end newface)))
1559             ((eq override t)
1560              ;; Override existing fontification.
1561              (font-lock-set-face start end newface))
1562             ((eq override 'keep)
1563              ;; Keep existing fontification.
1564              (font-lock-fillin-text-property start end 'face 'font-lock
1565                                              newface))
1566             ((eq override 'prepend)
1567              ;; Prepend to existing fontification.
1568              (font-lock-prepend-text-property start end 'face newface))
1569             ((eq override 'append)
1570              ;; Append to existing fontification.
1571              (font-lock-append-text-property start end 'face newface))))))
1572
1573 (defsubst font-lock-fontify-anchored-keywords (keywords limit)
1574   "Fontify according to KEYWORDS until LIMIT.
1575 KEYWORDS should be of the form MATCH-ANCHORED, see `font-lock-keywords',
1576 LIMIT can be modified by the value of its PRE-MATCH-FORM."
1577   (let ((matcher (nth 0 keywords)) (lowdarks (nthcdr 3 keywords)) highlights
1578         ;; Evaluate PRE-MATCH-FORM.
1579         (pre-match-value (eval (nth 1 keywords))))
1580     ;; Set LIMIT to value of PRE-MATCH-FORM or the end of line.
1581     (if (and (numberp pre-match-value) (> pre-match-value (point)))
1582         (setq limit pre-match-value)
1583       (save-excursion (end-of-line) (setq limit (point))))
1584     (save-match-data
1585       ;; Find an occurrence of `matcher' before `limit'.
1586       (while (if (stringp matcher)
1587                  (re-search-forward matcher limit t)
1588                (funcall matcher limit))
1589         ;; Apply each highlight to this instance of `matcher'.
1590         (setq highlights lowdarks)
1591         (while highlights
1592           (font-lock-apply-highlight (car highlights))
1593           (setq highlights (cdr highlights)))))
1594     ;; Evaluate POST-MATCH-FORM.
1595     (eval (nth 2 keywords))))
1596
1597 (defun font-lock-fontify-keywords-region (start end &optional loudvar)
1598   "Fontify according to `font-lock-keywords' between START and END.
1599 START should be at the beginning of a line."
1600   (let ((loudly (and font-lock-verbose
1601                      (>= (- end start) font-lock-message-threshold))))
1602     (let* ((case-fold-search font-lock-keywords-case-fold-search)
1603            (keywords (cdr (if (eq (car-safe font-lock-keywords) t)
1604                               font-lock-keywords
1605                             (font-lock-compile-keywords))))
1606            (bufname (buffer-name)) 
1607            (progress 5) (old-progress 5)
1608            (iter 0)
1609            (nkeywords (length keywords))
1610            keyword matcher highlights)
1611       ;;
1612       ;; Fontify each item in `font-lock-keywords' from `start' to `end'.
1613       ;; In order to measure progress accurately we need to know how
1614       ;; many keywords we have and how big the region is. Then progress
1615       ;; is ((pos - start)/ (end - start) * nkeywords 
1616       ;;        + iteration / nkeywords) * 100
1617       (while keywords
1618         ;;
1619         ;; Find an occurrence of `matcher' from `start' to `end'.
1620         (setq keyword (car keywords) matcher (car keyword))
1621         (goto-char start)
1622         (while (and (< (point) end)
1623                     (if (stringp matcher)
1624                         (re-search-forward matcher end t)
1625                       (funcall matcher end)))
1626           ;; calculate progress
1627           (setq progress
1628                 (+ (/ (* (- (point) start) 95) (* (- end start) nkeywords))
1629                    (/ (* iter 95) nkeywords) 5))
1630           (when (and loudly (> progress old-progress))
1631             (progress-feedback-with-label 'font-lock
1632                                           "Fontifying %s... (regexps)"
1633                                           progress bufname))
1634           (setq old-progress progress)
1635           ;; Apply each highlight to this instance of `matcher', which may be
1636           ;; specific highlights or more keywords anchored to `matcher'.
1637           (setq highlights (cdr keyword))
1638           (while highlights
1639             (if (numberp (car (car highlights)))
1640                 (let ((end (match-end (car (car highlights)))))
1641                   (font-lock-apply-highlight (car highlights))
1642                   ;; restart search just after the end of the
1643                   ;; keyword so keywords can share bracketing
1644                   ;; expressions.
1645                   (and end (goto-char end)))
1646               (font-lock-fontify-anchored-keywords (car highlights) end))
1647             (setq highlights (cdr highlights))))
1648         (setq iter (1+ iter))
1649         (setq keywords (cdr keywords))))
1650     (if loudly
1651         (progress-feedback-with-label 'font-lock "Fontifying %s... " 100
1652                                       (buffer-name)))))
1653
1654 \f
1655 ;; Various functions.
1656
1657 ;; Turn off other related packages if they're on.  I prefer a hook. --sm.
1658 ;; These explicit calls are easier to understand
1659 ;; because people know what they will do.
1660 ;; A hook is a mystery because it might do anything whatever. --rms.
1661 (defun font-lock-thing-lock-cleanup ()
1662   (cond ((and (boundp 'fast-lock-mode) fast-lock-mode)
1663          (fast-lock-mode -1))
1664         ((and (boundp 'lazy-lock-mode) lazy-lock-mode)
1665          (lazy-lock-mode -1))
1666         ((and (boundp 'lazy-shot-mode) lazy-shot-mode)
1667          (lazy-shot-mode -1))))
1668
1669 ;; Do something special for these packages after fontifying.  I prefer a hook.
1670 (defun font-lock-after-fontify-buffer ()
1671   (cond ((and (boundp 'fast-lock-mode) fast-lock-mode)
1672          (fast-lock-after-fontify-buffer))
1673         ((and (boundp 'lazy-lock-mode) lazy-lock-mode)
1674          (lazy-lock-after-fontify-buffer))))
1675
1676 \f
1677 ;; Various functions.
1678
1679 (defun font-lock-compile-keywords (&optional keywords)
1680   ;; Compile `font-lock-keywords' into the form (t KEYWORD ...) where KEYWORD
1681   ;; is the (MATCHER HIGHLIGHT ...) shown in the variable's doc string.
1682   (let ((keywords (or keywords font-lock-keywords)))
1683     (setq font-lock-keywords 
1684      (if (eq (car-safe keywords) t)
1685          keywords
1686        (cons t (mapcar 'font-lock-compile-keyword keywords))))))
1687
1688 (defun font-lock-compile-keyword (keyword)
1689   (cond ((nlistp keyword)               ; Just MATCHER
1690          (list keyword '(0 font-lock-keyword-face)))
1691         ((eq (car keyword) 'eval)       ; Specified (eval . FORM)
1692          (font-lock-compile-keyword (eval (cdr keyword))))
1693         ((numberp (cdr keyword))        ; Specified (MATCHER . MATCH)
1694          (list (car keyword) (list (cdr keyword) 'font-lock-keyword-face)))
1695         ((symbolp (cdr keyword))        ; Specified (MATCHER . FACENAME)
1696          (list (car keyword) (list 0 (cdr keyword))))
1697         ((nlistp (nth 1 keyword))       ; Specified (MATCHER . HIGHLIGHT)
1698          (list (car keyword) (cdr keyword)))
1699         (t                              ; Hopefully (MATCHER HIGHLIGHT ...)
1700          keyword)))
1701
1702 (defun font-lock-eval-keywords (keywords)
1703   ;; Evalulate KEYWORDS if a function (funcall) or variable (eval) name.
1704   (if (listp keywords)
1705       keywords
1706     (font-lock-eval-keywords (if (fboundp keywords)
1707                                  (funcall keywords)
1708                                (eval keywords)))))
1709
1710 (defun font-lock-choose-keywords (keywords level)
1711   ;; Return LEVELth element of KEYWORDS.  A LEVEL of nil is equal to a
1712   ;; LEVEL of 0, a LEVEL of t is equal to (1- (length KEYWORDS)).
1713   (let ((level (if (not (consp level))
1714                    level
1715                  (cdr (or (assq major-mode level) (assq t level))))))
1716     (cond ((symbolp keywords)
1717            keywords)
1718           ((numberp level)
1719            (or (nth level keywords) (car (reverse keywords))))
1720           ((eq level t)
1721            (car (reverse keywords)))
1722           (t
1723            (car keywords)))))
1724
1725 \f
1726 ;;; Determining which set of font-lock keywords to use.
1727
1728 (defun font-lock-find-font-lock-defaults (modesym)
1729   ;; Get the defaults based on the major mode.
1730   (let (raw-defaults)
1731     ;; I want a do-while loop!
1732     (while (progn
1733              (setq raw-defaults (get modesym 'font-lock-defaults))
1734              (and raw-defaults (symbolp raw-defaults)
1735                   (setq modesym raw-defaults)))
1736       )
1737     raw-defaults))
1738
1739 (defun font-lock-examine-syntax-table ()
1740   ; Computes the value of font-lock-keywords-only for this buffer.
1741   (if (eq (syntax-table) (standard-syntax-table))
1742       ;; Assume that modes which haven't bothered to install their own
1743       ;; syntax table don't do anything syntactically interesting.
1744       ;; Really, the standard-syntax-table shouldn't have comments and
1745       ;; strings in it, but changing that now might break things.
1746       nil
1747     ;; else map over the syntax table looking for strings or comments.
1748     (let (got-one)
1749       ;; XEmacs 20.0 ...
1750       (if (fboundp 'map-syntax-table)
1751           (setq got-one
1752                 (map-syntax-table
1753                  #'(lambda (key value)
1754                      (memq (char-syntax-from-code value)
1755                            '(?\" ?\< ?\> ?\$)))
1756                  (syntax-table)))
1757         ;; older Emacsen.
1758         (let ((i (1- (length (syntax-table)))))
1759           (while (>= i 0)
1760             (if (memq (char-syntax i) '(?\" ?\< ?\> ?\$))
1761                 (setq got-one t i 0))
1762             (setq i (1- i)))))
1763       (set (make-local-variable 'font-lock-keywords-only) (not got-one)))))
1764
1765 ;; font-lock-set-defaults is in fontl-hooks.el.
1766
1767 ;;;###autoload
1768 (defun font-lock-set-defaults-1 (&optional explicit-defaults)
1769   ;; does everything that font-lock-set-defaults does except
1770   ;; enable font-lock-mode.  This is called by `font-lock-mode'.
1771   ;; Note that the return value is used!
1772
1773   (if (and font-lock-defaults-computed (not explicit-defaults))
1774       ;; nothing to do.
1775       nil
1776
1777     (or font-lock-keywords
1778         (let* ((defaults (or (and (not (eq t explicit-defaults))
1779                                   explicit-defaults)
1780                              ;; in case modes decide to set
1781                              ;; `font-lock-defaults' themselves,
1782                              ;; as in FSF Emacs.
1783                              font-lock-defaults
1784                              (font-lock-find-font-lock-defaults major-mode)))
1785                (keywords (font-lock-choose-keywords
1786                           (nth 0 defaults) font-lock-maximum-decoration)))
1787
1788           ;; Keywords?
1789           (setq font-lock-keywords (if (fboundp keywords)
1790                                        (funcall keywords)
1791                                      (eval keywords)))
1792           (or font-lock-keywords
1793               ;; older way:
1794               ;; try to look for a variable `foo-mode-font-lock-keywords',
1795               ;; or similar.
1796               (let ((major (symbol-name major-mode))
1797                     (try #'(lambda (n)
1798                              (if (stringp n) (setq n (intern-soft n)))
1799                              (if (and n
1800                                       (boundp n))
1801                                  n
1802                                nil))))
1803                 (setq font-lock-keywords 
1804                       (symbol-value
1805                        (or (funcall try (get major-mode 'font-lock-keywords))
1806                            (funcall try (concat major "-font-lock-keywords"))
1807                            (funcall try (and (string-match "-mode\\'" major)
1808                                              (concat (substring 
1809                                                       major 0 
1810                                                       (match-beginning 0))
1811                                                      "-font-lock-keywords")))
1812                            'font-lock-keywords)))))
1813
1814           ;; Case fold?
1815           (if (>= (length defaults) 3)
1816               (setq font-lock-keywords-case-fold-search (nth 2 defaults))
1817             ;; older way:
1818             ;; look for a property 'font-lock-keywords-case-fold-search on
1819             ;; the major-mode symbol.
1820             (let* ((nonexist (make-symbol ""))
1821                    (value (get major-mode 'font-lock-keywords-case-fold-search
1822                                nonexist)))
1823               (if (not (eq nonexist value))
1824                   (setq font-lock-keywords-case-fold-search value))))
1825
1826           ;; Syntactic?
1827           (if (>= (length defaults) 2)
1828               (setq font-lock-keywords-only (nth 1 defaults))
1829             ;; older way:
1830             ;; cleverly examine the syntax table.
1831             (font-lock-examine-syntax-table))
1832            
1833           ;; Syntax table?
1834           (if (nth 3 defaults)
1835               (let ((slist (nth 3 defaults)))
1836                 (setq font-lock-syntax-table
1837                       (copy-syntax-table (syntax-table)))
1838                 (while slist
1839                   (modify-syntax-entry (car (car slist)) (cdr (car slist))
1840                                        font-lock-syntax-table)
1841                   (setq slist (cdr slist)))))
1842
1843           ;; Syntax function?
1844           (cond (defaults
1845                   (setq font-lock-beginning-of-syntax-function
1846                         (nth 4 defaults)))
1847                 (t
1848                  ;; older way:
1849                  ;; defaults not specified at all, so use `beginning-of-defun'.
1850                  (setq font-lock-beginning-of-syntax-function
1851                        'beginning-of-defun)))))
1852
1853     (setq font-lock-cache-position (make-marker))
1854     (setq font-lock-defaults-computed t)))
1855
1856 \f
1857 ;;;;;;;;;;;;;;;;;;;;;;         keywords         ;;;;;;;;;;;;;;;;;;;;;;
1858
1859 ;;; Various major-mode interfaces.
1860 ;;; Probably these should go in with the source of the respective major modes.
1861
1862 ;; The defaults and keywords listed here should perhaps be moved into
1863 ;; mode-specific files.
1864
1865 ;; For C and Lisp modes we use `beginning-of-defun', rather than nil,
1866 ;; for SYNTAX-BEGIN.  Thus the calculation of the cache is usually
1867 ;; faster but not infallible, so we risk mis-fontification.  --sm.
1868
1869 (put 'c-mode 'font-lock-defaults 
1870      '((c-font-lock-keywords
1871         c-font-lock-keywords-1 c-font-lock-keywords-2 c-font-lock-keywords-3)
1872        nil nil ((?_ . "w")) beginning-of-defun))
1873 (put 'c++-c-mode 'font-lock-defaults 'c-mode)
1874 (put 'elec-c-mode 'font-lock-defaults 'c-mode)
1875
1876 (put 'c++-mode 'font-lock-defaults
1877      '((c++-font-lock-keywords
1878         c++-font-lock-keywords-1 c++-font-lock-keywords-2
1879         c++-font-lock-keywords-3)
1880        nil nil ((?_ . "w") (?~ . "w")) beginning-of-defun))
1881
1882 (put 'java-mode 'font-lock-defaults 
1883      '((java-font-lock-keywords
1884         java-font-lock-keywords-1 java-font-lock-keywords-2
1885         java-font-lock-keywords-3)
1886        nil nil ((?_ . "w")) beginning-of-defun
1887        (font-lock-mark-block-function . mark-defun)))
1888
1889 (put 'lisp-mode 'font-lock-defaults
1890      '((lisp-font-lock-keywords
1891         lisp-font-lock-keywords-1 lisp-font-lock-keywords-2)
1892        nil nil
1893        ((?: . "w") (?- . "w") (?* . "w") (?+ . "w") (?. . "w") (?< . "w")
1894         (?> . "w") (?= . "w") (?! . "w") (?? . "w") (?$ . "w") (?% . "w")
1895         (?_ . "w") (?& . "w") (?~ . "w") (?^ . "w") (?/ . "w"))
1896        beginning-of-defun))
1897 (put 'emacs-lisp-mode 'font-lock-defaults 'lisp-mode)
1898 (put 'lisp-interaction-mode 'font-lock-defaults 'lisp-mode)
1899
1900 (put 'scheme-mode 'font-lock-defaults
1901      '(scheme-font-lock-keywords
1902        nil t
1903        ((?: . "w") (?- . "w") (?* . "w") (?+ . "w") (?. . "w") (?< . "w")
1904         (?> . "w") (?= . "w") (?! . "w") (?? . "w") (?$ . "w") (?% . "w")
1905         (?_ . "w") (?& . "w") (?~ . "w") (?^ . "w") (?/ . "w"))
1906        beginning-of-defun))
1907 (put 'inferior-scheme-mode 'font-lock-defaults 'scheme-mode)
1908 (put 'scheme-interaction-mode 'font-lock-defaults 'scheme-mode)
1909
1910 (put 'tex-mode 'font-lock-defaults
1911      ;; For TeX modes we could use `backward-paragraph' for the same reason.
1912      '(tex-font-lock-keywords nil nil ((?$ . "\""))))
1913 ;; the nine billion names of TeX mode...
1914 (put 'bibtex-mode       'font-lock-defaults 'tex-mode)
1915 (put 'plain-tex-mode    'font-lock-defaults 'tex-mode)
1916 (put 'slitex-tex-mode   'font-lock-defaults 'tex-mode)
1917 (put 'SliTeX-mode       'font-lock-defaults 'tex-mode)
1918 (put 'slitex-mode       'font-lock-defaults 'tex-mode)
1919 (put 'latex-tex-mode    'font-lock-defaults 'tex-mode)
1920 (put 'LaTex-tex-mode    'font-lock-defaults 'tex-mode)
1921 (put 'latex-mode        'font-lock-defaults 'tex-mode)
1922 (put 'LaTeX-mode        'font-lock-defaults 'tex-mode)
1923 (put 'japanese-LaTeX-mode 'font-lock-defaults 'tex-mode)
1924 (put 'japanese-SliTeX-mode 'font-lock-defaults 'tex-mode)
1925 (put 'FoilTeX-mode      'font-lock-defaults 'tex-mode)
1926 (put 'LATeX-MoDe        'font-lock-defaults 'tex-mode)
1927 (put 'lATEx-mODe        'font-lock-defaults 'tex-mode)
1928 ;; ok, this is getting a bit silly ...
1929 (put 'eDOm-xETAl        'font-lock-defaults 'tex-mode)
1930
1931 ;;; Various regexp information shared by several modes.
1932 ;;; Information specific to a single mode should go in its load library.
1933
1934 (defconst lisp-font-lock-keywords-1
1935   (list
1936    ;; Anything not a variable or type declaration is fontified as a function.
1937    ;; It would be cleaner to allow preceding whitespace, but it would also be
1938    ;; about five times slower.
1939    (list (concat "^(\\(def\\("
1940                   ;; Variable declarations.
1941                   "\\(const\\(\\|ant\\)\\|ine-key\\(\\|-after\\)\\|var\\|custom\\)\\|"
1942                   ;; Structure declarations.
1943                   "\\(class\\|struct\\|type\\)\\|"
1944                   ;; Everything else is a function declaration.
1945                   "\\([^ \t\n\(\)]+\\)"
1946                   "\\)\\)\\>"
1947                   ;; Any whitespace and declared object.
1948                   "[ \t'\(]*"
1949                   "\\([^ \t\n\)]+\\)?")
1950           '(1 font-lock-keyword-face)
1951           '(8 (cond ((match-beginning 3) 'font-lock-variable-name-face)
1952                     ((match-beginning 6) 'font-lock-type-face)
1953                     (t 'font-lock-function-name-face))
1954               nil t))
1955    )
1956  "Subdued level highlighting Lisp modes.")
1957
1958 (defconst lisp-font-lock-keywords-2
1959   (append lisp-font-lock-keywords-1
1960    (list
1961     ;;
1962     ;; Control structures.  ELisp and CLisp combined.
1963     ;;
1964     (cons
1965      (concat
1966       "(\\("
1967       ;; beginning of generated stuff
1968       ;; to regenerate, use the regexp-opt below, then delete the outermost
1969       ;; grouping, then use the macro below to break up the string.
1970       ;; (regexp-opt
1971       ;;   '("cond" "if" "while" "let" "let*" "prog" "progn" "prog1"
1972       ;;     "prog2" "progv" "catch" "throw" "save-restriction"
1973       ;;     "save-excursion" "save-window-excursion"
1974       ;;     "save-current-buffer" "with-current-buffer"
1975       ;;     "save-selected-window" "with-selected-window"
1976       ;;     "save-selected-frame" "with-selected-frame"
1977       ;;     "with-temp-file" "with-temp-buffer" "with-output-to-string"
1978       ;;     "with-string-as-buffer-contents"
1979       ;;     "save-match-data" "unwind-protect" "call-with-condition-handler"
1980       ;;     "condition-case" "track-mouse" "autoload"
1981       ;;     "eval-after-load" "eval-and-compile" "eval-when-compile"
1982       ;;     "when" "unless" "do" "dolist" "dotimes" "flet" "labels"
1983       ;;     "lambda" "block" "return" "return-from" "loop") t)
1984       ;; (setq last-kbd-macro
1985       ;;   (read-kbd-macro "\" C-7 C-1 <right> C-r \\\\| 3*<right> \" RET"))
1986       "autoload\\|block\\|c\\(?:a\\(?:ll-with-condition-handler\\|tch\\)\\|"
1987       "ond\\(?:ition-case\\)?\\)\\|do\\(?:list\\|times\\)?\\|"
1988       "eval-\\(?:a\\(?:fter-load\\|nd-compile\\)\\|when-compile\\)\\|flet\\|"
1989       "if\\|l\\(?:a\\(?:bels\\|mbda\\)\\|et\\*?\\|oop\\)\\|prog[12nv]?\\|"
1990       "return\\(?:-from\\)?\\|save-\\(?:current-buffer\\|excursion\\|"
1991       "match-data\\|restriction\\|selected-\\(?:frame\\|window\\)\\|"
1992       "window-excursion\\)\\|t\\(?:hrow\\|rack-mouse\\)\\|un\\(?:less\\|"
1993       "wind-protect\\)\\|w\\(?:h\\(?:en\\|ile\\)\\|ith-\\(?:current-buffer\\|"
1994       "output-to-string\\|s\\(?:elected-\\(?:frame\\|window\\)\\|"
1995       "tring-as-buffer-contents\\)\\|temp-\\(?:buffer\\|file\\)\\)\\)"
1996       ;; end of generated stuff
1997       "\\)\\>") 1)
1998     ;;
1999     ;; Feature symbols as references.
2000     '("(\\(featurep\\|provide\\|require\\)\\>[ \t']*\\(\\sw+\\)?"
2001       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2002     ;;
2003     ;; Words inside \\[] tend to be for `substitute-command-keys'.
2004     '("\\\\\\\\\\[\\(\\sw+\\)]" 1 font-lock-reference-face prepend)
2005     ;;
2006     ;; Words inside `' tend to be symbol names.
2007     '("`\\(\\sw\\sw+\\)'" 1 font-lock-reference-face prepend)
2008     ;;
2009     ;; CLisp `:' keywords as references.
2010     '("\\<:\\sw+\\>" 0 font-lock-reference-face prepend)
2011     ;;
2012     ;; ELisp and CLisp `&' keywords as types.
2013     '("\\<\\&\\(optional\\|rest\\|whole\\)\\>" . font-lock-type-face)
2014     ))
2015   "Gaudy level highlighting for Lisp modes.")
2016
2017 (defvar lisp-font-lock-keywords lisp-font-lock-keywords-1
2018   "Default expressions to highlight in Lisp modes.")
2019
2020 ;; The previous version, before replacing it with the FSF version.
2021 ;(defconst lisp-font-lock-keywords-1 (purecopy
2022 ; '(;;
2023 ;   ;; highlight defining forms.  This doesn't work too nicely for
2024 ;   ;; (defun (setf foo) ...) but it does work for (defvar foo) which
2025 ;   ;; is more important.
2026 ;   ("^(def[-a-z]+\\s +\\([^ \t\n\)]+\\)" 1 font-lock-function-name-face)
2027 ;   ;;
2028 ;   ;; highlight CL keywords (three clauses seems faster than one)
2029 ;   ("\\s :\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2030 ;   ("(:\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2031 ;   ("':\\(\\(\\sw\\|\\s_\\)+\\)\\>" . 1)
2032 ;   ;;
2033 ;   ;; this is highlights things like (def* (setf foo) (bar baz)), but may
2034 ;   ;; be slower (I haven't really thought about it)
2035 ;;   ("^(def[-a-z]+\\s +\\(\\s(\\S)*\\s)\\|\\S(\\S *\\)"
2036 ;;    1 font-lock-function-name-face)
2037 ;   ))
2038 ; "For consideration as a value of `lisp-font-lock-keywords'.
2039 ;This does fairly subdued highlighting.")
2040 ;
2041 ;(defconst lisp-font-lock-keywords-2 (purecopy
2042 ;  (append lisp-font-lock-keywords-1
2043 ;   '(;;
2044 ;     ;; Highlight control structures
2045 ;     ("(\\(cond\\|if\\|when\\|unless\\|[ec]?\\(type\\)?case\\)[ \t\n]" . 1)
2046 ;     ("(\\(while\\|do\\|let\\*?\\|flet\\|labels\\|prog[nv12*]?\\)[ \t\n]" . 1)
2047 ;     ("(\\(do\\*\\|dotimes\\|dolist\\|loop\\)[ \t\n]" . 1)
2048 ;     ("(\\(catch\\|\\throw\\|block\\|return\\|return-from\\)[ \t\n]" . 1)
2049 ;     ("(\\(save-restriction\\|save-window-restriction\\)[ \t\n]" . 1)
2050 ;     ("(\\(save-excursion\\|unwind-protect\\|condition-case\\)[ \t\n]" . 1)
2051 ;     ;;
2052 ;     ;; highlight function names in emacs-lisp docstrings (in the syntax
2053 ;     ;; that substitute-command-keys understands.)
2054 ;     ("\\\\\\\\\\[\\([^]\\\n]+\\)]" 1 font-lock-keyword-face t)
2055 ;     ;;
2056 ;     ;; highlight words inside `' which tend to be function names
2057 ;     ("`\\([-a-zA-Z0-9_][-a-zA-Z0-9_][-a-zA-Z0-9_.]+\\)'"
2058 ;      1 font-lock-keyword-face t)
2059 ;     )))
2060 ; "For consideration as a value of `lisp-font-lock-keywords'.
2061 ;
2062 ;This does a lot more highlighting.")
2063
2064 (defvar scheme-font-lock-keywords
2065   (eval-when-compile
2066     (list
2067      ;;
2068      ;; Declarations.  Hannes Haug <hannes.haug@student.uni-tuebingen.de> says
2069      ;; this works for SOS, STklos, SCOOPS, Meroon and Tiny CLOS.
2070      (list (concat "(\\(define\\("
2071                    ;; Function names.
2072                    "\\(\\|-\\(generic\\(\\|-procedure\\)\\|method\\)\\)\\|"
2073                    ;; Macro names, as variable names.  A bit dubious, this.
2074                    "\\(-syntax\\)\\|"
2075                    ;; Class names.
2076                    "\\(-class\\)"
2077                    "\\)\\)\\>"
2078                    ;; Any whitespace and declared object.
2079                    "[ \t]*(?"
2080                    "\\(\\sw+\\)?")
2081            '(1 font-lock-keyword-face)
2082            '(8 (cond ((match-beginning 3) 'font-lock-function-name-face)
2083                      ((match-beginning 6) 'font-lock-variable-name-face)
2084                      (t 'font-lock-type-face))
2085                nil t))
2086      ;;
2087      ;; Control structures.
2088 ;(regexp-opt '("begin" "call-with-current-continuation" "call/cc"
2089 ;              "call-with-input-file" "call-with-output-file" "case" "cond"
2090 ;              "do" "else" "for-each" "if" "lambda"
2091 ;              "let\\*?" "let-syntax" "letrec" "letrec-syntax"
2092 ;              ;; Hannes Haug <hannes.haug@student.uni-tuebingen.de> wants:
2093 ;              "and" "or" "delay"
2094 ;              ;; Stefan Monnier <stefan.monnier@epfl.ch> says don't bother:
2095 ;              ;;"quasiquote" "quote" "unquote" "unquote-splicing"
2096 ;              "map" "syntax" "syntax-rules"))
2097      (cons
2098       (concat "(\\("
2099               "and\\|begin\\|c\\(a\\(ll\\(-with-\\(current-continuation\\|"
2100               "input-file\\|output-file\\)\\|/cc\\)\\|se\\)\\|ond\\)\\|"
2101               "d\\(elay\\|o\\)\\|else\\|for-each\\|if\\|"
2102               "l\\(ambda\\|et\\(-syntax\\|\\*?\\|rec\\(\\|-syntax\\)\\)\\)\\|"
2103               "map\\|or\\|syntax\\(\\|-rules\\)"
2104               "\\)\\>") 1)
2105      ;;
2106      ;; David Fox <fox@graphics.cs.nyu.edu> for SOS/STklos class specifiers.
2107      '("\\<<\\sw+>\\>" . font-lock-type-face)
2108      ;;
2109      ;; Scheme `:' keywords as references.
2110      '("\\<:\\sw+\\>" . font-lock-reference-face)
2111      ))
2112 "Default expressions to highlight in Scheme modes.")
2113
2114 ;; The previous version, before replacing it with the FSF version.
2115 ;(defconst scheme-font-lock-keywords (purecopy
2116 ; '(("(define[ \t]+(?\\([^ \t\n\)]+\\)" 1 font-lock-function-name-face)
2117 ;   ("(\\(cond\\|lambda\\|begin\\|if\\|else\\|case\\|do\\)[ \t\n]" . 1)
2118 ;   ("(\\(\\|letrec\\|let\\*?\\|set!\\|and\\|or\\)[ \t\n]" . 1)
2119 ;   ("(\\(quote\\|unquote\\|quasiquote\\|unquote-splicing\\)[ \t\n]" . 1)
2120 ;   ("(\\(syntax\\|syntax-rules\\|define-syntax\\|let-syntax\\|letrec-syntax\\)[ \t\n]" . 1)))
2121 ;  "Expressions to highlight in Scheme buffers.")
2122
2123 (defconst c-font-lock-keywords-1 nil
2124   "Subdued level highlighting for C modes.")
2125
2126 (defconst c-font-lock-keywords-2 nil
2127   "Medium level highlighting for C modes.")
2128
2129 (defconst c-font-lock-keywords-3 nil
2130   "Gaudy level highlighting for C modes.")
2131
2132 (defconst c++-font-lock-keywords-1 nil
2133   "Subdued level highlighting for C++ modes.")
2134
2135 (defconst c++-font-lock-keywords-2 nil
2136   "Medium level highlighting for C++ modes.")
2137
2138 (defconst c++-font-lock-keywords-3 nil
2139   "Gaudy level highlighting for C++ modes.")
2140
2141 (defun font-lock-match-c++-style-declaration-item-and-skip-to-next (limit)
2142   ;; Match, and move over, any declaration/definition item after point.
2143   ;; The expect syntax of an item is "word" or "word::word", possibly ending
2144   ;; with optional whitespace and a "(".  Everything following the item (but
2145   ;; belonging to it) is expected to by skip-able by `forward-sexp', and items
2146   ;; are expected to be separated with a "," or ";".
2147   (if (looking-at "[ \t*&]*\\(\\(?:\\sw\\|\\s_\\)+\\)\\(::\\(\\(?:\\sw\\|\\s_\\)+\\)\\)?[ \t]*\\((\\)?")
2148       (save-match-data
2149         (condition-case nil
2150             (save-restriction
2151               ;; Restrict to the end of line, currently guaranteed to be LIMIT.
2152               (narrow-to-region (point-min) limit)
2153               (goto-char (match-end 1))
2154               ;; Move over any item value, etc., to the next item.
2155               (while (not (looking-at "[ \t]*\\([,;]\\|$\\)"))
2156                 (goto-char (or (scan-sexps (point) 1) (point-max))))
2157               (goto-char (match-end 0)))
2158           (error t)))))
2159
2160 (let ((c-keywords
2161 ;      ("break" "continue" "do" "else" "for" "if" "return" "switch" "while")
2162        "break\\|continue\\|do\\|else\\|for\\|if\\|return\\|switch\\|while")
2163       (c-type-types
2164 ;      ("auto" "extern" "register" "static" "typedef" "struct" "union" "enum"
2165 ;       "signed" "unsigned" "short" "long" "int" "char" "float" "double"
2166 ;       "void" "volatile" "const")
2167        (concat "auto\\|c\\(har\\|onst\\)\\|double\\|e\\(num\\|xtern\\)\\|"
2168                "float\\|int\\|long\\|register\\|"
2169                "s\\(hort\\|igned\\|t\\(atic\\|ruct\\)\\)\\|typedef\\|"
2170                "un\\(ion\\|signed\\)\\|vo\\(id\\|latile\\)"))   ; 6 ()s deep.
2171       (c++-keywords
2172 ;      ("break" "continue" "do" "else" "for" "if" "return" "switch" "while"
2173 ;       "asm" "catch" "delete" "new" "operator" "sizeof" "this" "throw" "try"
2174 ;       "protected" "private" "public" "const_cast" "dynamic_cast" "reinterpret_cast"
2175 ;       "static_cast" "and" "bitor" "or" "xor" "compl" "bitand" "and_eq"
2176 ;       "or_eq" "xor_eq" "not" "not_eq" "typeid" "false" "true")
2177        (concat "a\\(nd\\(\\|_eq\\)\\|sm\\)\\|"
2178                "b\\(it\\(or\\|and\\)\\|reak\\)\\|"
2179                "c\\(atch\\|o\\(mpl\\|n\\(tinue\\|st_cast\\)\\)\\)\\|"
2180                "d\\(elete\\|o\\|ynamic_cast\\)\\|"
2181                "else\\|"
2182                "f\\(alse\\|or\\)\\|if\\|"
2183                "n\\(ew\\|ot\\(\\|_eq\\)\\)\\|"
2184                "p\\(r\\(ivate\\|otected\\)\\|ublic\\)\\|"
2185                "or\\(\\|_eq\\)\\|"
2186                "re\\(interpret_cast\\|turn\\)\\|"
2187                "s\\(izeof\\|tatic_cast\\|witch\\)\\|"
2188                "t\\(h\\(is\\|row\\)\\|r\\(ue\\|y\\)\\|ypeid\\)\\|"
2189                "xor\\(\\|_eq\\)\\|while"))
2190       (c++-type-types
2191 ;      ("auto" "extern" "register" "static" "typedef" "struct" "union" "enum"
2192 ;       "signed" "unsigned" "short" "long" "int" "char" "float" "double"
2193 ;       "void" "volatile" "const" "class" "inline" "friend" "bool"
2194 ;       "virtual" "complex" "template" "explicit" "mutable" "export" "namespace"
2195 ;       "using" "typename" "wchar_t")
2196        (concat "auto\\|bool\\|c\\(har\\|lass\\|o\\(mplex\\|nst\\)\\)\\|"
2197                "double\\|"
2198                "e\\(num\\|x\\(p\\(licit\\|ort\\)\\|tern\\)\\)\\|"
2199                "f\\(loat\\|riend\\)\\|"
2200                "in\\(line\\|t\\)\\|long\\|mutable\\|namespace\\|register\\|"
2201                "s\\(hort\\|igned\\|t\\(atic\\|ruct\\)\\)\\|"
2202                "t\\(emplate\\|ype\\(def\\|name\\)\\)\\|"
2203                "u\\(\\(n\\(ion\\|signed\\)\\|sing\\)\\)\\|"
2204                "v\\(irtual\\|o\\(id\\|latile\\)\\)\\|"
2205                "wchar_t"))              ; 11 ()s deep.
2206       (ctoken "\\(\\sw\\|\\s_\\|[:~*&]\\)+")
2207       )
2208  (setq c-font-lock-keywords-1
2209   (list
2210    ;;
2211    ;; These are all anchored at the beginning of line for speed.
2212    ;;
2213    ;; Fontify function name definitions (GNU style; without type on line).
2214    
2215    ;; In FSF this has the simpler definition of "\\sw+" for ctoken.
2216    ;; I'm not sure if ours is more correct.
2217    ;; This is a subset of the next rule, and is slower when present. --dmoore
2218    ;; (list (concat "^\\(" ctoken "\\)[ \t]*(") 1 'font-lock-function-name-face)
2219    ;;
2220    ;; fontify the names of functions being defined.
2221    ;; FSF doesn't have this but I think it should be fast for us because
2222    ;; our regexp routines are more intelligent than FSF's about handling
2223    ;; anchored-at-newline. (When I added this hack in regex.c, it halved
2224    ;; the time to do the regexp phase of font-lock for a C file!) Not
2225    ;; including this discriminates against those who don't follow the
2226    ;; GNU coding style. --ben
2227    ;; x?x?x?y?z should always be: (x(xx?)?)?y?z --dmoore
2228    (list (concat
2229           "^\\("
2230           "\\(" ctoken "[ \t]+\\)"      ; type specs; there can be no
2231           "\\("
2232           "\\(" ctoken "[ \t]+\\)"      ; more than 3 tokens, right?
2233           "\\(" ctoken "[ \t]+\\)"
2234           "?\\)?\\)?"
2235           "\\([*&]+[ \t]*\\)?"          ; pointer
2236           "\\(" ctoken "\\)[ \t]*(")    ; name
2237          10 'font-lock-function-name-face)
2238    ;;
2239    ;; This is faster but not by much.  I don't see why not.
2240    ;(list (concat "^\\(" ctoken "\\)[ \t]*(") 1 'font-lock-function-name-face)
2241    ;;
2242    ;; Added next two; they're both jolly-good fastmatch candidates so
2243    ;; should be fast. --ben
2244    ;;
2245    ;; Fontify structure names (in structure definition form).
2246    (list (concat "^\\(typedef[ \t]+struct\\|struct\\|static[ \t]+struct\\)"
2247            "[ \t]+\\(" ctoken "\\)[ \t]*\\(\{\\|$\\)")
2248          2 'font-lock-function-name-face)
2249    ;;
2250    ;; Fontify case clauses.  This is fast because its anchored on the left.
2251    '("case[ \t]+\\(\\(\\sw\\|\\s_\\)+\\)[ \t]+:". 1)
2252    ;;
2253    '("\\<\\(default\\):". 1)
2254    ;; Fontify filenames in #include <...> preprocessor directives as strings.
2255    '("^#[ \t]*include[ \t]+\\(<[^>\"\n]+>\\)" 1 font-lock-string-face)
2256    ;;
2257    ;; Fontify function macro names.
2258    '("^#[ \t]*define[ \t]+\\(\\(\\sw+\\)(\\)" 2 font-lock-function-name-face)
2259    ;;
2260    ;; Fontify symbol names in #if ... defined preprocessor directives.
2261    '("^#[ \t]*if\\>"
2262      ("\\<\\(defined\\)\\>[ \t]*(?\\(\\sw+\\)?" nil nil
2263       (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t)))
2264    ;;
2265    ;; Fontify symbol names in #elif ... defined preprocessor directives.
2266    '("^#[ \t]*elif\\>"
2267      ("\\<\\(defined\\)\\>[ \t]*(?\\(\\sw+\\)?" nil nil
2268       (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t)))
2269    ;;
2270    ;; Fontify otherwise as symbol names, and the preprocessor directive names.
2271    '("^\\(#[ \t]*[a-z]+\\)\\>[ \t]*\\(\\sw+\\)?"
2272      (1 font-lock-preprocessor-face) (2 font-lock-variable-name-face nil t))
2273    ))
2274
2275  (setq c-font-lock-keywords-2
2276   (append c-font-lock-keywords-1
2277    (list
2278     ;;
2279     ;; Simple regexps for speed.
2280     ;;
2281     ;; Fontify all type specifiers.
2282     (cons (concat "\\<\\(" c-type-types "\\)\\>") 'font-lock-type-face)
2283     ;;
2284     ;; Fontify all builtin keywords (except case, default and goto; see below).
2285     (cons (concat "\\<\\(" c-keywords "\\)\\>") 'font-lock-keyword-face)
2286     ;;
2287     ;; Fontify case/goto keywords and targets, and case default/goto tags.
2288     '("\\<\\(case\\|goto\\)\\>[ \t]*\\([^ \t\n:;]+\\)?"
2289       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2290     '("^[ \t]*\\(\\sw+\\)[ \t]*:" 1 font-lock-reference-face)
2291     )))
2292
2293  (setq c-font-lock-keywords-3
2294   (append c-font-lock-keywords-2
2295    ;;
2296    ;; More complicated regexps for more complete highlighting for types.
2297    ;; We still have to fontify type specifiers individually, as C is so hairy.
2298    (list
2299     ;;
2300     ;; Fontify all storage classes and type specifiers, plus their items.
2301     (list (concat "\\<\\(" c-type-types "\\)\\>"
2302                   "\\([ \t*&]+\\sw+\\>\\)*")
2303           ;; Fontify each declaration item.
2304           '(font-lock-match-c++-style-declaration-item-and-skip-to-next
2305             ;; Start with point after all type specifiers.
2306             (goto-char (or (match-beginning 8) (match-end 1)))
2307             ;; Finish with point after first type specifier.
2308             (goto-char (match-end 1))
2309             ;; Fontify as a variable or function name.
2310             (1 (if (match-beginning 4)
2311                    font-lock-function-name-face
2312                  font-lock-variable-name-face))))
2313     ;;
2314     ;; Fontify structures, or typedef names, plus their items.
2315     '("\\(}\\)[ \t*]*\\sw"
2316       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2317        (goto-char (match-end 1)) nil
2318        (1 (if (match-beginning 4)
2319               font-lock-function-name-face
2320             font-lock-variable-name-face))))
2321     ;;
2322     ;; Fontify anything at beginning of line as a declaration or definition.
2323     '("^\\(\\sw+\\)\\>\\([ \t*]+\\sw+\\>\\)*"
2324       (1 font-lock-type-face)
2325       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2326        (goto-char (or (match-beginning 2) (match-end 1))) nil
2327        (1 (if (match-beginning 4)
2328               font-lock-function-name-face
2329             font-lock-variable-name-face))))
2330     )))
2331
2332  (setq c++-font-lock-keywords-1
2333   (append
2334    ;;
2335    ;; The list `c-font-lock-keywords-1' less that for function names.
2336    ;; the simple function form regexp has been removed. --dmoore
2337    ;;(cdr c-font-lock-keywords-1)
2338    c-font-lock-keywords-1
2339    ;;
2340    ;; Fontify function name definitions, possibly incorporating class name.
2341    (list
2342     '("^\\(\\sw+\\)\\(::\\(\\sw+\\)\\)?[ \t]*("
2343       (1 (if (match-beginning 2)
2344              font-lock-type-face
2345            font-lock-function-name-face))
2346       (3 (if (match-beginning 2) font-lock-function-name-face) nil t))
2347     )))
2348
2349  (setq c++-font-lock-keywords-2
2350   (append c++-font-lock-keywords-1
2351    (list
2352     ;;
2353     ;; The list `c-font-lock-keywords-2' for C++ plus operator overloading.
2354     (cons (concat "\\<\\(" c++-type-types "\\)\\>") 'font-lock-type-face)
2355     ;;
2356     ;; Fontify operator function name overloading.
2357     '("\\<\\(operator\\)\\>[ \t]*\\([][)(><!=+-][][)(><!=+-]?\\)?"
2358       (1 font-lock-keyword-face) (2 font-lock-function-name-face nil t))
2359     ;;
2360     ;; Fontify case/goto keywords and targets, and case default/goto tags.
2361     '("\\<\\(case\\|goto\\)\\>[ \t]*\\([^ \t\n:;]+\\)?"
2362       (1 font-lock-keyword-face) (2 font-lock-reference-face nil t))
2363     '("^[ \t]*\\(\\sw+\\)[ \t]*:[^:]" 1 font-lock-reference-face)
2364     ;;
2365     ;; Fontify other builtin keywords.
2366     (cons (concat "\\<\\(" c++-keywords "\\)\\>") 'font-lock-keyword-face)
2367     )))
2368
2369  (setq c++-font-lock-keywords-3
2370   (append c++-font-lock-keywords-2
2371    ;;
2372    ;; More complicated regexps for more complete highlighting for types.
2373    (list
2374     ;;
2375     ;; Fontify all storage classes and type specifiers, plus their items.
2376     (list (concat "\\<\\(" c++-type-types "\\)\\>"
2377                   "\\([ \t*&]+\\sw+\\>\\)*")
2378           ;; Fontify each declaration item.
2379           '(font-lock-match-c++-style-declaration-item-and-skip-to-next
2380             ;; Start with point after all type specifiers.
2381             (goto-char (or (match-beginning 13) (match-end 1)))
2382             ;; Finish with point after first type specifier.
2383             (goto-char (match-end 1))
2384             ;; Fontify as a variable or function name.
2385             (1 (cond ((match-beginning 2) 'font-lock-type-face)
2386                      ((match-beginning 4) 'font-lock-function-name-face)
2387                      (t 'font-lock-variable-name-face)))
2388             (3 (if (match-beginning 4)
2389                    'font-lock-function-name-face
2390                  'font-lock-variable-name-face) nil t)))
2391     ;;
2392     ;; Fontify structures, or typedef names, plus their items.
2393     '("\\(}\\)[ \t*]*\\sw"
2394       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2395        (goto-char (match-end 1)) nil
2396        (1 (if (match-beginning 4)
2397               font-lock-function-name-face
2398             font-lock-variable-name-face))))
2399     ;;
2400     ;; Fontify anything at beginning of line as a declaration or definition.
2401     '("^\\(\\sw+\\)\\>\\([ \t*]+\\sw+\\>\\)*"
2402       (1 font-lock-type-face)
2403       (font-lock-match-c++-style-declaration-item-and-skip-to-next
2404        (goto-char (or (match-beginning 2) (match-end 1))) nil
2405        (1 (cond ((match-beginning 2) 'font-lock-type-face)
2406                 ((match-beginning 4) 'font-lock-function-name-face)
2407                 (t 'font-lock-variable-name-face)))
2408        (3 (if (match-beginning 4)
2409               'font-lock-function-name-face
2410             'font-lock-variable-name-face) nil t)))
2411     )))
2412  )
2413
2414 (defvar c-font-lock-keywords c-font-lock-keywords-1
2415   "Default expressions to highlight in C mode.")
2416
2417 (defvar c++-font-lock-keywords c++-font-lock-keywords-1
2418   "Default expressions to highlight in C++ mode.")
2419 \f
2420 ;;; Java.
2421
2422 ;; Java support has been written by XEmacs people, and it's apparently
2423 ;; totally divergent from the FSF.  I don't know if it's better or
2424 ;; worse, so I'm leaving it in until someone convinces me the FSF
2425 ;; version is better.  --hniksic
2426
2427 (defconst java-font-lock-keywords-1 nil
2428  "For consideration as a value of `java-font-lock-keywords'.
2429 This does fairly subdued highlighting.")
2430
2431 (defconst java-font-lock-keywords-2 nil
2432  "For consideration as a value of `java-font-lock-keywords'.
2433 This adds highlighting of types and identifier names.")
2434
2435 (defconst java-font-lock-keywords-3 nil
2436  "For consideration as a value of `java-font-lock-keywords'.
2437 This adds highlighting of Java documentation tags, such as @see.")
2438
2439 (defvar java-font-lock-type-regexp
2440   (concat "\\<\\(boolean\\|byte\\|char\\|double\\|float\\|int"
2441          "\\|long\\|short\\|void\\)\\>")
2442   "Regexp which should match a primitive type.")
2443
2444 (defvar java-font-lock-identifier-regexp
2445   (let ((letter "a-zA-Z_$\300-\326\330-\366\370-\377")
2446         (digit  "0-9"))
2447     (concat "\\<\\([" letter "][" letter digit "]*\\)\\>"))
2448   "Regexp which should match all Java identifiers.")
2449
2450 (defvar java-font-lock-class-name-regexp
2451   (let ((capital-letter "A-Z\300-\326\330-\337")
2452         (letter "a-zA-Z_$\300-\326\330-\366\370-\377")
2453         (digit  "0-9"))
2454     (concat "\\<\\([" capital-letter "][" letter digit "]*\\)\\>"))
2455   "Regexp which should match a class or an interface name.
2456 The name is assumed to begin with a capital letter.")
2457
2458 (let ((java-modifier-regexp
2459        (concat "\\<\\(abstract\\|const\\|final\\|native\\|"
2460                "private\\|protected\\|public\\|"
2461                "static\\|synchronized\\|transient\\|volatile\\)\\>")))
2462
2463   ;; Basic font-lock support:
2464   (setq java-font-lock-keywords-1
2465         (list
2466          ;; Keywords:
2467          (list        
2468           (concat
2469            "\\<\\("
2470            "break\\|byvalue\\|"
2471            "case\\|cast\\|catch\\|class\\|continue\\|"
2472            "do\\|else\\|extends\\|"
2473            "finally\\|for\\|future\\|"
2474            "generic\\|goto\\|"
2475            "if\\|implements\\|import\\|"
2476            "instanceof\\|interface\\|"
2477            "new\\|package\\|return\\|switch\\|"
2478            "throws?\\|try\\|while\\)\\>")
2479           1 'font-lock-keyword-face)
2480
2481          ;; Modifiers:
2482          (list java-modifier-regexp 1 font-lock-type-face)
2483
2484          ;; Special constants:
2485          '("\\<\\(this\\|super\\)\\>" (1 font-lock-reference-face))
2486          '("\\<\\(false\\|null\\|true\\)\\>" (1 font-lock-keyword-face))
2487
2488          ;; Class names:
2489          (list (concat "\\<\\(class\\|interface\\)\\>\\s *"
2490                        java-font-lock-identifier-regexp)
2491                2 'font-lock-function-name-face)
2492         
2493          ;; Package declarations:
2494          (list (concat "\\<\\(package\\|import\\)\\>\\s *"
2495                        java-font-lock-identifier-regexp)
2496                '(2 font-lock-reference-face)
2497                (list (concat
2498                       "\\=\\.\\(" java-font-lock-identifier-regexp "\\)")
2499                      nil nil '(1 (if (equal (char-after (match-end 0)) ?.)
2500                                      'font-lock-reference-face
2501                                    'font-lock-type-face))))
2502          
2503          ;; Constructors:
2504          (list (concat
2505                 "^\\s *\\(" java-modifier-regexp "\\s +\\)*"
2506                 java-font-lock-class-name-regexp "\\s *\(")
2507                (list 3
2508                      '(condition-case nil
2509                           (save-excursion
2510                             (goto-char (scan-sexps (- (match-end 0) 1) 1))
2511                             (parse-partial-sexp (point) (point-max) nil t)
2512                             (and (looking-at "\\($\\|\\<throws\\>\\|{\\)")
2513                                  'font-lock-function-name-face))
2514                         (error 'font-lock-function-name-face))))
2515
2516          ;; Methods:
2517          (list (concat "\\(" java-font-lock-type-regexp "\\|"
2518                        java-font-lock-class-name-regexp "\\)"
2519                        "\\s *\\(\\[\\s *\\]\\s *\\)*"
2520                        java-font-lock-identifier-regexp "\\s *\(")
2521                5
2522                'font-lock-function-name-face)
2523
2524          ;; Labels:
2525          (list ":"
2526                (list
2527                 (concat "^\\s *" java-font-lock-identifier-regexp "\\s *:")
2528                 '(beginning-of-line) '(end-of-line)
2529                 '(1 font-lock-reference-face)))
2530
2531          ;; `break' and continue' destination labels:
2532          (list (concat "\\<\\(break\\|continue\\)\\>\\s *"
2533                        java-font-lock-identifier-regexp)
2534                2 'font-lock-reference-face)
2535
2536          ;; Case statements:
2537          ;; In Java, any constant expression is allowed.
2538          '("\\<case\\>\\s *\\(.*\\):" 1 font-lock-reference-face)))
2539
2540   ;; Types and declared variable names:
2541   (setq java-font-lock-keywords-2
2542         (append 
2543
2544          java-font-lock-keywords-1
2545          (list
2546           ;; Keywords followed by a type:
2547           (list (concat "\\<\\(extends\\|instanceof\\|new\\)\\>\\s *"
2548                         java-font-lock-identifier-regexp)
2549                 '(2 (if (equal (char-after (match-end 0)) ?.)
2550                         'font-lock-reference-face 'font-lock-type-face))
2551                 (list (concat "\\=\\." java-font-lock-identifier-regexp)
2552                       '(goto-char (match-end 0)) nil
2553                       '(1 (if (equal (char-after (match-end 0)) ?.)
2554                               'font-lock-reference-face 'font-lock-type-face))))
2555
2556           ;; Keywords followed by a type list:
2557           (list (concat "\\<\\(implements\\|throws\\)\\>\\ s*"
2558                         java-font-lock-identifier-regexp)
2559                 '(2 (if (equal (char-after (match-end 0)) ?.)
2560                         font-lock-reference-face font-lock-type-face))
2561                 (list (concat "\\=\\(\\.\\|\\s *\\(,\\)\\s *\\)"
2562                               java-font-lock-identifier-regexp)
2563                       '(goto-char (match-end 0)) nil
2564                       '(3 (if (equal (char-after (match-end 0)) ?.)
2565                               font-lock-reference-face font-lock-type-face))))
2566
2567           ;; primitive types, can't be confused with anything else.
2568           (list java-font-lock-type-regexp
2569                 '(1 font-lock-type-face)
2570                 '(font-lock-match-java-declarations
2571                   (goto-char (match-end 0))
2572                   (goto-char (match-end 0))
2573                   (0 font-lock-variable-name-face)))
2574
2575           ;; Declarations, class types and capitalized variables:
2576           ;;
2577           ;; Declarations are easy to recognize.  Capitalized words
2578           ;; followed by a closing parenthesis are treated as casts if they
2579           ;; also are followed by an expression.  Expressions beginning with
2580           ;; a unary numerical operator, e.g. +, can't be cast to an object
2581           ;; type.
2582           ;;
2583           ;; The path of a fully qualified type, e.g. java.lang.Foo, is
2584           ;; fontified in the reference face.
2585           ;;
2586           ;; An access to a static field, e.g. System.out.println, is
2587           ;; not fontified since it can't be distinguished from the
2588           ;; usage of a capitalized variable, e.g. Foo.out.println.
2589
2590           (list (concat java-font-lock-class-name-regexp
2591                         "\\s *\\(\\[\\s *\\]\\s *\\)*"
2592                         "\\(\\<\\|$\\|)\\s *\\([\(\"]\\|\\<\\)\\)")
2593                 '(1 (save-match-data
2594                       (save-excursion
2595                         (goto-char
2596                          (match-beginning 3))
2597                         (if (not (looking-at "\\<instanceof\\>"))
2598                             'font-lock-type-face))))
2599                 (list (concat "\\=" java-font-lock-identifier-regexp "\\.")
2600                       '(progn
2601                          (goto-char (match-beginning 0))
2602                          (while (or (= (preceding-char) ?.)
2603                                     (= (char-syntax (preceding-char)) ?w))
2604                            (backward-char)))
2605                       '(goto-char (match-end 0))
2606                       '(1 font-lock-reference-face)
2607                       '(0 nil))         ; Workaround for bug in XEmacs.
2608                 '(font-lock-match-java-declarations
2609                   (goto-char (match-end 1))
2610                   (goto-char (match-end 0))
2611                   (1 font-lock-variable-name-face))))))
2612         
2613   ;; Modifier keywords and Java doc tags
2614   (setq java-font-lock-keywords-3
2615         (append
2616  
2617          '(
2618            ;; Feature scoping:
2619            ;; These must come first or the Modifiers from keywords-1 will
2620            ;; catch them.  We don't want to use override fontification here
2621            ;; because then these terms will be fontified within comments.
2622            ("\\<private\\>"   0 font-lock-string-face)
2623            ("\\<protected\\>" 0 font-lock-preprocessor-face)
2624            ("\\<public\\>"    0 font-lock-reference-face))
2625          java-font-lock-keywords-2
2626  
2627          (list
2628
2629           ;; Javadoc tags
2630           '("@\\(author\\|deprecated\\|exception\\|throws\\|param\\|return\\|see\\|since\\|version\\|serial\\|serialData\\|serialField\\)\\s "
2631             0 font-lock-keyword-face t)
2632
2633           ;; Doc tag - Parameter identifiers
2634           (list (concat "@param\\s +" java-font-lock-identifier-regexp)
2635                 1 'font-lock-variable-name-face t)
2636
2637           ;; Doc tag - Exception types
2638           (list (concat "@\\(exception\\|throws\\)\\s +"
2639                         java-font-lock-identifier-regexp)
2640                 '(2 (if (equal (char-after (match-end 0)) ?.)
2641                         font-lock-reference-face font-lock-type-face) t)
2642                 (list (concat "\\=\\." java-font-lock-identifier-regexp)
2643                       '(goto-char (match-end 0)) nil
2644                       '(1 (if (equal (char-after (match-end 0)) ?.)
2645                               'font-lock-reference-face 'font-lock-type-face) t)))
2646     
2647           ;; Doc tag - Cross-references, usually to methods 
2648           '("@see\\s +\\(\\S *[^][ \t\n\r\f(){},.;:]\\)"
2649             1 font-lock-function-name-face t)
2650     
2651           ;; Doc tag - docRoot (1.3)
2652           '("\\({ *@docRoot *}\\)"
2653             0 font-lock-keyword-face t)
2654           ;; Doc tag - beaninfo, unofficial but widely used, even by Sun
2655           '("\\(@beaninfo\\)"
2656             0 font-lock-keyword-face t)
2657           ;; Doc tag - Links
2658           '("{ *@link\\s +\\([^}]+\\)}"
2659             0 font-lock-keyword-face t)
2660           ;; Doc tag - Links
2661           '("{ *@link\\s +\\(\\(\\S +\\)\\|\\(\\S +\\s +\\S +\\)\\) *}"
2662             1 font-lock-function-name-face t)
2663     
2664           )))
2665   )
2666
2667 (defvar java-font-lock-keywords java-font-lock-keywords-1
2668   "Additional expressions to highlight in Java mode.")
2669
2670 ;; Match and move over any declaration/definition item after
2671 ;; point.  Does not match items which look like a type declaration
2672 ;; (primitive types and class names, i.e. capitalized words.)
2673 ;; Should the variable name be followed by a comma, we reposition
2674 ;; the cursor to fontify more identifiers.
2675 (defun font-lock-match-java-declarations (limit)
2676   "Match and skip over variable definitions."
2677   (if (looking-at "\\s *\\(\\[\\s *\\]\\s *\\)*")
2678       (goto-char (match-end 0)))
2679   (and
2680    (looking-at java-font-lock-identifier-regexp)
2681    (save-match-data
2682      (not (string-match java-font-lock-type-regexp
2683                         (buffer-substring (match-beginning 1)
2684                                           (match-end 1)))))
2685    (save-match-data
2686      (save-excursion
2687        (goto-char (match-beginning 1))
2688        (not (looking-at
2689              (concat java-font-lock-class-name-regexp
2690                      "\\s *\\(\\[\\s *\\]\\s *\\)*\\<")))))
2691    (save-match-data
2692      (condition-case nil
2693          (save-restriction
2694            (narrow-to-region (point-min) limit)
2695            (goto-char (match-end 0))
2696            ;; Note: Both `scan-sexps' and the second goto-char can
2697            ;; generate an error which is caught by the
2698            ;; `condition-case' expression.
2699            (while (not (looking-at "\\s *\\(\\(,\\)\\|;\\|$\\)"))
2700              (goto-char (or (scan-sexps (point) 1) (point-max))))
2701            (goto-char (match-end 2)))   ; non-nil
2702        (error t)))))
2703
2704
2705 (defvar tex-font-lock-keywords
2706 ;  ;; Regexps updated with help from Ulrik Dickow <dickow@nbi.dk>.
2707 ;  '(("\\\\\\(begin\\|end\\|newcommand\\){\\([a-zA-Z0-9\\*]+\\)}"
2708 ;     2 font-lock-function-name-face)
2709 ;    ("\\\\\\(cite\\|label\\|pageref\\|ref\\){\\([^} \t\n]+\\)}"
2710 ;     2 font-lock-reference-face)
2711 ;    ;; It seems a bit dubious to use `bold' and `italic' faces since we might
2712 ;    ;; not be able to display those fonts.
2713 ;    ("{\\\\bf\\([^}]+\\)}" 1 'bold keep)
2714 ;    ("{\\\\\\(em\\|it\\|sl\\)\\([^}]+\\)}" 2 'italic keep)
2715 ;    ("\\\\\\([a-zA-Z@]+\\|.\\)" . font-lock-keyword-face)
2716 ;    ("^[ \t\n]*\\\\def[\\\\@]\\(\\w+\\)" 1 font-lock-function-name-face keep))
2717   ;; Rewritten and extended for LaTeX2e by Ulrik Dickow <dickow@nbi.dk>.
2718   '(("\\\\\\(begin\\|end\\|newcommand\\){\\([a-zA-Z0-9\\*]+\\)}"
2719      2 font-lock-function-name-face)
2720     ("\\\\\\(cite\\|label\\|pageref\\|ref\\){\\([^} \t\n]+\\)}"
2721      2 font-lock-reference-face)
2722     ("^[ \t]*\\\\def\\\\\\(\\(\\w\\|@\\)+\\)" 1 font-lock-function-name-face)
2723     "\\\\\\([a-zA-Z@]+\\|.\\)"
2724     ;; It seems a bit dubious to use `bold' and `italic' faces since we might
2725     ;; not be able to display those fonts.
2726     ;; LaTeX2e: \emph{This is emphasized}.
2727     ("\\\\emph{\\([^}]+\\)}" 1 'italic keep)
2728     ;; LaTeX2e: \textbf{This is bold}, \textit{...}, \textsl{...}
2729     ("\\\\text\\(\\(bf\\)\\|it\\|sl\\){\\([^}]+\\)}"
2730      3 (if (match-beginning 2) 'bold 'italic) keep)
2731     ;; Old-style bf/em/it/sl. Stop at `\\' and un-escaped `&', for good tables.
2732     ("\\\\\\(\\(bf\\)\\|em\\|it\\|sl\\)\\>\\(\\([^}&\\]\\|\\\\[^\\]\\)+\\)"
2733      3 (if (match-beginning 2) 'bold 'italic) keep))
2734   "Default expressions to highlight in TeX modes.")
2735
2736 (defconst ksh-font-lock-keywords 
2737   (list
2738    '("\\(^\\|[^\$\\\]\\)#.*" . font-lock-comment-face)
2739    '("\\<\\(if\\|then\\|else\\|elif\\|fi\\|case\\|esac\\|for\\|do\\|done\\|foreach\\|in\\|end\\|select\\|while\\|repeat\\|time\\|function\\|until\\|exec\\|command\\|coproc\\|noglob\\|nohup\\|nocorrect\\|source\\|autoload\\|alias\\|unalias\\|export\\|set\\|echo\\|eval\\|cd\\|log\\|compctl\\)\\>" . font-lock-keyword-face)
2740    '("\\<\\[\\[.*\\]\\]\\>" . font-lock-type-face)
2741    '("\$\(.*\)" . font-lock-type-face)
2742    )
2743   "Additional expressions to highlight in ksh-mode.")
2744
2745 (defconst sh-font-lock-keywords 
2746   (list
2747    '("\\(^\\|[^\$\\\]\\)#.*" . font-lock-comment-face)
2748    '("\\<\\(if\\|then\\|else\\|elif\\|fi\\|case\\|esac\\|for\\|do\\|done\\|in\\|while\\|exec\\|export\\|set\\|echo\\|eval\\|cd\\)\\>" . font-lock-keyword-face)
2749    '("\\[.*\\]" . font-lock-type-face)
2750    '("`.*`" . font-lock-type-face)
2751    )
2752   "Additional expressions to highlight in sh-mode.")
2753
2754 \f
2755 ;; Install ourselves:
2756
2757 (add-hook 'find-file-hooks 'font-lock-set-defaults t)
2758
2759 ;;;###autoload
2760 (add-minor-mode 'font-lock-mode " Font")
2761
2762 ;; Provide ourselves:
2763
2764 (provide 'font-lock)
2765
2766 ;;; font-lock.el ends here