1.0.4.45: workaround for bug #412 & undefined variable cleanup
[sbcl.git] / src / compiler / ir1tran.lisp
1 ;;;; This file contains code which does the translation from Lisp code
2 ;;;; to the first intermediate representation (IR1).
3
4 ;;;; This software is part of the SBCL system. See the README file for
5 ;;;; more information.
6 ;;;;
7 ;;;; This software is derived from the CMU CL system, which was
8 ;;;; written at Carnegie Mellon University and released into the
9 ;;;; public domain. The software is in the public domain and is
10 ;;;; provided with absolutely no warranty. See the COPYING and CREDITS
11 ;;;; files for more information.
12
13 (in-package "SB!C")
14
15 (declaim (special *compiler-error-bailout*))
16
17 ;;; *SOURCE-PATHS* is a hashtable from source code forms to the path
18 ;;; taken through the source to reach the form. This provides a way to
19 ;;; keep track of the location of original source forms, even when
20 ;;; macroexpansions and other arbitary permutations of the code
21 ;;; happen. This table is initialized by calling FIND-SOURCE-PATHS on
22 ;;; the original source.
23 (declaim (hash-table *source-paths*))
24 (defvar *source-paths*)
25
26 ;;; *CURRENT-COMPONENT* is the COMPONENT structure which we link
27 ;;; blocks into as we generate them. This just serves to glue the
28 ;;; emitted blocks together until local call analysis and flow graph
29 ;;; canonicalization figure out what is really going on. We need to
30 ;;; keep track of all the blocks generated so that we can delete them
31 ;;; if they turn out to be unreachable.
32 ;;;
33 ;;; FIXME: It's confusing having one variable named *CURRENT-COMPONENT*
34 ;;; and another named *COMPONENT-BEING-COMPILED*. (In CMU CL they
35 ;;; were called *CURRENT-COMPONENT* and *COMPILE-COMPONENT* respectively,
36 ;;; which was also confusing.)
37 (declaim (type (or component null) *current-component*))
38 (defvar *current-component*)
39
40 ;;; *CURRENT-PATH* is the source path of the form we are currently
41 ;;; translating. See NODE-SOURCE-PATH in the NODE structure.
42 (declaim (list *current-path*))
43 (defvar *current-path*)
44
45 (defvar *derive-function-types* nil
46   "Should the compiler assume that function types will never change,
47   so that it can use type information inferred from current definitions
48   to optimize code which uses those definitions? Setting this true
49   gives non-ANSI, early-CMU-CL behavior. It can be useful for improving
50   the efficiency of stable code.")
51
52 (defvar *fun-names-in-this-file* nil)
53
54 (defvar *post-binding-variable-lexenv* nil)
55 \f
56 ;;;; namespace management utilities
57
58 (defun fun-lexically-notinline-p (name)
59   (let ((fun (lexenv-find name funs :test #'equal)))
60     ;; a declaration will trump a proclamation
61     (if (and fun (defined-fun-p fun))
62         (eq (defined-fun-inlinep fun) :notinline)
63         (eq (info :function :inlinep name) :notinline))))
64
65 ;;; Return a GLOBAL-VAR structure usable for referencing the global
66 ;;; function NAME.
67 (defun find-global-fun (name latep)
68   (unless (info :function :kind name)
69     (setf (info :function :kind name) :function)
70     (setf (info :function :where-from name) :assumed))
71   (let ((where (info :function :where-from name)))
72     (when (and (eq where :assumed)
73                ;; In the ordinary target Lisp, it's silly to report
74                ;; undefinedness when the function is defined in the
75                ;; running Lisp. But at cross-compile time, the current
76                ;; definedness of a function is irrelevant to the
77                ;; definedness at runtime, which is what matters.
78                #-sb-xc-host (not (fboundp name))
79                ;; LATEP is true when the user has indicated that
80                ;; late-late binding is desired by using eg. a quoted
81                ;; symbol -- in which case it makes little sense to
82                ;; complain about undefined functions.
83                (not latep))
84       (note-undefined-reference name :function))
85     (make-global-var
86      :kind :global-function
87      :%source-name name
88      :type (if (and (not latep)
89                     (or *derive-function-types*
90                         (eq where :declared)
91                         (and (member name *fun-names-in-this-file*
92                                      :test #'equal)
93                              (not (fun-lexically-notinline-p name)))))
94                (info :function :type name)
95                (specifier-type 'function))
96      :where-from where)))
97
98 ;;; Has the *FREE-FUNS* entry FREE-FUN become invalid?
99 ;;;
100 ;;; In CMU CL, the answer was implicitly always true, so this
101 ;;; predicate didn't exist.
102 ;;;
103 ;;; This predicate was added to fix bug 138 in SBCL. In some obscure
104 ;;; circumstances, it was possible for a *FREE-FUNS* entry to contain a
105 ;;; DEFINED-FUN whose DEFINED-FUN-FUNCTIONAL object contained IR1
106 ;;; stuff (NODEs, BLOCKs...) referring to an already compiled (aka
107 ;;; "dead") component. When this IR1 stuff was reused in a new
108 ;;; component, under further obscure circumstances it could be used by
109 ;;; WITH-IR1-ENVIRONMENT-FROM-NODE to generate a binding for
110 ;;; *CURRENT-COMPONENT*. At that point things got all confused, since
111 ;;; IR1 conversion was sending code to a component which had already
112 ;;; been compiled and would never be compiled again.
113 (defun invalid-free-fun-p (free-fun)
114   ;; There might be other reasons that *FREE-FUN* entries could
115   ;; become invalid, but the only one we've been bitten by so far
116   ;; (sbcl-0.pre7.118) is this one:
117   (and (defined-fun-p free-fun)
118        (let ((functional (defined-fun-functional free-fun)))
119          (or (and functional
120                   (eql (functional-kind functional) :deleted))
121              (and (lambda-p functional)
122                   (or
123                    ;; (The main reason for this first test is to bail
124                    ;; out early in cases where the LAMBDA-COMPONENT
125                    ;; call in the second test would fail because links
126                    ;; it needs are uninitialized or invalid.)
127                    ;;
128                    ;; If the BIND node for this LAMBDA is null, then
129                    ;; according to the slot comments, the LAMBDA has
130                    ;; been deleted or its call has been deleted. In
131                    ;; that case, it seems rather questionable to reuse
132                    ;; it, and certainly it shouldn't be necessary to
133                    ;; reuse it, so we cheerfully declare it invalid.
134                    (null (lambda-bind functional))
135                    ;; If this IR1 stuff belongs to a dead component,
136                    ;; then we can't reuse it without getting into
137                    ;; bizarre confusion.
138                    (eql (component-info (lambda-component functional))
139                         :dead)))))))
140
141 ;;; If NAME already has a valid entry in *FREE-FUNS*, then return
142 ;;; the value. Otherwise, make a new GLOBAL-VAR using information from
143 ;;; the global environment and enter it in *FREE-FUNS*. If NAME
144 ;;; names a macro or special form, then we error out using the
145 ;;; supplied context which indicates what we were trying to do that
146 ;;; demanded a function.
147 (declaim (ftype (sfunction (t string) global-var) find-free-fun))
148 (defun find-free-fun (name context)
149   (or (let ((old-free-fun (gethash name *free-funs*)))
150         (and (not (invalid-free-fun-p old-free-fun))
151              old-free-fun))
152       (ecase (info :function :kind name)
153         ;; FIXME: The :MACRO and :SPECIAL-FORM cases could be merged.
154         (:macro
155          (compiler-error "The macro name ~S was found ~A." name context))
156         (:special-form
157          (compiler-error "The special form name ~S was found ~A."
158                          name
159                          context))
160         ((:function nil)
161          (check-fun-name name)
162          (note-if-setf-fun-and-macro name)
163          (let ((expansion (fun-name-inline-expansion name))
164                (inlinep (info :function :inlinep name)))
165            (setf (gethash name *free-funs*)
166                  (if (or expansion inlinep)
167                      (make-defined-fun
168                       :%source-name name
169                       :inline-expansion expansion
170                       :inlinep inlinep
171                       :where-from (info :function :where-from name)
172                       :type (if (eq inlinep :notinline)
173                                 (specifier-type 'function)
174                                 (info :function :type name)))
175                      (find-global-fun name nil))))))))
176
177 ;;; Return the LEAF structure for the lexically apparent function
178 ;;; definition of NAME.
179 (declaim (ftype (sfunction (t string) leaf) find-lexically-apparent-fun))
180 (defun find-lexically-apparent-fun (name context)
181   (let ((var (lexenv-find name funs :test #'equal)))
182     (cond (var
183            (unless (leaf-p var)
184              (aver (and (consp var) (eq (car var) 'macro)))
185              (compiler-error "found macro name ~S ~A" name context))
186            var)
187           (t
188            (find-free-fun name context)))))
189
190 ;;; Return the LEAF node for a global variable reference to NAME. If
191 ;;; NAME is already entered in *FREE-VARS*, then we just return the
192 ;;; corresponding value. Otherwise, we make a new leaf using
193 ;;; information from the global environment and enter it in
194 ;;; *FREE-VARS*. If the variable is unknown, then we emit a warning.
195 (declaim (ftype (sfunction (t) (or leaf cons heap-alien-info)) find-free-var))
196 (defun find-free-var (name)
197   (unless (symbolp name)
198     (compiler-error "Variable name is not a symbol: ~S." name))
199   (or (gethash name *free-vars*)
200       (let ((kind (info :variable :kind name))
201             (type (info :variable :type name))
202             (where-from (info :variable :where-from name)))
203         (when (and (eq where-from :assumed) (eq kind :global))
204           (note-undefined-reference name :variable))
205         (setf (gethash name *free-vars*)
206               (case kind
207                 (:alien
208                  (info :variable :alien-info name))
209                 ;; FIXME: The return value in this case should really be
210                 ;; of type SB!C::LEAF.  I don't feel too badly about it,
211                 ;; because the MACRO idiom is scattered throughout this
212                 ;; file, but it should be cleaned up so we're not
213                 ;; throwing random conses around.  --njf 2002-03-23
214                 (:macro
215                  (let ((expansion (info :variable :macro-expansion name))
216                        (type (type-specifier (info :variable :type name))))
217                    `(macro . (the ,type ,expansion))))
218                 (:constant
219                  (let ((value (info :variable :constant-value name)))
220                    (make-constant :value value
221                                   :%source-name name
222                                   :type (ctype-of value)
223                                   :where-from where-from)))
224                 (t
225                  (make-global-var :kind kind
226                                   :%source-name name
227                                   :type type
228                                   :where-from where-from)))))))
229 \f
230 ;;; Grovel over CONSTANT checking for any sub-parts that need to be
231 ;;; processed with MAKE-LOAD-FORM. We have to be careful, because
232 ;;; CONSTANT might be circular. We also check that the constant (and
233 ;;; any subparts) are dumpable at all.
234 (eval-when (:compile-toplevel :load-toplevel :execute)
235   ;; The EVAL-WHEN is necessary for #.(1+ LIST-TO-HASH-TABLE-THRESHOLD)
236   ;; below. -- AL 20010227
237   (def!constant list-to-hash-table-threshold 32))
238 (defun maybe-emit-make-load-forms (constant)
239   (let ((things-processed nil)
240         (count 0))
241     ;; FIXME: Does this LIST-or-HASH-TABLE messiness give much benefit?
242     (declare (type (or list hash-table) things-processed)
243              (type (integer 0 #.(1+ list-to-hash-table-threshold)) count)
244              (inline member))
245     (labels ((grovel (value)
246                ;; Unless VALUE is an object which which obviously
247                ;; can't contain other objects
248                (unless (typep value
249                               '(or #-sb-xc-host unboxed-array
250                                    #+sb-xc-host (simple-array (unsigned-byte 8) (*))
251                                    symbol
252                                    number
253                                    character
254                                    string))
255                  (etypecase things-processed
256                    (list
257                     (when (member value things-processed :test #'eq)
258                       (return-from grovel nil))
259                     (push value things-processed)
260                     (incf count)
261                     (when (> count list-to-hash-table-threshold)
262                       (let ((things things-processed))
263                         (setf things-processed
264                               (make-hash-table :test 'eq))
265                         (dolist (thing things)
266                           (setf (gethash thing things-processed) t)))))
267                    (hash-table
268                     (when (gethash value things-processed)
269                       (return-from grovel nil))
270                     (setf (gethash value things-processed) t)))
271                  (typecase value
272                    (cons
273                     (grovel (car value))
274                     (grovel (cdr value)))
275                    (simple-vector
276                     (dotimes (i (length value))
277                       (grovel (svref value i))))
278                    ((vector t)
279                     (dotimes (i (length value))
280                       (grovel (aref value i))))
281                    ((simple-array t)
282                     ;; Even though the (ARRAY T) branch does the exact
283                     ;; same thing as this branch we do this separately
284                     ;; so that the compiler can use faster versions of
285                     ;; array-total-size and row-major-aref.
286                     (dotimes (i (array-total-size value))
287                       (grovel (row-major-aref value i))))
288                    ((array t)
289                     (dotimes (i (array-total-size value))
290                       (grovel (row-major-aref value i))))
291                    (;; In the target SBCL, we can dump any instance,
292                     ;; but in the cross-compilation host,
293                     ;; %INSTANCE-FOO functions don't work on general
294                     ;; instances, only on STRUCTURE!OBJECTs.
295                     #+sb-xc-host structure!object
296                     #-sb-xc-host instance
297                     (when (emit-make-load-form value)
298                       (dotimes (i (- (%instance-length value)
299                                      #+sb-xc-host 0
300                                      #-sb-xc-host (layout-n-untagged-slots
301                                                    (%instance-ref value 0))))
302                         (grovel (%instance-ref value i)))))
303                    (t
304                     (compiler-error
305                      "Objects of type ~S can't be dumped into fasl files."
306                      (type-of value)))))))
307       (grovel constant)))
308   (values))
309 \f
310 ;;;; some flow-graph hacking utilities
311
312 ;;; This function sets up the back link between the node and the
313 ;;; ctran which continues at it.
314 (defun link-node-to-previous-ctran (node ctran)
315   (declare (type node node) (type ctran ctran))
316   (aver (not (ctran-next ctran)))
317   (setf (ctran-next ctran) node)
318   (setf (node-prev node) ctran))
319
320 ;;; This function is used to set the ctran for a node, and thus
321 ;;; determine what is evaluated next. If the ctran has no block, then
322 ;;; we make it be in the block that the node is in. If the ctran heads
323 ;;; its block, we end our block and link it to that block.
324 #!-sb-fluid (declaim (inline use-ctran))
325 (defun use-ctran (node ctran)
326   (declare (type node node) (type ctran ctran))
327   (if (eq (ctran-kind ctran) :unused)
328       (let ((node-block (ctran-block (node-prev node))))
329         (setf (ctran-block ctran) node-block)
330         (setf (ctran-kind ctran) :inside-block)
331         (setf (ctran-use ctran) node)
332         (setf (node-next node) ctran))
333       (%use-ctran node ctran)))
334 (defun %use-ctran (node ctran)
335   (declare (type node node) (type ctran ctran) (inline member))
336   (let ((block (ctran-block ctran))
337         (node-block (ctran-block (node-prev node))))
338     (aver (eq (ctran-kind ctran) :block-start))
339     (when (block-last node-block)
340       (error "~S has already ended." node-block))
341     (setf (block-last node-block) node)
342     (when (block-succ node-block)
343       (error "~S already has successors." node-block))
344     (setf (block-succ node-block) (list block))
345     (when (memq node-block (block-pred block))
346       (error "~S is already a predecessor of ~S." node-block block))
347     (push node-block (block-pred block))))
348
349 ;;; This function is used to set the ctran for a node, and thus
350 ;;; determine what receives the value.
351 (defun use-lvar (node lvar)
352   (declare (type valued-node node) (type (or lvar null) lvar))
353   (aver (not (node-lvar node)))
354   (when lvar
355     (setf (node-lvar node) lvar)
356     (cond ((null (lvar-uses lvar))
357            (setf (lvar-uses lvar) node))
358           ((listp (lvar-uses lvar))
359            (aver (not (memq node (lvar-uses lvar))))
360            (push node (lvar-uses lvar)))
361           (t
362            (aver (neq node (lvar-uses lvar)))
363            (setf (lvar-uses lvar) (list node (lvar-uses lvar)))))
364     (reoptimize-lvar lvar)))
365
366 #!-sb-fluid(declaim (inline use-continuation))
367 (defun use-continuation (node ctran lvar)
368   (use-ctran node ctran)
369   (use-lvar node lvar))
370 \f
371 ;;;; exported functions
372
373 ;;; This function takes a form and the top level form number for that
374 ;;; form, and returns a lambda representing the translation of that
375 ;;; form in the current global environment. The returned lambda is a
376 ;;; top level lambda that can be called to cause evaluation of the
377 ;;; forms. This lambda is in the initial component. If FOR-VALUE is T,
378 ;;; then the value of the form is returned from the function,
379 ;;; otherwise NIL is returned.
380 ;;;
381 ;;; This function may have arbitrary effects on the global environment
382 ;;; due to processing of EVAL-WHENs. All syntax error checking is
383 ;;; done, with erroneous forms being replaced by a proxy which signals
384 ;;; an error if it is evaluated. Warnings about possibly inconsistent
385 ;;; or illegal changes to the global environment will also be given.
386 ;;;
387 ;;; We make the initial component and convert the form in a PROGN (and
388 ;;; an optional NIL tacked on the end.) We then return the lambda. We
389 ;;; bind all of our state variables here, rather than relying on the
390 ;;; global value (if any) so that IR1 conversion will be reentrant.
391 ;;; This is necessary for EVAL-WHEN processing, etc.
392 ;;;
393 ;;; The hashtables used to hold global namespace info must be
394 ;;; reallocated elsewhere. Note also that *LEXENV* is not bound, so
395 ;;; that local macro definitions can be introduced by enclosing code.
396 (defun ir1-toplevel (form path for-value)
397   (declare (list path))
398   (let* ((*current-path* path)
399          (component (make-empty-component))
400          (*current-component* component)
401          (*allow-instrumenting* t))
402     (setf (component-name component) 'initial-component)
403     (setf (component-kind component) :initial)
404     (let* ((forms (if for-value `(,form) `(,form nil)))
405            (res (ir1-convert-lambda-body
406                  forms ()
407                  :debug-name (debug-name 'top-level-form form))))
408       (setf (functional-entry-fun res) res
409             (functional-arg-documentation res) ()
410             (functional-kind res) :toplevel)
411       res)))
412
413 ;;; *CURRENT-FORM-NUMBER* is used in FIND-SOURCE-PATHS to compute the
414 ;;; form number to associate with a source path. This should be bound
415 ;;; to an initial value of 0 before the processing of each truly
416 ;;; top level form.
417 (declaim (type index *current-form-number*))
418 (defvar *current-form-number*)
419
420 ;;; This function is called on freshly read forms to record the
421 ;;; initial location of each form (and subform.) Form is the form to
422 ;;; find the paths in, and TLF-NUM is the top level form number of the
423 ;;; truly top level form.
424 ;;;
425 ;;; This gets a bit interesting when the source code is circular. This
426 ;;; can (reasonably?) happen in the case of circular list constants.
427 (defun find-source-paths (form tlf-num)
428   (declare (type index tlf-num))
429   (let ((*current-form-number* 0))
430     (sub-find-source-paths form (list tlf-num)))
431   (values))
432 (defun sub-find-source-paths (form path)
433   (unless (gethash form *source-paths*)
434     (setf (gethash form *source-paths*)
435           (list* 'original-source-start *current-form-number* path))
436     (incf *current-form-number*)
437     (let ((pos 0)
438           (subform form)
439           (trail form))
440       (declare (fixnum pos))
441       (macrolet ((frob ()
442                    '(progn
443                       (when (atom subform) (return))
444                       (let ((fm (car subform)))
445                         (when (consp fm)
446                           (sub-find-source-paths fm (cons pos path)))
447                         (incf pos))
448                       (setq subform (cdr subform))
449                       (when (eq subform trail) (return)))))
450         (loop
451           (frob)
452           (frob)
453           (setq trail (cdr trail)))))))
454 \f
455 ;;;; IR1-CONVERT, macroexpansion and special form dispatching
456
457 (declaim (ftype (sfunction (ctran ctran (or lvar null) t) (values))
458                 ir1-convert))
459 (macrolet (;; Bind *COMPILER-ERROR-BAILOUT* to a function that throws
460            ;; out of the body and converts a condition signalling form
461            ;; instead. The source form is converted to a string since it
462            ;; may contain arbitrary non-externalizable objects.
463            (ir1-error-bailout ((start next result form) &body body)
464              (with-unique-names (skip condition)
465                `(block ,skip
466                  (let ((,condition (catch 'ir1-error-abort
467                                      (let ((*compiler-error-bailout*
468                                             (lambda (&optional e)
469                                               (throw 'ir1-error-abort e))))
470                                        ,@body
471                                        (return-from ,skip nil)))))
472                    (ir1-convert ,start ,next ,result
473                                 (make-compiler-error-form ,condition
474                                                           ,form)))))))
475
476   ;; Translate FORM into IR1. The code is inserted as the NEXT of the
477   ;; CTRAN START. RESULT is the LVAR which receives the value of the
478   ;; FORM to be translated. The translators call this function
479   ;; recursively to translate their subnodes.
480   ;;
481   ;; As a special hack to make life easier in the compiler, a LEAF
482   ;; IR1-converts into a reference to that LEAF structure. This allows
483   ;; the creation using backquote of forms that contain leaf
484   ;; references, without having to introduce dummy names into the
485   ;; namespace.
486   (defun ir1-convert (start next result form)
487     (ir1-error-bailout (start next result form)
488       (let ((*current-path* (or (gethash form *source-paths*)
489                                 (cons form *current-path*))))
490         (cond ((atom form)
491                (cond ((and (symbolp form) (not (keywordp form)))
492                       (ir1-convert-var start next result form))
493                      ((leaf-p form)
494                       (reference-leaf start next result form))
495                      (t
496                       (reference-constant start next result form))))
497               (t
498                (ir1-convert-functoid start next result form)))))
499     (values))
500
501   ;; Generate a reference to a manifest constant, creating a new leaf
502   ;; if necessary. If we are producing a fasl file, make sure that
503   ;; MAKE-LOAD-FORM gets used on any parts of the constant that it
504   ;; needs to be.
505   (defun reference-constant (start next result value)
506     (declare (type ctran start next)
507              (type (or lvar null) result)
508              (inline find-constant))
509     (ir1-error-bailout (start next result value)
510      (when (producing-fasl-file)
511        (maybe-emit-make-load-forms value))
512      (let* ((leaf (find-constant value))
513             (res (make-ref leaf)))
514        (push res (leaf-refs leaf))
515        (link-node-to-previous-ctran res start)
516        (use-continuation res next result)))
517     (values)))
518
519 ;;; Add FUNCTIONAL to the COMPONENT-REANALYZE-FUNCTIONALS, unless it's
520 ;;; some trivial type for which reanalysis is a trivial no-op, or
521 ;;; unless it doesn't belong in this component at all.
522 ;;;
523 ;;; FUNCTIONAL is returned.
524 (defun maybe-reanalyze-functional (functional)
525
526   (aver (not (eql (functional-kind functional) :deleted))) ; bug 148
527   (aver-live-component *current-component*)
528
529   ;; When FUNCTIONAL is of a type for which reanalysis isn't a trivial
530   ;; no-op
531   (when (typep functional '(or optional-dispatch clambda))
532
533     ;; When FUNCTIONAL knows its component
534     (when (lambda-p functional)
535       (aver (eql (lambda-component functional) *current-component*)))
536
537     (pushnew functional
538              (component-reanalyze-functionals *current-component*)))
539
540   functional)
541
542 ;;; Generate a REF node for LEAF, frobbing the LEAF structure as
543 ;;; needed. If LEAF represents a defined function which has already
544 ;;; been converted, and is not :NOTINLINE, then reference the
545 ;;; functional instead.
546 (defun reference-leaf (start next result leaf)
547   (declare (type ctran start next) (type (or lvar null) result) (type leaf leaf))
548   (when (functional-p leaf)
549     (assure-functional-live-p leaf))
550   (let* ((type (lexenv-find leaf type-restrictions))
551          (leaf (or (and (defined-fun-p leaf)
552                         (not (eq (defined-fun-inlinep leaf)
553                                  :notinline))
554                         (let ((functional (defined-fun-functional leaf)))
555                           (when (and functional
556                                      (not (functional-kind functional))
557                                      ;; Bug MISC.320: ir1-transform
558                                      ;; can create a reference to a
559                                      ;; inline-expanded function,
560                                      ;; defined in another component.
561                                      (not (and (lambda-p functional)
562                                                (neq (lambda-component functional)
563                                                     *current-component*))))
564                             (maybe-reanalyze-functional functional))))
565                    (when (and (lambda-p leaf)
566                               (memq (functional-kind leaf)
567                                     '(nil :optional)))
568                      (maybe-reanalyze-functional leaf))
569                    leaf))
570          (ref (make-ref leaf)))
571     (push ref (leaf-refs leaf))
572     (setf (leaf-ever-used leaf) t)
573     (link-node-to-previous-ctran ref start)
574     (cond (type (let* ((ref-ctran (make-ctran))
575                        (ref-lvar (make-lvar))
576                        (cast (make-cast ref-lvar
577                                         (make-single-value-type type)
578                                         (lexenv-policy *lexenv*))))
579                   (setf (lvar-dest ref-lvar) cast)
580                   (use-continuation ref ref-ctran ref-lvar)
581                   (link-node-to-previous-ctran cast ref-ctran)
582                   (use-continuation cast next result)))
583           (t (use-continuation ref next result)))))
584
585 ;;; Convert a reference to a symbolic constant or variable. If the
586 ;;; symbol is entered in the LEXENV-VARS we use that definition,
587 ;;; otherwise we find the current global definition. This is also
588 ;;; where we pick off symbol macro and alien variable references.
589 (defun ir1-convert-var (start next result name)
590   (declare (type ctran start next) (type (or lvar null) result) (symbol name))
591   (let ((var (or (lexenv-find name vars) (find-free-var name))))
592     (if (and (global-var-p var) (not result))
593         ;; KLUDGE: If the reference is dead, convert using SYMBOL-VALUE
594         ;; which is not flushable, so that unbound dead variables signal
595         ;; an error (bug 412).
596         (ir1-convert start next result `(symbol-value ',name))
597         (etypecase var
598           (leaf
599            (when (lambda-var-p var)
600              (let ((home (ctran-home-lambda-or-null start)))
601                (when home
602                  (sset-adjoin var (lambda-calls-or-closes home))))
603              (when (lambda-var-ignorep var)
604                ;; (ANSI's specification for the IGNORE declaration requires
605                ;; that this be a STYLE-WARNING, not a full WARNING.)
606                #-sb-xc-host
607                (compiler-style-warn "reading an ignored variable: ~S" name)
608                ;; there's no need for us to accept ANSI's lameness when
609                ;; processing our own code, though.
610                #+sb-xc-host
611                (warn "reading an ignored variable: ~S" name)))
612            (reference-leaf start next result var))
613           (cons
614            (aver (eq (car var) 'macro))
615            ;; FIXME: [Free] type declarations. -- APD, 2002-01-26
616            (ir1-convert start next result (cdr var)))
617           (heap-alien-info
618            (ir1-convert start next result `(%heap-alien ',var))))))
619   (values))
620
621 ;;; Find a compiler-macro for a form, taking FUNCALL into account.
622 (defun find-compiler-macro (opname form)
623   (if (eq opname 'funcall)
624       (let ((fun-form (cadr form)))
625         (cond ((and (consp fun-form) (eq 'function (car fun-form)))
626                (let ((real-fun (cadr fun-form)))
627                  (if (legal-fun-name-p real-fun)
628                      (values (sb!xc:compiler-macro-function real-fun *lexenv*)
629                              real-fun)
630                      (values nil nil))))
631               ((sb!xc:constantp fun-form *lexenv*)
632                (let ((fun (constant-form-value fun-form *lexenv*)))
633                  (if (legal-fun-name-p fun)
634                      ;; CLHS tells us that local functions must shadow
635                      ;; compiler-macro-functions, but since the call is
636                      ;; through a name, we are obviously interested
637                      ;; in the global function.
638                      (values (sb!xc:compiler-macro-function fun nil) fun)
639                      (values nil nil))))
640               (t
641                (values nil nil))))
642       (if (legal-fun-name-p opname)
643           (values (sb!xc:compiler-macro-function opname *lexenv*) opname)
644           (values nil nil))))
645
646 ;;; Picks of special forms and compiler-macro expansions, and hands
647 ;;; the rest to IR1-CONVERT-COMMON-FUNCTOID
648 (defun ir1-convert-functoid (start next result form)
649   (let* ((op (car form))
650          (translator (and (symbolp op) (info :function :ir1-convert op))))
651     (cond (translator
652            (when (sb!xc:compiler-macro-function op *lexenv*)
653              (compiler-warn "ignoring compiler macro for special form"))
654            (funcall translator start next result form))
655           (t
656            (multiple-value-bind (cmacro-fun cmacro-fun-name)
657                (find-compiler-macro op form)
658              (if (and cmacro-fun
659                       ;; CLHS 3.2.2.1.3 specifies that NOTINLINE
660                       ;; suppresses compiler-macros.
661                       (not (fun-lexically-notinline-p cmacro-fun-name)))
662                  (let ((res (careful-expand-macro cmacro-fun form)))
663                    (if (eq res form)
664                        (ir1-convert-common-functoid start next result form
665                                                     op)
666                        (ir1-convert start next result res)))
667                  (ir1-convert-common-functoid start next result form op)))))))
668
669 ;;; Handles the "common" cases: any other forms except special forms
670 ;;; and compiler-macros.
671 (defun ir1-convert-common-functoid (start next result form op)
672   (cond ((or (symbolp op) (leaf-p op))
673          (let ((lexical-def (if (leaf-p op) op (lexenv-find op funs))))
674            (typecase lexical-def
675              (null
676               (ir1-convert-global-functoid start next result form op))
677              (functional
678               (ir1-convert-local-combination start next result form
679                                              lexical-def))
680              (global-var
681               (ir1-convert-srctran start next result lexical-def form))
682              (t
683               (aver (and (consp lexical-def) (eq (car lexical-def) 'macro)))
684               (ir1-convert start next result
685                            (careful-expand-macro (cdr lexical-def) form))))))
686         ((or (atom op) (not (eq (car op) 'lambda)))
687          (compiler-error "illegal function call"))
688         (t
689          ;; implicitly (LAMBDA ..) because the LAMBDA expression is
690          ;; the CAR of an executed form.
691          (ir1-convert-combination
692           start next result form
693           (ir1-convert-lambda op
694                               :debug-name (debug-name 'inline-lambda op))))))
695
696 ;;; Convert anything that looks like a global function call.
697 (defun ir1-convert-global-functoid (start next result form fun)
698   (declare (type ctran start next) (type (or lvar null) result)
699            (list form))
700   ;; FIXME: Couldn't all the INFO calls here be converted into
701   ;; standard CL functions, like MACRO-FUNCTION or something? And what
702   ;; happens with lexically-defined (MACROLET) macros here, anyway?
703   (ecase (info :function :kind fun)
704     (:macro
705      (ir1-convert start next result
706                   (careful-expand-macro (info :function :macro-function fun)
707                                         form))
708      (unless (policy *lexenv* (zerop store-xref-data))
709        (record-macroexpansion fun (ctran-block start) *current-path*)))
710     ((nil :function)
711      (ir1-convert-srctran start next result
712                           (find-free-fun fun "shouldn't happen! (no-cmacro)")
713                           form))))
714
715 (defun muffle-warning-or-die ()
716   (muffle-warning)
717   (bug "no MUFFLE-WARNING restart"))
718
719 ;;; Expand FORM using the macro whose MACRO-FUNCTION is FUN, trapping
720 ;;; errors which occur during the macroexpansion.
721 (defun careful-expand-macro (fun form)
722   (let (;; a hint I (WHN) wish I'd known earlier
723         (hint "(hint: For more precise location, try *BREAK-ON-SIGNALS*.)"))
724     (flet (;; Return a string to use as a prefix in error reporting,
725            ;; telling something about which form caused the problem.
726            (wherestring ()
727              (let ((*print-pretty* nil)
728                    ;; We rely on the printer to abbreviate FORM.
729                    (*print-length* 3)
730                    (*print-level* 1))
731                (format
732                 nil
733                 #-sb-xc-host "(in macroexpansion of ~S)"
734                 ;; longer message to avoid ambiguity "Was it the xc host
735                 ;; or the cross-compiler which encountered the problem?"
736                 #+sb-xc-host "(in cross-compiler macroexpansion of ~S)"
737                 form))))
738       (handler-bind ((style-warning (lambda (c)
739                                       (compiler-style-warn
740                                        "~@<~A~:@_~A~@:_~A~:>"
741                                        (wherestring) hint c)
742                                       (muffle-warning-or-die)))
743                      ;; KLUDGE: CMU CL in its wisdom (version 2.4.6 for
744                      ;; Debian Linux, anyway) raises a CL:WARNING
745                      ;; condition (not a CL:STYLE-WARNING) for undefined
746                      ;; symbols when converting interpreted functions,
747                      ;; causing COMPILE-FILE to think the file has a real
748                      ;; problem, causing COMPILE-FILE to return FAILURE-P
749                      ;; set (not just WARNINGS-P set). Since undefined
750                      ;; symbol warnings are often harmless forward
751                      ;; references, and since it'd be inordinately painful
752                      ;; to try to eliminate all such forward references,
753                      ;; these warnings are basically unavoidable. Thus, we
754                      ;; need to coerce the system to work through them,
755                      ;; and this code does so, by crudely suppressing all
756                      ;; warnings in cross-compilation macroexpansion. --
757                      ;; WHN 19990412
758                      #+(and cmu sb-xc-host)
759                      (warning (lambda (c)
760                                 (compiler-notify
761                                  "~@<~A~:@_~
762                                   ~A~:@_~
763                                   ~@<(KLUDGE: That was a non-STYLE WARNING. ~
764                                   Ordinarily that would cause compilation to ~
765                                   fail. However, since we're running under ~
766                                   CMU CL, and since CMU CL emits non-STYLE ~
767                                   warnings for safe, hard-to-fix things (e.g. ~
768                                   references to not-yet-defined functions) ~
769                                   we're going to have to ignore it and ~
770                                   proceed anyway. Hopefully we're not ~
771                                   ignoring anything  horrible here..)~:@>~:>"
772                                  (wherestring)
773                                  c)
774                                 (muffle-warning-or-die)))
775                      #-(and cmu sb-xc-host)
776                      (warning (lambda (c)
777                                 (warn "~@<~A~:@_~A~@:_~A~:>"
778                                       (wherestring) hint c)
779                                 (muffle-warning-or-die)))
780                      (error (lambda (c)
781                               (compiler-error "~@<~A~:@_~A~@:_~A~:>"
782                                               (wherestring) hint c))))
783         (funcall sb!xc:*macroexpand-hook* fun form *lexenv*)))))
784 \f
785 ;;;; conversion utilities
786
787 ;;; Convert a bunch of forms, discarding all the values except the
788 ;;; last. If there aren't any forms, then translate a NIL.
789 (declaim (ftype (sfunction (ctran ctran (or lvar null) list) (values))
790                 ir1-convert-progn-body))
791 (defun ir1-convert-progn-body (start next result body)
792   (if (endp body)
793       (reference-constant start next result nil)
794       (let ((this-start start)
795             (forms body))
796         (loop
797           (let ((form (car forms)))
798             (when (endp (cdr forms))
799               (ir1-convert this-start next result form)
800               (return))
801             (let ((this-ctran (make-ctran)))
802               (ir1-convert this-start this-ctran nil form)
803               (setq this-start this-ctran
804                     forms (cdr forms)))))))
805   (values))
806 \f
807 ;;;; converting combinations
808
809 ;;; Does this form look like something that we should add single-stepping
810 ;;; instrumentation for?
811 (defun step-form-p (form)
812   (flet ((step-symbol-p (symbol)
813            (not (member (symbol-package symbol)
814                         (load-time-value
815                          ;; KLUDGE: packages we're not interested in
816                          ;; stepping.
817                          (mapcar #'find-package '(sb!c sb!int sb!impl
818                                                   sb!kernel sb!pcl)))))))
819     (and *allow-instrumenting*
820          (policy *lexenv* (= insert-step-conditions 3))
821          (listp form)
822          (symbolp (car form))
823          (step-symbol-p (car form)))))
824
825 ;;; Convert a function call where the function FUN is a LEAF. FORM is
826 ;;; the source for the call. We return the COMBINATION node so that
827 ;;; the caller can poke at it if it wants to.
828 (declaim (ftype (sfunction (ctran ctran (or lvar null) list leaf) combination)
829                 ir1-convert-combination))
830 (defun ir1-convert-combination (start next result form fun)
831   (let ((ctran (make-ctran))
832         (fun-lvar (make-lvar)))
833     (ir1-convert start ctran fun-lvar `(the (or function symbol) ,fun))
834     (let ((combination
835            (ir1-convert-combination-args fun-lvar ctran next result
836                                          (cdr form))))
837       (when (step-form-p form)
838         ;; Store a string representation of the form in the
839         ;; combination node. This will let the IR2 translator know
840         ;; that we want stepper instrumentation for this node. The
841         ;; string will be stored in the debug-info by DUMP-1-LOCATION.
842         (setf (combination-step-info combination)
843               (let ((*print-pretty* t)
844                     (*print-circle* t)
845                     (*print-readably* nil))
846                 (prin1-to-string form))))
847       combination)))
848
849 ;;; Convert the arguments to a call and make the COMBINATION
850 ;;; node. FUN-LVAR yields the function to call. ARGS is the list of
851 ;;; arguments for the call, which defaults to the cdr of source. We
852 ;;; return the COMBINATION node.
853 (defun ir1-convert-combination-args (fun-lvar start next result args)
854   (declare (type ctran start next)
855            (type lvar fun-lvar)
856            (type (or lvar null) result)
857            (list args))
858   (let ((node (make-combination fun-lvar)))
859     (setf (lvar-dest fun-lvar) node)
860     (collect ((arg-lvars))
861       (let ((this-start start))
862         (dolist (arg args)
863           (let ((this-ctran (make-ctran))
864                 (this-lvar (make-lvar node)))
865             (ir1-convert this-start this-ctran this-lvar arg)
866             (setq this-start this-ctran)
867             (arg-lvars this-lvar)))
868         (link-node-to-previous-ctran node this-start)
869         (use-continuation node next result)
870         (setf (combination-args node) (arg-lvars))))
871     node))
872
873 ;;; Convert a call to a global function. If not :NOTINLINE, then we do
874 ;;; source transforms and try out any inline expansion. If there is no
875 ;;; expansion, but is :INLINE, then give an efficiency note (unless a
876 ;;; known function which will quite possibly be open-coded.) Next, we
877 ;;; go to ok-combination conversion.
878 (defun ir1-convert-srctran (start next result var form)
879   (declare (type ctran start next) (type (or lvar null) result)
880            (type global-var var))
881   (let ((inlinep (when (defined-fun-p var)
882                    (defined-fun-inlinep var))))
883     (if (eq inlinep :notinline)
884         (ir1-convert-combination start next result form var)
885         (let ((transform (info :function
886                                :source-transform
887                                (leaf-source-name var))))
888           (if transform
889               (multiple-value-bind (transformed pass) (funcall transform form)
890                 (if pass
891                     (ir1-convert-maybe-predicate start next result form var)
892                     (ir1-convert start next result transformed)))
893               (ir1-convert-maybe-predicate start next result form var))))))
894
895 ;;; If the function has the PREDICATE attribute, and the RESULT's DEST
896 ;;; isn't an IF, then we convert (IF <form> T NIL), ensuring that a
897 ;;; predicate always appears in a conditional context.
898 ;;;
899 ;;; If the function isn't a predicate, then we call
900 ;;; IR1-CONVERT-COMBINATION-CHECKING-TYPE.
901 (defun ir1-convert-maybe-predicate (start next result form var)
902   (declare (type ctran start next)
903            (type (or lvar null) result)
904            (list form)
905            (type global-var var))
906   (let ((info (info :function :info (leaf-source-name var))))
907     (if (and info
908              (ir1-attributep (fun-info-attributes info) predicate)
909              (not (if-p (and result (lvar-dest result)))))
910         (ir1-convert start next result `(if ,form t nil))
911         (ir1-convert-combination-checking-type start next result form var))))
912
913 ;;; Actually really convert a global function call that we are allowed
914 ;;; to early-bind.
915 ;;;
916 ;;; If we know the function type of the function, then we check the
917 ;;; call for syntactic legality with respect to the declared function
918 ;;; type. If it is impossible to determine whether the call is correct
919 ;;; due to non-constant keywords, then we give up, marking the call as
920 ;;; :FULL to inhibit further error messages. We return true when the
921 ;;; call is legal.
922 ;;;
923 ;;; If the call is legal, we also propagate type assertions from the
924 ;;; function type to the arg and result lvars. We do this now so that
925 ;;; IR1 optimize doesn't have to redundantly do the check later so
926 ;;; that it can do the type propagation.
927 (defun ir1-convert-combination-checking-type (start next result form var)
928   (declare (type ctran start next) (type (or lvar null) result)
929            (list form)
930            (type leaf var))
931   (let* ((node (ir1-convert-combination start next result form var))
932          (fun-lvar (basic-combination-fun node))
933          (type (leaf-type var)))
934     (when (validate-call-type node type t)
935       (setf (lvar-%derived-type fun-lvar)
936             (make-single-value-type type))
937       (setf (lvar-reoptimize fun-lvar) nil)))
938   (values))
939
940 ;;; Convert a call to a local function, or if the function has already
941 ;;; been LET converted, then throw FUNCTIONAL to
942 ;;; LOCALL-ALREADY-LET-CONVERTED. The THROW should only happen when we
943 ;;; are converting inline expansions for local functions during
944 ;;; optimization.
945 (defun ir1-convert-local-combination (start next result form functional)
946   (assure-functional-live-p functional)
947   (ir1-convert-combination start next result
948                            form
949                            (maybe-reanalyze-functional functional)))
950 \f
951 ;;;; PROCESS-DECLS
952
953 ;;; Given a list of LAMBDA-VARs and a variable name, return the
954 ;;; LAMBDA-VAR for that name, or NIL if it isn't found. We return the
955 ;;; *last* variable with that name, since LET* bindings may be
956 ;;; duplicated, and declarations always apply to the last.
957 (declaim (ftype (sfunction (list symbol) (or lambda-var list))
958                 find-in-bindings))
959 (defun find-in-bindings (vars name)
960   (let ((found nil))
961     (dolist (var vars)
962       (cond ((leaf-p var)
963              (when (eq (leaf-source-name var) name)
964                (setq found var))
965              (let ((info (lambda-var-arg-info var)))
966                (when info
967                  (let ((supplied-p (arg-info-supplied-p info)))
968                    (when (and supplied-p
969                               (eq (leaf-source-name supplied-p) name))
970                      (setq found supplied-p))))))
971             ((and (consp var) (eq (car var) name))
972              (setf found (cdr var)))))
973     found))
974
975 ;;; Called by PROCESS-DECLS to deal with a variable type declaration.
976 ;;; If a LAMBDA-VAR being bound, we intersect the type with the var's
977 ;;; type, otherwise we add a type restriction on the var. If a symbol
978 ;;; macro, we just wrap a THE around the expansion.
979 (defun process-type-decl (decl res vars context)
980   (declare (list decl vars) (type lexenv res))
981   (let ((type (compiler-specifier-type (first decl))))
982     (collect ((restr nil cons)
983              (new-vars nil cons))
984       (dolist (var-name (rest decl))
985         (when (boundp var-name)
986           (program-assert-symbol-home-package-unlocked
987            context var-name "declaring the type of ~A"))
988         (let* ((bound-var (find-in-bindings vars var-name))
989                (var (or bound-var
990                         (lexenv-find var-name vars)
991                         (find-free-var var-name))))
992           (etypecase var
993             (leaf
994              (flet
995                  ((process-var (var bound-var)
996                     (let* ((old-type (or (lexenv-find var type-restrictions)
997                                          (leaf-type var)))
998                            (int (if (or (fun-type-p type)
999                                         (fun-type-p old-type))
1000                                     type
1001                                     (type-approx-intersection2
1002                                      old-type type))))
1003                       (cond ((eq int *empty-type*)
1004                              (unless (policy *lexenv* (= inhibit-warnings 3))
1005                                (warn
1006                                 'type-warning
1007                                 :format-control
1008                                 "The type declarations ~S and ~S for ~S conflict."
1009                                 :format-arguments
1010                                 (list
1011                                  (type-specifier old-type)
1012                                  (type-specifier type)
1013                                  var-name))))
1014                             (bound-var (setf (leaf-type bound-var) int))
1015                             (t
1016                              (restr (cons var int)))))))
1017                (process-var var bound-var)
1018                (awhen (and (lambda-var-p var)
1019                            (lambda-var-specvar var))
1020                       (process-var it nil))))
1021             (cons
1022              ;; FIXME: non-ANSI weirdness
1023              (aver (eq (car var) 'macro))
1024              (new-vars `(,var-name . (macro . (the ,(first decl)
1025                                                 ,(cdr var))))))
1026             (heap-alien-info
1027              (compiler-error
1028               "~S is an alien variable, so its type can't be declared."
1029               var-name)))))
1030
1031       (if (or (restr) (new-vars))
1032           (make-lexenv :default res
1033                        :type-restrictions (restr)
1034                        :vars (new-vars))
1035           res))))
1036
1037 ;;; This is somewhat similar to PROCESS-TYPE-DECL, but handles
1038 ;;; declarations for function variables. In addition to allowing
1039 ;;; declarations for functions being bound, we must also deal with
1040 ;;; declarations that constrain the type of lexically apparent
1041 ;;; functions.
1042 (defun process-ftype-decl (spec res names fvars context)
1043   (declare (type list names fvars)
1044            (type lexenv res))
1045   (let ((type (compiler-specifier-type spec)))
1046     (collect ((res nil cons))
1047       (dolist (name names)
1048         (when (fboundp name)
1049           (program-assert-symbol-home-package-unlocked
1050            context name "declaring the ftype of ~A"))
1051         (let ((found (find name fvars :key #'leaf-source-name :test #'equal)))
1052           (cond
1053            (found
1054             (setf (leaf-type found) type)
1055             (assert-definition-type found type
1056                                     :unwinnage-fun #'compiler-notify
1057                                     :where "FTYPE declaration"))
1058            (t
1059             (res (cons (find-lexically-apparent-fun
1060                         name "in a function type declaration")
1061                        type))))))
1062       (if (res)
1063           (make-lexenv :default res :type-restrictions (res))
1064           res))))
1065
1066 ;;; Process a special declaration, returning a new LEXENV. A non-bound
1067 ;;; special declaration is instantiated by throwing a special variable
1068 ;;; into the variables if BINDING-FORM-P is NIL, or otherwise into
1069 ;;; *POST-BINDING-VARIABLE-LEXENV*.
1070 (defun process-special-decl (spec res vars binding-form-p context)
1071   (declare (list spec vars) (type lexenv res))
1072   (collect ((new-venv nil cons))
1073     (dolist (name (cdr spec))
1074       (program-assert-symbol-home-package-unlocked
1075        context name "declaring ~A special")
1076       (let ((var (find-in-bindings vars name)))
1077         (etypecase var
1078           (cons
1079            (aver (eq (car var) 'macro))
1080            (compiler-error
1081             "~S is a symbol-macro and thus can't be declared special."
1082             name))
1083           (lambda-var
1084            (when (lambda-var-ignorep var)
1085              ;; ANSI's definition for "Declaration IGNORE, IGNORABLE"
1086              ;; requires that this be a STYLE-WARNING, not a full WARNING.
1087              (compiler-style-warn
1088               "The ignored variable ~S is being declared special."
1089               name))
1090            (setf (lambda-var-specvar var)
1091                  (specvar-for-binding name)))
1092           (null
1093            (unless (or (assoc name (new-venv) :test #'eq))
1094              (new-venv (cons name (specvar-for-binding name))))))))
1095     (cond (binding-form-p
1096            (setf *post-binding-variable-lexenv*
1097                  (append (new-venv) *post-binding-variable-lexenv*))
1098            res)
1099           ((new-venv)
1100            (make-lexenv :default res :vars (new-venv)))
1101           (t
1102            res))))
1103
1104 ;;; Return a DEFINED-FUN which copies a GLOBAL-VAR but for its INLINEP
1105 ;;; (and TYPE if notinline), plus type-restrictions from the lexenv.
1106 (defun make-new-inlinep (var inlinep local-type)
1107   (declare (type global-var var) (type inlinep inlinep))
1108   (let* ((type (if (and (eq inlinep :notinline)
1109                         (not (eq (leaf-where-from var) :declared)))
1110                    (specifier-type 'function)
1111                    (leaf-type var)))
1112          (res (make-defined-fun
1113                :%source-name (leaf-source-name var)
1114                :where-from (leaf-where-from var)
1115                :type (if local-type
1116                          (type-intersection local-type type)
1117                          type)
1118                :inlinep inlinep)))
1119     (when (defined-fun-p var)
1120       (setf (defined-fun-inline-expansion res)
1121             (defined-fun-inline-expansion var))
1122       (setf (defined-fun-functional res)
1123             (defined-fun-functional var)))
1124     ;; FIXME: Is this really right? Needs we not set the FUNCTIONAL
1125     ;; to the original global-var?
1126     res))
1127
1128 ;;; Parse an inline/notinline declaration. If it's a local function we're
1129 ;;; defining, set its INLINEP. If a global function, add a new FENV entry.
1130 (defun process-inline-decl (spec res fvars)
1131   (let ((sense (cdr (assoc (first spec) *inlinep-translations* :test #'eq)))
1132         (new-fenv ()))
1133     (dolist (name (rest spec))
1134       (let ((fvar (find name fvars :key #'leaf-source-name :test #'equal)))
1135         (if fvar
1136             (setf (functional-inlinep fvar) sense)
1137             (let ((found (find-lexically-apparent-fun
1138                           name "in an inline or notinline declaration")))
1139               (etypecase found
1140                 (functional
1141                  (when (policy *lexenv* (>= speed inhibit-warnings))
1142                    (compiler-notify "ignoring ~A declaration not at ~
1143                                      definition of local function:~%  ~S"
1144                                     sense name)))
1145                 (global-var
1146                  (let ((type
1147                         (cdr (assoc found (lexenv-type-restrictions res)))))
1148                    (push (cons name (make-new-inlinep found sense type))
1149                          new-fenv))))))))
1150     (if new-fenv
1151         (make-lexenv :default res :funs new-fenv)
1152         res)))
1153
1154 ;;; like FIND-IN-BINDINGS, but looks for #'FOO in the FVARS
1155 (defun find-in-bindings-or-fbindings (name vars fvars)
1156   (declare (list vars fvars))
1157   (if (consp name)
1158       (destructuring-bind (wot fn-name) name
1159         (unless (eq wot 'function)
1160           (compiler-error "The function or variable name ~S is unrecognizable."
1161                           name))
1162         (find fn-name fvars :key #'leaf-source-name :test #'equal))
1163       (find-in-bindings vars name)))
1164
1165 ;;; Process an ignore/ignorable declaration, checking for various losing
1166 ;;; conditions.
1167 (defun process-ignore-decl (spec vars fvars)
1168   (declare (list spec vars fvars))
1169   (dolist (name (rest spec))
1170     (let ((var (find-in-bindings-or-fbindings name vars fvars)))
1171       (cond
1172        ((not var)
1173         ;; ANSI's definition for "Declaration IGNORE, IGNORABLE"
1174         ;; requires that this be a STYLE-WARNING, not a full WARNING.
1175         (compiler-style-warn "declaring unknown variable ~S to be ignored"
1176                              name))
1177        ;; FIXME: This special case looks like non-ANSI weirdness.
1178        ((and (consp var) (eq (car var) 'macro))
1179         ;; Just ignore the IGNORE decl.
1180         )
1181        ((functional-p var)
1182         (setf (leaf-ever-used var) t))
1183        ((and (lambda-var-specvar var) (eq (first spec) 'ignore))
1184         ;; ANSI's definition for "Declaration IGNORE, IGNORABLE"
1185         ;; requires that this be a STYLE-WARNING, not a full WARNING.
1186         (compiler-style-warn "declaring special variable ~S to be ignored"
1187                              name))
1188        ((eq (first spec) 'ignorable)
1189         (setf (leaf-ever-used var) t))
1190        (t
1191         (setf (lambda-var-ignorep var) t)))))
1192   (values))
1193
1194 (defun process-dx-decl (names vars fvars)
1195   (flet ((maybe-notify (control &rest args)
1196            (when (policy *lexenv* (> speed inhibit-warnings))
1197              (apply #'compiler-notify control args))))
1198     (if (policy *lexenv* (= stack-allocate-dynamic-extent 3))
1199         (dolist (name names)
1200           (cond
1201             ((symbolp name)
1202              (let* ((bound-var (find-in-bindings vars name))
1203                     (var (or bound-var
1204                              (lexenv-find name vars)
1205                              (find-free-var name))))
1206                (etypecase var
1207                  (leaf
1208                   (if bound-var
1209                       (setf (leaf-dynamic-extent var) t)
1210                       (maybe-notify
1211                        "ignoring DYNAMIC-EXTENT declaration for free ~S"
1212                        name)))
1213                  (cons
1214                   (compiler-error "DYNAMIC-EXTENT on symbol-macro: ~S" name))
1215                  (heap-alien-info
1216                   (compiler-error "DYNAMIC-EXTENT on heap-alien-info: ~S"
1217                                   name)))))
1218             ((and (consp name)
1219                   (eq (car name) 'function)
1220                   (null (cddr name))
1221                   (valid-function-name-p (cadr name)))
1222              (let* ((fname (cadr name))
1223                     (bound-fun (find fname fvars
1224                                      :key #'leaf-source-name
1225                                      :test #'equal)))
1226                (etypecase bound-fun
1227                  (leaf
1228                   #!+stack-allocatable-closures
1229                   (setf (leaf-dynamic-extent bound-fun) t)
1230                   #!-stack-allocatable-closures
1231                   (maybe-notify
1232                    "ignoring DYNAMIC-EXTENT declaration on a function ~S ~
1233                     (not supported on this platform)." fname))
1234                  (cons
1235                   (compiler-error "DYNAMIC-EXTENT on macro: ~S" fname))
1236                  (null
1237                   (maybe-notify
1238                    "ignoring DYNAMIC-EXTENT declaration for free ~S"
1239                    fname)))))
1240             (t (compiler-error "DYNAMIC-EXTENT on a weird thing: ~S" name))))
1241       (maybe-notify "ignoring DYNAMIC-EXTENT declarations for ~S" names))))
1242
1243 ;;; FIXME: This is non-ANSI, so the default should be T, or it should
1244 ;;; go away, I think.
1245 (defvar *suppress-values-declaration* nil
1246   #!+sb-doc
1247   "If true, processing of the VALUES declaration is inhibited.")
1248
1249 ;;; Process a single declaration spec, augmenting the specified LEXENV
1250 ;;; RES. Return RES and result type. VARS and FVARS are as described
1251 ;;; PROCESS-DECLS.
1252 (defun process-1-decl (raw-spec res vars fvars binding-form-p context)
1253   (declare (type list raw-spec vars fvars))
1254   (declare (type lexenv res))
1255   (let ((spec (canonized-decl-spec raw-spec))
1256         (result-type *wild-type*))
1257     (values
1258      (case (first spec)
1259        (special (process-special-decl spec res vars binding-form-p context))
1260        (ftype
1261         (unless (cdr spec)
1262           (compiler-error "no type specified in FTYPE declaration: ~S" spec))
1263         (process-ftype-decl (second spec) res (cddr spec) fvars context))
1264        ((inline notinline maybe-inline)
1265         (process-inline-decl spec res fvars))
1266        ((ignore ignorable)
1267         (process-ignore-decl spec vars fvars)
1268         res)
1269        (optimize
1270         (make-lexenv
1271          :default res
1272          :policy (process-optimize-decl spec (lexenv-policy res))))
1273        (muffle-conditions
1274         (make-lexenv
1275          :default res
1276          :handled-conditions (process-muffle-conditions-decl
1277                               spec (lexenv-handled-conditions res))))
1278        (unmuffle-conditions
1279         (make-lexenv
1280          :default res
1281          :handled-conditions (process-unmuffle-conditions-decl
1282                               spec (lexenv-handled-conditions res))))
1283        (type
1284         (process-type-decl (cdr spec) res vars context))
1285        (values
1286         (unless *suppress-values-declaration*
1287           (let ((types (cdr spec)))
1288             (setq result-type
1289                   (compiler-values-specifier-type
1290                    (if (singleton-p types)
1291                        (car types)
1292                        `(values ,@types)))))
1293           res))
1294        (dynamic-extent
1295         (process-dx-decl (cdr spec) vars fvars)
1296         res)
1297        ((disable-package-locks enable-package-locks)
1298         (make-lexenv
1299          :default res
1300          :disabled-package-locks (process-package-lock-decl
1301                                   spec (lexenv-disabled-package-locks res))))
1302        (t
1303         (unless (info :declaration :recognized (first spec))
1304           (compiler-warn "unrecognized declaration ~S" raw-spec))
1305         res))
1306      result-type)))
1307
1308 ;;; Use a list of DECLARE forms to annotate the lists of LAMBDA-VAR
1309 ;;; and FUNCTIONAL structures which are being bound. In addition to
1310 ;;; filling in slots in the leaf structures, we return a new LEXENV,
1311 ;;; which reflects pervasive special and function type declarations,
1312 ;;; (NOT)INLINE declarations and OPTIMIZE declarations, and type of
1313 ;;; VALUES declarations. If BINDING-FORM-P is true, the third return
1314 ;;; value is a list of VARs that should not apply to the lexenv of the
1315 ;;; initialization forms for the bindings, but should apply to the body.
1316 ;;;
1317 ;;; This is also called in main.lisp when PROCESS-FORM handles a use
1318 ;;; of LOCALLY.
1319 (defun process-decls (decls vars fvars &key
1320                       (lexenv *lexenv*) (binding-form-p nil) (context :compile))
1321   (declare (list decls vars fvars))
1322   (let ((result-type *wild-type*)
1323         (*post-binding-variable-lexenv* nil))
1324     (dolist (decl decls)
1325       (dolist (spec (rest decl))
1326         (unless (consp spec)
1327           (compiler-error "malformed declaration specifier ~S in ~S" spec decl))
1328         (multiple-value-bind (new-env new-result-type)
1329             (process-1-decl spec lexenv vars fvars binding-form-p context)
1330           (setq lexenv new-env)
1331           (unless (eq new-result-type *wild-type*)
1332             (setq result-type
1333                   (values-type-intersection result-type new-result-type))))))
1334     (values lexenv result-type *post-binding-variable-lexenv*)))
1335
1336 (defun %processing-decls (decls vars fvars ctran lvar binding-form-p fun)
1337   (multiple-value-bind (*lexenv* result-type post-binding-lexenv)
1338       (process-decls decls vars fvars :binding-form-p binding-form-p)
1339     (cond ((eq result-type *wild-type*)
1340            (funcall fun ctran lvar post-binding-lexenv))
1341           (t
1342            (let ((value-ctran (make-ctran))
1343                  (value-lvar (make-lvar)))
1344              (multiple-value-prog1
1345                  (funcall fun value-ctran value-lvar post-binding-lexenv)
1346                (let ((cast (make-cast value-lvar result-type
1347                                       (lexenv-policy *lexenv*))))
1348                  (link-node-to-previous-ctran cast value-ctran)
1349                  (setf (lvar-dest value-lvar) cast)
1350                  (use-continuation cast ctran lvar))))))))
1351 (defmacro processing-decls ((decls vars fvars ctran lvar
1352                                    &optional post-binding-lexenv)
1353                             &body forms)
1354   (check-type ctran symbol)
1355   (check-type lvar symbol)
1356   (let ((post-binding-lexenv-p (not (null post-binding-lexenv)))
1357         (post-binding-lexenv (or post-binding-lexenv (gensym))))
1358     `(%processing-decls ,decls ,vars ,fvars ,ctran ,lvar
1359                         ,post-binding-lexenv-p
1360                         (lambda (,ctran ,lvar ,post-binding-lexenv)
1361                           (declare (ignorable ,post-binding-lexenv))
1362                           ,@forms))))
1363
1364 ;;; Return the SPECVAR for NAME to use when we see a local SPECIAL
1365 ;;; declaration. If there is a global variable of that name, then
1366 ;;; check that it isn't a constant and return it. Otherwise, create an
1367 ;;; anonymous GLOBAL-VAR.
1368 (defun specvar-for-binding (name)
1369   (cond ((not (eq (info :variable :where-from name) :assumed))
1370          (let ((found (find-free-var name)))
1371            (when (heap-alien-info-p found)
1372              (compiler-error
1373               "~S is an alien variable and so can't be declared special."
1374               name))
1375            (unless (global-var-p found)
1376              (compiler-error
1377               "~S is a constant and so can't be declared special."
1378               name))
1379            found))
1380         (t
1381          (make-global-var :kind :special
1382                           :%source-name name
1383                           :where-from :declared))))