1.0.45.22: non-racy RUN-PROGRAM :PTY on OpenBSD
[sbcl.git] / src / compiler / ir1util.lisp
1 ;;;; This file contains miscellaneous utilities used for manipulating
2 ;;;; the IR1 representation.
3
4 ;;;; This software is part of the SBCL system. See the README file for
5 ;;;; more information.
6 ;;;;
7 ;;;; This software is derived from the CMU CL system, which was
8 ;;;; written at Carnegie Mellon University and released into the
9 ;;;; public domain. The software is in the public domain and is
10 ;;;; provided with absolutely no warranty. See the COPYING and CREDITS
11 ;;;; files for more information.
12
13 (in-package "SB!C")
14 \f
15 ;;;; cleanup hackery
16
17 ;;; Return the innermost cleanup enclosing NODE, or NIL if there is
18 ;;; none in its function. If NODE has no cleanup, but is in a LET,
19 ;;; then we must still check the environment that the call is in.
20 (defun node-enclosing-cleanup (node)
21   (declare (type node node))
22   (do ((lexenv (node-lexenv node)
23                (lambda-call-lexenv (lexenv-lambda lexenv))))
24       ((null lexenv) nil)
25     (let ((cup (lexenv-cleanup lexenv)))
26       (when cup (return cup)))))
27
28 ;;; Convert the FORM in a block inserted between BLOCK1 and BLOCK2 as
29 ;;; an implicit MV-PROG1. The inserted block is returned. NODE is used
30 ;;; for IR1 context when converting the form. Note that the block is
31 ;;; not assigned a number, and is linked into the DFO at the
32 ;;; beginning. We indicate that we have trashed the DFO by setting
33 ;;; COMPONENT-REANALYZE. If CLEANUP is supplied, then convert with
34 ;;; that cleanup.
35 (defun insert-cleanup-code (block1 block2 node form &optional cleanup)
36   (declare (type cblock block1 block2) (type node node)
37            (type (or cleanup null) cleanup))
38   (setf (component-reanalyze (block-component block1)) t)
39   (with-ir1-environment-from-node node
40     (with-component-last-block (*current-component*
41                                 (block-next (component-head *current-component*)))
42       (let* ((start (make-ctran))
43              (block (ctran-starts-block start))
44              (next (make-ctran))
45              (*lexenv* (if cleanup
46                            (make-lexenv :cleanup cleanup)
47                            *lexenv*)))
48         (change-block-successor block1 block2 block)
49         (link-blocks block block2)
50         (ir1-convert start next nil form)
51         (setf (block-last block) (ctran-use next))
52         (setf (node-next (block-last block)) nil)
53         block))))
54 \f
55 ;;;; lvar use hacking
56
57 ;;; Return a list of all the nodes which use LVAR.
58 (declaim (ftype (sfunction (lvar) list) find-uses))
59 (defun find-uses (lvar)
60   (let ((uses (lvar-uses lvar)))
61     (if (listp uses)
62         uses
63         (list uses))))
64
65 (declaim (ftype (sfunction (lvar) lvar) principal-lvar))
66 (defun principal-lvar (lvar)
67   (labels ((pl (lvar)
68              (let ((use (lvar-uses lvar)))
69                (if (cast-p use)
70                    (pl (cast-value use))
71                    lvar))))
72     (pl lvar)))
73
74 (defun principal-lvar-use (lvar)
75   (labels ((plu (lvar)
76              (declare (type lvar lvar))
77              (let ((use (lvar-uses lvar)))
78                (if (cast-p use)
79                    (plu (cast-value use))
80                    use))))
81     (plu lvar)))
82
83 ;;; Update lvar use information so that NODE is no longer a use of its
84 ;;; LVAR.
85 ;;;
86 ;;; Note: if you call this function, you may have to do a
87 ;;; REOPTIMIZE-LVAR to inform IR1 optimization that something has
88 ;;; changed.
89 (declaim (ftype (sfunction (node) (values))
90                 delete-lvar-use
91                 %delete-lvar-use))
92 ;;; Just delete NODE from its LVAR uses; LVAR is preserved so it may
93 ;;; be given a new use.
94 (defun %delete-lvar-use (node)
95   (let ((lvar (node-lvar node)))
96     (when lvar
97       (if (listp (lvar-uses lvar))
98           (let ((new-uses (delq node (lvar-uses lvar))))
99             (setf (lvar-uses lvar)
100                   (if (singleton-p new-uses)
101                       (first new-uses)
102                       new-uses)))
103           (setf (lvar-uses lvar) nil))
104       (setf (node-lvar node) nil)))
105   (values))
106 ;;; Delete NODE from its LVAR uses; if LVAR has no other uses, delete
107 ;;; its DEST's block, which must be unreachable.
108 (defun delete-lvar-use (node)
109   (let ((lvar (node-lvar node)))
110     (when lvar
111       (%delete-lvar-use node)
112       (if (null (lvar-uses lvar))
113           (binding* ((dest (lvar-dest lvar) :exit-if-null)
114                      (() (not (node-deleted dest)) :exit-if-null)
115                      (block (node-block dest)))
116             (mark-for-deletion block))
117           (reoptimize-lvar lvar))))
118   (values))
119
120 ;;; Update lvar use information so that NODE uses LVAR.
121 ;;;
122 ;;; Note: if you call this function, you may have to do a
123 ;;; REOPTIMIZE-LVAR to inform IR1 optimization that something has
124 ;;; changed.
125 (declaim (ftype (sfunction (node (or lvar null)) (values)) add-lvar-use))
126 (defun add-lvar-use (node lvar)
127   (aver (not (node-lvar node)))
128   (when lvar
129     (let ((uses (lvar-uses lvar)))
130       (setf (lvar-uses lvar)
131             (cond ((null uses)
132                    node)
133                   ((listp uses)
134                    (cons node uses))
135                   (t
136                    (list node uses))))
137       (setf (node-lvar node) lvar)))
138
139   (values))
140
141 ;;; Return true if LVAR destination is executed immediately after
142 ;;; NODE. Cleanups are ignored.
143 (defun immediately-used-p (lvar node)
144   (declare (type lvar lvar) (type node node))
145   (aver (eq (node-lvar node) lvar))
146   (let ((dest (lvar-dest lvar)))
147     (acond ((node-next node)
148             (eq (ctran-next it) dest))
149            (t (eq (block-start (first (block-succ (node-block node))))
150                   (node-prev dest))))))
151
152 ;;; Return true if LVAR destination is executed after node with only
153 ;;; uninteresting nodes intervening.
154 ;;;
155 ;;; Uninteresting nodes are nodes in the same block which are either
156 ;;; REFs, external CASTs to the same destination, or known combinations
157 ;;; that never unwind.
158 (defun almost-immediately-used-p (lvar node)
159   (declare (type lvar lvar)
160            (type node node))
161   (aver (eq (node-lvar node) lvar))
162   (let ((dest (lvar-dest lvar)))
163     (tagbody
164      :next
165        (let ((ctran (node-next node)))
166          (cond (ctran
167                 (setf node (ctran-next ctran))
168                 (if (eq node dest)
169                     (return-from almost-immediately-used-p t)
170                     (typecase node
171                       (ref
172                        (go :next))
173                       (cast
174                        (when (and (eq :external (cast-type-check node))
175                                   (eq dest (node-dest node)))
176                          (go :next)))
177                       (combination
178                        ;; KLUDGE: Unfortunately we don't have an attribute for
179                        ;; "never unwinds", so we just special case
180                        ;; %ALLOCATE-CLOSURES: it is easy to run into with eg.
181                        ;; FORMAT and a non-constant first argument.
182                        (when (eq '%allocate-closures (combination-fun-source-name node nil))
183                          (go :next))))))
184                (t
185                 (when (eq (block-start (first (block-succ (node-block node))))
186                           (node-prev dest))
187                   (return-from almost-immediately-used-p t))))))))
188 \f
189 ;;;; lvar substitution
190
191 ;;; In OLD's DEST, replace OLD with NEW. NEW's DEST must initially be
192 ;;; NIL. We do not flush OLD's DEST.
193 (defun substitute-lvar (new old)
194   (declare (type lvar old new))
195   (aver (not (lvar-dest new)))
196   (let ((dest (lvar-dest old)))
197     (etypecase dest
198       ((or ref bind))
199       (cif (setf (if-test dest) new))
200       (cset (setf (set-value dest) new))
201       (creturn (setf (return-result dest) new))
202       (exit (setf (exit-value dest) new))
203       (basic-combination
204        (if (eq old (basic-combination-fun dest))
205            (setf (basic-combination-fun dest) new)
206            (setf (basic-combination-args dest)
207                  (nsubst new old (basic-combination-args dest)))))
208       (cast (setf (cast-value dest) new)))
209
210     (setf (lvar-dest old) nil)
211     (setf (lvar-dest new) dest)
212     (flush-lvar-externally-checkable-type new))
213   (values))
214
215 ;;; Replace all uses of OLD with uses of NEW, where NEW has an
216 ;;; arbitary number of uses. NEW is supposed to be "later" than OLD.
217 (defun substitute-lvar-uses (new old propagate-dx)
218   (declare (type lvar old)
219            (type (or lvar null) new)
220            (type boolean propagate-dx))
221
222   (cond (new
223          (do-uses (node old)
224            (%delete-lvar-use node)
225            (add-lvar-use node new))
226          (reoptimize-lvar new)
227          (awhen (and propagate-dx (lvar-dynamic-extent old))
228            (setf (lvar-dynamic-extent old) nil)
229            (unless (lvar-dynamic-extent new)
230              (setf (lvar-dynamic-extent new) it)
231              (setf (cleanup-info it) (subst new old (cleanup-info it)))))
232          (when (lvar-dynamic-extent new)
233            (do-uses (node new)
234              (node-ends-block node))))
235         (t (flush-dest old)))
236
237   (values))
238 \f
239 ;;;; block starting/creation
240
241 ;;; Return the block that CTRAN is the start of, making a block if
242 ;;; necessary. This function is called by IR1 translators which may
243 ;;; cause a CTRAN to be used more than once. Every CTRAN which may be
244 ;;; used more than once must start a block by the time that anyone
245 ;;; does a USE-CTRAN on it.
246 ;;;
247 ;;; We also throw the block into the next/prev list for the
248 ;;; *CURRENT-COMPONENT* so that we keep track of which blocks we have
249 ;;; made.
250 (defun ctran-starts-block (ctran)
251   (declare (type ctran ctran))
252   (ecase (ctran-kind ctran)
253     (:unused
254      (aver (not (ctran-block ctran)))
255      (let* ((next (component-last-block *current-component*))
256             (prev (block-prev next))
257             (new-block (make-block ctran)))
258        (setf (block-next new-block) next
259              (block-prev new-block) prev
260              (block-prev next) new-block
261              (block-next prev) new-block
262              (ctran-block ctran) new-block
263              (ctran-kind ctran) :block-start)
264        (aver (not (ctran-use ctran)))
265        new-block))
266     (:block-start
267      (ctran-block ctran))))
268
269 ;;; Ensure that CTRAN is the start of a block so that the use set can
270 ;;; be freely manipulated.
271 (defun ensure-block-start (ctran)
272   (declare (type ctran ctran))
273   (let ((kind (ctran-kind ctran)))
274     (ecase kind
275       ((:block-start))
276       ((:unused)
277        (setf (ctran-block ctran)
278              (make-block-key :start ctran))
279        (setf (ctran-kind ctran) :block-start))
280       ((:inside-block)
281        (node-ends-block (ctran-use ctran)))))
282   (values))
283
284 ;;; CTRAN must be the last ctran in an incomplete block; finish the
285 ;;; block and start a new one if necessary.
286 (defun start-block (ctran)
287   (declare (type ctran ctran))
288   (aver (not (ctran-next ctran)))
289   (ecase (ctran-kind ctran)
290     (:inside-block
291      (let ((block (ctran-block ctran))
292            (node (ctran-use ctran)))
293        (aver (not (block-last block)))
294        (aver node)
295        (setf (block-last block) node)
296        (setf (node-next node) nil)
297        (setf (ctran-use ctran) nil)
298        (setf (ctran-kind ctran) :unused)
299        (setf (ctran-block ctran) nil)
300        (link-blocks block (ctran-starts-block ctran))))
301     (:block-start)))
302 \f
303 ;;;;
304
305 ;;; Filter values of LVAR through FORM, which must be an ordinary/mv
306 ;;; call. First argument must be 'DUMMY, which will be replaced with
307 ;;; LVAR. In case of an ordinary call the function should not have
308 ;;; return type NIL. We create a new "filtered" lvar.
309 ;;;
310 ;;; TODO: remove preconditions.
311 (defun filter-lvar (lvar form)
312   (declare (type lvar lvar) (type list form))
313   (let* ((dest (lvar-dest lvar))
314          (ctran (node-prev dest)))
315     (with-ir1-environment-from-node dest
316
317       (ensure-block-start ctran)
318       (let* ((old-block (ctran-block ctran))
319              (new-start (make-ctran))
320              (filtered-lvar (make-lvar))
321              (new-block (ctran-starts-block new-start)))
322
323         ;; Splice in the new block before DEST, giving the new block
324         ;; all of DEST's predecessors.
325         (dolist (block (block-pred old-block))
326           (change-block-successor block old-block new-block))
327
328         (ir1-convert new-start ctran filtered-lvar form)
329
330         ;; KLUDGE: Comments at the head of this function in CMU CL
331         ;; said that somewhere in here we
332         ;;   Set the new block's start and end cleanups to the *start*
333         ;;   cleanup of PREV's block. This overrides the incorrect
334         ;;   default from WITH-IR1-ENVIRONMENT-FROM-NODE.
335         ;; Unfortunately I can't find any code which corresponds to this.
336         ;; Perhaps it was a stale comment? Or perhaps I just don't
337         ;; understand.. -- WHN 19990521
338
339         ;; Replace 'DUMMY with the LVAR. (We can find 'DUMMY because
340         ;; no LET conversion has been done yet.) The [mv-]combination
341         ;; code from the call in the form will be the use of the new
342         ;; check lvar. We substitute for the first argument of
343         ;; this node.
344         (let* ((node (lvar-use filtered-lvar))
345                (args (basic-combination-args node))
346                (victim (first args)))
347           (aver (eq (constant-value (ref-leaf (lvar-use victim)))
348                     'dummy))
349
350           (substitute-lvar filtered-lvar lvar)
351           (substitute-lvar lvar victim)
352           (flush-dest victim))
353
354         ;; Invoking local call analysis converts this call to a LET.
355         (locall-analyze-component *current-component*))))
356   (values))
357
358 ;;; Delete NODE and VALUE. It may result in some calls becoming tail.
359 (defun delete-filter (node lvar value)
360   (aver (eq (lvar-dest value) node))
361   (aver (eq (node-lvar node) lvar))
362   (cond (lvar (collect ((merges))
363                 (when (return-p (lvar-dest lvar))
364                   (do-uses (use value)
365                     (when (and (basic-combination-p use)
366                                (eq (basic-combination-kind use) :local))
367                       (merges use))))
368                 (substitute-lvar-uses lvar value
369                                       (and lvar (eq (lvar-uses lvar) node)))
370                 (%delete-lvar-use node)
371                 (prog1
372                     (unlink-node node)
373                   (dolist (merge (merges))
374                     (merge-tail-sets merge)))))
375         (t (flush-dest value)
376            (unlink-node node))))
377
378 ;;; Make a CAST and insert it into IR1 before node NEXT.
379 (defun insert-cast-before (next lvar type policy)
380   (declare (type node next) (type lvar lvar) (type ctype type))
381   (with-ir1-environment-from-node next
382     (let* ((ctran (node-prev next))
383            (cast (make-cast lvar type policy))
384            (internal-ctran (make-ctran)))
385       (setf (ctran-next ctran) cast
386             (node-prev cast) ctran)
387       (use-ctran cast internal-ctran)
388       (link-node-to-previous-ctran next internal-ctran)
389       (setf (lvar-dest lvar) cast)
390       (reoptimize-lvar lvar)
391       (when (return-p next)
392         (node-ends-block cast))
393       (setf (block-attributep (block-flags (node-block cast))
394                               type-check type-asserted)
395             t)
396       cast)))
397 \f
398 ;;;; miscellaneous shorthand functions
399
400 ;;; Return the home (i.e. enclosing non-LET) CLAMBDA for NODE. Since
401 ;;; the LEXENV-LAMBDA may be deleted, we must chain up the
402 ;;; LAMBDA-CALL-LEXENV thread until we find a CLAMBDA that isn't
403 ;;; deleted, and then return its home.
404 (defun node-home-lambda (node)
405   (declare (type node node))
406   (do ((fun (lexenv-lambda (node-lexenv node))
407             (lexenv-lambda (lambda-call-lexenv fun))))
408       ((not (memq (functional-kind fun) '(:deleted :zombie)))
409        (lambda-home fun))
410     (when (eq (lambda-home fun) fun)
411       (return fun))))
412
413 #!-sb-fluid (declaim (inline node-block))
414 (defun node-block (node)
415   (ctran-block (node-prev node)))
416 (declaim (ftype (sfunction (node) component) node-component))
417 (defun node-component (node)
418   (block-component (node-block node)))
419 (declaim (ftype (sfunction (node) physenv) node-physenv))
420 (defun node-physenv (node)
421   (lambda-physenv (node-home-lambda node)))
422 #!-sb-fluid (declaim (inline node-dest))
423 (defun node-dest (node)
424   (awhen (node-lvar node) (lvar-dest it)))
425
426 #!-sb-fluid (declaim (inline node-stack-allocate-p))
427 (defun node-stack-allocate-p (node)
428   (awhen (node-lvar node)
429     (lvar-dynamic-extent it)))
430
431 (defun flushable-combination-p (call)
432   (declare (type combination call))
433   (let ((kind (combination-kind call))
434         (info (combination-fun-info call)))
435     (when (and (eq kind :known) (fun-info-p info))
436       (let ((attr (fun-info-attributes info)))
437         (when (and (not (ir1-attributep attr call))
438                    ;; FIXME: For now, don't consider potentially flushable
439                    ;; calls flushable when they have the CALL attribute.
440                    ;; Someday we should look at the functional args to
441                    ;; determine if they have any side effects.
442                    (if (policy call (= safety 3))
443                        (ir1-attributep attr flushable)
444                        (ir1-attributep attr unsafely-flushable)))
445           t)))))
446
447 ;;;; DYNAMIC-EXTENT related
448
449 (defun note-no-stack-allocation (lvar &key flush)
450   (do-uses (use (principal-lvar lvar))
451     (unless (or
452              ;; Don't complain about not being able to stack allocate constants.
453              (and (ref-p use) (constant-p (ref-leaf use)))
454              ;; If we're flushing, don't complain if we can flush the combination.
455              (and flush (combination-p use) (flushable-combination-p use)))
456       (let ((*compiler-error-context* use))
457         (compiler-notify "could not stack allocate the result of ~S"
458                          (find-original-source (node-source-path use)))))))
459
460 (declaim (ftype (sfunction (node (member nil t :truly) &optional (or null component))
461                            boolean) use-good-for-dx-p))
462 (declaim (ftype (sfunction (lvar (member nil t :truly) &optional (or null component))
463                            boolean) lvar-good-for-dx-p))
464 (defun use-good-for-dx-p (use dx &optional component)
465   ;; FIXME: Can casts point to LVARs in other components?
466   ;; RECHECK-DYNAMIC-EXTENT-LVARS assumes that they can't -- that is, that the
467   ;; PRINCIPAL-LVAR is always in the same component as the original one. It
468   ;; would be either good to have an explanation of why casts don't point
469   ;; across components, or an explanation of when they do it. ...in the
470   ;; meanwhile AVER that our assumption holds true.
471   (aver (or (not component) (eq component (node-component use))))
472   (or (dx-combination-p use dx)
473       (and (cast-p use)
474            (not (cast-type-check use))
475            (lvar-good-for-dx-p (cast-value use) dx component))
476       (and (trivial-lambda-var-ref-p use)
477            (let ((uses (lvar-uses (trivial-lambda-var-ref-lvar use))))
478              (or (eq use uses)
479                  (lvar-good-for-dx-p (trivial-lambda-var-ref-lvar use) dx component))))))
480
481 (defun lvar-good-for-dx-p (lvar dx &optional component)
482   (let ((uses (lvar-uses lvar)))
483     (if (listp uses)
484         (when uses
485           (every (lambda (use)
486                    (use-good-for-dx-p use dx component))
487                  uses))
488         (use-good-for-dx-p uses dx component))))
489
490 (defun known-dx-combination-p (use dx)
491   (and (eq (combination-kind use) :known)
492        (let ((info (combination-fun-info use)))
493          (or (awhen (fun-info-stack-allocate-result info)
494                (funcall it use dx))
495              (awhen (fun-info-result-arg info)
496                (let ((args (combination-args use)))
497                  (lvar-good-for-dx-p (if (zerop it)
498                                          (car args)
499                                          (nth it args))
500                                      dx)))))))
501
502 (defun dx-combination-p (use dx)
503   (and (combination-p use)
504        (or
505         ;; Known, and can do DX.
506         (known-dx-combination-p use dx)
507         ;; Possibly a not-yet-eliminated lambda which ends up returning the
508         ;; results of an actual known DX combination.
509         (let* ((fun (combination-fun use))
510                (ref (principal-lvar-use fun))
511                (clambda (when (ref-p ref)
512                           (ref-leaf ref)))
513                (creturn (when (lambda-p clambda)
514                           (lambda-return clambda)))
515                (result-use (when (return-p creturn)
516                              (principal-lvar-use (return-result creturn)))))
517           ;; FIXME: We should be able to deal with multiple uses here as well.
518           (and (dx-combination-p result-use dx)
519                (combination-args-flow-cleanly-p use result-use dx))))))
520
521 (defun combination-args-flow-cleanly-p (combination1 combination2 dx)
522   (labels ((recurse (combination)
523              (or (eq combination combination2)
524                  (if (known-dx-combination-p combination dx)
525                      (let ((dest (lvar-dest (combination-lvar combination))))
526                        (and (combination-p dest)
527                             (recurse dest)))
528                      (let* ((fun1 (combination-fun combination))
529                             (ref1 (principal-lvar-use fun1))
530                             (clambda1 (when (ref-p ref1) (ref-leaf ref1))))
531                        (when (lambda-p clambda1)
532                          (dolist (var (lambda-vars clambda1) t)
533                            (dolist (var-ref (lambda-var-refs var))
534                              (let ((dest (lvar-dest (ref-lvar var-ref))))
535                                (unless (and (combination-p dest) (recurse dest))
536                                  (return-from combination-args-flow-cleanly-p nil)))))))))))
537     (recurse combination1)))
538
539 (defun trivial-lambda-var-ref-p (use)
540   (and (ref-p use)
541        (let ((var (ref-leaf use)))
542          ;; lambda-var, no SETS
543          (when (and (lambda-var-p var) (not (lambda-var-sets var)))
544            (let ((home (lambda-var-home var))
545                  (refs (lambda-var-refs var)))
546              ;; bound by a system lambda, no other REFS
547              (when (and (lambda-system-lambda-p home)
548                         (eq use (car refs)) (not (cdr refs)))
549                ;; the LAMBDA this var is bound by has only a single REF, going
550                ;; to a combination
551                (let* ((lambda-refs (lambda-refs home))
552                       (primary (car lambda-refs)))
553                  (and (ref-p primary)
554                       (not (cdr lambda-refs))
555                       (combination-p (lvar-dest (ref-lvar primary)))))))))))
556
557 (defun trivial-lambda-var-ref-lvar (use)
558   (let* ((this (ref-leaf use))
559          (home (lambda-var-home this)))
560     (multiple-value-bind (fun vars)
561         (values home (lambda-vars home))
562       (let* ((combination (lvar-dest (ref-lvar (car (lambda-refs fun)))))
563              (args (combination-args combination)))
564         (assert (= (length vars) (length args)))
565         (loop for var in vars
566               for arg in args
567               when (eq var this)
568               return arg)))))
569
570 ;;; This needs to play nice with LVAR-GOOD-FOR-DX-P and friends.
571 (defun handle-nested-dynamic-extent-lvars (dx lvar &optional recheck-component)
572   (let ((uses (lvar-uses lvar)))
573     ;; DX value generators must end their blocks: see UPDATE-UVL-LIVE-SETS.
574     ;; Uses of mupltiple-use LVARs already end their blocks, so we just need
575     ;; to process uses of single-use LVARs.
576     (when (node-p uses)
577       (node-ends-block uses))
578     ;; If this LVAR's USE is good for DX, it is either a CAST, or it
579     ;; must be a regular combination whose arguments are potentially DX as well.
580     (flet ((recurse (use)
581              (etypecase use
582                (cast
583                 (handle-nested-dynamic-extent-lvars
584                  dx (cast-value use) recheck-component))
585                (combination
586                 (loop for arg in (combination-args use)
587                       ;; deleted args show up as NIL here
588                       when (and arg
589                                 (lvar-good-for-dx-p arg dx recheck-component))
590                       append (handle-nested-dynamic-extent-lvars
591                               dx arg recheck-component)))
592                (ref
593                 (let* ((other (trivial-lambda-var-ref-lvar use)))
594                   (unless (eq other lvar)
595                     (handle-nested-dynamic-extent-lvars
596                      dx other recheck-component)))))))
597       (cons (cons dx lvar)
598             (if (listp uses)
599                 (loop for use in uses
600                       when (use-good-for-dx-p use dx recheck-component)
601                       nconc (recurse use))
602                 (when (use-good-for-dx-p uses dx recheck-component)
603                   (recurse uses)))))))
604
605 ;;;;; BLOCK UTILS
606
607 (declaim (inline block-to-be-deleted-p))
608 (defun block-to-be-deleted-p (block)
609   (or (block-delete-p block)
610       (eq (functional-kind (block-home-lambda block)) :deleted)))
611
612 ;;; Checks whether NODE is in a block to be deleted
613 (declaim (inline node-to-be-deleted-p))
614 (defun node-to-be-deleted-p (node)
615   (block-to-be-deleted-p (node-block node)))
616
617 (declaim (ftype (sfunction (clambda) cblock) lambda-block))
618 (defun lambda-block (clambda)
619   (node-block (lambda-bind clambda)))
620 (declaim (ftype (sfunction (clambda) component) lambda-component))
621 (defun lambda-component (clambda)
622   (block-component (lambda-block clambda)))
623
624 (declaim (ftype (sfunction (cblock) node) block-start-node))
625 (defun block-start-node (block)
626   (ctran-next (block-start block)))
627
628 ;;; Return the enclosing cleanup for environment of the first or last
629 ;;; node in BLOCK.
630 (defun block-start-cleanup (block)
631   (node-enclosing-cleanup (block-start-node block)))
632 (defun block-end-cleanup (block)
633   (node-enclosing-cleanup (block-last block)))
634
635 ;;; Return the non-LET LAMBDA that holds BLOCK's code, or NIL
636 ;;; if there is none.
637 ;;;
638 ;;; There can legitimately be no home lambda in dead code early in the
639 ;;; IR1 conversion process, e.g. when IR1-converting the SETQ form in
640 ;;;   (BLOCK B (RETURN-FROM B) (SETQ X 3))
641 ;;; where the block is just a placeholder during parsing and doesn't
642 ;;; actually correspond to code which will be written anywhere.
643 (declaim (ftype (sfunction (cblock) (or clambda null)) block-home-lambda-or-null))
644 (defun block-home-lambda-or-null (block)
645   (if (node-p (block-last block))
646       ;; This is the old CMU CL way of doing it.
647       (node-home-lambda (block-last block))
648       ;; Now that SBCL uses this operation more aggressively than CMU
649       ;; CL did, the old CMU CL way of doing it can fail in two ways.
650       ;;   1. It can fail in a few cases even when a meaningful home
651       ;;      lambda exists, e.g. in IR1-CONVERT of one of the legs of
652       ;;      an IF.
653       ;;   2. It can fail when converting a form which is born orphaned
654       ;;      so that it never had a meaningful home lambda, e.g. a form
655       ;;      which follows a RETURN-FROM or GO form.
656       (let ((pred-list (block-pred block)))
657         ;; To deal with case 1, we reason that
658         ;; previous-in-target-execution-order blocks should be in the
659         ;; same lambda, and that they seem in practice to be
660         ;; previous-in-compilation-order blocks too, so we look back
661         ;; to find one which is sufficiently initialized to tell us
662         ;; what the home lambda is.
663         (if pred-list
664             ;; We could get fancy about this, flooding through the
665             ;; graph of all the previous blocks, but in practice it
666             ;; seems to work just to grab the first previous block and
667             ;; use it.
668             (node-home-lambda (block-last (first pred-list)))
669             ;; In case 2, we end up with an empty PRED-LIST and
670             ;; have to punt: There's no home lambda.
671             nil))))
672
673 ;;; Return the non-LET LAMBDA that holds BLOCK's code.
674 (declaim (ftype (sfunction (cblock) clambda) block-home-lambda))
675 (defun block-home-lambda (block)
676   (block-home-lambda-or-null block))
677
678 ;;; Return the IR1 physical environment for BLOCK.
679 (declaim (ftype (sfunction (cblock) physenv) block-physenv))
680 (defun block-physenv (block)
681   (lambda-physenv (block-home-lambda block)))
682
683 ;;; Return the Top Level Form number of PATH, i.e. the ordinal number
684 ;;; of its original source's top level form in its compilation unit.
685 (defun source-path-tlf-number (path)
686   (declare (list path))
687   (car (last path)))
688
689 ;;; Return the (reversed) list for the PATH in the original source
690 ;;; (with the Top Level Form number last).
691 (defun source-path-original-source (path)
692   (declare (list path) (inline member))
693   (cddr (member 'original-source-start path :test #'eq)))
694
695 ;;; Return the Form Number of PATH's original source inside the Top
696 ;;; Level Form that contains it. This is determined by the order that
697 ;;; we walk the subforms of the top level source form.
698 (defun source-path-form-number (path)
699   (declare (list path) (inline member))
700   (cadr (member 'original-source-start path :test #'eq)))
701
702 ;;; Return a list of all the enclosing forms not in the original
703 ;;; source that converted to get to this form, with the immediate
704 ;;; source for node at the start of the list.
705 (defun source-path-forms (path)
706   (subseq path 0 (position 'original-source-start path)))
707
708 ;;; Return the innermost source form for NODE.
709 (defun node-source-form (node)
710   (declare (type node node))
711   (let* ((path (node-source-path node))
712          (forms (source-path-forms path)))
713     (if forms
714         (first forms)
715         (values (find-original-source path)))))
716
717 ;;; Return NODE-SOURCE-FORM, T if lvar has a single use, otherwise
718 ;;; NIL, NIL.
719 (defun lvar-source (lvar)
720   (let ((use (lvar-uses lvar)))
721     (if (listp use)
722         (values nil nil)
723         (values (node-source-form use) t))))
724
725 ;;; Return the unique node, delivering a value to LVAR.
726 #!-sb-fluid (declaim (inline lvar-use))
727 (defun lvar-use (lvar)
728   (the (not list) (lvar-uses lvar)))
729
730 #!-sb-fluid (declaim (inline lvar-has-single-use-p))
731 (defun lvar-has-single-use-p (lvar)
732   (typep (lvar-uses lvar) '(not list)))
733
734 ;;; Return the LAMBDA that is CTRAN's home, or NIL if there is none.
735 (declaim (ftype (sfunction (ctran) (or clambda null))
736                 ctran-home-lambda-or-null))
737 (defun ctran-home-lambda-or-null (ctran)
738   ;; KLUDGE: This function is a post-CMU-CL hack by WHN, and this
739   ;; implementation might not be quite right, or might be uglier than
740   ;; necessary. It appears that the original Python never found a need
741   ;; to do this operation. The obvious things based on
742   ;; NODE-HOME-LAMBDA of CTRAN-USE usually work; then if that fails,
743   ;; BLOCK-HOME-LAMBDA of CTRAN-BLOCK works, given that we
744   ;; generalize it enough to grovel harder when the simple CMU CL
745   ;; approach fails, and furthermore realize that in some exceptional
746   ;; cases it might return NIL. -- WHN 2001-12-04
747   (cond ((ctran-use ctran)
748          (node-home-lambda (ctran-use ctran)))
749         ((ctran-block ctran)
750          (block-home-lambda-or-null (ctran-block ctran)))
751         (t
752          (bug "confused about home lambda for ~S" ctran))))
753
754 ;;; Return the LAMBDA that is CTRAN's home.
755 (declaim (ftype (sfunction (ctran) clambda) ctran-home-lambda))
756 (defun ctran-home-lambda (ctran)
757   (ctran-home-lambda-or-null ctran))
758
759 (declaim (inline cast-single-value-p))
760 (defun cast-single-value-p (cast)
761   (not (values-type-p (cast-asserted-type cast))))
762
763 #!-sb-fluid (declaim (inline lvar-single-value-p))
764 (defun lvar-single-value-p (lvar)
765   (or (not lvar)
766       (let ((dest (lvar-dest lvar)))
767         (typecase dest
768           ((or creturn exit)
769            nil)
770           (mv-combination
771            (eq (basic-combination-fun dest) lvar))
772           (cast
773            (locally
774                (declare (notinline lvar-single-value-p))
775              (and (cast-single-value-p dest)
776                   (lvar-single-value-p (node-lvar dest)))))
777           (t
778            t)))))
779
780 (defun principal-lvar-end (lvar)
781   (loop for prev = lvar then (node-lvar dest)
782         for dest = (and prev (lvar-dest prev))
783         while (cast-p dest)
784         finally (return (values dest prev))))
785
786 (defun principal-lvar-single-valuify (lvar)
787   (loop for prev = lvar then (node-lvar dest)
788         for dest = (and prev (lvar-dest prev))
789         while (cast-p dest)
790         do (setf (node-derived-type dest)
791                  (make-short-values-type (list (single-value-type
792                                                 (node-derived-type dest)))))
793         (reoptimize-lvar prev)))
794 \f
795 ;;; Return a new LEXENV just like DEFAULT except for the specified
796 ;;; slot values. Values for the alist slots are NCONCed to the
797 ;;; beginning of the current value, rather than replacing it entirely.
798 (defun make-lexenv (&key (default *lexenv*)
799                          funs vars blocks tags
800                          type-restrictions
801                          (lambda (lexenv-lambda default))
802                          (cleanup (lexenv-cleanup default))
803                          (handled-conditions (lexenv-handled-conditions default))
804                          (disabled-package-locks
805                           (lexenv-disabled-package-locks default))
806                          (policy (lexenv-policy default))
807                          (user-data (lexenv-user-data default)))
808   (macrolet ((frob (var slot)
809                `(let ((old (,slot default)))
810                   (if ,var
811                       (nconc ,var old)
812                       old))))
813     (internal-make-lexenv
814      (frob funs lexenv-funs)
815      (frob vars lexenv-vars)
816      (frob blocks lexenv-blocks)
817      (frob tags lexenv-tags)
818      (frob type-restrictions lexenv-type-restrictions)
819      lambda
820      cleanup handled-conditions disabled-package-locks
821      policy
822      user-data)))
823
824 ;;; Makes a LEXENV, suitable for using in a MACROLET introduced
825 ;;; macroexpander
826 (defun make-restricted-lexenv (lexenv)
827   (flet ((fun-good-p (fun)
828            (destructuring-bind (name . thing) fun
829              (declare (ignore name))
830              (etypecase thing
831                (functional nil)
832                (global-var t)
833                (cons (aver (eq (car thing) 'macro))
834                      t))))
835          (var-good-p (var)
836            (destructuring-bind (name . thing) var
837              (declare (ignore name))
838              (etypecase thing
839                ;; The evaluator will mark lexicals with :BOGUS when it
840                ;; translates an interpreter lexenv to a compiler
841                ;; lexenv.
842                ((or leaf #!+sb-eval (member :bogus)) nil)
843                (cons (aver (eq (car thing) 'macro))
844                      t)
845                (heap-alien-info nil)))))
846     (internal-make-lexenv
847      (remove-if-not #'fun-good-p (lexenv-funs lexenv))
848      (remove-if-not #'var-good-p (lexenv-vars lexenv))
849      nil
850      nil
851      (lexenv-type-restrictions lexenv) ; XXX
852      nil
853      nil
854      (lexenv-handled-conditions lexenv)
855      (lexenv-disabled-package-locks lexenv)
856      (lexenv-policy lexenv)
857      (lexenv-user-data lexenv))))
858 \f
859 ;;;; flow/DFO/component hackery
860
861 ;;; Join BLOCK1 and BLOCK2.
862 (defun link-blocks (block1 block2)
863   (declare (type cblock block1 block2))
864   (setf (block-succ block1)
865         (if (block-succ block1)
866             (%link-blocks block1 block2)
867             (list block2)))
868   (push block1 (block-pred block2))
869   (values))
870 (defun %link-blocks (block1 block2)
871   (declare (type cblock block1 block2))
872   (let ((succ1 (block-succ block1)))
873     (aver (not (memq block2 succ1)))
874     (cons block2 succ1)))
875
876 ;;; This is like LINK-BLOCKS, but we separate BLOCK1 and BLOCK2. If
877 ;;; this leaves a successor with a single predecessor that ends in an
878 ;;; IF, then set BLOCK-TEST-MODIFIED so that any test constraint will
879 ;;; now be able to be propagated to the successor.
880 (defun unlink-blocks (block1 block2)
881   (declare (type cblock block1 block2))
882   (let ((succ1 (block-succ block1)))
883     (if (eq block2 (car succ1))
884         (setf (block-succ block1) (cdr succ1))
885         (do ((succ (cdr succ1) (cdr succ))
886              (prev succ1 succ))
887             ((eq (car succ) block2)
888              (setf (cdr prev) (cdr succ)))
889           (aver succ))))
890
891   (let ((new-pred (delq block1 (block-pred block2))))
892     (setf (block-pred block2) new-pred)
893     (when (singleton-p new-pred)
894       (let ((pred-block (first new-pred)))
895         (when (if-p (block-last pred-block))
896           (setf (block-test-modified pred-block) t)))))
897   (values))
898
899 ;;; Swing the succ/pred link between BLOCK and OLD to be between BLOCK
900 ;;; and NEW. If BLOCK ends in an IF, then we have to fix up the
901 ;;; consequent/alternative blocks to point to NEW. We also set
902 ;;; BLOCK-TEST-MODIFIED so that any test constraint will be applied to
903 ;;; the new successor.
904 (defun change-block-successor (block old new)
905   (declare (type cblock new old block))
906   (unlink-blocks block old)
907   (let ((last (block-last block))
908         (comp (block-component block)))
909     (setf (component-reanalyze comp) t)
910     (typecase last
911       (cif
912        (setf (block-test-modified block) t)
913        (let* ((succ-left (block-succ block))
914               (new (if (and (eq new (component-tail comp))
915                             succ-left)
916                        (first succ-left)
917                        new)))
918          (unless (memq new succ-left)
919            (link-blocks block new))
920          (macrolet ((frob (slot)
921                       `(when (eq (,slot last) old)
922                          (setf (,slot last) new))))
923            (frob if-consequent)
924            (frob if-alternative)
925            (when (eq (if-consequent last)
926                      (if-alternative last))
927              (reoptimize-component (block-component block) :maybe)))))
928       (t
929        (unless (memq new (block-succ block))
930          (link-blocks block new)))))
931
932   (values))
933
934 ;;; Unlink a block from the next/prev chain. We also null out the
935 ;;; COMPONENT.
936 (declaim (ftype (sfunction (cblock) (values)) remove-from-dfo))
937 (defun remove-from-dfo (block)
938   (let ((next (block-next block))
939         (prev (block-prev block)))
940     (setf (block-component block) nil)
941     (setf (block-next prev) next)
942     (setf (block-prev next) prev))
943   (values))
944
945 ;;; Add BLOCK to the next/prev chain following AFTER. We also set the
946 ;;; COMPONENT to be the same as for AFTER.
947 (defun add-to-dfo (block after)
948   (declare (type cblock block after))
949   (let ((next (block-next after))
950         (comp (block-component after)))
951     (aver (not (eq (component-kind comp) :deleted)))
952     (setf (block-component block) comp)
953     (setf (block-next after) block)
954     (setf (block-prev block) after)
955     (setf (block-next block) next)
956     (setf (block-prev next) block))
957   (values))
958
959 ;;; List all NLX-INFOs which BLOCK can exit to.
960 ;;;
961 ;;; We hope that no cleanup actions are performed in the middle of
962 ;;; BLOCK, so it is enough to look only at cleanups in the block
963 ;;; end. The tricky thing is a special cleanup block; all its nodes
964 ;;; have the same cleanup info, corresponding to the start, so the
965 ;;; same approach returns safe result.
966 (defun map-block-nlxes (fun block &optional dx-cleanup-fun)
967   (loop for cleanup = (block-end-cleanup block)
968         then (node-enclosing-cleanup (cleanup-mess-up cleanup))
969         while cleanup
970         do (let ((mess-up (cleanup-mess-up cleanup)))
971              (case (cleanup-kind cleanup)
972                ((:block :tagbody)
973                 (aver (entry-p mess-up))
974                 (loop for exit in (entry-exits mess-up)
975                       for nlx-info = (exit-nlx-info exit)
976                       do (funcall fun nlx-info)))
977                ((:catch :unwind-protect)
978                 (aver (combination-p mess-up))
979                 (let* ((arg-lvar (first (basic-combination-args mess-up)))
980                        (nlx-info (constant-value (ref-leaf (lvar-use arg-lvar)))))
981                 (funcall fun nlx-info)))
982                ((:dynamic-extent)
983                 (when dx-cleanup-fun
984                   (funcall dx-cleanup-fun cleanup)))))))
985
986 ;;; Set the FLAG for all the blocks in COMPONENT to NIL, except for
987 ;;; the head and tail which are set to T.
988 (declaim (ftype (sfunction (component) (values)) clear-flags))
989 (defun clear-flags (component)
990   (let ((head (component-head component))
991         (tail (component-tail component)))
992     (setf (block-flag head) t)
993     (setf (block-flag tail) t)
994     (do-blocks (block component)
995       (setf (block-flag block) nil)))
996   (values))
997
998 ;;; Make a component with no blocks in it. The BLOCK-FLAG is initially
999 ;;; true in the head and tail blocks.
1000 (declaim (ftype (sfunction () component) make-empty-component))
1001 (defun make-empty-component ()
1002   (let* ((head (make-block-key :start nil :component nil))
1003          (tail (make-block-key :start nil :component nil))
1004          (res (make-component head tail)))
1005     (setf (block-flag head) t)
1006     (setf (block-flag tail) t)
1007     (setf (block-component head) res)
1008     (setf (block-component tail) res)
1009     (setf (block-next head) tail)
1010     (setf (block-prev tail) head)
1011     res))
1012
1013 ;;; Make NODE the LAST node in its block, splitting the block if necessary.
1014 ;;; The new block is added to the DFO immediately following NODE's block.
1015 (defun node-ends-block (node)
1016   (declare (type node node))
1017   (let* ((block (node-block node))
1018          (start (node-next node))
1019          (last (block-last block)))
1020     (check-type last node)
1021     (unless (eq last node)
1022       (aver (and (eq (ctran-kind start) :inside-block)
1023                  (not (block-delete-p block))))
1024       (let* ((succ (block-succ block))
1025              (new-block
1026               (make-block-key :start start
1027                               :component (block-component block)
1028                               :succ succ :last last)))
1029         (setf (ctran-kind start) :block-start)
1030         (setf (ctran-use start) nil)
1031         (setf (block-last block) node)
1032         (setf (node-next node) nil)
1033         (dolist (b succ)
1034           (setf (block-pred b)
1035                 (cons new-block (remove block (block-pred b)))))
1036         (setf (block-succ block) ())
1037         (link-blocks block new-block)
1038         (add-to-dfo new-block block)
1039         (setf (component-reanalyze (block-component block)) t)
1040
1041         (do ((ctran start (node-next (ctran-next ctran))))
1042             ((not ctran))
1043           (setf (ctran-block ctran) new-block))
1044
1045         (setf (block-type-asserted block) t)
1046         (setf (block-test-modified block) t))))
1047   (values))
1048 \f
1049 ;;;; deleting stuff
1050
1051 ;;; Deal with deleting the last (read) reference to a LAMBDA-VAR.
1052 (defun delete-lambda-var (leaf)
1053   (declare (type lambda-var leaf))
1054
1055   (setf (lambda-var-deleted leaf) t)
1056   ;; Iterate over all local calls flushing the corresponding argument,
1057   ;; allowing the computation of the argument to be deleted. We also
1058   ;; mark the LET for reoptimization, since it may be that we have
1059   ;; deleted its last variable.
1060   (let* ((fun (lambda-var-home leaf))
1061          (n (position leaf (lambda-vars fun))))
1062     (dolist (ref (leaf-refs fun))
1063       (let* ((lvar (node-lvar ref))
1064              (dest (and lvar (lvar-dest lvar))))
1065         (when (and (combination-p dest)
1066                    (eq (basic-combination-fun dest) lvar)
1067                    (eq (basic-combination-kind dest) :local))
1068           (let* ((args (basic-combination-args dest))
1069                  (arg (elt args n)))
1070             (reoptimize-lvar arg)
1071             (flush-dest arg)
1072             (setf (elt args n) nil))))))
1073
1074   ;; The LAMBDA-VAR may still have some SETs, but this doesn't cause
1075   ;; too much difficulty, since we can efficiently implement
1076   ;; write-only variables. We iterate over the SETs, marking their
1077   ;; blocks for dead code flushing, since we can delete SETs whose
1078   ;; value is unused.
1079   (dolist (set (lambda-var-sets leaf))
1080     (setf (block-flush-p (node-block set)) t))
1081
1082   (values))
1083
1084 ;;; Note that something interesting has happened to VAR.
1085 (defun reoptimize-lambda-var (var)
1086   (declare (type lambda-var var))
1087   (let ((fun (lambda-var-home var)))
1088     ;; We only deal with LET variables, marking the corresponding
1089     ;; initial value arg as needing to be reoptimized.
1090     (when (and (eq (functional-kind fun) :let)
1091                (leaf-refs var))
1092       (do ((args (basic-combination-args
1093                   (lvar-dest (node-lvar (first (leaf-refs fun)))))
1094                  (cdr args))
1095            (vars (lambda-vars fun) (cdr vars)))
1096           ((eq (car vars) var)
1097            (reoptimize-lvar (car args))))))
1098   (values))
1099
1100 ;;; Delete a function that has no references. This need only be called
1101 ;;; on functions that never had any references, since otherwise
1102 ;;; DELETE-REF will handle the deletion.
1103 (defun delete-functional (fun)
1104   (aver (and (null (leaf-refs fun))
1105              (not (functional-entry-fun fun))))
1106   (etypecase fun
1107     (optional-dispatch (delete-optional-dispatch fun))
1108     (clambda (delete-lambda fun)))
1109   (values))
1110
1111 ;;; Deal with deleting the last reference to a CLAMBDA, which means
1112 ;;; that the lambda is unreachable, so that its body may be
1113 ;;; deleted. We set FUNCTIONAL-KIND to :DELETED and rely on
1114 ;;; IR1-OPTIMIZE to delete its blocks.
1115 (defun delete-lambda (clambda)
1116   (declare (type clambda clambda))
1117   (let ((original-kind (functional-kind clambda))
1118         (bind (lambda-bind clambda)))
1119     (aver (not (member original-kind '(:deleted :toplevel))))
1120     (aver (not (functional-has-external-references-p clambda)))
1121     (aver (or (eq original-kind :zombie) bind))
1122     (setf (functional-kind clambda) :deleted)
1123     (setf (lambda-bind clambda) nil)
1124
1125     (labels ((delete-children (lambda)
1126                (dolist (child (lambda-children lambda))
1127                  (cond ((eq (functional-kind child) :deleted)
1128                         (delete-children child))
1129                        (t
1130                         (delete-lambda child))))
1131                (setf (lambda-children lambda) nil)
1132                (setf (lambda-parent lambda) nil)))
1133       (delete-children clambda))
1134
1135     ;; (The IF test is (FUNCTIONAL-SOMEWHAT-LETLIKE-P CLAMBDA), except
1136     ;; that we're using the old value of the KIND slot, not the
1137     ;; current slot value, which has now been set to :DELETED.)
1138     (case original-kind
1139       (:zombie)
1140       ((:let :mv-let :assignment)
1141        (let ((bind-block (node-block bind)))
1142          (mark-for-deletion bind-block))
1143        (let ((home (lambda-home clambda)))
1144          (setf (lambda-lets home) (delete clambda (lambda-lets home))))
1145        ;; KLUDGE: In presence of NLEs we cannot always understand that
1146        ;; LET's BIND dominates its body [for a LET "its" body is not
1147        ;; quite its]; let's delete too dangerous for IR2 stuff. --
1148        ;; APD, 2004-01-01
1149        (dolist (var (lambda-vars clambda))
1150          (flet ((delete-node (node)
1151                   (mark-for-deletion (node-block node))))
1152          (mapc #'delete-node (leaf-refs var))
1153          (mapc #'delete-node (lambda-var-sets var)))))
1154       (t
1155        ;; Function has no reachable references.
1156        (dolist (ref (lambda-refs clambda))
1157          (mark-for-deletion (node-block ref)))
1158        ;; If the function isn't a LET, we unlink the function head
1159        ;; and tail from the component head and tail to indicate that
1160        ;; the code is unreachable. We also delete the function from
1161        ;; COMPONENT-LAMBDAS (it won't be there before local call
1162        ;; analysis, but no matter.) If the lambda was never
1163        ;; referenced, we give a note.
1164        (let* ((bind-block (node-block bind))
1165               (component (block-component bind-block))
1166               (return (lambda-return clambda))
1167               (return-block (and return (node-block return))))
1168          (unless (leaf-ever-used clambda)
1169            (let ((*compiler-error-context* bind))
1170              (compiler-notify 'code-deletion-note
1171                               :format-control "deleting unused function~:[.~;~:*~%  ~S~]"
1172                               :format-arguments (list (leaf-debug-name clambda)))))
1173          (unless (block-delete-p bind-block)
1174            (unlink-blocks (component-head component) bind-block))
1175          (when (and return-block (not (block-delete-p return-block)))
1176            (mark-for-deletion return-block)
1177            (unlink-blocks return-block (component-tail component)))
1178          (setf (component-reanalyze component) t)
1179          (let ((tails (lambda-tail-set clambda)))
1180            (setf (tail-set-funs tails)
1181                  (delete clambda (tail-set-funs tails)))
1182            (setf (lambda-tail-set clambda) nil))
1183          (setf (component-lambdas component)
1184                (delq clambda (component-lambdas component))))))
1185
1186     ;; If the lambda is an XEP, then we null out the ENTRY-FUN in its
1187     ;; ENTRY-FUN so that people will know that it is not an entry
1188     ;; point anymore.
1189     (when (eq original-kind :external)
1190       (let ((fun (functional-entry-fun clambda)))
1191         (setf (functional-entry-fun fun) nil)
1192         (when (optional-dispatch-p fun)
1193           (delete-optional-dispatch fun)))))
1194
1195   (values))
1196
1197 ;;; Deal with deleting the last reference to an OPTIONAL-DISPATCH. We
1198 ;;; have to be a bit more careful than with lambdas, since DELETE-REF
1199 ;;; is used both before and after local call analysis. Afterward, all
1200 ;;; references to still-existing OPTIONAL-DISPATCHes have been moved
1201 ;;; to the XEP, leaving it with no references at all. So we look at
1202 ;;; the XEP to see whether an optional-dispatch is still really being
1203 ;;; used. But before local call analysis, there are no XEPs, and all
1204 ;;; references are direct.
1205 ;;;
1206 ;;; When we do delete the OPTIONAL-DISPATCH, we grovel all of its
1207 ;;; entry-points, making them be normal lambdas, and then deleting the
1208 ;;; ones with no references. This deletes any e-p lambdas that were
1209 ;;; either never referenced, or couldn't be deleted when the last
1210 ;;; reference was deleted (due to their :OPTIONAL kind.)
1211 ;;;
1212 ;;; Note that the last optional entry point may alias the main entry,
1213 ;;; so when we process the main entry, its KIND may have been changed
1214 ;;; to NIL or even converted to a LETlike value.
1215 (defun delete-optional-dispatch (leaf)
1216   (declare (type optional-dispatch leaf))
1217   (let ((entry (functional-entry-fun leaf)))
1218     (unless (and entry (leaf-refs entry))
1219       (aver (or (not entry) (eq (functional-kind entry) :deleted)))
1220       (setf (functional-kind leaf) :deleted)
1221
1222       (flet ((frob (fun)
1223                (unless (eq (functional-kind fun) :deleted)
1224                  (aver (eq (functional-kind fun) :optional))
1225                  (setf (functional-kind fun) nil)
1226                  (let ((refs (leaf-refs fun)))
1227                    (cond ((null refs)
1228                           (delete-lambda fun))
1229                          ((null (rest refs))
1230                           (or (maybe-let-convert fun)
1231                               (maybe-convert-to-assignment fun)))
1232                          (t
1233                           (maybe-convert-to-assignment fun)))))))
1234
1235         (dolist (ep (optional-dispatch-entry-points leaf))
1236           (when (promise-ready-p ep)
1237             (frob (force ep))))
1238         (when (optional-dispatch-more-entry leaf)
1239           (frob (optional-dispatch-more-entry leaf)))
1240         (let ((main (optional-dispatch-main-entry leaf)))
1241           (when entry
1242             (setf (functional-entry-fun entry) main)
1243             (setf (functional-entry-fun main) entry))
1244           (when (eq (functional-kind main) :optional)
1245             (frob main))))))
1246
1247   (values))
1248
1249 (defun note-local-functional (fun)
1250   (declare (type functional fun))
1251   (when (and (leaf-has-source-name-p fun)
1252              (eq (leaf-source-name fun) (functional-debug-name fun)))
1253     (let ((name (leaf-source-name fun)))
1254       (let ((defined-fun (gethash name *free-funs*)))
1255         (when (and defined-fun
1256                    (defined-fun-p defined-fun)
1257                    (eq (defined-fun-functional defined-fun) fun))
1258           (remhash name *free-funs*))))))
1259
1260 ;;; Return functional for DEFINED-FUN which has been converted in policy
1261 ;;; corresponding to the current one, or NIL if no such functional exists.
1262 ;;;
1263 ;;; Also check that the parent of the functional is visible in the current
1264 ;;; environment.
1265 (defun defined-fun-functional (defined-fun)
1266   (let ((functionals (defined-fun-functionals defined-fun)))
1267     (when functionals
1268       (let* ((sample (car functionals))
1269              (there (lambda-parent (if (lambda-p sample)
1270                                        sample
1271                                        (optional-dispatch-main-entry sample)))))
1272         (when there
1273           (labels ((lookup (here)
1274                      (unless (eq here there)
1275                        (if here
1276                            (lookup (lambda-parent here))
1277                            ;; We looked up all the way up, and didn't find the parent
1278                            ;; of the functional -- therefore it is nested in a lambda
1279                            ;; we don't see, so return nil.
1280                            (return-from defined-fun-functional nil)))))
1281             (lookup (lexenv-lambda *lexenv*)))))
1282       ;; Now find a functional whose policy matches the current one, if we already
1283       ;; have one.
1284       (let ((policy (lexenv-%policy *lexenv*)))
1285         (dolist (functional functionals)
1286           (when (equal policy (lexenv-%policy (functional-lexenv functional)))
1287             (return functional)))))))
1288
1289 ;;; Do stuff to delete the semantic attachments of a REF node. When
1290 ;;; this leaves zero or one reference, we do a type dispatch off of
1291 ;;; the leaf to determine if a special action is appropriate.
1292 (defun delete-ref (ref)
1293   (declare (type ref ref))
1294   (let* ((leaf (ref-leaf ref))
1295          (refs (delq ref (leaf-refs leaf))))
1296     (setf (leaf-refs leaf) refs)
1297
1298     (cond ((null refs)
1299            (typecase leaf
1300              (lambda-var
1301               (delete-lambda-var leaf))
1302              (clambda
1303               (ecase (functional-kind leaf)
1304                 ((nil :let :mv-let :assignment :escape :cleanup)
1305                  (aver (null (functional-entry-fun leaf)))
1306                  (delete-lambda leaf))
1307                 (:external
1308                  (unless (functional-has-external-references-p leaf)
1309                    (delete-lambda leaf)))
1310                 ((:deleted :zombie :optional))))
1311              (optional-dispatch
1312               (unless (eq (functional-kind leaf) :deleted)
1313                 (delete-optional-dispatch leaf)))))
1314           ((null (rest refs))
1315            (typecase leaf
1316              (clambda (or (maybe-let-convert leaf)
1317                           (maybe-convert-to-assignment leaf)))
1318              (lambda-var (reoptimize-lambda-var leaf))))
1319           (t
1320            (typecase leaf
1321              (clambda (maybe-convert-to-assignment leaf))))))
1322
1323   (values))
1324
1325 ;;; This function is called by people who delete nodes; it provides a
1326 ;;; way to indicate that the value of a lvar is no longer used. We
1327 ;;; null out the LVAR-DEST, set FLUSH-P in the blocks containing uses
1328 ;;; of LVAR and set COMPONENT-REOPTIMIZE.
1329 (defun flush-dest (lvar)
1330   (declare (type (or lvar null) lvar))
1331   (unless (null lvar)
1332     (when (lvar-dynamic-extent lvar)
1333       (note-no-stack-allocation lvar :flush t))
1334     (setf (lvar-dest lvar) nil)
1335     (flush-lvar-externally-checkable-type lvar)
1336     (do-uses (use lvar)
1337       (let ((prev (node-prev use)))
1338         (let ((block (ctran-block prev)))
1339           (reoptimize-component (block-component block) t)
1340           (setf (block-attributep (block-flags block)
1341                                   flush-p type-asserted type-check)
1342                 t)))
1343       (setf (node-lvar use) nil))
1344     (setf (lvar-uses lvar) nil))
1345   (values))
1346
1347 (defun delete-dest (lvar)
1348   (when lvar
1349     (let* ((dest (lvar-dest lvar))
1350            (prev (node-prev dest)))
1351       (let ((block (ctran-block prev)))
1352         (unless (block-delete-p block)
1353           (mark-for-deletion block))))))
1354
1355 ;;; Queue the block for deletion
1356 (defun delete-block-lazily (block)
1357   (declare (type cblock block))
1358   (unless (block-delete-p block)
1359     (setf (block-delete-p block) t)
1360     (push block (component-delete-blocks (block-component block)))))
1361
1362 ;;; Do a graph walk backward from BLOCK, marking all predecessor
1363 ;;; blocks with the DELETE-P flag.
1364 (defun mark-for-deletion (block)
1365   (declare (type cblock block))
1366   (let* ((component (block-component block))
1367          (head (component-head component)))
1368     (labels ((helper (block)
1369                (delete-block-lazily block)
1370                (dolist (pred (block-pred block))
1371                  (unless (or (block-delete-p pred)
1372                              (eq pred head))
1373                    (helper pred)))))
1374       (unless (block-delete-p block)
1375         (helper block)
1376         (setf (component-reanalyze component) t))))
1377   (values))
1378
1379 ;;; This function does what is necessary to eliminate the code in it
1380 ;;; from the IR1 representation. This involves unlinking it from its
1381 ;;; predecessors and successors and deleting various node-specific
1382 ;;; semantic information. BLOCK must be already removed from
1383 ;;; COMPONENT-DELETE-BLOCKS.
1384 (defun delete-block (block &optional silent)
1385   (declare (type cblock block))
1386   (aver (block-component block))      ; else block is already deleted!
1387   #!+high-security (aver (not (memq block (component-delete-blocks (block-component block)))))
1388   (unless silent
1389     (note-block-deletion block))
1390   (setf (block-delete-p block) t)
1391
1392   (dolist (b (block-pred block))
1393     (unlink-blocks b block)
1394     ;; In bug 147 the almost-all-blocks-have-a-successor invariant was
1395     ;; broken when successors were deleted without setting the
1396     ;; BLOCK-DELETE-P flags of their predececessors. Make sure that
1397     ;; doesn't happen again.
1398     (aver (not (and (null (block-succ b))
1399                     (not (block-delete-p b))
1400                     (not (eq b (component-head (block-component b))))))))
1401   (dolist (b (block-succ block))
1402     (unlink-blocks block b))
1403
1404   (do-nodes-carefully (node block)
1405     (when (valued-node-p node)
1406       (delete-lvar-use node))
1407     (etypecase node
1408       (ref (delete-ref node))
1409       (cif (flush-dest (if-test node)))
1410       ;; The next two cases serve to maintain the invariant that a LET
1411       ;; always has a well-formed COMBINATION, REF and BIND. We delete
1412       ;; the lambda whenever we delete any of these, but we must be
1413       ;; careful that this LET has not already been partially deleted.
1414       (basic-combination
1415        (when (and (eq (basic-combination-kind node) :local)
1416                   ;; Guards COMBINATION-LAMBDA agains the REF being deleted.
1417                   (lvar-uses (basic-combination-fun node)))
1418          (let ((fun (combination-lambda node)))
1419            ;; If our REF was the second-to-last ref, and has been
1420            ;; deleted, then FUN may be a LET for some other
1421            ;; combination.
1422            (when (and (functional-letlike-p fun)
1423                       (eq (let-combination fun) node))
1424              (delete-lambda fun))))
1425        (flush-dest (basic-combination-fun node))
1426        (dolist (arg (basic-combination-args node))
1427          (when arg (flush-dest arg))))
1428       (bind
1429        (let ((lambda (bind-lambda node)))
1430          (unless (eq (functional-kind lambda) :deleted)
1431            (delete-lambda lambda))))
1432       (exit
1433        (let ((value (exit-value node))
1434              (entry (exit-entry node)))
1435          (when value
1436            (flush-dest value))
1437          (when entry
1438            (setf (entry-exits entry)
1439                  (delq node (entry-exits entry))))))
1440       (entry
1441        (dolist (exit (entry-exits node))
1442          (mark-for-deletion (node-block exit)))
1443        (let ((home (node-home-lambda node)))
1444          (setf (lambda-entries home) (delq node (lambda-entries home)))))
1445       (creturn
1446        (flush-dest (return-result node))
1447        (delete-return node))
1448       (cset
1449        (flush-dest (set-value node))
1450        (let ((var (set-var node)))
1451          (setf (basic-var-sets var)
1452                (delete node (basic-var-sets var)))))
1453       (cast
1454        (flush-dest (cast-value node)))))
1455
1456   (remove-from-dfo block)
1457   (values))
1458
1459 ;;; Do stuff to indicate that the return node NODE is being deleted.
1460 (defun delete-return (node)
1461   (declare (type creturn node))
1462   (let* ((fun (return-lambda node))
1463          (tail-set (lambda-tail-set fun)))
1464     (aver (lambda-return fun))
1465     (setf (lambda-return fun) nil)
1466     (when (and tail-set (not (find-if #'lambda-return
1467                                       (tail-set-funs tail-set))))
1468       (setf (tail-set-type tail-set) *empty-type*)))
1469   (values))
1470
1471 ;;; If any of the VARS in FUN was never referenced and was not
1472 ;;; declared IGNORE, then complain.
1473 (defun note-unreferenced-vars (fun)
1474   (declare (type clambda fun))
1475   (dolist (var (lambda-vars fun))
1476     (unless (or (leaf-ever-used var)
1477                 (lambda-var-ignorep var))
1478       (let ((*compiler-error-context* (lambda-bind fun)))
1479         (unless (policy *compiler-error-context* (= inhibit-warnings 3))
1480           ;; ANSI section "3.2.5 Exceptional Situations in the Compiler"
1481           ;; requires this to be no more than a STYLE-WARNING.
1482           #-sb-xc-host
1483           (compiler-style-warn "The variable ~S is defined but never used."
1484                                (leaf-debug-name var))
1485           ;; There's no reason to accept this kind of equivocation
1486           ;; when compiling our own code, though.
1487           #+sb-xc-host
1488           (warn "The variable ~S is defined but never used."
1489                 (leaf-debug-name var)))
1490         (setf (leaf-ever-used var) t)))) ; to avoid repeated warnings? -- WHN
1491   (values))
1492
1493 (defvar *deletion-ignored-objects* '(t nil))
1494
1495 ;;; Return true if we can find OBJ in FORM, NIL otherwise. We bound
1496 ;;; our recursion so that we don't get lost in circular structures. We
1497 ;;; ignore the car of forms if they are a symbol (to prevent confusing
1498 ;;; function referencess with variables), and we also ignore anything
1499 ;;; inside ' or #'.
1500 (defun present-in-form (obj form depth)
1501   (declare (type (integer 0 20) depth))
1502   (cond ((= depth 20) nil)
1503         ((eq obj form) t)
1504         ((atom form) nil)
1505         (t
1506          (let ((first (car form))
1507                (depth (1+ depth)))
1508            (if (member first '(quote function))
1509                nil
1510                (or (and (not (symbolp first))
1511                         (present-in-form obj first depth))
1512                    (do ((l (cdr form) (cdr l))
1513                         (n 0 (1+ n)))
1514                        ((or (atom l) (> n 100))
1515                         nil)
1516                      (declare (fixnum n))
1517                      (when (present-in-form obj (car l) depth)
1518                        (return t)))))))))
1519
1520 ;;; This function is called on a block immediately before we delete
1521 ;;; it. We check to see whether any of the code about to die appeared
1522 ;;; in the original source, and emit a note if so.
1523 ;;;
1524 ;;; If the block was in a lambda is now deleted, then we ignore the
1525 ;;; whole block, since this case is picked off in DELETE-LAMBDA. We
1526 ;;; also ignore the deletion of CRETURN nodes, since it is somewhat
1527 ;;; reasonable for a function to not return, and there is a different
1528 ;;; note for that case anyway.
1529 ;;;
1530 ;;; If the actual source is an atom, then we use a bunch of heuristics
1531 ;;; to guess whether this reference really appeared in the original
1532 ;;; source:
1533 ;;; -- If a symbol, it must be interned and not a keyword.
1534 ;;; -- It must not be an easily introduced constant (T or NIL, a fixnum
1535 ;;;    or a character.)
1536 ;;; -- The atom must be "present" in the original source form, and
1537 ;;;    present in all intervening actual source forms.
1538 (defun note-block-deletion (block)
1539   (let ((home (block-home-lambda block)))
1540     (unless (eq (functional-kind home) :deleted)
1541       (do-nodes (node nil block)
1542         (let* ((path (node-source-path node))
1543                (first (first path)))
1544           (when (or (eq first 'original-source-start)
1545                     (and (atom first)
1546                          (or (not (symbolp first))
1547                              (let ((pkg (symbol-package first)))
1548                                (and pkg
1549                                     (not (eq pkg (symbol-package :end))))))
1550                          (not (member first *deletion-ignored-objects*))
1551                          (not (typep first '(or fixnum character)))
1552                          (every (lambda (x)
1553                                   (present-in-form first x 0))
1554                                 (source-path-forms path))
1555                          (present-in-form first (find-original-source path)
1556                                           0)))
1557             (unless (return-p node)
1558               (let ((*compiler-error-context* node))
1559                 (compiler-notify 'code-deletion-note
1560                                  :format-control "deleting unreachable code"
1561                                  :format-arguments nil)))
1562             (return))))))
1563   (values))
1564
1565 ;;; Delete a node from a block, deleting the block if there are no
1566 ;;; nodes left. We remove the node from the uses of its LVAR.
1567 ;;;
1568 ;;; If the node is the last node, there must be exactly one successor.
1569 ;;; We link all of our precedessors to the successor and unlink the
1570 ;;; block. In this case, we return T, otherwise NIL. If no nodes are
1571 ;;; left, and the block is a successor of itself, then we replace the
1572 ;;; only node with a degenerate exit node. This provides a way to
1573 ;;; represent the bodyless infinite loop, given the prohibition on
1574 ;;; empty blocks in IR1.
1575 (defun unlink-node (node)
1576   (declare (type node node))
1577   (when (valued-node-p node)
1578     (delete-lvar-use node))
1579
1580   (let* ((ctran (node-next node))
1581          (next (and ctran (ctran-next ctran)))
1582          (prev (node-prev node))
1583          (block (ctran-block prev))
1584          (prev-kind (ctran-kind prev))
1585          (last (block-last block)))
1586
1587     (setf (block-type-asserted block) t)
1588     (setf (block-test-modified block) t)
1589
1590     (cond ((or (eq prev-kind :inside-block)
1591                (and (eq prev-kind :block-start)
1592                     (not (eq node last))))
1593            (cond ((eq node last)
1594                   (setf (block-last block) (ctran-use prev))
1595                   (setf (node-next (ctran-use prev)) nil))
1596                  (t
1597                   (setf (ctran-next prev) next)
1598                   (setf (node-prev next) prev)
1599                   (when (if-p next) ; AOP wanted
1600                     (reoptimize-lvar (if-test next)))))
1601            (setf (node-prev node) nil)
1602            nil)
1603           (t
1604            (aver (eq prev-kind :block-start))
1605            (aver (eq node last))
1606            (let* ((succ (block-succ block))
1607                   (next (first succ)))
1608              (aver (singleton-p succ))
1609              (cond
1610               ((eq block (first succ))
1611                (with-ir1-environment-from-node node
1612                  (let ((exit (make-exit)))
1613                    (setf (ctran-next prev) nil)
1614                    (link-node-to-previous-ctran exit prev)
1615                    (setf (block-last block) exit)))
1616                (setf (node-prev node) nil)
1617                nil)
1618               (t
1619                (aver (eq (block-start-cleanup block)
1620                          (block-end-cleanup block)))
1621                (unlink-blocks block next)
1622                (dolist (pred (block-pred block))
1623                  (change-block-successor pred block next))
1624                (when (block-delete-p block)
1625                  (let ((component (block-component block)))
1626                    (setf (component-delete-blocks component)
1627                          (delq block (component-delete-blocks component)))))
1628                (remove-from-dfo block)
1629                (setf (block-delete-p block) t)
1630                (setf (node-prev node) nil)
1631                t)))))))
1632
1633 ;;; Return true if CTRAN has been deleted, false if it is still a valid
1634 ;;; part of IR1.
1635 (defun ctran-deleted-p (ctran)
1636   (declare (type ctran ctran))
1637   (let ((block (ctran-block ctran)))
1638     (or (not (block-component block))
1639         (block-delete-p block))))
1640
1641 ;;; Return true if NODE has been deleted, false if it is still a valid
1642 ;;; part of IR1.
1643 (defun node-deleted (node)
1644   (declare (type node node))
1645   (let ((prev (node-prev node)))
1646     (or (not prev)
1647         (ctran-deleted-p prev))))
1648
1649 ;;; Delete all the blocks and functions in COMPONENT. We scan first
1650 ;;; marking the blocks as DELETE-P to prevent weird stuff from being
1651 ;;; triggered by deletion.
1652 (defun delete-component (component)
1653   (declare (type component component))
1654   (aver (null (component-new-functionals component)))
1655   (setf (component-kind component) :deleted)
1656   (do-blocks (block component)
1657     (delete-block-lazily block))
1658   (dolist (fun (component-lambdas component))
1659     (unless (eq (functional-kind fun) :deleted)
1660       (setf (functional-kind fun) nil)
1661       (setf (functional-entry-fun fun) nil)
1662       (setf (leaf-refs fun) nil)
1663       (delete-functional fun)))
1664   (clean-component component)
1665   (values))
1666
1667 ;;; Remove all pending blocks to be deleted. Return the nearest live
1668 ;;; block after or equal to BLOCK.
1669 (defun clean-component (component &optional block)
1670   (loop while (component-delete-blocks component)
1671         ;; actual deletion of a block may queue new blocks
1672         do (let ((current (pop (component-delete-blocks component))))
1673              (when (eq block current)
1674                (setq block (block-next block)))
1675              (delete-block current)))
1676   block)
1677
1678 ;;; Convert code of the form
1679 ;;;   (FOO ... (FUN ...) ...)
1680 ;;; to
1681 ;;;   (FOO ...    ...    ...).
1682 ;;; In other words, replace the function combination FUN by its
1683 ;;; arguments. If there are any problems with doing this, use GIVE-UP
1684 ;;; to blow out of whatever transform called this. Note, as the number
1685 ;;; of arguments changes, the transform must be prepared to return a
1686 ;;; lambda with a new lambda-list with the correct number of
1687 ;;; arguments.
1688 (defun splice-fun-args (lvar fun num-args)
1689   #!+sb-doc
1690   "If LVAR is a call to FUN with NUM-ARGS args, change those arguments to feed
1691 directly to the LVAR-DEST of LVAR, which must be a combination. If FUN
1692 is :ANY, the function name is not checked."
1693   (declare (type lvar lvar)
1694            (type symbol fun)
1695            (type index num-args))
1696   (let ((outside (lvar-dest lvar))
1697         (inside (lvar-uses lvar)))
1698     (aver (combination-p outside))
1699     (unless (combination-p inside)
1700       (give-up-ir1-transform))
1701     (let ((inside-fun (combination-fun inside)))
1702       (unless (or (eq fun :any)
1703                   (eq (lvar-fun-name inside-fun) fun))
1704         (give-up-ir1-transform))
1705       (let ((inside-args (combination-args inside)))
1706         (unless (= (length inside-args) num-args)
1707           (give-up-ir1-transform))
1708         (let* ((outside-args (combination-args outside))
1709                (arg-position (position lvar outside-args))
1710                (before-args (subseq outside-args 0 arg-position))
1711                (after-args (subseq outside-args (1+ arg-position))))
1712           (dolist (arg inside-args)
1713             (setf (lvar-dest arg) outside)
1714             (flush-lvar-externally-checkable-type arg))
1715           (setf (combination-args inside) nil)
1716           (setf (combination-args outside)
1717                 (append before-args inside-args after-args))
1718           (change-ref-leaf (lvar-uses inside-fun)
1719                            (find-free-fun 'list "???"))
1720           (setf (combination-fun-info inside) (info :function :info 'list)
1721                 (combination-kind inside) :known)
1722           (setf (node-derived-type inside) *wild-type*)
1723           (flush-dest lvar)
1724           inside-args)))))
1725
1726 ;;; Eliminate keyword arguments from the call (leaving the
1727 ;;; parameters in place.
1728 ;;;
1729 ;;;    (FOO ... :BAR X :QUUX Y)
1730 ;;; becomes
1731 ;;;    (FOO ... X Y)
1732 ;;;
1733 ;;; SPECS is a list of (:KEYWORD PARAMETER) specifications.
1734 ;;; Returns the list of specified parameters names in the
1735 ;;; order they appeared in the call. N-POSITIONAL is the
1736 ;;; number of positional arguments in th call.
1737 (defun eliminate-keyword-args (call n-positional specs)
1738   (let* ((specs (copy-tree specs))
1739          (all (combination-args call))
1740          (new-args (reverse (subseq all 0 n-positional)))
1741          (key-args (subseq all n-positional))
1742          (parameters nil)
1743          (flushed-keys nil))
1744     (loop while key-args
1745           do (let* ((key (pop key-args))
1746                     (val (pop key-args))
1747                     (keyword (if (constant-lvar-p key)
1748                                  (lvar-value key)
1749                                  (give-up-ir1-transform)))
1750                     (spec (or (assoc keyword specs :test #'eq)
1751                               (give-up-ir1-transform))))
1752                (push val new-args)
1753                (push key flushed-keys)
1754                (push (second spec) parameters)
1755                ;; In case of duplicate keys.
1756                (setf (second spec) (gensym))))
1757     (dolist (key flushed-keys)
1758       (flush-dest key))
1759     (setf (combination-args call) (reverse new-args))
1760     (reverse parameters)))
1761
1762 (defun extract-fun-args (lvar fun num-args)
1763   (declare (type lvar lvar)
1764            (type (or symbol list) fun)
1765            (type index num-args))
1766   (let ((fun (if (listp fun) fun (list fun))))
1767     (let ((inside (lvar-uses lvar)))
1768       (unless (combination-p inside)
1769         (give-up-ir1-transform))
1770       (let ((inside-fun (combination-fun inside)))
1771         (unless (member (lvar-fun-name inside-fun) fun)
1772           (give-up-ir1-transform))
1773         (let ((inside-args (combination-args inside)))
1774           (unless (= (length inside-args) num-args)
1775             (give-up-ir1-transform))
1776           (values (lvar-fun-name inside-fun) inside-args))))))
1777
1778 (defun flush-combination (combination)
1779   (declare (type combination combination))
1780   (flush-dest (combination-fun combination))
1781   (dolist (arg (combination-args combination))
1782     (flush-dest arg))
1783   (unlink-node combination)
1784   (values))
1785
1786 \f
1787 ;;;; leaf hackery
1788
1789 ;;; Change the LEAF that a REF refers to.
1790 (defun change-ref-leaf (ref leaf)
1791   (declare (type ref ref) (type leaf leaf))
1792   (unless (eq (ref-leaf ref) leaf)
1793     (push ref (leaf-refs leaf))
1794     (delete-ref ref)
1795     (setf (ref-leaf ref) leaf)
1796     (setf (leaf-ever-used leaf) t)
1797     (let* ((ltype (leaf-type leaf))
1798            (vltype (make-single-value-type ltype)))
1799       (if (let* ((lvar (node-lvar ref))
1800                  (dest (and lvar (lvar-dest lvar))))
1801             (and (basic-combination-p dest)
1802                  (eq lvar (basic-combination-fun dest))
1803                  (csubtypep ltype (specifier-type 'function))))
1804           (setf (node-derived-type ref) vltype)
1805           (derive-node-type ref vltype)))
1806     (reoptimize-lvar (node-lvar ref)))
1807   (values))
1808
1809 ;;; Change all REFS for OLD-LEAF to NEW-LEAF.
1810 (defun substitute-leaf (new-leaf old-leaf)
1811   (declare (type leaf new-leaf old-leaf))
1812   (dolist (ref (leaf-refs old-leaf))
1813     (change-ref-leaf ref new-leaf))
1814   (values))
1815
1816 ;;; like SUBSITUTE-LEAF, only there is a predicate on the REF to tell
1817 ;;; whether to substitute
1818 (defun substitute-leaf-if (test new-leaf old-leaf)
1819   (declare (type leaf new-leaf old-leaf) (type function test))
1820   (dolist (ref (leaf-refs old-leaf))
1821     (when (funcall test ref)
1822       (change-ref-leaf ref new-leaf)))
1823   (values))
1824
1825 ;;; Return a LEAF which represents the specified constant object. If
1826 ;;; the object is not in *CONSTANTS*, then we create a new constant
1827 ;;; LEAF and enter it. If we are producing a fasl file, make sure that
1828 ;;; MAKE-LOAD-FORM gets used on any parts of the constant that it
1829 ;;; needs to be.
1830 ;;;
1831 ;;; We are allowed to coalesce things like EQUAL strings and bit-vectors
1832 ;;; when file-compiling, but not when using COMPILE.
1833 (defun find-constant (object &optional (name nil namep))
1834   (let ((faslp (producing-fasl-file)))
1835     (labels ((make-it ()
1836                (when faslp
1837                  (if namep
1838                      (maybe-emit-make-load-forms object name)
1839                      (maybe-emit-make-load-forms object)))
1840                (make-constant object))
1841              (core-coalesce-p (x)
1842                ;; True for things which retain their identity under EQUAL,
1843                ;; so we can safely share the same CONSTANT leaf between
1844                ;; multiple references.
1845                (or (typep x '(or symbol number character))
1846                    ;; Amusingly enough, we see CLAMBDAs --among other things--
1847                    ;; here, from compiling things like %ALLOCATE-CLOSUREs forms.
1848                    ;; No point in stuffing them in the hash-table.
1849                    (and (typep x 'instance)
1850                         (not (or (leaf-p x) (node-p x))))))
1851              (file-coalesce-p (x)
1852                ;; CLHS 3.2.4.2.2: We are also allowed to coalesce various
1853                ;; other things when file-compiling.
1854                (or (core-coalesce-p x)
1855                    (if (consp x)
1856                        (if (eq +code-coverage-unmarked+ (cdr x))
1857                            ;; These are already coalesced, and the CAR should
1858                            ;; always be OK, so no need to check.
1859                            t
1860                            (unless (maybe-cyclic-p x) ; safe for EQUAL?
1861                              (do ((y x (cdr y)))
1862                                  ((atom y) (file-coalesce-p y))
1863                                (unless (file-coalesce-p (car y))
1864                                  (return nil)))))
1865                        ;; We *could* coalesce base-strings as well,
1866                        ;; but we'd need a separate hash-table for
1867                        ;; that, since we are not allowed to coalesce
1868                        ;; base-strings with non-base-strings.
1869                        (typep x
1870                               '(or bit-vector
1871                                 ;; in the cross-compiler, we coalesce
1872                                 ;; all strings with the same contents,
1873                                 ;; because we will end up dumping them
1874                                 ;; as base-strings anyway.  In the
1875                                 ;; real compiler, we're not allowed to
1876                                 ;; coalesce regardless of string
1877                                 ;; specialized element type, so we
1878                                 ;; KLUDGE by coalescing only character
1879                                 ;; strings (the common case) and
1880                                 ;; punting on the other types.
1881                                 #+sb-xc-host
1882                                 string
1883                                 #-sb-xc-host
1884                                 (vector character))))))
1885              (coalescep (x)
1886                (if faslp (file-coalesce-p x) (core-coalesce-p x))))
1887       (if (and (boundp '*constants*) (coalescep object))
1888           (or (gethash object *constants*)
1889               (setf (gethash object *constants*)
1890                     (make-it)))
1891           (make-it)))))
1892 \f
1893 ;;; Return true if VAR would have to be closed over if environment
1894 ;;; analysis ran now (i.e. if there are any uses that have a different
1895 ;;; home lambda than VAR's home.)
1896 (defun closure-var-p (var)
1897   (declare (type lambda-var var))
1898   (let ((home (lambda-var-home var)))
1899     (cond ((eq (functional-kind home) :deleted)
1900            nil)
1901           (t (let ((home (lambda-home home)))
1902                (flet ((frob (l)
1903                         (find home l
1904                               :key #'node-home-lambda
1905                               :test #'neq)))
1906                  (or (frob (leaf-refs var))
1907                      (frob (basic-var-sets var)))))))))
1908
1909 ;;; If there is a non-local exit noted in ENTRY's environment that
1910 ;;; exits to CONT in that entry, then return it, otherwise return NIL.
1911 (defun find-nlx-info (exit)
1912   (declare (type exit exit))
1913   (let* ((entry (exit-entry exit))
1914          (cleanup (entry-cleanup entry))
1915         (block (first (block-succ (node-block exit)))))
1916     (dolist (nlx (physenv-nlx-info (node-physenv entry)) nil)
1917       (when (and (eq (nlx-info-block nlx) block)
1918                  (eq (nlx-info-cleanup nlx) cleanup))
1919         (return nlx)))))
1920
1921 (defun nlx-info-lvar (nlx)
1922   (declare (type nlx-info nlx))
1923   (node-lvar (block-last (nlx-info-target nlx))))
1924 \f
1925 ;;;; functional hackery
1926
1927 (declaim (ftype (sfunction (functional) clambda) main-entry))
1928 (defun main-entry (functional)
1929   (etypecase functional
1930     (clambda functional)
1931     (optional-dispatch
1932      (optional-dispatch-main-entry functional))))
1933
1934 ;;; RETURN true if FUNCTIONAL is a thing that can be treated like
1935 ;;; MV-BIND when it appears in an MV-CALL. All fixed arguments must be
1936 ;;; optional with null default and no SUPPLIED-P. There must be a
1937 ;;; &REST arg with no references.
1938 (declaim (ftype (sfunction (functional) boolean) looks-like-an-mv-bind))
1939 (defun looks-like-an-mv-bind (functional)
1940   (and (optional-dispatch-p functional)
1941        (do ((arg (optional-dispatch-arglist functional) (cdr arg)))
1942            ((null arg) nil)
1943          (let ((info (lambda-var-arg-info (car arg))))
1944            (unless info (return nil))
1945            (case (arg-info-kind info)
1946              (:optional
1947               (when (or (arg-info-supplied-p info) (arg-info-default info))
1948                 (return nil)))
1949              (:rest
1950               (return (and (null (cdr arg)) (null (leaf-refs (car arg))))))
1951              (t
1952               (return nil)))))))
1953
1954 ;;; Return true if function is an external entry point. This is true
1955 ;;; of normal XEPs (:EXTERNAL kind) and also of top level lambdas
1956 ;;; (:TOPLEVEL kind.)
1957 (defun xep-p (fun)
1958   (declare (type functional fun))
1959   (not (null (member (functional-kind fun) '(:external :toplevel)))))
1960
1961 ;;; If LVAR's only use is a non-notinline global function reference,
1962 ;;; then return the referenced symbol, otherwise NIL. If NOTINLINE-OK
1963 ;;; is true, then we don't care if the leaf is NOTINLINE.
1964 (defun lvar-fun-name (lvar &optional notinline-ok)
1965   (declare (type lvar lvar))
1966   (let ((use (lvar-uses lvar)))
1967     (if (ref-p use)
1968         (let ((leaf (ref-leaf use)))
1969           (if (and (global-var-p leaf)
1970                    (eq (global-var-kind leaf) :global-function)
1971                    (or (not (defined-fun-p leaf))
1972                        (not (eq (defined-fun-inlinep leaf) :notinline))
1973                        notinline-ok))
1974               (leaf-source-name leaf)
1975               nil))
1976         nil)))
1977
1978 (defun lvar-fun-debug-name (lvar)
1979   (declare (type lvar lvar))
1980   (let ((uses (lvar-uses lvar)))
1981     (flet ((name1 (use)
1982              (leaf-debug-name (ref-leaf use))))
1983       (if (ref-p uses)
1984         (name1 uses)
1985         (mapcar #'name1 uses)))))
1986
1987 ;;; Return the source name of a combination -- or signals an error
1988 ;;; if the function leaf is anonymous.
1989 (defun combination-fun-source-name (combination &optional (errorp t))
1990   (let ((leaf (ref-leaf (lvar-uses (combination-fun combination)))))
1991     (if (or errorp (leaf-has-source-name-p leaf))
1992         (values (leaf-source-name leaf) t)
1993         (values nil nil))))
1994
1995 ;;; Return the COMBINATION node that is the call to the LET FUN.
1996 (defun let-combination (fun)
1997   (declare (type clambda fun))
1998   (aver (functional-letlike-p fun))
1999   (lvar-dest (node-lvar (first (leaf-refs fun)))))
2000
2001 ;;; Return the initial value lvar for a LET variable, or NIL if there
2002 ;;; is none.
2003 (defun let-var-initial-value (var)
2004   (declare (type lambda-var var))
2005   (let ((fun (lambda-var-home var)))
2006     (elt (combination-args (let-combination fun))
2007          (position-or-lose var (lambda-vars fun)))))
2008
2009 ;;; Return the LAMBDA that is called by the local CALL.
2010 (defun combination-lambda (call)
2011   (declare (type basic-combination call))
2012   (aver (eq (basic-combination-kind call) :local))
2013   (ref-leaf (lvar-uses (basic-combination-fun call))))
2014
2015 (defvar *inline-expansion-limit* 200
2016   #!+sb-doc
2017   "an upper limit on the number of inline function calls that will be expanded
2018    in any given code object (single function or block compilation)")
2019
2020 ;;; Check whether NODE's component has exceeded its inline expansion
2021 ;;; limit, and warn if so, returning NIL.
2022 (defun inline-expansion-ok (node)
2023   (let ((expanded (incf (component-inline-expansions
2024                          (block-component
2025                           (node-block node))))))
2026     (cond ((> expanded *inline-expansion-limit*) nil)
2027           ((= expanded *inline-expansion-limit*)
2028            ;; FIXME: If the objective is to stop the recursive
2029            ;; expansion of inline functions, wouldn't it be more
2030            ;; correct to look back through surrounding expansions
2031            ;; (which are, I think, stored in the *CURRENT-PATH*, and
2032            ;; possibly stored elsewhere too) and suppress expansion
2033            ;; and print this warning when the function being proposed
2034            ;; for inline expansion is found there? (I don't like the
2035            ;; arbitrary numerical limit in principle, and I think
2036            ;; it'll be a nuisance in practice if we ever want the
2037            ;; compiler to be able to use WITH-COMPILATION-UNIT on
2038            ;; arbitrarily huge blocks of code. -- WHN)
2039            (let ((*compiler-error-context* node))
2040              (compiler-notify "*INLINE-EXPANSION-LIMIT* (~W) was exceeded, ~
2041                                probably trying to~%  ~
2042                                inline a recursive function."
2043                               *inline-expansion-limit*))
2044            nil)
2045           (t t))))
2046
2047 ;;; Make sure that FUNCTIONAL is not let-converted or deleted.
2048 (defun assure-functional-live-p (functional)
2049   (declare (type functional functional))
2050   (when (and (or
2051               ;; looks LET-converted
2052               (functional-somewhat-letlike-p functional)
2053               ;; It's possible for a LET-converted function to end up
2054               ;; deleted later. In that case, for the purposes of this
2055               ;; analysis, it is LET-converted: LET-converted functionals
2056               ;; are too badly trashed to expand them inline, and deleted
2057               ;; LET-converted functionals are even worse.
2058               (memq (functional-kind functional) '(:deleted :zombie))))
2059     (throw 'locall-already-let-converted functional)))
2060
2061 (defun assure-leaf-live-p (leaf)
2062   (typecase leaf
2063     (lambda-var
2064      (when (lambda-var-deleted leaf)
2065        (throw 'locall-already-let-converted leaf)))
2066     (functional
2067      (assure-functional-live-p leaf))))
2068
2069
2070 (defun call-full-like-p (call)
2071   (declare (type combination call))
2072   (let ((kind (basic-combination-kind call)))
2073     (or (eq kind :full)
2074         (and (eq kind :known)
2075              (let ((info (basic-combination-fun-info call)))
2076                (and
2077                 (not (fun-info-ir2-convert info))
2078                 (dolist (template (fun-info-templates info) t)
2079                   (when (eq (template-ltn-policy template) :fast-safe)
2080                     (multiple-value-bind (val win)
2081                        (valid-fun-use call (template-type template))
2082                       (when (or val (not win)) (return nil)))))))))))
2083 \f
2084 ;;;; careful call
2085
2086 ;;; Apply a function to some arguments, returning a list of the values
2087 ;;; resulting of the evaluation. If an error is signalled during the
2088 ;;; application, then we produce a warning message using WARN-FUN and
2089 ;;; return NIL as our second value to indicate this. NODE is used as
2090 ;;; the error context for any error message, and CONTEXT is a string
2091 ;;; that is spliced into the warning.
2092 (declaim (ftype (sfunction ((or symbol function) list node function string)
2093                           (values list boolean))
2094                 careful-call))
2095 (defun careful-call (function args node warn-fun context)
2096   (values
2097    (multiple-value-list
2098     (handler-case (apply function args)
2099       (error (condition)
2100         (let ((*compiler-error-context* node))
2101           (funcall warn-fun "Lisp error during ~A:~%~A" context condition)
2102           (return-from careful-call (values nil nil))))))
2103    t))
2104
2105 ;;; Variations of SPECIFIER-TYPE for parsing possibly wrong
2106 ;;; specifiers.
2107 (macrolet
2108     ((deffrob (basic careful compiler transform)
2109        `(progn
2110           (defun ,careful (specifier)
2111             (handler-case (,basic specifier)
2112               (sb!kernel::arg-count-error (condition)
2113                 (values nil (list (format nil "~A" condition))))
2114               (simple-error (condition)
2115                 (values nil (list* (simple-condition-format-control condition)
2116                                    (simple-condition-format-arguments condition))))))
2117           (defun ,compiler (specifier)
2118             (multiple-value-bind (type error-args) (,careful specifier)
2119               (or type
2120                   (apply #'compiler-error error-args))))
2121           (defun ,transform (specifier)
2122             (multiple-value-bind (type error-args) (,careful specifier)
2123               (or type
2124                   (apply #'give-up-ir1-transform
2125                          error-args)))))))
2126   (deffrob specifier-type careful-specifier-type compiler-specifier-type ir1-transform-specifier-type)
2127   (deffrob values-specifier-type careful-values-specifier-type compiler-values-specifier-type ir1-transform-values-specifier-type))
2128
2129 \f
2130 ;;;; utilities used at run-time for parsing &KEY args in IR1
2131
2132 ;;; This function is used by the result of PARSE-DEFTRANSFORM to find
2133 ;;; the lvar for the value of the &KEY argument KEY in the list of
2134 ;;; lvars ARGS. It returns the lvar if the keyword is present, or NIL
2135 ;;; otherwise. The legality and constantness of the keywords should
2136 ;;; already have been checked.
2137 (declaim (ftype (sfunction (list keyword) (or lvar null))
2138                 find-keyword-lvar))
2139 (defun find-keyword-lvar (args key)
2140   (do ((arg args (cddr arg)))
2141       ((null arg) nil)
2142     (when (eq (lvar-value (first arg)) key)
2143       (return (second arg)))))
2144
2145 ;;; This function is used by the result of PARSE-DEFTRANSFORM to
2146 ;;; verify that alternating lvars in ARGS are constant and that there
2147 ;;; is an even number of args.
2148 (declaim (ftype (sfunction (list) boolean) check-key-args-constant))
2149 (defun check-key-args-constant (args)
2150   (do ((arg args (cddr arg)))
2151       ((null arg) t)
2152     (unless (and (rest arg)
2153                  (constant-lvar-p (first arg)))
2154       (return nil))))
2155
2156 ;;; This function is used by the result of PARSE-DEFTRANSFORM to
2157 ;;; verify that the list of lvars ARGS is a well-formed &KEY arglist
2158 ;;; and that only keywords present in the list KEYS are supplied.
2159 (declaim (ftype (sfunction (list list) boolean) check-transform-keys))
2160 (defun check-transform-keys (args keys)
2161   (and (check-key-args-constant args)
2162        (do ((arg args (cddr arg)))
2163            ((null arg) t)
2164          (unless (member (lvar-value (first arg)) keys)
2165            (return nil)))))
2166 \f
2167 ;;;; miscellaneous
2168
2169 ;;; Called by the expansion of the EVENT macro.
2170 (declaim (ftype (sfunction (event-info (or node null)) *) %event))
2171 (defun %event (info node)
2172   (incf (event-info-count info))
2173   (when (and (>= (event-info-level info) *event-note-threshold*)
2174              (policy (or node *lexenv*)
2175                      (= inhibit-warnings 0)))
2176     (let ((*compiler-error-context* node))
2177       (compiler-notify (event-info-description info))))
2178
2179   (let ((action (event-info-action info)))
2180     (when action (funcall action node))))
2181
2182 ;;;
2183 (defun make-cast (value type policy)
2184   (declare (type lvar value)
2185            (type ctype type)
2186            (type policy policy))
2187   (%make-cast :asserted-type type
2188               :type-to-check (maybe-weaken-check type policy)
2189               :value value
2190               :derived-type (coerce-to-values type)))
2191
2192 (defun cast-type-check (cast)
2193   (declare (type cast cast))
2194   (when (cast-reoptimize cast)
2195     (ir1-optimize-cast cast t))
2196   (cast-%type-check cast))
2197
2198 (defun note-single-valuified-lvar (lvar)
2199   (declare (type (or lvar null) lvar))
2200   (when lvar
2201     (let ((use (lvar-uses lvar)))
2202       (cond ((ref-p use)
2203              (let ((leaf (ref-leaf use)))
2204                (when (and (lambda-var-p leaf)
2205                           (null (rest (leaf-refs leaf))))
2206                  (reoptimize-lambda-var leaf))))
2207             ((or (listp use) (combination-p use))
2208              (do-uses (node lvar)
2209                (setf (node-reoptimize node) t)
2210                (setf (block-reoptimize (node-block node)) t)
2211                (reoptimize-component (node-component node) :maybe)))))))
2212
2213 ;;; Return true if LVAR's only use is a non-NOTINLINE reference to a
2214 ;;; global function with one of the specified NAMES.
2215 (defun lvar-fun-is (lvar names)
2216   (declare (type lvar lvar) (list names))
2217   (let ((use (lvar-uses lvar)))
2218     (and (ref-p use)
2219          (let ((leaf (ref-leaf use)))
2220            (and (global-var-p leaf)
2221                 (eq (global-var-kind leaf) :global-function)
2222                 (not (null (member (leaf-source-name leaf) names
2223                                    :test #'equal))))))))
2224
2225 ;;; Return true if LVAR's only use is a call to one of the named functions
2226 ;;; (or any function if none are specified) with the specified number of
2227 ;;; of arguments (or any number if number is not specified)
2228 (defun lvar-matches (lvar &key fun-names arg-count)
2229   (let ((use (lvar-uses lvar)))
2230     (and (combination-p use)
2231          (or (not fun-names)
2232              (multiple-value-bind (name ok)
2233                  (combination-fun-source-name use nil)
2234                (and ok (member name fun-names :test #'eq))))
2235          (or (not arg-count)
2236              (= arg-count (length (combination-args use)))))))