Fix deadlocks in GC on Windows.
[sbcl.git] / tests / dynamic-extent.impure.lisp
1 ;;;; tests that dynamic-extent functionality works.
2
3 ;;;; This software is part of the SBCL system. See the README file for
4 ;;;; more information.
5 ;;;;
6 ;;;; While most of SBCL is derived from the CMU CL system, the test
7 ;;;; files (like this one) were written from scratch after the fork
8 ;;;; from CMU CL.
9 ;;;;
10 ;;;; This software is in the public domain and is provided with
11 ;;;; absolutely no warranty. See the COPYING and CREDITS files for
12 ;;;; more information.
13
14 (when (eq sb-ext:*evaluator-mode* :interpret)
15   (sb-ext:exit :code 104))
16
17 (load "compiler-test-util.lisp")
18 (use-package :ctu)
19
20 (setq sb-c::*check-consistency* t
21       sb-ext:*stack-allocate-dynamic-extent* t)
22
23 (defmacro defun-with-dx (name arglist &body body)
24   (let ((debug-name (sb-int:symbolicate name "-HIGH-DEBUG"))
25         (default-name (sb-int:symbolicate name "-DEFAULT")))
26     `(progn
27        (defun ,debug-name ,arglist
28          (declare (optimize debug))
29          ,@body)
30        (defun ,default-name ,arglist
31         ,@body)
32        (defun ,name (&rest args)
33          (apply #',debug-name args)
34          (apply #',default-name args)))))
35
36 (declaim (notinline opaque-identity))
37 (defun opaque-identity (x)
38   x)
39
40 ;;; &REST lists
41
42 (defun-with-dx dxlength (&rest rest)
43   (declare (dynamic-extent rest))
44   (length rest))
45
46 (with-test (:name (:dx-&rest :basics))
47   (assert (= (dxlength 1 2 3) 3))
48   (assert (= (dxlength t t t t t t) 6))
49   (assert (= (dxlength) 0)))
50
51 (defun callee (list)
52   (destructuring-bind (a b c d e f &rest g) list
53     (+ a b c d e f (length g))))
54
55 (defun-with-dx dxcaller (&rest rest)
56   (declare (dynamic-extent rest))
57   (callee rest))
58
59 (with-test (:name (:dx-&rest :pass-down-to-callee :tail-call))
60   (assert (= (dxcaller 1 2 3 4 5 6 7) 22)))
61
62 (defun-with-dx dxcaller-align-1 (x &rest rest)
63   (declare (dynamic-extent rest))
64   (+ x (callee rest)))
65
66 (with-test (:name (:dx-&rest :pass-down-to-callee :non-tail-call))
67   (assert (= (dxcaller-align-1 17 1 2 3 4 5 6 7) 39))
68   (assert (= (dxcaller-align-1 17 1 2 3 4 5 6 7 8) 40)))
69
70 ;;; %NIP-VALUES
71
72 (defun-with-dx test-nip-values ()
73   (flet ((bar (x &rest y)
74            (declare (dynamic-extent y))
75            (if (> x 0)
76                (values x (length y))
77                (values (car y)))))
78     (multiple-value-call #'values
79       (bar 1 2 3 4 5 6)
80       (bar -1 'a 'b))))
81
82 (with-test (:name (:nip-values))
83   (assert (equal (multiple-value-list (test-nip-values)) '(1 5 a))))
84
85 ;;; LET-variable substitution
86
87 (defun-with-dx test-let-var-subst1 (x)
88   (let ((y (list x (1- x))))
89     (opaque-identity :foo)
90     (let ((z (the list y)))
91       (declare (dynamic-extent z))
92       (length z))))
93
94 (with-test (:name (:let-variable-substitution))
95   (assert (eql (test-let-var-subst1 17) 2)))
96
97 (defun-with-dx test-let-var-subst2 (x)
98   (let ((y (list x (1- x))))
99     (declare (dynamic-extent y))
100     (opaque-identity :foo)
101     (let ((z (the list y)))
102       (length z))))
103
104 (with-test (:name (:let-variable-substitution-2))
105   (assert (eql (test-let-var-subst2 17) 2)))
106
107
108 ;;; DX propagation through LET-return.
109
110 (defun-with-dx test-lvar-subst (x)
111   (let ((y (list x (1- x))))
112     (declare (dynamic-extent y))
113     (second (let ((z (the list y)))
114               (opaque-identity :foo)
115               z))))
116
117 (with-test (:name (:dx-propagation-through-let-return))
118   (assert (eql (test-lvar-subst 11) 10)))
119
120 ;;; this code is incorrect, but the compiler should not fail
121 (defun-with-dx test-let-var-subst-incorrect (x)
122   (let ((y (list x (1- x))))
123     (opaque-identity :foo)
124     (let ((z (the list y)))
125       (declare (dynamic-extent z))
126       (opaque-identity :bar)
127       z)))
128 \f
129 ;;; alignment
130
131 (defvar *x*)
132 (defun-with-dx test-alignment-dx-list (form)
133   (multiple-value-prog1 (eval form)
134     (let ((l (list 1 2 3 4)))
135       (declare (dynamic-extent l))
136       (setq *x* (copy-list l)))))
137
138 (with-test (:name (:dx-list :alignment))
139   (dotimes (n 64)
140     (let* ((res (loop for i below n collect i))
141            (form `(values ,@res)))
142       (assert (equal (multiple-value-list (test-alignment-dx-list form)) res))
143       (assert (equal *x* '(1 2 3 4))))))
144
145 ;;; closure
146
147 (declaim (notinline true))
148 (defun true (x)
149   (declare (ignore x))
150   t)
151
152 (defun-with-dx dxclosure (x)
153   (flet ((f (y)
154            (+ y x)))
155     (declare (dynamic-extent #'f))
156     (true #'f)))
157
158 (with-test (:name (:dx-closure))
159   (assert (eq t (dxclosure 13))))
160
161 ;;; value-cells
162
163 (defun-with-dx dx-value-cell (x)
164   ;; Not implemented everywhere, yet.
165   #+(or x86 x86-64 mips hppa)
166   (let ((cell x))
167     (declare (sb-int:truly-dynamic-extent cell))
168     (flet ((f ()
169              (incf cell)))
170       (declare (dynamic-extent #'f))
171       (true #'f))))
172
173 ;;; CONS
174
175 (defun-with-dx cons-on-stack (x)
176   (let ((cons (cons x x)))
177     (declare (dynamic-extent cons))
178     (true cons)
179     nil))
180
181 ;;; MAKE-ARRAY
182
183 (defun force-make-array-on-stack (n)
184   (declare (optimize safety))
185   (let ((v (make-array (min n 1))))
186     (declare (sb-int:truly-dynamic-extent v))
187     (true v)
188     (true v)
189     nil))
190
191 (defun-with-dx make-array-on-stack-1 ()
192   (let ((v (make-array '(42) :element-type 'single-float)))
193     (declare (dynamic-extent v))
194     (true v)
195     (true v)
196     nil))
197
198 (defun-with-dx make-array-on-stack-2 (n x)
199   (declare (integer n))
200   (let ((v (make-array n :initial-contents x)))
201     (declare (sb-int:truly-dynamic-extent v))
202     (true v)
203     (true v)
204     nil))
205
206 (defun-with-dx make-array-on-stack-3 (x y z)
207   (let ((v (make-array 3
208                        :element-type 'fixnum :initial-contents (list x y z)
209                        :element-type t :initial-contents x)))
210     (declare (sb-int:truly-dynamic-extent v))
211     (true v)
212     (true v)
213     nil))
214
215 (defun-with-dx make-array-on-stack-4 ()
216   (let ((v (make-array 3 :initial-contents '(1 2 3))))
217     (declare (sb-int:truly-dynamic-extent v))
218     (true v)
219     (true v)
220     nil))
221
222 (defun-with-dx make-array-on-stack-5 ()
223   (let ((v (make-array 3 :initial-element 12 :element-type t)))
224     (declare (sb-int:truly-dynamic-extent v))
225     (true v)
226     (true v)
227     nil))
228
229 (defun-with-dx make-array-on-stack-6 ()
230   (let ((v (make-array 3 :initial-element 12 :element-type '(unsigned-byte 8))))
231     (declare (sb-int:truly-dynamic-extent v))
232     (true v)
233     (true v)
234     nil))
235
236 (defun-with-dx make-array-on-stack-7 ()
237   (let ((v (make-array 3 :initial-element 12 :element-type '(signed-byte 8))))
238     (declare (sb-int:truly-dynamic-extent v))
239     (true v)
240     (true v)
241     nil))
242
243 (defun-with-dx make-array-on-stack-8 ()
244   (let ((v (make-array 3 :initial-element 12 :element-type 'word)))
245     (declare (sb-int:truly-dynamic-extent v))
246     (true v)
247     (true v)
248     nil))
249
250 (defun-with-dx make-array-on-stack-9 ()
251   (let ((v (make-array 3 :initial-element 12.0 :element-type 'single-float)))
252     (declare (sb-int:truly-dynamic-extent v))
253     (true v)
254     (true v)
255     nil))
256
257 (defun-with-dx make-array-on-stack-10 ()
258   (let ((v (make-array 3 :initial-element 12.0d0 :element-type 'double-float)))
259     (declare (sb-int:truly-dynamic-extent v))
260     (true v)
261     (true v)
262     nil))
263
264 (defun-with-dx make-array-on-stack-11 ()
265   (let ((v (make-array (the integer (opaque-identity 3)) :initial-element 12.0d0 :element-type 'double-float)))
266     (declare (sb-int:truly-dynamic-extent v))
267     (true v)
268     (true v)
269     nil))
270
271 (defun-with-dx vector-on-stack (x y)
272   (let ((v (vector 1 x 2 y 3)))
273     (declare (sb-int:truly-dynamic-extent v))
274     (true v)
275     nil))
276
277 ;;; MAKE-STRUCTURE
278
279 (declaim (inline make-fp-struct-1))
280 (defstruct fp-struct-1
281   (s 0.0 :type single-float)
282   (d 0.0d0 :type double-float))
283
284 (defun-with-dx test-fp-struct-1.1 (s d)
285   (let ((fp (make-fp-struct-1 :s s)))
286     (declare (dynamic-extent fp))
287     (assert (eql s (fp-struct-1-s fp)))
288     (assert (eql 0.0d0 (fp-struct-1-d fp)))))
289
290 (defun-with-dx test-fp-struct-1.2 (s d)
291   (let ((fp (make-fp-struct-1 :d d)))
292     (declare (dynamic-extent fp))
293     (assert (eql 0.0 (fp-struct-1-s fp)))
294     (assert (eql d (fp-struct-1-d fp)))))
295
296 (defun-with-dx test-fp-struct-1.3 (s d)
297   (let ((fp (make-fp-struct-1 :d d :s s)))
298     (declare (dynamic-extent fp))
299     (assert (eql s (fp-struct-1-s fp)))
300     (assert (eql d (fp-struct-1-d fp)))))
301
302 (defun-with-dx test-fp-struct-1.4 (s d)
303   (let ((fp (make-fp-struct-1 :s s :d d)))
304     (declare (dynamic-extent fp))
305     (assert (eql s (fp-struct-1-s fp)))
306     (assert (eql d (fp-struct-1-d fp)))))
307
308 (with-test (:name (:test-fp-struct-1.1))
309   (test-fp-struct-1.1 123.456 876.243d0))
310 (with-test (:name (:test-fp-struct-1.2))
311   (test-fp-struct-1.2 123.456 876.243d0))
312 (with-test (:name (:test-fp-struct-1.3))
313   (test-fp-struct-1.3 123.456 876.243d0))
314 (with-test (:name (:test-fp-struct-1.4))
315   (test-fp-struct-1.4 123.456 876.243d0))
316
317 (declaim (inline make-fp-struct-2))
318 (defstruct fp-struct-2
319   (d 0.0d0 :type double-float)
320   (s 0.0 :type single-float))
321
322 (defun-with-dx test-fp-struct-2.1 (s d)
323   (let ((fp (make-fp-struct-2 :s s)))
324     (declare (dynamic-extent fp))
325     (assert (eql s (fp-struct-2-s fp)))
326     (assert (eql 0.0d0 (fp-struct-2-d fp)))))
327
328 (defun-with-dx test-fp-struct-2.2 (s d)
329   (let ((fp (make-fp-struct-2 :d d)))
330     (declare (dynamic-extent fp))
331     (assert (eql 0.0 (fp-struct-2-s fp)))
332     (assert (eql d (fp-struct-2-d fp)))))
333
334 (defun-with-dx test-fp-struct-2.3 (s d)
335   (let ((fp (make-fp-struct-2 :d d :s s)))
336     (declare (dynamic-extent fp))
337     (assert (eql s (fp-struct-2-s fp)))
338     (assert (eql d (fp-struct-2-d fp)))))
339
340 (defun-with-dx test-fp-struct-2.4 (s d)
341   (let ((fp (make-fp-struct-2 :s s :d d)))
342     (declare (dynamic-extent fp))
343     (assert (eql s (fp-struct-2-s fp)))
344     (assert (eql d (fp-struct-2-d fp)))))
345
346 (with-test (:name (:test-fp-struct-2.1))
347   (test-fp-struct-2.1 123.456 876.243d0))
348 (with-test (:name (:test-fp-struct-2.2))
349   (test-fp-struct-2.2 123.456 876.243d0))
350 (with-test (:name (:test-fp-struct-2.3))
351   (test-fp-struct-2.3 123.456 876.243d0))
352 (with-test (:name (:test-fp-struct-2.4))
353   (test-fp-struct-2.4 123.456 876.243d0))
354
355 (declaim (inline make-cfp-struct-1))
356 (defstruct cfp-struct-1
357   (s (complex 0.0) :type (complex single-float))
358   (d (complex 0.0d0) :type (complex double-float)))
359
360 (defun-with-dx test-cfp-struct-1.1 (s d)
361   (let ((cfp (make-cfp-struct-1 :s s)))
362     (declare (dynamic-extent cfp))
363     (assert (eql s (cfp-struct-1-s cfp)))
364     (assert (eql (complex 0.0d0) (cfp-struct-1-d cfp)))))
365
366 (defun-with-dx test-cfp-struct-1.2 (s d)
367   (let ((cfp (make-cfp-struct-1 :d d)))
368     (declare (dynamic-extent cfp))
369     (assert (eql (complex 0.0) (cfp-struct-1-s cfp)))
370     (assert (eql d (cfp-struct-1-d cfp)))))
371
372 (defun-with-dx test-cfp-struct-1.3 (s d)
373   (let ((cfp (make-cfp-struct-1 :d d :s s)))
374     (declare (dynamic-extent cfp))
375     (assert (eql s (cfp-struct-1-s cfp)))
376     (assert (eql d (cfp-struct-1-d cfp)))))
377
378 (defun-with-dx test-cfp-struct-1.4 (s d)
379   (let ((cfp (make-cfp-struct-1 :s s :d d)))
380     (declare (dynamic-extent cfp))
381     (assert (eql s (cfp-struct-1-s cfp)))
382     (assert (eql d (cfp-struct-1-d cfp)))))
383
384 (with-test (:name (:test-cfp-struct-1.1))
385   (test-cfp-struct-1.1 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
386 (with-test (:name (:test-cfp-struct-1.2))
387   (test-cfp-struct-1.2 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
388 (with-test (:name (:test-cfp-struct-1.3))
389   (test-cfp-struct-1.3 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
390 (with-test (:name (:test-cfp-struct-1.4))
391   (test-cfp-struct-1.4 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
392
393 (declaim (inline make-cfp-struct-2))
394 (defstruct cfp-struct-2
395   (d (complex 0.0d0) :type (complex double-float))
396   (s (complex 0.0) :type (complex single-float)))
397
398 (defun-with-dx test-cfp-struct-2.1 (s d)
399   (let ((cfp (make-cfp-struct-2 :s s)))
400     (declare (dynamic-extent cfp))
401     (assert (eql s (cfp-struct-2-s cfp)))
402     (assert (eql (complex 0.0d0) (cfp-struct-2-d cfp)))))
403
404 (defun-with-dx test-cfp-struct-2.2 (s d)
405   (let ((cfp (make-cfp-struct-2 :d d)))
406     (declare (dynamic-extent cfp))
407     (assert (eql (complex 0.0) (cfp-struct-2-s cfp)))
408     (assert (eql d (cfp-struct-2-d cfp)))))
409
410 (defun-with-dx test-cfp-struct-2.3 (s d)
411   (let ((cfp (make-cfp-struct-2 :d d :s s)))
412     (declare (dynamic-extent cfp))
413     (assert (eql s (cfp-struct-2-s cfp)))
414     (assert (eql d (cfp-struct-2-d cfp)))))
415
416 (defun-with-dx test-cfp-struct-2.4 (s d)
417   (let ((cfp (make-cfp-struct-2 :s s :d d)))
418     (declare (dynamic-extent cfp))
419     (assert (eql s (cfp-struct-2-s cfp)))
420     (assert (eql d (cfp-struct-2-d cfp)))))
421
422 (with-test (:name (:test-cfp-struct-2.1))
423   (test-cfp-struct-2.1 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
424 (with-test (:name (:test-cfp-struct-2.2))
425   (test-cfp-struct-2.2 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
426 (with-test (:name (:test-cfp-struct-2.3))
427   (test-cfp-struct-2.3 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
428 (with-test (:name (:test-cfp-struct-2.4))
429   (test-cfp-struct-2.4 (complex 0.123 123.456) (complex 908132.41d0 876.243d0)))
430
431 (declaim (inline make-foo1 make-foo2 make-foo3))
432 (defstruct foo1 x)
433
434 (defun-with-dx make-foo1-on-stack (x)
435   (let ((foo (make-foo1 :x x)))
436     (declare (dynamic-extent foo))
437     (assert (eql x (foo1-x foo)))))
438
439 (defstruct foo2
440   (x 0.0 :type single-float)
441   (y 0.0d0 :type double-float)
442   a
443   b
444   c)
445
446 (defun-with-dx make-foo2-on-stack (x y)
447   (let ((foo (make-foo2 :y y :c 'c)))
448     (declare (dynamic-extent foo))
449     (assert (eql 0.0 (foo2-x foo)))
450     (assert (eql y (foo2-y foo)))
451     (assert (eql 'c (foo2-c foo)))
452     (assert (eql nil (foo2-b foo)))))
453
454 ;;; Check that constants work out as argument for all relevant
455 ;;; slot types.
456 (defstruct foo3
457   (a 0 :type t)
458   (b 1 :type fixnum)
459   (c 2 :type sb-vm:word)
460   (d 3.0 :type single-float)
461   (e 4.0d0 :type double-float))
462
463 (defun-with-dx make-foo3-on-stack ()
464   (let ((foo (make-foo3)))
465     (declare (dynamic-extent foo))
466     (assert (eql 0 (foo3-a foo)))
467     (assert (eql 1 (foo3-b foo)))
468     (assert (eql 2 (foo3-c foo)))
469     (assert (eql 3.0 (foo3-d foo)))
470     (assert (eql 4.0d0 (foo3-e foo)))))
471
472 ;;; Nested DX
473
474 (defun-with-dx nested-dx-lists ()
475   (let ((dx (list (list 1 2) (list 3 4))))
476     (declare (dynamic-extent dx))
477     (true dx)
478     nil))
479
480 (defun-with-dx nested-dx-conses ()
481   (let ((dx (cons 1 (cons 2 (cons 3 (cons (cons t t) nil))))))
482     (declare (dynamic-extent dx))
483     (true dx)
484     nil))
485
486 (defun-with-dx nested-dx-not-used (x)
487   (declare (list x))
488   (let ((l (setf (car x) (list x x x))))
489     (declare (dynamic-extent l))
490     (true l)
491     (true (length l))
492     nil))
493
494 (defun-with-dx nested-evil-dx-used (x)
495   (declare (list x))
496   (let ((l (list x x x)))
497     (declare (dynamic-extent l))
498     (unwind-protect
499          (progn
500            (setf (car x) l)
501            (true l))
502       (setf (car x) nil))
503     nil))
504
505 (defparameter *bar* nil)
506 (declaim (inline make-nested-bad make-nested-good))
507 (defstruct (nested (:constructor make-nested-bad (&key bar &aux (bar (setf *bar* bar))))
508                    (:constructor make-nested-good (&key bar)))
509   bar)
510
511 (defun-with-dx nested-good (y)
512   (let ((x (list (list (make-nested-good :bar (list (list (make-nested-good :bar (list y)))))))))
513     (declare (dynamic-extent x))
514     (true x)))
515
516 (defun-with-dx nested-bad (y)
517   (let ((x (list (list (make-nested-bad :bar (list (list (make-nested-bad :bar (list y)))))))))
518     (declare (dynamic-extent x))
519     (unless (equalp (caar x) (make-nested-good :bar *bar*))
520       (error "got ~S, wanted ~S" (caar x) (make-nested-good :bar *bar*)))
521     ;; the NESTED instance itself *should* be DX!
522     (copy-nested (caar x))))
523
524 (with-test (:name :conservative-nested-dx)
525   ;; NESTED-BAD should not stack-allocate :BAR due to the SETF.
526   (assert (equalp (nested-bad 42) (make-nested-good :bar *bar*)))
527   (assert (equalp *bar* (list (list (make-nested-bad :bar (list 42)))))))
528
529 ;;; multiple uses for dx lvar
530
531 (defun-with-dx multiple-dx-uses ()
532   (let ((dx (if (true t)
533                 (list 1 2 3)
534                 (list 2 3 4))))
535     (declare (dynamic-extent dx))
536     (true dx)
537     nil))
538
539 ;;; handler-case and handler-bind should use DX internally
540
541 (defun dx-handler-bind (x)
542   (handler-bind ((error
543                   #'(lambda (c)
544                       (break "OOPS: ~S caused ~S" x c)))
545                  ((and serious-condition (not error))
546                   #'(lambda (c)
547                       (break "OOPS2: ~S did ~S" x c))))
548     (/ 2 x)))
549
550 (defun dx-handler-case (x)
551   (assert (zerop (handler-case (/ 2 x)
552                    (error (c)
553                      (break "OOPS: ~S caused ~S" x c)
554                      -1)
555                    (:no-error (res)
556                      (1- res))))))
557
558 (defvar *a-cons* (cons nil nil))
559
560 (with-test (:name (:no-consing :dx-closures) :skipped-on '(not :stack-allocatable-closures))
561   (assert-no-consing (dxclosure 42)))
562
563 (with-test (:name (:no-consing :dx-lists) :skipped-on '(not :stack-allocatable-lists))
564   (assert-no-consing (dxlength 1 2 3))
565   (assert-no-consing (dxlength t t t t t t))
566   (assert-no-consing (dxlength))
567   (assert-no-consing (dxcaller 1 2 3 4 5 6 7))
568   (assert-no-consing (test-nip-values))
569   (assert-no-consing (test-let-var-subst2 17))
570   (assert-no-consing (test-lvar-subst 11))
571   (assert-no-consing (nested-dx-lists))
572   (assert-consing (nested-dx-not-used *a-cons*))
573   (assert-no-consing (nested-evil-dx-used *a-cons*))
574   (assert-no-consing (multiple-dx-uses)))
575
576 (with-test (:name (:no-consing :dx-value-cell))
577   (assert-no-consing (dx-value-cell 13)))
578
579 (with-test (:name (:no-consing :dx-fixed-objects) :skipped-on '(not :stack-allocatable-fixed-objects))
580   (assert-no-consing (cons-on-stack 42))
581   (assert-no-consing (make-foo1-on-stack 123))
582   (assert-no-consing (nested-good 42))
583   (assert-no-consing (nested-dx-conses))
584   (assert-no-consing (dx-handler-bind 2))
585   (assert-no-consing (dx-handler-case 2)))
586
587 (with-test (:name (:no-consing :dx-vectors) :skipped-on '(not :stack-allocatable-vectors))
588   (assert-no-consing (force-make-array-on-stack 128))
589   (assert-no-consing (make-array-on-stack-2 5 '(1 2.0 3 4.0 5)))
590   (assert-no-consing (make-array-on-stack-3 9 8 7))
591   (assert-no-consing (make-array-on-stack-4))
592   (assert-no-consing (make-array-on-stack-5))
593   (assert-no-consing (vector-on-stack :x :y)))
594
595 (with-test (:name (:no-consing :specialized-dx-vectors)
596             :fails-on :x86
597             :skipped-on `(not (and :stack-allocatable-vectors
598                                    :c-stack-is-control-stack)))
599   (assert-no-consing (make-array-on-stack-1))
600   (assert-no-consing (make-array-on-stack-6))
601   (assert-no-consing (make-array-on-stack-7))
602   (assert-no-consing (make-array-on-stack-8))
603   (assert-no-consing (make-array-on-stack-9))
604   (assert-no-consing (make-array-on-stack-10))
605   (assert-no-consing (make-array-on-stack-11)))
606
607 (with-test (:name (:no-consing :dx-raw-instances) :skipped-on '(or (not :raw-instance-init-vops)
608                                                                    (not (and :gencgc :c-stack-is-control-stack))))
609   (let (a b)
610     (setf a 1.24 b 1.23d0)
611     (assert-no-consing (make-foo2-on-stack a b)))
612     (assert-no-consing (make-foo3-on-stack)))
613
614 ;;; not really DX, but GETHASH and (SETF GETHASH) should not cons
615
616 (defvar *table* (make-hash-table))
617
618 (defun test-hash-table ()
619   (setf (gethash 5 *table*) 13)
620   (gethash 5 *table*))
621
622 ;; This fails on threaded PPC because the hash-table implementation
623 ;; uses recursive system locks, which cons (see below for test
624 ;; (:no-consing :lock), which also fails on threaded PPC).
625 ;;
626 ;; -- That may have been the situation in 2010 when the above comment
627 ;; was written, but AFAICT now, hash tables use WITH-PINNED-OBJECTS,
628 ;; which conses on PPC and SPARC when GENCGC is enabled.  So neither is
629 ;; this actually about threading, nor about PPC.  Yet since we are
630 ;; failing most of this file on SPARC anyway (for some tests even on
631 ;; cheneygc), I won't bother to mark this particular test as failing.
632 ;; It would be nice if someone could go through this file and figure it
633 ;; all out... --DFL
634 (with-test (:name (:no-consing :hash-tables) :fails-on '(and :ppc :sb-thread))
635   (assert-no-consing (test-hash-table)))
636
637 ;;; Both with-pinned-objects and without-gcing should not cons
638
639 (defun call-without-gcing (fun)
640   (sb-sys:without-gcing (funcall fun)))
641
642 (defun call-with-pinned-object (fun obj)
643   (sb-sys:with-pinned-objects (obj)
644     (funcall fun obj)))
645
646 (with-test (:name (:no-consing :without-gcing))
647   (assert-no-consing (call-without-gcing (lambda ()))))
648
649 (with-test (:name (:no-consing :with-pinned-objects))
650   (assert-no-consing (call-with-pinned-object #'identity 42)))
651
652 ;;; with-mutex should use DX and not cons
653
654 (defvar *mutex* (sb-thread::make-mutex :name "mutexlock"))
655
656 (defun test-mutex ()
657   (sb-thread:with-mutex (*mutex*)
658     (true *mutex*)))
659
660 (with-test (:name (:no-consing :mutex) :fails-on :ppc :skipped-on '(not :sb-thread))
661   (assert-no-consing (test-mutex)))
662 \f
663
664 ;;; Bugs found by Paul F. Dietz
665
666 (with-test (:name (:dx-bug-misc :pfdietz))
667   (assert
668    (eq
669     (funcall
670      (compile
671       nil
672       '(lambda (a b)
673         (declare (optimize (speed 2) (space 0) (safety 0)
674                   (debug 1) (compilation-speed 3)))
675         (let* ((v5 (cons b b)))
676           (declare (dynamic-extent v5))
677           a)))
678      'x 'y)
679     'x)))
680
681 ;;; bug reported by Svein Ove Aas
682 (defun svein-2005-ii-07 (x y)
683   (declare (optimize (speed 3) (space 2) (safety 0) (debug 0)))
684   (let ((args (list* y 1 2 x)))
685     (declare (dynamic-extent args))
686     (apply #'aref args)))
687
688 (with-test (:name (:dx-bugs-misc :svein-2005-ii-07))
689   (assert (eql
690            (svein-2005-ii-07
691             '(0)
692             #3A(((1 1 1) (1 1 1) (1 1 1))
693                 ((1 1 1) (1 1 1) (4 1 1))
694                 ((1 1 1) (1 1 1) (1 1 1))))
695            4)))
696
697 ;;; bug reported by Brian Downing: stack-allocated arrays were not
698 ;;; filled with zeroes.
699 (defun-with-dx bdowning-2005-iv-16 ()
700   (let ((a (make-array 11 :initial-element 0)))
701     (declare (dynamic-extent a))
702     (assert (every (lambda (x) (eql x 0)) a))))
703
704 (with-test (:name (:dx-bug-misc :bdowning-2005-iv-16))
705   #+(or hppa mips x86 x86-64)
706   (assert-no-consing (bdowning-2005-iv-16))
707   (bdowning-2005-iv-16))
708
709 (declaim (inline my-nconc))
710 (defun my-nconc (&rest lists)
711   (declare (dynamic-extent lists))
712   (apply #'nconc lists))
713 (defun-with-dx my-nconc-caller (a b c)
714   (let ((l1 (list a b c))
715         (l2 (list a b c)))
716     (my-nconc l1 l2)))
717 (with-test (:name :rest-stops-the-buck)
718   (let ((list1 (my-nconc-caller 1 2 3))
719         (list2 (my-nconc-caller 9 8 7)))
720     (assert (equal list1 '(1 2 3 1 2 3)))
721     (assert (equal list2 '(9 8 7 9 8 7)))))
722
723 (defun-with-dx let-converted-vars-dx-allocated-bug (x y z)
724   (let* ((a (list x y z))
725          (b (list x y z))
726          (c (list a b)))
727     (declare (dynamic-extent c))
728     (values (first c) (second c))))
729 (with-test (:name :let-converted-vars-dx-allocated-bug)
730   (multiple-value-bind (i j) (let-converted-vars-dx-allocated-bug 1 2 3)
731     (assert (and (equal i j)
732                  (equal i (list 1 2 3))))))
733
734 ;;; workaround for bug 419 -- real issue remains, but check that the
735 ;;; bandaid holds.
736 (defun-with-dx bug419 (x)
737   (multiple-value-call #'list
738     (eval '(values 1 2 3))
739     (let ((x x))
740       (declare (dynamic-extent x))
741       (flet ((mget (y)
742                (+ x y))
743              (mset (z)
744                (incf x z)))
745         (declare (dynamic-extent #'mget #'mset))
746         ((lambda (f g) (eval `(progn ,f ,g (values 4 5 6)))) #'mget #'mset)))))
747
748 (with-test (:name (:dx-bug-misc :bug419))
749   (assert (equal (bug419 42) '(1 2 3 4 5 6))))
750
751 ;;; Multiple DX arguments in a local function call
752 (defun test-dx-flet-test (fun n f1 f2 f3)
753   (let ((res (with-output-to-string (s)
754                (assert (eql n (ignore-errors (funcall fun s)))))))
755     (multiple-value-bind (x pos) (read-from-string res nil)
756       (assert (equalp f1 x))
757       (multiple-value-bind (y pos2) (read-from-string res nil nil :start pos)
758         (assert (equalp f2 y))
759         (assert (equalp f3 (read-from-string res nil nil :start pos2))))))
760   #+(or hppa mips x86 x86-64)
761   (assert-no-consing (assert (eql n (funcall fun nil))))
762   (assert (eql n (funcall fun nil))))
763
764 (macrolet ((def (n f1 f2 f3)
765              (let ((name (sb-pcl::format-symbol :cl-user "DX-FLET-TEST.~A" n)))
766                `(progn
767                   (defun-with-dx ,name (s)
768                     (flet ((f (x)
769                              (declare (dynamic-extent x))
770                              (when s
771                                (print x s)
772                                (finish-output s))
773                              nil))
774                       (f ,f1)
775                       (f ,f2)
776                       (f ,f3)
777                       ,n))
778                   (with-test (:name (:dx-flet-test ,n))
779                     (test-dx-flet-test #',name ,n ,f1 ,f2 ,f3))))))
780   (def 0 (list :one) (list :two) (list :three))
781   (def 1 (make-array 128) (list 1 2 3 4 5 6 7 8) (list 'list))
782   (def 2 (list 1) (list 2 3) (list 4 5 6 7)))
783
784 ;;; Test that unknown-values coming after a DX value won't mess up the
785 ;;; stack analysis
786 (defun test-update-uvl-live-sets (x y z)
787  (declare (optimize speed (safety 0)))
788  (flet ((bar (a b)
789           (declare (dynamic-extent a))
790           (eval `(list (length ',a) ',b))))
791    (list (bar x y)
792          (bar (list x y z)                  ; dx push
793               (list
794                (multiple-value-call 'list
795                  (eval '(values 1 2 3))     ; uv push
796                  (max y z)
797                )                            ; uv pop
798                14)
799          ))))
800
801 (with-test (:name (:update-uvl-live-sets))
802   (assert (equal '((0 4) (3 ((1 2 3 5) 14)))
803                  (test-update-uvl-live-sets #() 4 5))))
804
805 (with-test (:name :regression-1.0.23.38)
806   (compile nil '(lambda ()
807                  (flet ((make (x y)
808                           (let ((res (cons x x)))
809                             (setf (cdr res) y)
810                             res)))
811                    (declaim (inline make))
812                    (let ((z (make 1 2)))
813                      (declare (dynamic-extent z))
814                      (print z)
815                      t))))
816   (compile nil '(lambda ()
817                  (flet ((make (x y)
818                           (let ((res (cons x x)))
819                             (setf (cdr res) y)
820                             (if x res y))))
821                    (declaim (inline make))
822                    (let ((z (make 1 2)))
823                      (declare (dynamic-extent z))
824                      (print z)
825                      t)))))
826
827 ;;; On x86 and x86-64 upto 1.0.28.16 LENGTH and WORDS argument
828 ;;; tns to ALLOCATE-VECTOR-ON-STACK could be packed in the same
829 ;;; location, leading to all manner of badness. ...reproducing this
830 ;;; reliably is hard, but this it at least used to break on x86-64.
831 (defun length-and-words-packed-in-same-tn (m)
832   (declare (optimize speed (safety 0) (debug 0) (space 0)))
833   (let ((array (make-array (max 1 m) :element-type 'fixnum)))
834     (declare (dynamic-extent array))
835     (array-total-size array)))
836 (with-test (:name :length-and-words-packed-in-same-tn)
837   (assert (= 1 (length-and-words-packed-in-same-tn -3))))
838
839 (with-test (:name :handler-case-bogus-compiler-note :fails-on :ppc)
840   (handler-bind
841       ((compiler-note (lambda (note)
842                         (error "compiler issued note ~S during test" note))))
843     ;; Taken from SWANK, used to signal a bogus stack allocation
844     ;; failure note.
845     (compile nil
846              `(lambda (files fasl-dir load)
847                 (let ((needs-recompile nil))
848                   (dolist (src files)
849                     (let ((dest (binary-pathname src fasl-dir)))
850                       (handler-case
851                           (progn
852                             (when (or needs-recompile
853                                       (not (probe-file dest))
854                                       (file-newer-p src dest))
855                               (setq needs-recompile t)
856                               (ensure-directories-exist dest)
857                               (compile-file src :output-file dest :print nil :verbose t))
858                             (when load
859                               (load dest :verbose t)))
860                         (serious-condition (c)
861                           (handle-loadtime-error c dest))))))))))
862
863 (declaim (inline foovector barvector))
864 (defun foovector (x y z)
865   (let ((v (make-array 3)))
866     (setf (aref v 0) x
867           (aref v 1) y
868           (aref v 2) z)
869     v))
870 (defun barvector (x y z)
871   (make-array 3 :initial-contents (list x y z)))
872 (with-test (:name :dx-compiler-notes :fails-on :ppc)
873   (flet ((assert-notes (j lambda)
874            (let ((n 0))
875              (handler-bind ((compiler-note (lambda (c)
876                                              (declare (ignore c))
877                                              (incf n))))
878                (compile nil lambda)
879                (unless (= j n)
880                  (error "Wanted ~S notes, got ~S for~%   ~S"
881                         j n lambda))))))
882     ;; These ones should complain.
883     (assert-notes 1 `(lambda (x)
884                        (let ((v (make-array x)))
885                          (declare (dynamic-extent v))
886                          (length v))))
887     (assert-notes 2 `(lambda (x)
888                        (let ((y (if (plusp x)
889                                     (true x)
890                                     (true (- x)))))
891                          (declare (dynamic-extent y))
892                          (print y)
893                          nil)))
894     (assert-notes 1 `(lambda (x)
895                        (let ((y (foovector x x x)))
896                          (declare (sb-int:truly-dynamic-extent y))
897                          (print y)
898                          nil)))
899     ;; These ones should not complain.
900     (assert-notes 0 `(lambda (name)
901                        (with-alien
902                            ((posix-getenv (function c-string c-string)
903                                           :EXTERN "getenv"))
904                          (values
905                           (alien-funcall posix-getenv name)))))
906     (assert-notes 0 `(lambda (x)
907                        (let ((y (barvector x x x)))
908                          (declare (dynamic-extent y))
909                          (print y)
910                          nil)))
911     (assert-notes 0 `(lambda (list)
912                        (declare (optimize (space 0)))
913                        (sort list (lambda (x y) ; shut unrelated notes up
914                                     (< (truly-the fixnum x)
915                                        (truly-the fixnum y))))))
916     (assert-notes 0 `(lambda (other)
917                        #'(lambda (s c n)
918                            (ignore-errors (funcall other s c n)))))))
919
920 ;;; Stack allocating a value cell in HANDLER-CASE would blow up stack
921 ;;; in an unfortunate loop.
922 (defun handler-case-eating-stack ()
923   (let ((sp nil))
924     (do ((n 0 (logand most-positive-fixnum (1+ n))))
925         ((>= n 1024))
926      (multiple-value-bind (value error) (ignore-errors)
927        (when (and value error) nil))
928       (if sp
929           (assert (= sp (sb-c::%primitive sb-c:current-stack-pointer)))
930           (setf sp (sb-c::%primitive sb-c:current-stack-pointer))))))
931 (with-test (:name :handler-case-eating-stack :fails-on :ppc)
932   (assert-no-consing (handler-case-eating-stack)))
933
934 ;;; A nasty bug where RECHECK-DYNAMIC-EXTENT-LVARS thought something was going
935 ;;; to be stack allocated when it was not, leading to a bogus %NIP-VALUES.
936 ;;; Fixed by making RECHECK-DYNAMIC-EXTENT-LVARS deal properly with nested DX.
937 (deftype vec ()
938   `(simple-array single-float (3)))
939 (declaim (ftype (function (t t t) vec) vec))
940 (declaim (inline vec))
941 (defun vec (a b c)
942   (make-array 3 :element-type 'single-float :initial-contents (list a b c)))
943 (defun bad-boy (vec)
944   (declare (type vec vec))
945   (lambda (fun)
946     (let ((vec (vec (aref vec 0) (aref vec 1) (aref vec 2))))
947       (declare (dynamic-extent vec))
948       (funcall fun vec))))
949 (with-test (:name :recheck-nested-dx-bug :fails-on :ppc)
950   (assert (funcall (bad-boy (vec 1.0 2.0 3.3))
951                    (lambda (vec) (equalp vec (vec 1.0 2.0 3.3)))))
952   (flet ((foo (x) (declare (ignore x))))
953     (let ((bad-boy (bad-boy (vec 2.0 3.0 4.0))))
954       (assert-no-consing (funcall bad-boy #'foo)))))
955
956 (with-test (:name :bug-497321)
957   (flet ((test (lambda type)
958            (let ((n 0))
959              (handler-bind ((condition (lambda (c)
960                                          (incf n)
961                                          (unless (typep c type)
962                                            (error "wanted ~S for~%  ~S~%got ~S"
963                                                   type lambda (type-of c))))))
964                (compile nil lambda))
965              (assert (= n 1)))))
966     (test `(lambda () (declare (dynamic-extent #'bar)))
967           'style-warning)
968     (test `(lambda () (declare (dynamic-extent bar)))
969           'style-warning)
970     (test `(lambda (bar) (cons bar (lambda () (declare (dynamic-extent bar)))))
971           'sb-ext:compiler-note)
972     (test `(lambda ()
973              (flet ((bar () t))
974                (cons #'bar (lambda () (declare (dynamic-extent #'bar))))))
975           'sb-ext:compiler-note)))
976
977 (with-test (:name :bug-586105 :fails-on '(not (and :stack-allocatable-vectors
978                                                    :stack-allocatable-lists)))
979   (flet ((test (x)
980            (let ((vec (make-array 1 :initial-contents (list (list x)))))
981              (declare (dynamic-extent vec))
982              (assert (eql x (car (aref vec 0)))))))
983     (assert-no-consing (test 42))))
984 \f
985 (defun bug-681092 ()
986   (declare (optimize speed))
987   (let ((c 0))
988     (flet ((bar () c))
989       (declare (dynamic-extent #'bar))
990       (do () ((list) (bar))
991         (setf c 10)
992         (return (bar))))))
993 (with-test (:name :bug-681092)
994   (assert (= 10 (bug-681092))))
995
996 ;;;; &REST lists should stop DX propagation -- not required by ANSI,
997 ;;;; but required by sanity.
998
999 (declaim (inline rest-stops-dx))
1000 (defun-with-dx rest-stops-dx (&rest args)
1001   (declare (dynamic-extent args))
1002   (apply #'opaque-identity args))
1003
1004 (defun-with-dx rest-stops-dx-ok ()
1005   (equal '(:foo) (rest-stops-dx (list :foo))))
1006
1007 (with-test (:name :rest-stops-dynamic-extent)
1008   (assert (rest-stops-dx-ok)))
1009
1010 ;;;; These tests aren't strictly speaking DX, but rather &REST -> &MORE
1011 ;;;; conversion.
1012 (with-test (:name :rest-to-more-conversion)
1013   (let ((f1 (compile nil `(lambda (f &rest args)
1014                             (apply f args)))))
1015     (assert-no-consing (assert (eql f1 (funcall f1 #'identity f1)))))
1016   (let ((f2 (compile nil `(lambda (f1 f2 &rest args)
1017                             (values (apply f1 args) (apply f2 args))))))
1018     (assert-no-consing (multiple-value-bind (a b)
1019                            (funcall f2 (lambda (x y z) (+ x y z)) (lambda (x y z) (- x y z))
1020                                     1 2 3)
1021                          (assert (and (eql 6 a) (eql -4 b))))))
1022   (let ((f3 (compile nil `(lambda (f &optional x &rest args)
1023                             (when x
1024                               (apply f x args))))))
1025     (assert-no-consing (assert (eql 42 (funcall f3
1026                                                 (lambda (a b c) (+ a b c))
1027                                                 11
1028                                                 10
1029                                                 21)))))
1030   (let ((f4 (compile nil `(lambda (f &optional x &rest args &key y &allow-other-keys)
1031                             (apply f y x args)))))
1032     (assert-no-consing (funcall f4 (lambda (y x yk y2 b c)
1033                                      (assert (eq y 'y))
1034                                      (assert (= x 2))
1035                                      (assert (eq :y yk))
1036                                      (assert (eq y2 'y))
1037                                      (assert (eq b 'b))
1038                                      (assert (eq c 'c)))
1039                                 2 :y 'y 'b 'c)))
1040   (let ((f5 (compile nil `(lambda (a b c &rest args)
1041                             (apply #'list* a b c args)))))
1042     (assert (equal '(1 2 3 4 5 6 7) (funcall f5 1 2 3 4 5 6 '(7)))))
1043   (let ((f6 (compile nil `(lambda (x y)
1044                             (declare (optimize speed))
1045                             (concatenate 'string x y)))))
1046     (assert (equal "foobar" (funcall f6 "foo" "bar"))))
1047   (let ((f7 (compile nil `(lambda (&rest args)
1048                             (lambda (f)
1049                               (apply f args))))))
1050     (assert (equal '(a b c d e f) (funcall (funcall f7 'a 'b 'c 'd 'e 'f) 'list))))
1051   (let ((f8 (compile nil `(lambda (&rest args)
1052                             (flet ((foo (f)
1053                                      (apply f args)))
1054                               #'foo)))))
1055     (assert (equal '(a b c d e f) (funcall (funcall f8 'a 'b 'c 'd 'e 'f) 'list))))
1056   (let ((f9 (compile nil `(lambda (f &rest args)
1057                             (flet ((foo (g)
1058                                      (apply g args)))
1059                               (declare (dynamic-extent #'foo))
1060                               (funcall f #'foo))))))
1061     (assert (equal '(a b c d e f)
1062                    (funcall f9 (lambda (f) (funcall f 'list)) 'a 'b 'c 'd 'e 'f))))
1063   (let ((f10 (compile nil `(lambda (f &rest args)
1064                             (flet ((foo (g)
1065                                      (apply g args)))
1066                               (funcall f #'foo))))))
1067     (assert (equal '(a b c d e f)
1068                    (funcall f10 (lambda (f) (funcall f 'list)) 'a 'b 'c 'd 'e 'f))))
1069   (let ((f11 (compile nil `(lambda (x y z)
1070                              (block out
1071                                (labels ((foo (x &rest rest)
1072                                           (apply (lambda (&rest rest2)
1073                                                    (return-from out (values-list rest2)))
1074                                                  x rest)))
1075                                 (if x
1076                                     (foo x y z)
1077                                     (foo y z x))))))))
1078     (multiple-value-bind (a b c) (funcall f11 1 2 3)
1079       (assert (eql a 1))
1080       (assert (eql b 2))
1081       (assert (eql c 3)))))
1082
1083 (defun opaque-funcall (function &rest arguments)
1084   (apply function arguments))
1085
1086 (with-test (:name :implicit-value-cells)
1087   (flet ((test-it (type input output)
1088            (let ((f (compile nil `(lambda (x)
1089                                     (declare (type ,type x))
1090                                     (flet ((inc ()
1091                                              (incf x)))
1092                                       (declare (dynamic-extent #'inc))
1093                                       (list (opaque-funcall #'inc) x))))))
1094              (assert (equal (funcall f input)
1095                             (list output output))))))
1096     (let ((width sb-vm:n-word-bits))
1097       (test-it t (1- most-positive-fixnum) most-positive-fixnum)
1098       (test-it `(unsigned-byte ,(1- width)) (ash 1 (- width 2)) (1+ (ash 1 (- width 2))))
1099       (test-it `(signed-byte ,width) (ash -1 (- width 2)) (1+ (ash -1 (- width 2))))
1100       (test-it `(unsigned-byte ,width) (ash 1 (1- width)) (1+ (ash 1 (1- width))))
1101       (test-it 'single-float 3f0 4f0)
1102       (test-it 'double-float 3d0 4d0)
1103       (test-it '(complex single-float) #c(3f0 4f0) #c(4f0 4f0))
1104       (test-it '(complex double-float) #c(3d0 4d0) #c(4d0 4d0)))))
1105
1106 (with-test (:name :sap-implicit-value-cells)
1107   (let ((f (compile nil `(lambda (x)
1108                            (declare (type system-area-pointer x))
1109                            (flet ((inc ()
1110                                     (setf x (sb-sys:sap+ x 16))))
1111                              (declare (dynamic-extent #'inc))
1112                              (list (opaque-funcall #'inc) x)))))
1113         (width sb-vm:n-machine-word-bits))
1114     (assert (every (lambda (x)
1115                      (sb-sys:sap= x (sb-sys:int-sap (+ 16 (ash 1 (1- width))))))
1116                    (funcall f (sb-sys:int-sap (ash 1 (1- width))))))))
1117
1118 (with-test (:name :&more-bounds)
1119   ;; lp#1154946
1120   (assert (not (funcall (compile nil '(lambda (&rest args) (car args))))))
1121   (assert (not (funcall (compile nil '(lambda (&rest args) (nth 6 args))))))
1122   (assert (not (funcall (compile nil '(lambda (&rest args) (elt args 10))))))
1123   (assert (not (funcall (compile nil '(lambda (&rest args) (cadr args))))))
1124   (assert (not (funcall (compile nil '(lambda (&rest args) (third args)))))))