add take to the list of functions deforestable
[ghc-hetmet.git] / docs / users_guide / glasgow_exts.xml
1 <?xml version="1.0" encoding="iso-8859-1"?>
2 <para>
3 <indexterm><primary>language, GHC</primary></indexterm>
4 <indexterm><primary>extensions, GHC</primary></indexterm>
5 As with all known Haskell systems, GHC implements some extensions to
6 the language.  They are all enabled by options; by default GHC
7 understands only plain Haskell 98.
8 </para>
9
10 <para>
11 Some of the Glasgow extensions serve to give you access to the
12 underlying facilities with which we implement Haskell.  Thus, you can
13 get at the Raw Iron, if you are willing to write some non-portable
14 code at a more primitive level.  You need not be &ldquo;stuck&rdquo;
15 on performance because of the implementation costs of Haskell's
16 &ldquo;high-level&rdquo; features&mdash;you can always code
17 &ldquo;under&rdquo; them.  In an extreme case, you can write all your
18 time-critical code in C, and then just glue it together with Haskell!
19 </para>
20
21 <para>
22 Before you get too carried away working at the lowest level (e.g.,
23 sloshing <literal>MutableByteArray&num;</literal>s around your
24 program), you may wish to check if there are libraries that provide a
25 &ldquo;Haskellised veneer&rdquo; over the features you want.  The
26 separate <ulink url="../libraries/index.html">libraries
27 documentation</ulink> describes all the libraries that come with GHC.
28 </para>
29
30 <!-- LANGUAGE OPTIONS -->
31   <sect1 id="options-language">
32     <title>Language options</title>
33
34     <indexterm><primary>language</primary><secondary>option</secondary>
35     </indexterm>
36     <indexterm><primary>options</primary><secondary>language</secondary>
37     </indexterm>
38     <indexterm><primary>extensions</primary><secondary>options controlling</secondary>
39     </indexterm>
40
41     <para>These flags control what variation of the language are
42     permitted.  Leaving out all of them gives you standard Haskell
43     98.</para>
44
45     <para>NB. turning on an option that enables special syntax
46     <emphasis>might</emphasis> cause working Haskell 98 code to fail
47     to compile, perhaps because it uses a variable name which has
48     become a reserved word.  So, together with each option below, we
49     list the special syntax which is enabled by this option.  We use
50     notation and nonterminal names from the Haskell 98 lexical syntax
51     (see the Haskell 98 Report).  There are two classes of special
52     syntax:</para>
53
54     <itemizedlist>
55       <listitem>
56         <para>New reserved words and symbols: character sequences
57         which are no longer available for use as identifiers in the
58         program.</para>
59       </listitem>
60       <listitem>
61         <para>Other special syntax: sequences of characters that have
62         a different meaning when this particular option is turned
63         on.</para>
64       </listitem>
65     </itemizedlist>
66
67     <para>We are only listing syntax changes here that might affect
68     existing working programs (i.e. "stolen" syntax).  Many of these
69     extensions will also enable new context-free syntax, but in all
70     cases programs written to use the new syntax would not be
71     compilable without the option enabled.</para>
72
73     <variablelist>
74
75       <varlistentry>
76         <term>
77           <option>-fglasgow-exts</option>:
78           <indexterm><primary><option>-fglasgow-exts</option></primary></indexterm>
79         </term>
80         <listitem>
81           <para>This simultaneously enables all of the extensions to
82           Haskell 98 described in <xref
83           linkend="ghc-language-features"/>, except where otherwise
84           noted. </para>
85
86           <para>New reserved words: <literal>forall</literal> (only in
87           types), <literal>mdo</literal>.</para>
88
89           <para>Other syntax stolen:
90               <replaceable>varid</replaceable>{<literal>&num;</literal>},
91               <replaceable>char</replaceable><literal>&num;</literal>,      
92               <replaceable>string</replaceable><literal>&num;</literal>,    
93               <replaceable>integer</replaceable><literal>&num;</literal>,    
94               <replaceable>float</replaceable><literal>&num;</literal>,    
95               <replaceable>float</replaceable><literal>&num;&num;</literal>,    
96               <literal>(&num;</literal>, <literal>&num;)</literal>,         
97               <literal>|)</literal>, <literal>{|</literal>.</para>
98         </listitem>
99       </varlistentry>
100
101       <varlistentry>
102         <term>
103           <option>-ffi</option> and <option>-fffi</option>:
104           <indexterm><primary><option>-ffi</option></primary></indexterm>
105           <indexterm><primary><option>-fffi</option></primary></indexterm>
106         </term>
107         <listitem>
108           <para>This option enables the language extension defined in the
109           Haskell 98 Foreign Function Interface Addendum plus deprecated
110           syntax of previous versions of the FFI for backwards
111           compatibility.</para> 
112
113           <para>New reserved words: <literal>foreign</literal>.</para>
114         </listitem>
115       </varlistentry>
116
117       <varlistentry>
118         <term>
119           <option>-fno-monomorphism-restriction</option>:
120           <indexterm><primary><option>-fno-monomorphism-restriction</option></primary></indexterm>
121         </term>
122         <listitem>
123           <para> Switch off the Haskell 98 monomorphism restriction.
124           Independent of the <option>-fglasgow-exts</option>
125           flag. </para>
126         </listitem>
127       </varlistentry>
128
129       <varlistentry>
130         <term>
131           <option>-fallow-overlapping-instances</option>
132           <indexterm><primary><option>-fallow-overlapping-instances</option></primary></indexterm>
133         </term>
134         <term>
135           <option>-fallow-undecidable-instances</option>
136           <indexterm><primary><option>-fallow-undecidable-instances</option></primary></indexterm>
137         </term>
138         <term>
139           <option>-fallow-incoherent-instances</option>
140           <indexterm><primary><option>-fallow-incoherent-instances</option></primary></indexterm>
141         </term>
142         <term>
143           <option>-fcontext-stack</option>
144           <indexterm><primary><option>-fcontext-stack</option></primary></indexterm>
145         </term>
146         <listitem>
147           <para> See <xref linkend="instance-decls"/>.  Only relevant
148           if you also use <option>-fglasgow-exts</option>.</para>
149         </listitem>
150       </varlistentry>
151
152       <varlistentry>
153         <term>
154           <option>-finline-phase</option>
155           <indexterm><primary><option>-finline-phase</option></primary></indexterm>
156         </term>
157         <listitem>
158           <para>See <xref linkend="rewrite-rules"/>.  Only relevant if
159           you also use <option>-fglasgow-exts</option>.</para>
160         </listitem>
161       </varlistentry>
162
163       <varlistentry>
164         <term>
165           <option>-farrows</option>
166           <indexterm><primary><option>-farrows</option></primary></indexterm>
167         </term>
168         <listitem>
169           <para>See <xref linkend="arrow-notation"/>.  Independent of
170           <option>-fglasgow-exts</option>.</para>
171
172           <para>New reserved words/symbols: <literal>rec</literal>,
173           <literal>proc</literal>, <literal>-&lt;</literal>,
174           <literal>&gt;-</literal>, <literal>-&lt;&lt;</literal>,
175           <literal>&gt;&gt;-</literal>.</para>
176
177           <para>Other syntax stolen: <literal>(|</literal>,
178           <literal>|)</literal>.</para>
179         </listitem>
180       </varlistentry>
181
182       <varlistentry>
183         <term>
184           <option>-fgenerics</option>
185           <indexterm><primary><option>-fgenerics</option></primary></indexterm>
186         </term>
187         <listitem>
188           <para>See <xref linkend="generic-classes"/>.  Independent of
189           <option>-fglasgow-exts</option>.</para>
190         </listitem>
191       </varlistentry>
192
193       <varlistentry>
194         <term><option>-fno-implicit-prelude</option></term>
195         <listitem>
196           <para><indexterm><primary>-fno-implicit-prelude
197           option</primary></indexterm> GHC normally imports
198           <filename>Prelude.hi</filename> files for you.  If you'd
199           rather it didn't, then give it a
200           <option>-fno-implicit-prelude</option> option.  The idea is
201           that you can then import a Prelude of your own.  (But don't
202           call it <literal>Prelude</literal>; the Haskell module
203           namespace is flat, and you must not conflict with any
204           Prelude module.)</para>
205
206           <para>Even though you have not imported the Prelude, most of
207           the built-in syntax still refers to the built-in Haskell
208           Prelude types and values, as specified by the Haskell
209           Report.  For example, the type <literal>[Int]</literal>
210           still means <literal>Prelude.[] Int</literal>; tuples
211           continue to refer to the standard Prelude tuples; the
212           translation for list comprehensions continues to use
213           <literal>Prelude.map</literal> etc.</para>
214
215           <para>However, <option>-fno-implicit-prelude</option> does
216           change the handling of certain built-in syntax: see <xref
217           linkend="rebindable-syntax"/>.</para>
218         </listitem>
219       </varlistentry>
220
221       <varlistentry>
222         <term><option>-fimplicit-params</option></term>
223         <listitem>
224           <para>Enables implicit parameters (see <xref
225           linkend="implicit-parameters"/>).  Currently also implied by 
226           <option>-fglasgow-exts</option>.</para>
227
228           <para>Syntax stolen:
229           <literal>?<replaceable>varid</replaceable></literal>,
230           <literal>%<replaceable>varid</replaceable></literal>.</para>
231         </listitem>
232       </varlistentry>
233
234       <varlistentry>
235         <term><option>-fscoped-type-variables</option></term>
236         <listitem>
237           <para>Enables lexically-scoped type variables (see <xref
238           linkend="scoped-type-variables"/>).  Implied by
239           <option>-fglasgow-exts</option>.</para>
240         </listitem>
241       </varlistentry>
242
243       <varlistentry>
244         <term><option>-fth</option></term>
245         <listitem>
246           <para>Enables Template Haskell (see <xref
247           linkend="template-haskell"/>).  Currently also implied by
248           <option>-fglasgow-exts</option>.</para>
249
250           <para>Syntax stolen: <literal>[|</literal>,
251           <literal>[e|</literal>, <literal>[p|</literal>,
252           <literal>[d|</literal>, <literal>[t|</literal>,
253           <literal>$(</literal>,
254           <literal>$<replaceable>varid</replaceable></literal>.</para>
255         </listitem>
256       </varlistentry>
257
258     </variablelist>
259   </sect1>
260
261 <!-- UNBOXED TYPES AND PRIMITIVE OPERATIONS -->
262 <!--    included from primitives.sgml  -->
263 <!-- &primitives; -->
264 <sect1 id="primitives">
265   <title>Unboxed types and primitive operations</title>
266
267 <para>GHC is built on a raft of primitive data types and operations.
268 While you really can use this stuff to write fast code,
269   we generally find it a lot less painful, and more satisfying in the
270   long run, to use higher-level language features and libraries.  With
271   any luck, the code you write will be optimised to the efficient
272   unboxed version in any case.  And if it isn't, we'd like to know
273   about it.</para>
274
275 <para>We do not currently have good, up-to-date documentation about the
276 primitives, perhaps because they are mainly intended for internal use.
277 There used to be a long section about them here in the User Guide, but it
278 became out of date, and wrong information is worse than none.</para>
279
280 <para>The Real Truth about what primitive types there are, and what operations
281 work over those types, is held in the file
282 <filename>fptools/ghc/compiler/prelude/primops.txt.pp</filename>.
283 This file is used directly to generate GHC's primitive-operation definitions, so
284 it is always correct!  It is also intended for processing into text.</para>
285
286 <para> Indeed,
287 the result of such processing is part of the description of the 
288  <ulink
289       url="http://haskell.cs.yale.edu/ghc/docs/papers/core.ps.gz">External
290          Core language</ulink>.
291 So that document is a good place to look for a type-set version.
292 We would be very happy if someone wanted to volunteer to produce an SGML
293 back end to the program that processes <filename>primops.txt</filename> so that
294 we could include the results here in the User Guide.</para>
295
296 <para>What follows here is a brief summary of some main points.</para>
297   
298 <sect2 id="glasgow-unboxed">
299 <title>Unboxed types
300 </title>
301
302 <para>
303 <indexterm><primary>Unboxed types (Glasgow extension)</primary></indexterm>
304 </para>
305
306 <para>Most types in GHC are <firstterm>boxed</firstterm>, which means
307 that values of that type are represented by a pointer to a heap
308 object.  The representation of a Haskell <literal>Int</literal>, for
309 example, is a two-word heap object.  An <firstterm>unboxed</firstterm>
310 type, however, is represented by the value itself, no pointers or heap
311 allocation are involved.
312 </para>
313
314 <para>
315 Unboxed types correspond to the &ldquo;raw machine&rdquo; types you
316 would use in C: <literal>Int&num;</literal> (long int),
317 <literal>Double&num;</literal> (double), <literal>Addr&num;</literal>
318 (void *), etc.  The <emphasis>primitive operations</emphasis>
319 (PrimOps) on these types are what you might expect; e.g.,
320 <literal>(+&num;)</literal> is addition on
321 <literal>Int&num;</literal>s, and is the machine-addition that we all
322 know and love&mdash;usually one instruction.
323 </para>
324
325 <para>
326 Primitive (unboxed) types cannot be defined in Haskell, and are
327 therefore built into the language and compiler.  Primitive types are
328 always unlifted; that is, a value of a primitive type cannot be
329 bottom.  We use the convention that primitive types, values, and
330 operations have a <literal>&num;</literal> suffix.
331 </para>
332
333 <para>
334 Primitive values are often represented by a simple bit-pattern, such
335 as <literal>Int&num;</literal>, <literal>Float&num;</literal>,
336 <literal>Double&num;</literal>.  But this is not necessarily the case:
337 a primitive value might be represented by a pointer to a
338 heap-allocated object.  Examples include
339 <literal>Array&num;</literal>, the type of primitive arrays.  A
340 primitive array is heap-allocated because it is too big a value to fit
341 in a register, and would be too expensive to copy around; in a sense,
342 it is accidental that it is represented by a pointer.  If a pointer
343 represents a primitive value, then it really does point to that value:
344 no unevaluated thunks, no indirections&hellip;nothing can be at the
345 other end of the pointer than the primitive value.
346 A numerically-intensive program using unboxed types can
347 go a <emphasis>lot</emphasis> faster than its &ldquo;standard&rdquo;
348 counterpart&mdash;we saw a threefold speedup on one example.
349 </para>
350
351 <para>
352 There are some restrictions on the use of primitive types:
353 <itemizedlist>
354 <listitem><para>The main restriction
355 is that you can't pass a primitive value to a polymorphic
356 function or store one in a polymorphic data type.  This rules out
357 things like <literal>[Int&num;]</literal> (i.e. lists of primitive
358 integers).  The reason for this restriction is that polymorphic
359 arguments and constructor fields are assumed to be pointers: if an
360 unboxed integer is stored in one of these, the garbage collector would
361 attempt to follow it, leading to unpredictable space leaks.  Or a
362 <function>seq</function> operation on the polymorphic component may
363 attempt to dereference the pointer, with disastrous results.  Even
364 worse, the unboxed value might be larger than a pointer
365 (<literal>Double&num;</literal> for instance).
366 </para>
367 </listitem>
368 <listitem><para> You cannot bind a variable with an unboxed type
369 in a <emphasis>top-level</emphasis> binding.
370 </para></listitem>
371 <listitem><para> You cannot bind a variable with an unboxed type
372 in a <emphasis>recursive</emphasis> binding.
373 </para></listitem>
374 <listitem><para> You may bind unboxed variables in a (non-recursive,
375 non-top-level) pattern binding, but any such variable causes the entire
376 pattern-match
377 to become strict.  For example:
378 <programlisting>
379   data Foo = Foo Int Int#
380
381   f x = let (Foo a b, w) = ..rhs.. in ..body..
382 </programlisting>
383 Since <literal>b</literal> has type <literal>Int#</literal>, the entire pattern
384 match
385 is strict, and the program behaves as if you had written
386 <programlisting>
387   data Foo = Foo Int Int#
388
389   f x = case ..rhs.. of { (Foo a b, w) -> ..body.. }
390 </programlisting>
391 </para>
392 </listitem>
393 </itemizedlist>
394 </para>
395
396 </sect2>
397
398 <sect2 id="unboxed-tuples">
399 <title>Unboxed Tuples
400 </title>
401
402 <para>
403 Unboxed tuples aren't really exported by <literal>GHC.Exts</literal>,
404 they're available by default with <option>-fglasgow-exts</option>.  An
405 unboxed tuple looks like this:
406 </para>
407
408 <para>
409
410 <programlisting>
411 (# e_1, ..., e_n #)
412 </programlisting>
413
414 </para>
415
416 <para>
417 where <literal>e&lowbar;1..e&lowbar;n</literal> are expressions of any
418 type (primitive or non-primitive).  The type of an unboxed tuple looks
419 the same.
420 </para>
421
422 <para>
423 Unboxed tuples are used for functions that need to return multiple
424 values, but they avoid the heap allocation normally associated with
425 using fully-fledged tuples.  When an unboxed tuple is returned, the
426 components are put directly into registers or on the stack; the
427 unboxed tuple itself does not have a composite representation.  Many
428 of the primitive operations listed in <literal>primops.txt.pp</literal> return unboxed
429 tuples.
430 In particular, the <literal>IO</literal> and <literal>ST</literal> monads use unboxed
431 tuples to avoid unnecessary allocation during sequences of operations.
432 </para>
433
434 <para>
435 There are some pretty stringent restrictions on the use of unboxed tuples:
436 <itemizedlist>
437 <listitem>
438
439 <para>
440 Values of unboxed tuple types are subject to the same restrictions as
441 other unboxed types; i.e. they may not be stored in polymorphic data
442 structures or passed to polymorphic functions.
443
444 </para>
445 </listitem>
446 <listitem>
447
448 <para>
449 No variable can have an unboxed tuple type, nor may a constructor or function
450 argument have an unboxed tuple type.  The following are all illegal:
451
452
453 <programlisting>
454   data Foo = Foo (# Int, Int #)
455
456   f :: (# Int, Int #) -&#62; (# Int, Int #)
457   f x = x
458
459   g :: (# Int, Int #) -&#62; Int
460   g (# a,b #) = a
461
462   h x = let y = (# x,x #) in ...
463 </programlisting>
464 </para>
465 </listitem>
466 </itemizedlist>
467 </para>
468 <para>
469 The typical use of unboxed tuples is simply to return multiple values,
470 binding those multiple results with a <literal>case</literal> expression, thus:
471 <programlisting>
472   f x y = (# x+1, y-1 #)
473   g x = case f x x of { (# a, b #) -&#62; a + b }
474 </programlisting>
475 You can have an unboxed tuple in a pattern binding, thus
476 <programlisting>
477   f x = let (# p,q #) = h x in ..body..
478 </programlisting>
479 If the types of <literal>p</literal> and <literal>q</literal> are not unboxed,
480 the resulting binding is lazy like any other Haskell pattern binding.  The 
481 above example desugars like this:
482 <programlisting>
483   f x = let t = case h x o f{ (# p,q #) -> (p,q)
484             p = fst t
485             q = snd t
486         in ..body..
487 </programlisting>
488 Indeed, the bindings can even be recursive.
489 </para>
490
491 </sect2>
492 </sect1>
493
494
495 <!-- ====================== SYNTACTIC EXTENSIONS =======================  -->
496
497 <sect1 id="syntax-extns">
498 <title>Syntactic extensions</title>
499  
500     <!-- ====================== HIERARCHICAL MODULES =======================  -->
501
502     <sect2 id="hierarchical-modules">
503       <title>Hierarchical Modules</title>
504
505       <para>GHC supports a small extension to the syntax of module
506       names: a module name is allowed to contain a dot
507       <literal>&lsquo;.&rsquo;</literal>.  This is also known as the
508       &ldquo;hierarchical module namespace&rdquo; extension, because
509       it extends the normally flat Haskell module namespace into a
510       more flexible hierarchy of modules.</para>
511
512       <para>This extension has very little impact on the language
513       itself; modules names are <emphasis>always</emphasis> fully
514       qualified, so you can just think of the fully qualified module
515       name as <quote>the module name</quote>.  In particular, this
516       means that the full module name must be given after the
517       <literal>module</literal> keyword at the beginning of the
518       module; for example, the module <literal>A.B.C</literal> must
519       begin</para>
520
521 <programlisting>module A.B.C</programlisting>
522
523
524       <para>It is a common strategy to use the <literal>as</literal>
525       keyword to save some typing when using qualified names with
526       hierarchical modules.  For example:</para>
527
528 <programlisting>
529 import qualified Control.Monad.ST.Strict as ST
530 </programlisting>
531
532       <para>For details on how GHC searches for source and interface
533       files in the presence of hierarchical modules, see <xref
534       linkend="search-path"/>.</para>
535
536       <para>GHC comes with a large collection of libraries arranged
537       hierarchically; see the accompanying library documentation.
538       There is an ongoing project to create and maintain a stable set
539       of <quote>core</quote> libraries used by several Haskell
540       compilers, and the libraries that GHC comes with represent the
541       current status of that project.  For more details, see <ulink
542       url="http://www.haskell.org/~simonmar/libraries/libraries.html">Haskell
543       Libraries</ulink>.</para>
544
545     </sect2>
546
547     <!-- ====================== PATTERN GUARDS =======================  -->
548
549 <sect2 id="pattern-guards">
550 <title>Pattern guards</title>
551
552 <para>
553 <indexterm><primary>Pattern guards (Glasgow extension)</primary></indexterm>
554 The discussion that follows is an abbreviated version of Simon Peyton Jones's original <ulink url="http://research.microsoft.com/~simonpj/Haskell/guards.html">proposal</ulink>. (Note that the proposal was written before pattern guards were implemented, so refers to them as unimplemented.)
555 </para>
556
557 <para>
558 Suppose we have an abstract data type of finite maps, with a
559 lookup operation:
560
561 <programlisting>
562 lookup :: FiniteMap -> Int -> Maybe Int
563 </programlisting>
564
565 The lookup returns <function>Nothing</function> if the supplied key is not in the domain of the mapping, and <function>(Just v)</function> otherwise,
566 where <varname>v</varname> is the value that the key maps to.  Now consider the following definition:
567 </para>
568
569 <programlisting>
570 clunky env var1 var2 | ok1 &amp;&amp; ok2 = val1 + val2
571 | otherwise  = var1 + var2
572 where
573   m1 = lookup env var1
574   m2 = lookup env var2
575   ok1 = maybeToBool m1
576   ok2 = maybeToBool m2
577   val1 = expectJust m1
578   val2 = expectJust m2
579 </programlisting>
580
581 <para>
582 The auxiliary functions are 
583 </para>
584
585 <programlisting>
586 maybeToBool :: Maybe a -&gt; Bool
587 maybeToBool (Just x) = True
588 maybeToBool Nothing  = False
589
590 expectJust :: Maybe a -&gt; a
591 expectJust (Just x) = x
592 expectJust Nothing  = error "Unexpected Nothing"
593 </programlisting>
594
595 <para>
596 What is <function>clunky</function> doing? The guard <literal>ok1 &amp;&amp;
597 ok2</literal> checks that both lookups succeed, using
598 <function>maybeToBool</function> to convert the <function>Maybe</function>
599 types to booleans. The (lazily evaluated) <function>expectJust</function>
600 calls extract the values from the results of the lookups, and binds the
601 returned values to <varname>val1</varname> and <varname>val2</varname>
602 respectively.  If either lookup fails, then clunky takes the
603 <literal>otherwise</literal> case and returns the sum of its arguments.
604 </para>
605
606 <para>
607 This is certainly legal Haskell, but it is a tremendously verbose and
608 un-obvious way to achieve the desired effect.  Arguably, a more direct way
609 to write clunky would be to use case expressions:
610 </para>
611
612 <programlisting>
613 clunky env var1 var1 = case lookup env var1 of
614   Nothing -&gt; fail
615   Just val1 -&gt; case lookup env var2 of
616     Nothing -&gt; fail
617     Just val2 -&gt; val1 + val2
618 where
619   fail = val1 + val2
620 </programlisting>
621
622 <para>
623 This is a bit shorter, but hardly better.  Of course, we can rewrite any set
624 of pattern-matching, guarded equations as case expressions; that is
625 precisely what the compiler does when compiling equations! The reason that
626 Haskell provides guarded equations is because they allow us to write down
627 the cases we want to consider, one at a time, independently of each other. 
628 This structure is hidden in the case version.  Two of the right-hand sides
629 are really the same (<function>fail</function>), and the whole expression
630 tends to become more and more indented. 
631 </para>
632
633 <para>
634 Here is how I would write clunky:
635 </para>
636
637 <programlisting>
638 clunky env var1 var1
639   | Just val1 &lt;- lookup env var1
640   , Just val2 &lt;- lookup env var2
641   = val1 + val2
642 ...other equations for clunky...
643 </programlisting>
644
645 <para>
646 The semantics should be clear enough.  The qualifiers are matched in order. 
647 For a <literal>&lt;-</literal> qualifier, which I call a pattern guard, the
648 right hand side is evaluated and matched against the pattern on the left. 
649 If the match fails then the whole guard fails and the next equation is
650 tried.  If it succeeds, then the appropriate binding takes place, and the
651 next qualifier is matched, in the augmented environment.  Unlike list
652 comprehensions, however, the type of the expression to the right of the
653 <literal>&lt;-</literal> is the same as the type of the pattern to its
654 left.  The bindings introduced by pattern guards scope over all the
655 remaining guard qualifiers, and over the right hand side of the equation.
656 </para>
657
658 <para>
659 Just as with list comprehensions, boolean expressions can be freely mixed
660 with among the pattern guards.  For example:
661 </para>
662
663 <programlisting>
664 f x | [y] &lt;- x
665     , y > 3
666     , Just z &lt;- h y
667     = ...
668 </programlisting>
669
670 <para>
671 Haskell's current guards therefore emerge as a special case, in which the
672 qualifier list has just one element, a boolean expression.
673 </para>
674 </sect2>
675
676     <!-- ===================== Recursive do-notation ===================  -->
677
678 <sect2 id="mdo-notation">
679 <title>The recursive do-notation
680 </title>
681
682 <para> The recursive do-notation (also known as mdo-notation) is implemented as described in
683 "A recursive do for Haskell",
684 Levent Erkok, John Launchbury",
685 Haskell Workshop 2002, pages: 29-37. Pittsburgh, Pennsylvania. 
686 </para>
687 <para>
688 The do-notation of Haskell does not allow <emphasis>recursive bindings</emphasis>,
689 that is, the variables bound in a do-expression are visible only in the textually following 
690 code block. Compare this to a let-expression, where bound variables are visible in the entire binding
691 group. It turns out that several applications can benefit from recursive bindings in
692 the do-notation, and this extension provides the necessary syntactic support.
693 </para>
694 <para>
695 Here is a simple (yet contrived) example:
696 </para>
697 <programlisting>
698 import Control.Monad.Fix
699
700 justOnes = mdo xs &lt;- Just (1:xs)
701                return xs
702 </programlisting>
703 <para>
704 As you can guess <literal>justOnes</literal> will evaluate to <literal>Just [1,1,1,...</literal>.
705 </para>
706
707 <para>
708 The Control.Monad.Fix library introduces the <literal>MonadFix</literal> class. It's definition is:
709 </para>
710 <programlisting>
711 class Monad m => MonadFix m where
712    mfix :: (a -> m a) -> m a
713 </programlisting>
714 <para>
715 The function <literal>mfix</literal>
716 dictates how the required recursion operation should be performed. If recursive bindings are required for a monad,
717 then that monad must be declared an instance of the <literal>MonadFix</literal> class.
718 For details, see the above mentioned reference.
719 </para>
720 <para>
721 The following instances of <literal>MonadFix</literal> are automatically provided: List, Maybe, IO. 
722 Furthermore, the Control.Monad.ST and Control.Monad.ST.Lazy modules provide the instances of the MonadFix class 
723 for Haskell's internal state monad (strict and lazy, respectively).
724 </para>
725 <para>
726 There are three important points in using the recursive-do notation:
727 <itemizedlist>
728 <listitem><para>
729 The recursive version of the do-notation uses the keyword <literal>mdo</literal> (rather
730 than <literal>do</literal>).
731 </para></listitem>
732
733 <listitem><para>
734 You should <literal>import Control.Monad.Fix</literal>.
735 (Note: Strictly speaking, this import is required only when you need to refer to the name
736 <literal>MonadFix</literal> in your program, but the import is always safe, and the programmers
737 are encouraged to always import this module when using the mdo-notation.)
738 </para></listitem>
739
740 <listitem><para>
741 As with other extensions, ghc should be given the flag <literal>-fglasgow-exts</literal>
742 </para></listitem>
743 </itemizedlist>
744 </para>
745
746 <para>
747 The web page: <ulink url="http://www.cse.ogi.edu/PacSoft/projects/rmb">http://www.cse.ogi.edu/PacSoft/projects/rmb</ulink>
748 contains up to date information on recursive monadic bindings.
749 </para>
750
751 <para>
752 Historical note: The old implementation of the mdo-notation (and most
753 of the existing documents) used the name
754 <literal>MonadRec</literal> for the class and the corresponding library.
755 This name is not supported by GHC.
756 </para>
757
758 </sect2>
759
760
761    <!-- ===================== PARALLEL LIST COMPREHENSIONS ===================  -->
762
763   <sect2 id="parallel-list-comprehensions">
764     <title>Parallel List Comprehensions</title>
765     <indexterm><primary>list comprehensions</primary><secondary>parallel</secondary>
766     </indexterm>
767     <indexterm><primary>parallel list comprehensions</primary>
768     </indexterm>
769
770     <para>Parallel list comprehensions are a natural extension to list
771     comprehensions.  List comprehensions can be thought of as a nice
772     syntax for writing maps and filters.  Parallel comprehensions
773     extend this to include the zipWith family.</para>
774
775     <para>A parallel list comprehension has multiple independent
776     branches of qualifier lists, each separated by a `|' symbol.  For
777     example, the following zips together two lists:</para>
778
779 <programlisting>
780    [ (x, y) | x &lt;- xs | y &lt;- ys ] 
781 </programlisting>
782
783     <para>The behavior of parallel list comprehensions follows that of
784     zip, in that the resulting list will have the same length as the
785     shortest branch.</para>
786
787     <para>We can define parallel list comprehensions by translation to
788     regular comprehensions.  Here's the basic idea:</para>
789
790     <para>Given a parallel comprehension of the form: </para>
791
792 <programlisting>
793    [ e | p1 &lt;- e11, p2 &lt;- e12, ... 
794        | q1 &lt;- e21, q2 &lt;- e22, ... 
795        ... 
796    ] 
797 </programlisting>
798
799     <para>This will be translated to: </para>
800
801 <programlisting>
802    [ e | ((p1,p2), (q1,q2), ...) &lt;- zipN [(p1,p2) | p1 &lt;- e11, p2 &lt;- e12, ...] 
803                                          [(q1,q2) | q1 &lt;- e21, q2 &lt;- e22, ...] 
804                                          ... 
805    ] 
806 </programlisting>
807
808     <para>where `zipN' is the appropriate zip for the given number of
809     branches.</para>
810
811   </sect2>
812
813 <sect2 id="rebindable-syntax">
814 <title>Rebindable syntax</title>
815
816
817       <para>GHC allows most kinds of built-in syntax to be rebound by
818       the user, to facilitate replacing the <literal>Prelude</literal>
819       with a home-grown version, for example.</para>
820
821             <para>You may want to define your own numeric class
822             hierarchy.  It completely defeats that purpose if the
823             literal "1" means "<literal>Prelude.fromInteger
824             1</literal>", which is what the Haskell Report specifies.
825             So the <option>-fno-implicit-prelude</option> flag causes
826             the following pieces of built-in syntax to refer to
827             <emphasis>whatever is in scope</emphasis>, not the Prelude
828             versions:
829
830             <itemizedlist>
831               <listitem>
832                 <para>An integer literal <literal>368</literal> means
833                 "<literal>fromInteger (368::Integer)</literal>", rather than
834                 "<literal>Prelude.fromInteger (368::Integer)</literal>".
835 </para> </listitem>         
836
837       <listitem><para>Fractional literals are handed in just the same way,
838           except that the translation is 
839               <literal>fromRational (3.68::Rational)</literal>.
840 </para> </listitem>         
841
842           <listitem><para>The equality test in an overloaded numeric pattern
843               uses whatever <literal>(==)</literal> is in scope.
844 </para> </listitem>         
845
846           <listitem><para>The subtraction operation, and the
847           greater-than-or-equal test, in <literal>n+k</literal> patterns
848               use whatever <literal>(-)</literal> and <literal>(>=)</literal> are in scope.
849               </para></listitem>
850
851               <listitem>
852                 <para>Negation (e.g. "<literal>- (f x)</literal>")
853                 means "<literal>negate (f x)</literal>", both in numeric
854                 patterns, and expressions.
855               </para></listitem>
856
857               <listitem>
858           <para>"Do" notation is translated using whatever
859               functions <literal>(>>=)</literal>,
860               <literal>(>>)</literal>, and <literal>fail</literal>,
861               are in scope (not the Prelude
862               versions).  List comprehensions, mdo (<xref linkend="mdo-notation"/>), and parallel array
863               comprehensions, are unaffected.  </para></listitem>
864
865               <listitem>
866                 <para>Arrow
867                 notation (see <xref linkend="arrow-notation"/>)
868                 uses whatever <literal>arr</literal>,
869                 <literal>(>>>)</literal>, <literal>first</literal>,
870                 <literal>app</literal>, <literal>(|||)</literal> and
871                 <literal>loop</literal> functions are in scope. But unlike the
872                 other constructs, the types of these functions must match the
873                 Prelude types very closely.  Details are in flux; if you want
874                 to use this, ask!
875               </para></listitem>
876             </itemizedlist>
877 In all cases (apart from arrow notation), the static semantics should be that of the desugared form,
878 even if that is a little unexpected. For emample, the 
879 static semantics of the literal <literal>368</literal>
880 is exactly that of <literal>fromInteger (368::Integer)</literal>; it's fine for
881 <literal>fromInteger</literal> to have any of the types:
882 <programlisting>
883 fromInteger :: Integer -> Integer
884 fromInteger :: forall a. Foo a => Integer -> a
885 fromInteger :: Num a => a -> Integer
886 fromInteger :: Integer -> Bool -> Bool
887 </programlisting>
888 </para>
889                 
890              <para>Be warned: this is an experimental facility, with
891              fewer checks than usual.  Use <literal>-dcore-lint</literal>
892              to typecheck the desugared program.  If Core Lint is happy
893              you should be all right.</para>
894
895 </sect2>
896 </sect1>
897
898
899 <!-- TYPE SYSTEM EXTENSIONS -->
900 <sect1 id="type-extensions">
901 <title>Type system extensions</title>
902
903
904 <sect2>
905 <title>Data types and type synonyms</title>
906
907 <sect3 id="nullary-types">
908 <title>Data types with no constructors</title>
909
910 <para>With the <option>-fglasgow-exts</option> flag, GHC lets you declare
911 a data type with no constructors.  For example:</para>
912
913 <programlisting>
914   data S      -- S :: *
915   data T a    -- T :: * -> *
916 </programlisting>
917
918 <para>Syntactically, the declaration lacks the "= constrs" part.  The 
919 type can be parameterised over types of any kind, but if the kind is
920 not <literal>*</literal> then an explicit kind annotation must be used
921 (see <xref linkend="sec-kinding"/>).</para>
922
923 <para>Such data types have only one value, namely bottom.
924 Nevertheless, they can be useful when defining "phantom types".</para>
925 </sect3>
926
927 <sect3 id="infix-tycons">
928 <title>Infix type constructors, classes, and type variables</title>
929
930 <para>
931 GHC allows type constructors, classes, and type variables to be operators, and
932 to be written infix, very much like expressions.  More specifically:
933 <itemizedlist>
934 <listitem><para>
935   A type constructor or class can be an operator, beginning with a colon; e.g. <literal>:*:</literal>.
936   The lexical syntax is the same as that for data constructors.
937   </para></listitem>
938 <listitem><para>
939   Data type and type-synonym declarations can be written infix, parenthesised
940   if you want further arguments.  E.g.
941 <screen>
942   data a :*: b = Foo a b
943   type a :+: b = Either a b
944   class a :=: b where ...
945
946   data (a :**: b) x = Baz a b x
947   type (a :++: b) y = Either (a,b) y
948 </screen>
949   </para></listitem>
950 <listitem><para>
951   Types, and class constraints, can be written infix.  For example
952   <screen>
953         x :: Int :*: Bool
954         f :: (a :=: b) => a -> b
955   </screen>
956   </para></listitem>
957 <listitem><para>
958   A type variable can be an (unqualified) operator e.g. <literal>+</literal>.
959   The lexical syntax is the same as that for variable operators, excluding "(.)",
960   "(!)", and "(*)".  In a binding position, the operator must be
961   parenthesised.  For example:
962 <programlisting>
963    type T (+) = Int + Int
964    f :: T Either
965    f = Left 3
966  
967    liftA2 :: Arrow (~>)
968           => (a -> b -> c) -> (e ~> a) -> (e ~> b) -> (e ~> c)
969    liftA2 = ...
970 </programlisting>
971   </para></listitem>
972 <listitem><para>
973   Back-quotes work
974   as for expressions, both for type constructors and type variables;  e.g. <literal>Int `Either` Bool</literal>, or
975   <literal>Int `a` Bool</literal>.  Similarly, parentheses work the same; e.g.  <literal>(:*:) Int Bool</literal>.
976   </para></listitem>
977 <listitem><para>
978   Fixities may be declared for type constructors, or classes, just as for data constructors.  However,
979   one cannot distinguish between the two in a fixity declaration; a fixity declaration
980   sets the fixity for a data constructor and the corresponding type constructor.  For example:
981 <screen>
982   infixl 7 T, :*:
983 </screen>
984   sets the fixity for both type constructor <literal>T</literal> and data constructor <literal>T</literal>,
985   and similarly for <literal>:*:</literal>.
986   <literal>Int `a` Bool</literal>.
987   </para></listitem>
988 <listitem><para>
989   Function arrow is <literal>infixr</literal> with fixity 0.  (This might change; I'm not sure what it should be.)
990   </para></listitem>
991
992 </itemizedlist>
993 </para>
994 </sect3>
995
996 <sect3 id="type-synonyms">
997 <title>Liberalised type synonyms</title>
998
999 <para>
1000 Type synonyms are like macros at the type level, and
1001 GHC does validity checking on types <emphasis>only after expanding type synonyms</emphasis>.
1002 That means that GHC can be very much more liberal about type synonyms than Haskell 98:
1003 <itemizedlist>
1004 <listitem> <para>You can write a <literal>forall</literal> (including overloading)
1005 in a type synonym, thus:
1006 <programlisting>
1007   type Discard a = forall b. Show b => a -> b -> (a, String)
1008
1009   f :: Discard a
1010   f x y = (x, show y)
1011
1012   g :: Discard Int -> (Int,Bool)    -- A rank-2 type
1013   g f = f Int True
1014 </programlisting>
1015 </para>
1016 </listitem>
1017
1018 <listitem><para>
1019 You can write an unboxed tuple in a type synonym:
1020 <programlisting>
1021   type Pr = (# Int, Int #)
1022
1023   h :: Int -> Pr
1024   h x = (# x, x #)
1025 </programlisting>
1026 </para></listitem>
1027
1028 <listitem><para>
1029 You can apply a type synonym to a forall type:
1030 <programlisting>
1031   type Foo a = a -> a -> Bool
1032  
1033   f :: Foo (forall b. b->b)
1034 </programlisting>
1035 After expanding the synonym, <literal>f</literal> has the legal (in GHC) type:
1036 <programlisting>
1037   f :: (forall b. b->b) -> (forall b. b->b) -> Bool
1038 </programlisting>
1039 </para></listitem>
1040
1041 <listitem><para>
1042 You can apply a type synonym to a partially applied type synonym:
1043 <programlisting>
1044   type Generic i o = forall x. i x -> o x
1045   type Id x = x
1046   
1047   foo :: Generic Id []
1048 </programlisting>
1049 After expanding the synonym, <literal>foo</literal> has the legal (in GHC) type:
1050 <programlisting>
1051   foo :: forall x. x -> [x]
1052 </programlisting>
1053 </para></listitem>
1054
1055 </itemizedlist>
1056 </para>
1057
1058 <para>
1059 GHC currently does kind checking before expanding synonyms (though even that
1060 could be changed.)
1061 </para>
1062 <para>
1063 After expanding type synonyms, GHC does validity checking on types, looking for
1064 the following mal-formedness which isn't detected simply by kind checking:
1065 <itemizedlist>
1066 <listitem><para>
1067 Type constructor applied to a type involving for-alls.
1068 </para></listitem>
1069 <listitem><para>
1070 Unboxed tuple on left of an arrow.
1071 </para></listitem>
1072 <listitem><para>
1073 Partially-applied type synonym.
1074 </para></listitem>
1075 </itemizedlist>
1076 So, for example,
1077 this will be rejected:
1078 <programlisting>
1079   type Pr = (# Int, Int #)
1080
1081   h :: Pr -> Int
1082   h x = ...
1083 </programlisting>
1084 because GHC does not allow  unboxed tuples on the left of a function arrow.
1085 </para>
1086 </sect3>
1087
1088
1089 <sect3 id="existential-quantification">
1090 <title>Existentially quantified data constructors
1091 </title>
1092
1093 <para>
1094 The idea of using existential quantification in data type declarations
1095 was suggested by Perry, and implemented in Hope+ (Nigel Perry, <emphasis>The Implementation
1096 of Practical Functional Programming Languages</emphasis>, PhD Thesis, University of
1097 London, 1991). It was later formalised by Laufer and Odersky
1098 (<emphasis>Polymorphic type inference and abstract data types</emphasis>,
1099 TOPLAS, 16(5), pp1411-1430, 1994).
1100 It's been in Lennart
1101 Augustsson's <command>hbc</command> Haskell compiler for several years, and
1102 proved very useful.  Here's the idea.  Consider the declaration:
1103 </para>
1104
1105 <para>
1106
1107 <programlisting>
1108   data Foo = forall a. MkFoo a (a -> Bool)
1109            | Nil
1110 </programlisting>
1111
1112 </para>
1113
1114 <para>
1115 The data type <literal>Foo</literal> has two constructors with types:
1116 </para>
1117
1118 <para>
1119
1120 <programlisting>
1121   MkFoo :: forall a. a -> (a -> Bool) -> Foo
1122   Nil   :: Foo
1123 </programlisting>
1124
1125 </para>
1126
1127 <para>
1128 Notice that the type variable <literal>a</literal> in the type of <function>MkFoo</function>
1129 does not appear in the data type itself, which is plain <literal>Foo</literal>.
1130 For example, the following expression is fine:
1131 </para>
1132
1133 <para>
1134
1135 <programlisting>
1136   [MkFoo 3 even, MkFoo 'c' isUpper] :: [Foo]
1137 </programlisting>
1138
1139 </para>
1140
1141 <para>
1142 Here, <literal>(MkFoo 3 even)</literal> packages an integer with a function
1143 <function>even</function> that maps an integer to <literal>Bool</literal>; and <function>MkFoo 'c'
1144 isUpper</function> packages a character with a compatible function.  These
1145 two things are each of type <literal>Foo</literal> and can be put in a list.
1146 </para>
1147
1148 <para>
1149 What can we do with a value of type <literal>Foo</literal>?.  In particular,
1150 what happens when we pattern-match on <function>MkFoo</function>?
1151 </para>
1152
1153 <para>
1154
1155 <programlisting>
1156   f (MkFoo val fn) = ???
1157 </programlisting>
1158
1159 </para>
1160
1161 <para>
1162 Since all we know about <literal>val</literal> and <function>fn</function> is that they
1163 are compatible, the only (useful) thing we can do with them is to
1164 apply <function>fn</function> to <literal>val</literal> to get a boolean.  For example:
1165 </para>
1166
1167 <para>
1168
1169 <programlisting>
1170   f :: Foo -> Bool
1171   f (MkFoo val fn) = fn val
1172 </programlisting>
1173
1174 </para>
1175
1176 <para>
1177 What this allows us to do is to package heterogenous values
1178 together with a bunch of functions that manipulate them, and then treat
1179 that collection of packages in a uniform manner.  You can express
1180 quite a bit of object-oriented-like programming this way.
1181 </para>
1182
1183 <sect4 id="existential">
1184 <title>Why existential?
1185 </title>
1186
1187 <para>
1188 What has this to do with <emphasis>existential</emphasis> quantification?
1189 Simply that <function>MkFoo</function> has the (nearly) isomorphic type
1190 </para>
1191
1192 <para>
1193
1194 <programlisting>
1195   MkFoo :: (exists a . (a, a -> Bool)) -> Foo
1196 </programlisting>
1197
1198 </para>
1199
1200 <para>
1201 But Haskell programmers can safely think of the ordinary
1202 <emphasis>universally</emphasis> quantified type given above, thereby avoiding
1203 adding a new existential quantification construct.
1204 </para>
1205
1206 </sect4>
1207
1208 <sect4>
1209 <title>Type classes</title>
1210
1211 <para>
1212 An easy extension is to allow
1213 arbitrary contexts before the constructor.  For example:
1214 </para>
1215
1216 <para>
1217
1218 <programlisting>
1219 data Baz = forall a. Eq a => Baz1 a a
1220          | forall b. Show b => Baz2 b (b -> b)
1221 </programlisting>
1222
1223 </para>
1224
1225 <para>
1226 The two constructors have the types you'd expect:
1227 </para>
1228
1229 <para>
1230
1231 <programlisting>
1232 Baz1 :: forall a. Eq a => a -> a -> Baz
1233 Baz2 :: forall b. Show b => b -> (b -> b) -> Baz
1234 </programlisting>
1235
1236 </para>
1237
1238 <para>
1239 But when pattern matching on <function>Baz1</function> the matched values can be compared
1240 for equality, and when pattern matching on <function>Baz2</function> the first matched
1241 value can be converted to a string (as well as applying the function to it).
1242 So this program is legal:
1243 </para>
1244
1245 <para>
1246
1247 <programlisting>
1248   f :: Baz -> String
1249   f (Baz1 p q) | p == q    = "Yes"
1250                | otherwise = "No"
1251   f (Baz2 v fn)            = show (fn v)
1252 </programlisting>
1253
1254 </para>
1255
1256 <para>
1257 Operationally, in a dictionary-passing implementation, the
1258 constructors <function>Baz1</function> and <function>Baz2</function> must store the
1259 dictionaries for <literal>Eq</literal> and <literal>Show</literal> respectively, and
1260 extract it on pattern matching.
1261 </para>
1262
1263 <para>
1264 Notice the way that the syntax fits smoothly with that used for
1265 universal quantification earlier.
1266 </para>
1267
1268 </sect4>
1269
1270 <sect4>
1271 <title>Record Constructors</title>
1272
1273 <para>
1274 GHC allows existentials to be used with records syntax as well.  For example:
1275
1276 <programlisting>
1277 data Counter a = forall self. NewCounter
1278     { _this    :: self
1279     , _inc     :: self -> self
1280     , _display :: self -> IO ()
1281     , tag      :: a
1282     }
1283 </programlisting>
1284 Here <literal>tag</literal> is a public field, with a well-typed selector
1285 function <literal>tag :: Counter a -> a</literal>.  The <literal>self</literal>
1286 type is hidden from the outside; any attempt to apply <literal>_this</literal>,
1287 <literal>_inc</literal> or <literal>_output</literal> as functions will raise a
1288 compile-time error.  In other words, <emphasis>GHC defines a record selector function
1289 only for fields whose type does not mention the existentially-quantified variables</emphasis>.
1290 (This example used an underscore in the fields for which record selectors
1291 will not be defined, but that is only programming style; GHC ignores them.)
1292 </para>
1293
1294 <para>
1295 To make use of these hidden fields, we need to create some helper functions:
1296
1297 <programlisting>
1298 inc :: Counter a -> Counter a
1299 inc (NewCounter x i d t) = NewCounter
1300     { _this = i x, _inc = i, _display = d, tag = t } 
1301
1302 display :: Counter a -> IO ()
1303 display NewCounter{ _this = x, _display = d } = d x
1304 </programlisting>
1305
1306 Now we can define counters with different underlying implementations:
1307
1308 <programlisting>
1309 counterA :: Counter String 
1310 counterA = NewCounter
1311     { _this = 0, _inc = (1+), _display = print, tag = "A" }
1312
1313 counterB :: Counter String 
1314 counterB = NewCounter
1315     { _this = "", _inc = ('#':), _display = putStrLn, tag = "B" }
1316
1317 main = do
1318     display (inc counterA)         -- prints "1"
1319     display (inc (inc counterB))   -- prints "##"
1320 </programlisting>
1321
1322 In GADT declarations (see <xref linkend="gadt"/>), the explicit
1323 <literal>forall</literal> may be omitted.  For example, we can express
1324 the same <literal>Counter a</literal> using GADT:
1325
1326 <programlisting>
1327 data Counter a where
1328     NewCounter { _this    :: self
1329                , _inc     :: self -> self
1330                , _display :: self -> IO ()
1331                , tag      :: a
1332                }
1333         :: Counter a
1334 </programlisting>
1335
1336 At the moment, record update syntax is only supported for Haskell 98 data types,
1337 so the following function does <emphasis>not</emphasis> work:
1338
1339 <programlisting>
1340 -- This is invalid; use explicit NewCounter instead for now
1341 setTag :: Counter a -> a -> Counter a
1342 setTag obj t = obj{ tag = t }
1343 </programlisting>
1344
1345 </para>
1346
1347 </sect4>
1348
1349
1350 <sect4>
1351 <title>Restrictions</title>
1352
1353 <para>
1354 There are several restrictions on the ways in which existentially-quantified
1355 constructors can be use.
1356 </para>
1357
1358 <para>
1359
1360 <itemizedlist>
1361 <listitem>
1362
1363 <para>
1364  When pattern matching, each pattern match introduces a new,
1365 distinct, type for each existential type variable.  These types cannot
1366 be unified with any other type, nor can they escape from the scope of
1367 the pattern match.  For example, these fragments are incorrect:
1368
1369
1370 <programlisting>
1371 f1 (MkFoo a f) = a
1372 </programlisting>
1373
1374
1375 Here, the type bound by <function>MkFoo</function> "escapes", because <literal>a</literal>
1376 is the result of <function>f1</function>.  One way to see why this is wrong is to
1377 ask what type <function>f1</function> has:
1378
1379
1380 <programlisting>
1381   f1 :: Foo -> a             -- Weird!
1382 </programlisting>
1383
1384
1385 What is this "<literal>a</literal>" in the result type? Clearly we don't mean
1386 this:
1387
1388
1389 <programlisting>
1390   f1 :: forall a. Foo -> a   -- Wrong!
1391 </programlisting>
1392
1393
1394 The original program is just plain wrong.  Here's another sort of error
1395
1396
1397 <programlisting>
1398   f2 (Baz1 a b) (Baz1 p q) = a==q
1399 </programlisting>
1400
1401
1402 It's ok to say <literal>a==b</literal> or <literal>p==q</literal>, but
1403 <literal>a==q</literal> is wrong because it equates the two distinct types arising
1404 from the two <function>Baz1</function> constructors.
1405
1406
1407 </para>
1408 </listitem>
1409 <listitem>
1410
1411 <para>
1412 You can't pattern-match on an existentially quantified
1413 constructor in a <literal>let</literal> or <literal>where</literal> group of
1414 bindings. So this is illegal:
1415
1416
1417 <programlisting>
1418   f3 x = a==b where { Baz1 a b = x }
1419 </programlisting>
1420
1421 Instead, use a <literal>case</literal> expression:
1422
1423 <programlisting>
1424   f3 x = case x of Baz1 a b -> a==b
1425 </programlisting>
1426
1427 In general, you can only pattern-match
1428 on an existentially-quantified constructor in a <literal>case</literal> expression or
1429 in the patterns of a function definition.
1430
1431 The reason for this restriction is really an implementation one.
1432 Type-checking binding groups is already a nightmare without
1433 existentials complicating the picture.  Also an existential pattern
1434 binding at the top level of a module doesn't make sense, because it's
1435 not clear how to prevent the existentially-quantified type "escaping".
1436 So for now, there's a simple-to-state restriction.  We'll see how
1437 annoying it is.
1438
1439 </para>
1440 </listitem>
1441 <listitem>
1442
1443 <para>
1444 You can't use existential quantification for <literal>newtype</literal>
1445 declarations.  So this is illegal:
1446
1447
1448 <programlisting>
1449   newtype T = forall a. Ord a => MkT a
1450 </programlisting>
1451
1452
1453 Reason: a value of type <literal>T</literal> must be represented as a
1454 pair of a dictionary for <literal>Ord t</literal> and a value of type
1455 <literal>t</literal>.  That contradicts the idea that
1456 <literal>newtype</literal> should have no concrete representation.
1457 You can get just the same efficiency and effect by using
1458 <literal>data</literal> instead of <literal>newtype</literal>.  If
1459 there is no overloading involved, then there is more of a case for
1460 allowing an existentially-quantified <literal>newtype</literal>,
1461 because the <literal>data</literal> version does carry an
1462 implementation cost, but single-field existentially quantified
1463 constructors aren't much use.  So the simple restriction (no
1464 existential stuff on <literal>newtype</literal>) stands, unless there
1465 are convincing reasons to change it.
1466
1467
1468 </para>
1469 </listitem>
1470 <listitem>
1471
1472 <para>
1473  You can't use <literal>deriving</literal> to define instances of a
1474 data type with existentially quantified data constructors.
1475
1476 Reason: in most cases it would not make sense. For example:&num;
1477
1478 <programlisting>
1479 data T = forall a. MkT [a] deriving( Eq )
1480 </programlisting>
1481
1482 To derive <literal>Eq</literal> in the standard way we would need to have equality
1483 between the single component of two <function>MkT</function> constructors:
1484
1485 <programlisting>
1486 instance Eq T where
1487   (MkT a) == (MkT b) = ???
1488 </programlisting>
1489
1490 But <varname>a</varname> and <varname>b</varname> have distinct types, and so can't be compared.
1491 It's just about possible to imagine examples in which the derived instance
1492 would make sense, but it seems altogether simpler simply to prohibit such
1493 declarations.  Define your own instances!
1494 </para>
1495 </listitem>
1496
1497 </itemizedlist>
1498
1499 </para>
1500
1501 </sect4>
1502 </sect3>
1503
1504 </sect2>
1505
1506
1507
1508 <sect2 id="multi-param-type-classes">
1509 <title>Class declarations</title>
1510
1511 <para>
1512 This section, and the next one, documents GHC's type-class extensions.
1513 There's lots of background in the paper <ulink
1514 url="http://research.microsoft.com/~simonpj/Papers/type-class-design-space" >Type
1515 classes: exploring the design space</ulink > (Simon Peyton Jones, Mark
1516 Jones, Erik Meijer).
1517 </para>
1518 <para>
1519 All the extensions are enabled by the <option>-fglasgow-exts</option> flag.
1520 </para>
1521
1522 <sect3>
1523 <title>Multi-parameter type classes</title>
1524 <para>
1525 Multi-parameter type classes are permitted. For example:
1526
1527
1528 <programlisting>
1529   class Collection c a where
1530     union :: c a -> c a -> c a
1531     ...etc.
1532 </programlisting>
1533
1534 </para>
1535 </sect3>
1536
1537 <sect3>
1538 <title>The superclasses of a class declaration</title>
1539
1540 <para>
1541 There are no restrictions on the context in a class declaration
1542 (which introduces superclasses), except that the class hierarchy must
1543 be acyclic.  So these class declarations are OK:
1544
1545
1546 <programlisting>
1547   class Functor (m k) => FiniteMap m k where
1548     ...
1549
1550   class (Monad m, Monad (t m)) => Transform t m where
1551     lift :: m a -> (t m) a
1552 </programlisting>
1553
1554
1555 </para>
1556 <para>
1557 As in Haskell 98, The class hierarchy must be acyclic.  However, the definition
1558 of "acyclic" involves only the superclass relationships.  For example,
1559 this is OK:
1560
1561
1562 <programlisting>
1563   class C a where {
1564     op :: D b => a -> b -> b
1565   }
1566
1567   class C a => D a where { ... }
1568 </programlisting>
1569
1570
1571 Here, <literal>C</literal> is a superclass of <literal>D</literal>, but it's OK for a
1572 class operation <literal>op</literal> of <literal>C</literal> to mention <literal>D</literal>.  (It
1573 would not be OK for <literal>D</literal> to be a superclass of <literal>C</literal>.)
1574 </para>
1575 </sect3>
1576
1577
1578
1579
1580 <sect3 id="class-method-types">
1581 <title>Class method types</title>
1582
1583 <para>
1584 Haskell 98 prohibits class method types to mention constraints on the
1585 class type variable, thus:
1586 <programlisting>
1587   class Seq s a where
1588     fromList :: [a] -> s a
1589     elem     :: Eq a => a -> s a -> Bool
1590 </programlisting>
1591 The type of <literal>elem</literal> is illegal in Haskell 98, because it
1592 contains the constraint <literal>Eq a</literal>, constrains only the 
1593 class type variable (in this case <literal>a</literal>).
1594 GHC lifts this restriction.
1595 </para>
1596
1597
1598 </sect3>
1599 </sect2>
1600
1601 <sect2 id="functional-dependencies">
1602 <title>Functional dependencies
1603 </title>
1604
1605 <para> Functional dependencies are implemented as described by Mark Jones
1606 in &ldquo;<ulink url="http://www.cse.ogi.edu/~mpj/pubs/fundeps.html">Type Classes with Functional Dependencies</ulink>&rdquo;, Mark P. Jones, 
1607 In Proceedings of the 9th European Symposium on Programming, 
1608 ESOP 2000, Berlin, Germany, March 2000, Springer-Verlag LNCS 1782,
1609 .
1610 </para>
1611 <para>
1612 Functional dependencies are introduced by a vertical bar in the syntax of a 
1613 class declaration;  e.g. 
1614 <programlisting>
1615   class (Monad m) => MonadState s m | m -> s where ...
1616
1617   class Foo a b c | a b -> c where ...
1618 </programlisting>
1619 There should be more documentation, but there isn't (yet).  Yell if you need it.
1620 </para>
1621
1622 <sect3><title>Rules for functional dependencies </title>
1623 <para>
1624 In a class declaration, all of the class type variables must be reachable (in the sense 
1625 mentioned in <xref linkend="type-restrictions"/>)
1626 from the free variables of each method type.
1627 For example:
1628
1629 <programlisting>
1630   class Coll s a where
1631     empty  :: s
1632     insert :: s -> a -> s
1633 </programlisting>
1634
1635 is not OK, because the type of <literal>empty</literal> doesn't mention
1636 <literal>a</literal>.  Functional dependencies can make the type variable
1637 reachable:
1638 <programlisting>
1639   class Coll s a | s -> a where
1640     empty  :: s
1641     insert :: s -> a -> s
1642 </programlisting>
1643
1644 Alternatively <literal>Coll</literal> might be rewritten
1645
1646 <programlisting>
1647   class Coll s a where
1648     empty  :: s a
1649     insert :: s a -> a -> s a
1650 </programlisting>
1651
1652
1653 which makes the connection between the type of a collection of
1654 <literal>a</literal>'s (namely <literal>(s a)</literal>) and the element type <literal>a</literal>.
1655 Occasionally this really doesn't work, in which case you can split the
1656 class like this:
1657
1658
1659 <programlisting>
1660   class CollE s where
1661     empty  :: s
1662
1663   class CollE s => Coll s a where
1664     insert :: s -> a -> s
1665 </programlisting>
1666 </para>
1667 </sect3>
1668
1669
1670 <sect3>
1671 <title>Background on functional dependencies</title>
1672
1673 <para>The following description of the motivation and use of functional dependencies is taken
1674 from the Hugs user manual, reproduced here (with minor changes) by kind
1675 permission of Mark Jones.
1676 </para>
1677 <para> 
1678 Consider the following class, intended as part of a
1679 library for collection types:
1680 <programlisting>
1681    class Collects e ce where
1682        empty  :: ce
1683        insert :: e -> ce -> ce
1684        member :: e -> ce -> Bool
1685 </programlisting>
1686 The type variable e used here represents the element type, while ce is the type
1687 of the container itself. Within this framework, we might want to define
1688 instances of this class for lists or characteristic functions (both of which
1689 can be used to represent collections of any equality type), bit sets (which can
1690 be used to represent collections of characters), or hash tables (which can be
1691 used to represent any collection whose elements have a hash function). Omitting
1692 standard implementation details, this would lead to the following declarations: 
1693 <programlisting>
1694    instance Eq e => Collects e [e] where ...
1695    instance Eq e => Collects e (e -> Bool) where ...
1696    instance Collects Char BitSet where ...
1697    instance (Hashable e, Collects a ce)
1698               => Collects e (Array Int ce) where ...
1699 </programlisting>
1700 All this looks quite promising; we have a class and a range of interesting
1701 implementations. Unfortunately, there are some serious problems with the class
1702 declaration. First, the empty function has an ambiguous type: 
1703 <programlisting>
1704    empty :: Collects e ce => ce
1705 </programlisting>
1706 By "ambiguous" we mean that there is a type variable e that appears on the left
1707 of the <literal>=&gt;</literal> symbol, but not on the right. The problem with
1708 this is that, according to the theoretical foundations of Haskell overloading,
1709 we cannot guarantee a well-defined semantics for any term with an ambiguous
1710 type.
1711 </para>
1712 <para>
1713 We can sidestep this specific problem by removing the empty member from the
1714 class declaration. However, although the remaining members, insert and member,
1715 do not have ambiguous types, we still run into problems when we try to use
1716 them. For example, consider the following two functions: 
1717 <programlisting>
1718    f x y = insert x . insert y
1719    g     = f True 'a'
1720 </programlisting>
1721 for which GHC infers the following types: 
1722 <programlisting>
1723    f :: (Collects a c, Collects b c) => a -> b -> c -> c
1724    g :: (Collects Bool c, Collects Char c) => c -> c
1725 </programlisting>
1726 Notice that the type for f allows the two parameters x and y to be assigned
1727 different types, even though it attempts to insert each of the two values, one
1728 after the other, into the same collection. If we're trying to model collections
1729 that contain only one type of value, then this is clearly an inaccurate
1730 type. Worse still, the definition for g is accepted, without causing a type
1731 error. As a result, the error in this code will not be flagged at the point
1732 where it appears. Instead, it will show up only when we try to use g, which
1733 might even be in a different module.
1734 </para>
1735
1736 <sect4><title>An attempt to use constructor classes</title>
1737
1738 <para>
1739 Faced with the problems described above, some Haskell programmers might be
1740 tempted to use something like the following version of the class declaration: 
1741 <programlisting>
1742    class Collects e c where
1743       empty  :: c e
1744       insert :: e -> c e -> c e
1745       member :: e -> c e -> Bool
1746 </programlisting>
1747 The key difference here is that we abstract over the type constructor c that is
1748 used to form the collection type c e, and not over that collection type itself,
1749 represented by ce in the original class declaration. This avoids the immediate
1750 problems that we mentioned above: empty has type <literal>Collects e c => c
1751 e</literal>, which is not ambiguous. 
1752 </para>
1753 <para>
1754 The function f from the previous section has a more accurate type: 
1755 <programlisting>
1756    f :: (Collects e c) => e -> e -> c e -> c e
1757 </programlisting>
1758 The function g from the previous section is now rejected with a type error as
1759 we would hope because the type of f does not allow the two arguments to have
1760 different types. 
1761 This, then, is an example of a multiple parameter class that does actually work
1762 quite well in practice, without ambiguity problems.
1763 There is, however, a catch. This version of the Collects class is nowhere near
1764 as general as the original class seemed to be: only one of the four instances
1765 for <literal>Collects</literal>
1766 given above can be used with this version of Collects because only one of
1767 them---the instance for lists---has a collection type that can be written in
1768 the form c e, for some type constructor c, and element type e.
1769 </para>
1770 </sect4>
1771
1772 <sect4><title>Adding functional dependencies</title>
1773
1774 <para>
1775 To get a more useful version of the Collects class, Hugs provides a mechanism
1776 that allows programmers to specify dependencies between the parameters of a
1777 multiple parameter class (For readers with an interest in theoretical
1778 foundations and previous work: The use of dependency information can be seen
1779 both as a generalization of the proposal for `parametric type classes' that was
1780 put forward by Chen, Hudak, and Odersky, or as a special case of Mark Jones's
1781 later framework for "improvement" of qualified types. The
1782 underlying ideas are also discussed in a more theoretical and abstract setting
1783 in a manuscript [implparam], where they are identified as one point in a
1784 general design space for systems of implicit parameterization.).
1785
1786 To start with an abstract example, consider a declaration such as: 
1787 <programlisting>
1788    class C a b where ...
1789 </programlisting>
1790 which tells us simply that C can be thought of as a binary relation on types
1791 (or type constructors, depending on the kinds of a and b). Extra clauses can be
1792 included in the definition of classes to add information about dependencies
1793 between parameters, as in the following examples: 
1794 <programlisting>
1795    class D a b | a -> b where ...
1796    class E a b | a -> b, b -> a where ...
1797 </programlisting>
1798 The notation <literal>a -&gt; b</literal> used here between the | and where
1799 symbols --- not to be
1800 confused with a function type --- indicates that the a parameter uniquely
1801 determines the b parameter, and might be read as "a determines b." Thus D is
1802 not just a relation, but actually a (partial) function. Similarly, from the two
1803 dependencies that are included in the definition of E, we can see that E
1804 represents a (partial) one-one mapping between types.
1805 </para>
1806 <para>
1807 More generally, dependencies take the form <literal>x1 ... xn -&gt; y1 ... ym</literal>,
1808 where x1, ..., xn, and y1, ..., yn are type variables with n&gt;0 and
1809 m&gt;=0, meaning that the y parameters are uniquely determined by the x
1810 parameters. Spaces can be used as separators if more than one variable appears
1811 on any single side of a dependency, as in <literal>t -&gt; a b</literal>. Note that a class may be
1812 annotated with multiple dependencies using commas as separators, as in the
1813 definition of E above. Some dependencies that we can write in this notation are
1814 redundant, and will be rejected because they don't serve any useful
1815 purpose, and may instead indicate an error in the program. Examples of
1816 dependencies like this include  <literal>a -&gt; a </literal>,  
1817 <literal>a -&gt; a a </literal>,  
1818 <literal>a -&gt; </literal>, etc. There can also be
1819 some redundancy if multiple dependencies are given, as in  
1820 <literal>a-&gt;b</literal>, 
1821  <literal>b-&gt;c </literal>,  <literal>a-&gt;c </literal>, and
1822 in which some subset implies the remaining dependencies. Examples like this are
1823 not treated as errors. Note that dependencies appear only in class
1824 declarations, and not in any other part of the language. In particular, the
1825 syntax for instance declarations, class constraints, and types is completely
1826 unchanged.
1827 </para>
1828 <para>
1829 By including dependencies in a class declaration, we provide a mechanism for
1830 the programmer to specify each multiple parameter class more precisely. The
1831 compiler, on the other hand, is responsible for ensuring that the set of
1832 instances that are in scope at any given point in the program is consistent
1833 with any declared dependencies. For example, the following pair of instance
1834 declarations cannot appear together in the same scope because they violate the
1835 dependency for D, even though either one on its own would be acceptable: 
1836 <programlisting>
1837    instance D Bool Int where ...
1838    instance D Bool Char where ...
1839 </programlisting>
1840 Note also that the following declaration is not allowed, even by itself: 
1841 <programlisting>
1842    instance D [a] b where ...
1843 </programlisting>
1844 The problem here is that this instance would allow one particular choice of [a]
1845 to be associated with more than one choice for b, which contradicts the
1846 dependency specified in the definition of D. More generally, this means that,
1847 in any instance of the form: 
1848 <programlisting>
1849    instance D t s where ...
1850 </programlisting>
1851 for some particular types t and s, the only variables that can appear in s are
1852 the ones that appear in t, and hence, if the type t is known, then s will be
1853 uniquely determined.
1854 </para>
1855 <para>
1856 The benefit of including dependency information is that it allows us to define
1857 more general multiple parameter classes, without ambiguity problems, and with
1858 the benefit of more accurate types. To illustrate this, we return to the
1859 collection class example, and annotate the original definition of <literal>Collects</literal>
1860 with a simple dependency: 
1861 <programlisting>
1862    class Collects e ce | ce -> e where
1863       empty  :: ce
1864       insert :: e -> ce -> ce
1865       member :: e -> ce -> Bool
1866 </programlisting>
1867 The dependency <literal>ce -&gt; e</literal> here specifies that the type e of elements is uniquely
1868 determined by the type of the collection ce. Note that both parameters of
1869 Collects are of kind *; there are no constructor classes here. Note too that
1870 all of the instances of Collects that we gave earlier can be used
1871 together with this new definition.
1872 </para>
1873 <para>
1874 What about the ambiguity problems that we encountered with the original
1875 definition? The empty function still has type Collects e ce => ce, but it is no
1876 longer necessary to regard that as an ambiguous type: Although the variable e
1877 does not appear on the right of the => symbol, the dependency for class
1878 Collects tells us that it is uniquely determined by ce, which does appear on
1879 the right of the => symbol. Hence the context in which empty is used can still
1880 give enough information to determine types for both ce and e, without
1881 ambiguity. More generally, we need only regard a type as ambiguous if it
1882 contains a variable on the left of the => that is not uniquely determined
1883 (either directly or indirectly) by the variables on the right.
1884 </para>
1885 <para>
1886 Dependencies also help to produce more accurate types for user defined
1887 functions, and hence to provide earlier detection of errors, and less cluttered
1888 types for programmers to work with. Recall the previous definition for a
1889 function f: 
1890 <programlisting>
1891    f x y = insert x y = insert x . insert y
1892 </programlisting>
1893 for which we originally obtained a type: 
1894 <programlisting>
1895    f :: (Collects a c, Collects b c) => a -> b -> c -> c
1896 </programlisting>
1897 Given the dependency information that we have for Collects, however, we can
1898 deduce that a and b must be equal because they both appear as the second
1899 parameter in a Collects constraint with the same first parameter c. Hence we
1900 can infer a shorter and more accurate type for f: 
1901 <programlisting>
1902    f :: (Collects a c) => a -> a -> c -> c
1903 </programlisting>
1904 In a similar way, the earlier definition of g will now be flagged as a type error.
1905 </para>
1906 <para>
1907 Although we have given only a few examples here, it should be clear that the
1908 addition of dependency information can help to make multiple parameter classes
1909 more useful in practice, avoiding ambiguity problems, and allowing more general
1910 sets of instance declarations.
1911 </para>
1912 </sect4>
1913 </sect3>
1914 </sect2>
1915
1916 <sect2 id="instance-decls">
1917 <title>Instance declarations</title>
1918
1919 <sect3 id="instance-rules">
1920 <title>Relaxed rules for instance declarations</title>
1921
1922 <para>An instance declaration has the form
1923 <screen>
1924   instance ( <replaceable>assertion</replaceable><subscript>1</subscript>, ..., <replaceable>assertion</replaceable><subscript>n</subscript>) =&gt; <replaceable>class</replaceable> <replaceable>type</replaceable><subscript>1</subscript> ... <replaceable>type</replaceable><subscript>m</subscript> where ...
1925 </screen>
1926 The part before the "<literal>=&gt;</literal>" is the
1927 <emphasis>context</emphasis>, while the part after the
1928 "<literal>=&gt;</literal>" is the <emphasis>head</emphasis> of the instance declaration.
1929 </para>
1930
1931 <para>
1932 In Haskell 98 the head of an instance declaration
1933 must be of the form <literal>C (T a1 ... an)</literal>, where
1934 <literal>C</literal> is the class, <literal>T</literal> is a type constructor,
1935 and the <literal>a1 ... an</literal> are distinct type variables.
1936 Furthermore, the assertions in the context of the instance declaration
1937 must be of the form <literal>C a</literal> where <literal>a</literal>
1938 is a type variable that occurs in the head.
1939 </para>
1940 <para>
1941 The <option>-fglasgow-exts</option> flag loosens these restrictions
1942 considerably.  Firstly, multi-parameter type classes are permitted.  Secondly,
1943 the context and head of the instance declaration can each consist of arbitrary
1944 (well-kinded) assertions <literal>(C t1 ... tn)</literal> subject only to the
1945 following rules:
1946 <orderedlist>
1947 <listitem><para>
1948 For each assertion in the context:
1949 <orderedlist>
1950 <listitem><para>No type variable has more occurrences in the assertion than in the head</para></listitem>
1951 <listitem><para>The assertion has fewer constructors and variables (taken together
1952       and counting repetitions) than the head</para></listitem>
1953 </orderedlist>
1954 </para></listitem>
1955
1956 <listitem><para>The coverage condition.  For each functional dependency,
1957 <replaceable>tvs</replaceable><subscript>left</subscript> <literal>-&gt;</literal>
1958 <replaceable>tvs</replaceable><subscript>right</subscript>,  of the class,
1959 every type variable in
1960 S(<replaceable>tvs</replaceable><subscript>right</subscript>) must appear in 
1961 S(<replaceable>tvs</replaceable><subscript>left</subscript>), where S is the
1962 substitution mapping each type variable in the class declaration to the
1963 corresponding type in the instance declaration.
1964 </para></listitem>
1965 </orderedlist>
1966 These restrictions ensure that context reduction terminates: each reduction
1967 step makes the problem smaller by at least one
1968 constructor.  For example, the following would make the type checker
1969 loop if it wasn't excluded:
1970 <programlisting>
1971   instance C a => C a where ...
1972 </programlisting>
1973 For example, these are OK:
1974 <programlisting>
1975   instance C Int [a]          -- Multiple parameters
1976   instance Eq (S [a])         -- Structured type in head
1977
1978       -- Repeated type variable in head
1979   instance C4 a a => C4 [a] [a] 
1980   instance Stateful (ST s) (MutVar s)
1981
1982       -- Head can consist of type variables only
1983   instance C a
1984   instance (Eq a, Show b) => C2 a b
1985
1986       -- Non-type variables in context
1987   instance Show (s a) => Show (Sized s a)
1988   instance C2 Int a => C3 Bool [a]
1989   instance C2 Int a => C3 [a] b
1990 </programlisting>
1991 But these are not:
1992 <programlisting>
1993       -- Context assertion no smaller than head
1994   instance C a => C a where ...
1995       -- (C b b) has more more occurrences of b than the head
1996   instance C b b => Foo [b] where ...
1997 </programlisting>
1998 </para>
1999
2000 <para>
2001 The same restrictions apply to instances generated by
2002 <literal>deriving</literal> clauses.  Thus the following is accepted:
2003 <programlisting>
2004   data MinHeap h a = H a (h a)
2005     deriving (Show)
2006 </programlisting>
2007 because the derived instance
2008 <programlisting>
2009   instance (Show a, Show (h a)) => Show (MinHeap h a)
2010 </programlisting>
2011 conforms to the above rules.
2012 </para>
2013
2014 <para>
2015 A useful idiom permitted by the above rules is as follows.
2016 If one allows overlapping instance declarations then it's quite
2017 convenient to have a "default instance" declaration that applies if
2018 something more specific does not:
2019 <programlisting>
2020   instance C a where
2021     op = ... -- Default
2022 </programlisting>
2023 </para>
2024 </sect3>
2025
2026 <sect3 id="undecidable-instances">
2027 <title>Undecidable instances</title>
2028
2029 <para>
2030 Sometimes even the rules of <xref linkend="instance-rules"/> are too onerous.
2031 For example, sometimes you might want to use the following to get the
2032 effect of a "class synonym":
2033 <programlisting>
2034   class (C1 a, C2 a, C3 a) => C a where { }
2035
2036   instance (C1 a, C2 a, C3 a) => C a where { }
2037 </programlisting>
2038 This allows you to write shorter signatures:
2039 <programlisting>
2040   f :: C a => ...
2041 </programlisting>
2042 instead of
2043 <programlisting>
2044   f :: (C1 a, C2 a, C3 a) => ...
2045 </programlisting>
2046 The restrictions on functional dependencies (<xref
2047 linkend="functional-dependencies"/>) are particularly troublesome.
2048 It is tempting to introduce type variables in the context that do not appear in
2049 the head, something that is excluded by the normal rules. For example:
2050 <programlisting>
2051   class HasConverter a b | a -> b where
2052      convert :: a -> b
2053    
2054   data Foo a = MkFoo a
2055
2056   instance (HasConverter a b,Show b) => Show (Foo a) where
2057      show (MkFoo value) = show (convert value)
2058 </programlisting>
2059 This is dangerous territory, however. Here, for example, is a program that would make the
2060 typechecker loop:
2061 <programlisting>
2062   class D a
2063   class F a b | a->b
2064   instance F [a] [[a]]
2065   instance (D c, F a c) => D [a]   -- 'c' is not mentioned in the head
2066 </programlisting>  
2067 Similarly, it can be tempting to lift the coverage condition:
2068 <programlisting>
2069   class Mul a b c | a b -> c where
2070         (.*.) :: a -> b -> c
2071
2072   instance Mul Int Int Int where (.*.) = (*)
2073   instance Mul Int Float Float where x .*. y = fromIntegral x * y
2074   instance Mul a b c => Mul a [b] [c] where x .*. v = map (x.*.) v
2075 </programlisting>
2076 The third instance declaration does not obey the coverage condition;
2077 and indeed the (somewhat strange) definition:
2078 <programlisting>
2079   f = \ b x y -> if b then x .*. [y] else y
2080 </programlisting>
2081 makes instance inference go into a loop, because it requires the constraint
2082 <literal>(Mul a [b] b)</literal>.
2083 </para>
2084 <para>
2085 Nevertheless, GHC allows you to experiment with more liberal rules.  If you use
2086 the experimental flag <option>-fallow-undecidable-instances</option>
2087 <indexterm><primary>-fallow-undecidable-instances
2088 option</primary></indexterm>, you can use arbitrary
2089 types in both an instance context and instance head.  Termination is ensured by having a
2090 fixed-depth recursion stack.  If you exceed the stack depth you get a
2091 sort of backtrace, and the opportunity to increase the stack depth
2092 with <option>-fcontext-stack</option><emphasis>N</emphasis>.
2093 </para>
2094
2095 </sect3>
2096
2097
2098 <sect3 id="instance-overlap">
2099 <title>Overlapping instances</title>
2100 <para>
2101 In general, <emphasis>GHC requires that that it be unambiguous which instance
2102 declaration
2103 should be used to resolve a type-class constraint</emphasis>. This behaviour
2104 can be modified by two flags: <option>-fallow-overlapping-instances</option>
2105 <indexterm><primary>-fallow-overlapping-instances
2106 </primary></indexterm> 
2107 and <option>-fallow-incoherent-instances</option>
2108 <indexterm><primary>-fallow-incoherent-instances
2109 </primary></indexterm>, as this section discusses.</para>
2110 <para>
2111 When GHC tries to resolve, say, the constraint <literal>C Int Bool</literal>,
2112 it tries to match every instance declaration against the
2113 constraint,
2114 by instantiating the head of the instance declaration.  For example, consider
2115 these declarations:
2116 <programlisting>
2117   instance context1 => C Int a     where ...  -- (A)
2118   instance context2 => C a   Bool  where ...  -- (B)
2119   instance context3 => C Int [a]   where ...  -- (C)
2120   instance context4 => C Int [Int] where ...  -- (D)
2121 </programlisting>
2122 The instances (A) and (B) match the constraint <literal>C Int Bool</literal>, 
2123 but (C) and (D) do not.  When matching, GHC takes
2124 no account of the context of the instance declaration
2125 (<literal>context1</literal> etc).
2126 GHC's default behaviour is that <emphasis>exactly one instance must match the
2127 constraint it is trying to resolve</emphasis>.  
2128 It is fine for there to be a <emphasis>potential</emphasis> of overlap (by
2129 including both declarations (A) and (B), say); an error is only reported if a 
2130 particular constraint matches more than one.
2131 </para>
2132
2133 <para>
2134 The <option>-fallow-overlapping-instances</option> flag instructs GHC to allow
2135 more than one instance to match, provided there is a most specific one.  For
2136 example, the constraint <literal>C Int [Int]</literal> matches instances (A),
2137 (C) and (D), but the last is more specific, and hence is chosen.  If there is no
2138 most-specific match, the program is rejected.
2139 </para>
2140 <para>
2141 However, GHC is conservative about committing to an overlapping instance.  For example:
2142 <programlisting>
2143   f :: [b] -> [b]
2144   f x = ...
2145 </programlisting>
2146 Suppose that from the RHS of <literal>f</literal> we get the constraint
2147 <literal>C Int [b]</literal>.  But
2148 GHC does not commit to instance (C), because in a particular
2149 call of <literal>f</literal>, <literal>b</literal> might be instantiate 
2150 to <literal>Int</literal>, in which case instance (D) would be more specific still.
2151 So GHC rejects the program.  If you add the flag <option>-fallow-incoherent-instances</option>,
2152 GHC will instead pick (C), without complaining about 
2153 the problem of subsequent instantiations.
2154 </para>
2155 <para>
2156 The willingness to be overlapped or incoherent is a property of 
2157 the <emphasis>instance declaration</emphasis> itself, controlled by the
2158 presence or otherwise of the <option>-fallow-overlapping-instances</option> 
2159 and <option>-fallow-incoherent-instances</option> flags when that mdodule is
2160 being defined.  Neither flag is required in a module that imports and uses the
2161 instance declaration.  Specifically, during the lookup process:
2162 <itemizedlist>
2163 <listitem><para>
2164 An instance declaration is ignored during the lookup process if (a) a more specific
2165 match is found, and (b) the instance declaration was compiled with 
2166 <option>-fallow-overlapping-instances</option>.  The flag setting for the
2167 more-specific instance does not matter.
2168 </para></listitem>
2169 <listitem><para>
2170 Suppose an instance declaration does not matche the constraint being looked up, but
2171 does unify with it, so that it might match when the constraint is further 
2172 instantiated.  Usually GHC will regard this as a reason for not committing to
2173 some other constraint.  But if the instance declaration was compiled with
2174 <option>-fallow-incoherent-instances</option>, GHC will skip the "does-it-unify?" 
2175 check for that declaration.
2176 </para></listitem>
2177 </itemizedlist>
2178 All this makes it possible for a library author to design a library that relies on 
2179 overlapping instances without the library client having to know.
2180 </para>
2181 <para>The <option>-fallow-incoherent-instances</option> flag implies the
2182 <option>-fallow-overlapping-instances</option> flag, but not vice versa.
2183 </para>
2184 </sect3>
2185
2186 <sect3>
2187 <title>Type synonyms in the instance head</title>
2188
2189 <para>
2190 <emphasis>Unlike Haskell 98, instance heads may use type
2191 synonyms</emphasis>.  (The instance "head" is the bit after the "=>" in an instance decl.)
2192 As always, using a type synonym is just shorthand for
2193 writing the RHS of the type synonym definition.  For example:
2194
2195
2196 <programlisting>
2197   type Point = (Int,Int)
2198   instance C Point   where ...
2199   instance C [Point] where ...
2200 </programlisting>
2201
2202
2203 is legal.  However, if you added
2204
2205
2206 <programlisting>
2207   instance C (Int,Int) where ...
2208 </programlisting>
2209
2210
2211 as well, then the compiler will complain about the overlapping
2212 (actually, identical) instance declarations.  As always, type synonyms
2213 must be fully applied.  You cannot, for example, write:
2214
2215
2216 <programlisting>
2217   type P a = [[a]]
2218   instance Monad P where ...
2219 </programlisting>
2220
2221
2222 This design decision is independent of all the others, and easily
2223 reversed, but it makes sense to me.
2224
2225 </para>
2226 </sect3>
2227
2228
2229 </sect2>
2230
2231 <sect2 id="type-restrictions">
2232 <title>Type signatures</title>
2233
2234 <sect3><title>The context of a type signature</title>
2235 <para>
2236 Unlike Haskell 98, constraints in types do <emphasis>not</emphasis> have to be of
2237 the form <emphasis>(class type-variable)</emphasis> or
2238 <emphasis>(class (type-variable type-variable ...))</emphasis>.  Thus,
2239 these type signatures are perfectly OK
2240 <programlisting>
2241   g :: Eq [a] => ...
2242   g :: Ord (T a ()) => ...
2243 </programlisting>
2244 </para>
2245 <para>
2246 GHC imposes the following restrictions on the constraints in a type signature.
2247 Consider the type:
2248
2249 <programlisting>
2250   forall tv1..tvn (c1, ...,cn) => type
2251 </programlisting>
2252
2253 (Here, we write the "foralls" explicitly, although the Haskell source
2254 language omits them; in Haskell 98, all the free type variables of an
2255 explicit source-language type signature are universally quantified,
2256 except for the class type variables in a class declaration.  However,
2257 in GHC, you can give the foralls if you want.  See <xref linkend="universal-quantification"/>).
2258 </para>
2259
2260 <para>
2261
2262 <orderedlist>
2263 <listitem>
2264
2265 <para>
2266  <emphasis>Each universally quantified type variable
2267 <literal>tvi</literal> must be reachable from <literal>type</literal></emphasis>.
2268
2269 A type variable <literal>a</literal> is "reachable" if it it appears
2270 in the same constraint as either a type variable free in in
2271 <literal>type</literal>, or another reachable type variable.  
2272 A value with a type that does not obey 
2273 this reachability restriction cannot be used without introducing
2274 ambiguity; that is why the type is rejected.
2275 Here, for example, is an illegal type:
2276
2277
2278 <programlisting>
2279   forall a. Eq a => Int
2280 </programlisting>
2281
2282
2283 When a value with this type was used, the constraint <literal>Eq tv</literal>
2284 would be introduced where <literal>tv</literal> is a fresh type variable, and
2285 (in the dictionary-translation implementation) the value would be
2286 applied to a dictionary for <literal>Eq tv</literal>.  The difficulty is that we
2287 can never know which instance of <literal>Eq</literal> to use because we never
2288 get any more information about <literal>tv</literal>.
2289 </para>
2290 <para>
2291 Note
2292 that the reachability condition is weaker than saying that <literal>a</literal> is
2293 functionally dependent on a type variable free in
2294 <literal>type</literal> (see <xref
2295 linkend="functional-dependencies"/>).  The reason for this is there
2296 might be a "hidden" dependency, in a superclass perhaps.  So
2297 "reachable" is a conservative approximation to "functionally dependent".
2298 For example, consider:
2299 <programlisting>
2300   class C a b | a -> b where ...
2301   class C a b => D a b where ...
2302   f :: forall a b. D a b => a -> a
2303 </programlisting>
2304 This is fine, because in fact <literal>a</literal> does functionally determine <literal>b</literal>
2305 but that is not immediately apparent from <literal>f</literal>'s type.
2306 </para>
2307 </listitem>
2308 <listitem>
2309
2310 <para>
2311  <emphasis>Every constraint <literal>ci</literal> must mention at least one of the
2312 universally quantified type variables <literal>tvi</literal></emphasis>.
2313
2314 For example, this type is OK because <literal>C a b</literal> mentions the
2315 universally quantified type variable <literal>b</literal>:
2316
2317
2318 <programlisting>
2319   forall a. C a b => burble
2320 </programlisting>
2321
2322
2323 The next type is illegal because the constraint <literal>Eq b</literal> does not
2324 mention <literal>a</literal>:
2325
2326
2327 <programlisting>
2328   forall a. Eq b => burble
2329 </programlisting>
2330
2331
2332 The reason for this restriction is milder than the other one.  The
2333 excluded types are never useful or necessary (because the offending
2334 context doesn't need to be witnessed at this point; it can be floated
2335 out).  Furthermore, floating them out increases sharing. Lastly,
2336 excluding them is a conservative choice; it leaves a patch of
2337 territory free in case we need it later.
2338
2339 </para>
2340 </listitem>
2341
2342 </orderedlist>
2343
2344 </para>
2345 </sect3>
2346
2347 <sect3 id="hoist">
2348 <title>For-all hoisting</title>
2349 <para>
2350 It is often convenient to use generalised type synonyms (see <xref linkend="type-synonyms"/>) at the right hand
2351 end of an arrow, thus:
2352 <programlisting>
2353   type Discard a = forall b. a -> b -> a
2354
2355   g :: Int -> Discard Int
2356   g x y z = x+y
2357 </programlisting>
2358 Simply expanding the type synonym would give
2359 <programlisting>
2360   g :: Int -> (forall b. Int -> b -> Int)
2361 </programlisting>
2362 but GHC "hoists" the <literal>forall</literal> to give the isomorphic type
2363 <programlisting>
2364   g :: forall b. Int -> Int -> b -> Int
2365 </programlisting>
2366 In general, the rule is this: <emphasis>to determine the type specified by any explicit
2367 user-written type (e.g. in a type signature), GHC expands type synonyms and then repeatedly
2368 performs the transformation:</emphasis>
2369 <programlisting>
2370   <emphasis>type1</emphasis> -> forall a1..an. <emphasis>context2</emphasis> => <emphasis>type2</emphasis>
2371 ==>
2372   forall a1..an. <emphasis>context2</emphasis> => <emphasis>type1</emphasis> -> <emphasis>type2</emphasis>
2373 </programlisting>
2374 (In fact, GHC tries to retain as much synonym information as possible for use in
2375 error messages, but that is a usability issue.)  This rule applies, of course, whether
2376 or not the <literal>forall</literal> comes from a synonym. For example, here is another
2377 valid way to write <literal>g</literal>'s type signature:
2378 <programlisting>
2379   g :: Int -> Int -> forall b. b -> Int
2380 </programlisting>
2381 </para>
2382 <para>
2383 When doing this hoisting operation, GHC eliminates duplicate constraints.  For
2384 example:
2385 <programlisting>
2386   type Foo a = (?x::Int) => Bool -> a
2387   g :: Foo (Foo Int)
2388 </programlisting>
2389 means
2390 <programlisting>
2391   g :: (?x::Int) => Bool -> Bool -> Int
2392 </programlisting>
2393 </para>
2394 </sect3>
2395
2396
2397 </sect2>
2398
2399 <sect2 id="implicit-parameters">
2400 <title>Implicit parameters</title>
2401
2402 <para> Implicit parameters are implemented as described in 
2403 "Implicit parameters: dynamic scoping with static types", 
2404 J Lewis, MB Shields, E Meijer, J Launchbury,
2405 27th ACM Symposium on Principles of Programming Languages (POPL'00),
2406 Boston, Jan 2000.
2407 </para>
2408
2409 <para>(Most of the following, stil rather incomplete, documentation is
2410 due to Jeff Lewis.)</para>
2411
2412 <para>Implicit parameter support is enabled with the option
2413 <option>-fimplicit-params</option>.</para>
2414
2415 <para>
2416 A variable is called <emphasis>dynamically bound</emphasis> when it is bound by the calling
2417 context of a function and <emphasis>statically bound</emphasis> when bound by the callee's
2418 context. In Haskell, all variables are statically bound. Dynamic
2419 binding of variables is a notion that goes back to Lisp, but was later
2420 discarded in more modern incarnations, such as Scheme. Dynamic binding
2421 can be very confusing in an untyped language, and unfortunately, typed
2422 languages, in particular Hindley-Milner typed languages like Haskell,
2423 only support static scoping of variables.
2424 </para>
2425 <para>
2426 However, by a simple extension to the type class system of Haskell, we
2427 can support dynamic binding. Basically, we express the use of a
2428 dynamically bound variable as a constraint on the type. These
2429 constraints lead to types of the form <literal>(?x::t') => t</literal>, which says "this
2430 function uses a dynamically-bound variable <literal>?x</literal> 
2431 of type <literal>t'</literal>". For
2432 example, the following expresses the type of a sort function,
2433 implicitly parameterized by a comparison function named <literal>cmp</literal>.
2434 <programlisting>
2435   sort :: (?cmp :: a -> a -> Bool) => [a] -> [a]
2436 </programlisting>
2437 The dynamic binding constraints are just a new form of predicate in the type class system.
2438 </para>
2439 <para>
2440 An implicit parameter occurs in an expression using the special form <literal>?x</literal>, 
2441 where <literal>x</literal> is
2442 any valid identifier (e.g. <literal>ord ?x</literal> is a valid expression). 
2443 Use of this construct also introduces a new
2444 dynamic-binding constraint in the type of the expression. 
2445 For example, the following definition
2446 shows how we can define an implicitly parameterized sort function in
2447 terms of an explicitly parameterized <literal>sortBy</literal> function:
2448 <programlisting>
2449   sortBy :: (a -> a -> Bool) -> [a] -> [a]
2450
2451   sort   :: (?cmp :: a -> a -> Bool) => [a] -> [a]
2452   sort    = sortBy ?cmp
2453 </programlisting>
2454 </para>
2455
2456 <sect3>
2457 <title>Implicit-parameter type constraints</title>
2458 <para>
2459 Dynamic binding constraints behave just like other type class
2460 constraints in that they are automatically propagated. Thus, when a
2461 function is used, its implicit parameters are inherited by the
2462 function that called it. For example, our <literal>sort</literal> function might be used
2463 to pick out the least value in a list:
2464 <programlisting>
2465   least   :: (?cmp :: a -> a -> Bool) => [a] -> a
2466   least xs = fst (sort xs)
2467 </programlisting>
2468 Without lifting a finger, the <literal>?cmp</literal> parameter is
2469 propagated to become a parameter of <literal>least</literal> as well. With explicit
2470 parameters, the default is that parameters must always be explicit
2471 propagated. With implicit parameters, the default is to always
2472 propagate them.
2473 </para>
2474 <para>
2475 An implicit-parameter type constraint differs from other type class constraints in the
2476 following way: All uses of a particular implicit parameter must have
2477 the same type. This means that the type of <literal>(?x, ?x)</literal> 
2478 is <literal>(?x::a) => (a,a)</literal>, and not 
2479 <literal>(?x::a, ?x::b) => (a, b)</literal>, as would be the case for type
2480 class constraints.
2481 </para>
2482
2483 <para> You can't have an implicit parameter in the context of a class or instance
2484 declaration.  For example, both these declarations are illegal:
2485 <programlisting>
2486   class (?x::Int) => C a where ...
2487   instance (?x::a) => Foo [a] where ...
2488 </programlisting>
2489 Reason: exactly which implicit parameter you pick up depends on exactly where
2490 you invoke a function. But the ``invocation'' of instance declarations is done
2491 behind the scenes by the compiler, so it's hard to figure out exactly where it is done.
2492 Easiest thing is to outlaw the offending types.</para>
2493 <para>
2494 Implicit-parameter constraints do not cause ambiguity.  For example, consider:
2495 <programlisting>
2496    f :: (?x :: [a]) => Int -> Int
2497    f n = n + length ?x
2498
2499    g :: (Read a, Show a) => String -> String
2500    g s = show (read s)
2501 </programlisting>
2502 Here, <literal>g</literal> has an ambiguous type, and is rejected, but <literal>f</literal>
2503 is fine.  The binding for <literal>?x</literal> at <literal>f</literal>'s call site is 
2504 quite unambiguous, and fixes the type <literal>a</literal>.
2505 </para>
2506 </sect3>
2507
2508 <sect3>
2509 <title>Implicit-parameter bindings</title>
2510
2511 <para>
2512 An implicit parameter is <emphasis>bound</emphasis> using the standard
2513 <literal>let</literal> or <literal>where</literal> binding forms.
2514 For example, we define the <literal>min</literal> function by binding
2515 <literal>cmp</literal>.
2516 <programlisting>
2517   min :: [a] -> a
2518   min  = let ?cmp = (&lt;=) in least
2519 </programlisting>
2520 </para>
2521 <para>
2522 A group of implicit-parameter bindings may occur anywhere a normal group of Haskell
2523 bindings can occur, except at top level.  That is, they can occur in a <literal>let</literal> 
2524 (including in a list comprehension, or do-notation, or pattern guards), 
2525 or a <literal>where</literal> clause.
2526 Note the following points:
2527 <itemizedlist>
2528 <listitem><para>
2529 An implicit-parameter binding group must be a
2530 collection of simple bindings to implicit-style variables (no
2531 function-style bindings, and no type signatures); these bindings are
2532 neither polymorphic or recursive.  
2533 </para></listitem>
2534 <listitem><para>
2535 You may not mix implicit-parameter bindings with ordinary bindings in a 
2536 single <literal>let</literal>
2537 expression; use two nested <literal>let</literal>s instead.
2538 (In the case of <literal>where</literal> you are stuck, since you can't nest <literal>where</literal> clauses.)
2539 </para></listitem>
2540
2541 <listitem><para>
2542 You may put multiple implicit-parameter bindings in a
2543 single binding group; but they are <emphasis>not</emphasis> treated
2544 as a mutually recursive group (as ordinary <literal>let</literal> bindings are).
2545 Instead they are treated as a non-recursive group, simultaneously binding all the implicit
2546 parameter.  The bindings are not nested, and may be re-ordered without changing
2547 the meaning of the program.
2548 For example, consider:
2549 <programlisting>
2550   f t = let { ?x = t; ?y = ?x+(1::Int) } in ?x + ?y
2551 </programlisting>
2552 The use of <literal>?x</literal> in the binding for <literal>?y</literal> does not "see"
2553 the binding for <literal>?x</literal>, so the type of <literal>f</literal> is
2554 <programlisting>
2555   f :: (?x::Int) => Int -> Int
2556 </programlisting>
2557 </para></listitem>
2558 </itemizedlist>
2559 </para>
2560
2561 </sect3>
2562
2563 <sect3><title>Implicit parameters and polymorphic recursion</title>
2564
2565 <para>
2566 Consider these two definitions:
2567 <programlisting>
2568   len1 :: [a] -> Int
2569   len1 xs = let ?acc = 0 in len_acc1 xs
2570
2571   len_acc1 [] = ?acc
2572   len_acc1 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc1 xs
2573
2574   ------------
2575
2576   len2 :: [a] -> Int
2577   len2 xs = let ?acc = 0 in len_acc2 xs
2578
2579   len_acc2 :: (?acc :: Int) => [a] -> Int
2580   len_acc2 [] = ?acc
2581   len_acc2 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc2 xs
2582 </programlisting>
2583 The only difference between the two groups is that in the second group
2584 <literal>len_acc</literal> is given a type signature.
2585 In the former case, <literal>len_acc1</literal> is monomorphic in its own
2586 right-hand side, so the implicit parameter <literal>?acc</literal> is not
2587 passed to the recursive call.  In the latter case, because <literal>len_acc2</literal>
2588 has a type signature, the recursive call is made to the
2589 <emphasis>polymoprhic</emphasis> version, which takes <literal>?acc</literal>
2590 as an implicit parameter.  So we get the following results in GHCi:
2591 <programlisting>
2592   Prog> len1 "hello"
2593   0
2594   Prog> len2 "hello"
2595   5
2596 </programlisting>
2597 Adding a type signature dramatically changes the result!  This is a rather
2598 counter-intuitive phenomenon, worth watching out for.
2599 </para>
2600 </sect3>
2601
2602 <sect3><title>Implicit parameters and monomorphism</title>
2603
2604 <para>GHC applies the dreaded Monomorphism Restriction (section 4.5.5 of the
2605 Haskell Report) to implicit parameters.  For example, consider:
2606 <programlisting>
2607  f :: Int -> Int
2608   f v = let ?x = 0     in
2609         let y = ?x + v in
2610         let ?x = 5     in
2611         y
2612 </programlisting>
2613 Since the binding for <literal>y</literal> falls under the Monomorphism
2614 Restriction it is not generalised, so the type of <literal>y</literal> is
2615 simply <literal>Int</literal>, not <literal>(?x::Int) => Int</literal>.
2616 Hence, <literal>(f 9)</literal> returns result <literal>9</literal>.
2617 If you add a type signature for <literal>y</literal>, then <literal>y</literal>
2618 will get type <literal>(?x::Int) => Int</literal>, so the occurrence of
2619 <literal>y</literal> in the body of the <literal>let</literal> will see the
2620 inner binding of <literal>?x</literal>, so <literal>(f 9)</literal> will return
2621 <literal>14</literal>.
2622 </para>
2623 </sect3>
2624 </sect2>
2625
2626 <sect2 id="linear-implicit-parameters">
2627 <title>Linear implicit parameters</title>
2628 <para>
2629 Linear implicit parameters are an idea developed by Koen Claessen,
2630 Mark Shields, and Simon PJ.  They address the long-standing
2631 problem that monads seem over-kill for certain sorts of problem, notably:
2632 </para>
2633 <itemizedlist>
2634 <listitem> <para> distributing a supply of unique names </para> </listitem>
2635 <listitem> <para> distributing a supply of random numbers </para> </listitem>
2636 <listitem> <para> distributing an oracle (as in QuickCheck) </para> </listitem>
2637 </itemizedlist>
2638
2639 <para>
2640 Linear implicit parameters are just like ordinary implicit parameters,
2641 except that they are "linear" -- that is, they cannot be copied, and
2642 must be explicitly "split" instead.  Linear implicit parameters are
2643 written '<literal>%x</literal>' instead of '<literal>?x</literal>'.  
2644 (The '/' in the '%' suggests the split!)
2645 </para>
2646 <para>
2647 For example:
2648 <programlisting>
2649     import GHC.Exts( Splittable )
2650
2651     data NameSupply = ...
2652     
2653     splitNS :: NameSupply -> (NameSupply, NameSupply)
2654     newName :: NameSupply -> Name
2655
2656     instance Splittable NameSupply where
2657         split = splitNS
2658
2659
2660     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
2661     f env (Lam x e) = Lam x' (f env e)
2662                     where
2663                       x'   = newName %ns
2664                       env' = extend env x x'
2665     ...more equations for f...
2666 </programlisting>
2667 Notice that the implicit parameter %ns is consumed 
2668 <itemizedlist>
2669 <listitem> <para> once by the call to <literal>newName</literal> </para> </listitem>
2670 <listitem> <para> once by the recursive call to <literal>f</literal> </para></listitem>
2671 </itemizedlist>
2672 </para>
2673 <para>
2674 So the translation done by the type checker makes
2675 the parameter explicit:
2676 <programlisting>
2677     f :: NameSupply -> Env -> Expr -> Expr
2678     f ns env (Lam x e) = Lam x' (f ns1 env e)
2679                        where
2680                          (ns1,ns2) = splitNS ns
2681                          x' = newName ns2
2682                          env = extend env x x'
2683 </programlisting>
2684 Notice the call to 'split' introduced by the type checker.
2685 How did it know to use 'splitNS'?  Because what it really did
2686 was to introduce a call to the overloaded function 'split',
2687 defined by the class <literal>Splittable</literal>:
2688 <programlisting>
2689         class Splittable a where
2690           split :: a -> (a,a)
2691 </programlisting>
2692 The instance for <literal>Splittable NameSupply</literal> tells GHC how to implement
2693 split for name supplies.  But we can simply write
2694 <programlisting>
2695         g x = (x, %ns, %ns)
2696 </programlisting>
2697 and GHC will infer
2698 <programlisting>
2699         g :: (Splittable a, %ns :: a) => b -> (b,a,a)
2700 </programlisting>
2701 The <literal>Splittable</literal> class is built into GHC.  It's exported by module 
2702 <literal>GHC.Exts</literal>.
2703 </para>
2704 <para>
2705 Other points:
2706 <itemizedlist>
2707 <listitem> <para> '<literal>?x</literal>' and '<literal>%x</literal>' 
2708 are entirely distinct implicit parameters: you 
2709   can use them together and they won't intefere with each other. </para>
2710 </listitem>
2711
2712 <listitem> <para> You can bind linear implicit parameters in 'with' clauses. </para> </listitem>
2713
2714 <listitem> <para>You cannot have implicit parameters (whether linear or not)
2715   in the context of a class or instance declaration. </para></listitem>
2716 </itemizedlist>
2717 </para>
2718
2719 <sect3><title>Warnings</title>
2720
2721 <para>
2722 The monomorphism restriction is even more important than usual.
2723 Consider the example above:
2724 <programlisting>
2725     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
2726     f env (Lam x e) = Lam x' (f env e)
2727                     where
2728                       x'   = newName %ns
2729                       env' = extend env x x'
2730 </programlisting>
2731 If we replaced the two occurrences of x' by (newName %ns), which is
2732 usually a harmless thing to do, we get:
2733 <programlisting>
2734     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
2735     f env (Lam x e) = Lam (newName %ns) (f env e)
2736                     where
2737                       env' = extend env x (newName %ns)
2738 </programlisting>
2739 But now the name supply is consumed in <emphasis>three</emphasis> places
2740 (the two calls to newName,and the recursive call to f), so
2741 the result is utterly different.  Urk!  We don't even have 
2742 the beta rule.
2743 </para>
2744 <para>
2745 Well, this is an experimental change.  With implicit
2746 parameters we have already lost beta reduction anyway, and
2747 (as John Launchbury puts it) we can't sensibly reason about
2748 Haskell programs without knowing their typing.
2749 </para>
2750
2751 </sect3>
2752
2753 <sect3><title>Recursive functions</title>
2754 <para>Linear implicit parameters can be particularly tricky when you have a recursive function
2755 Consider
2756 <programlisting>
2757         foo :: %x::T => Int -> [Int]
2758         foo 0 = []
2759         foo n = %x : foo (n-1)
2760 </programlisting>
2761 where T is some type in class Splittable.</para>
2762 <para>
2763 Do you get a list of all the same T's or all different T's
2764 (assuming that split gives two distinct T's back)?
2765 </para><para>
2766 If you supply the type signature, taking advantage of polymorphic
2767 recursion, you get what you'd probably expect.  Here's the
2768 translated term, where the implicit param is made explicit:
2769 <programlisting>
2770         foo x 0 = []
2771         foo x n = let (x1,x2) = split x
2772                   in x1 : foo x2 (n-1)
2773 </programlisting>
2774 But if you don't supply a type signature, GHC uses the Hindley
2775 Milner trick of using a single monomorphic instance of the function
2776 for the recursive calls. That is what makes Hindley Milner type inference
2777 work.  So the translation becomes
2778 <programlisting>
2779         foo x = let
2780                   foom 0 = []
2781                   foom n = x : foom (n-1)
2782                 in
2783                 foom
2784 </programlisting>
2785 Result: 'x' is not split, and you get a list of identical T's.  So the
2786 semantics of the program depends on whether or not foo has a type signature.
2787 Yikes!
2788 </para><para>
2789 You may say that this is a good reason to dislike linear implicit parameters
2790 and you'd be right.  That is why they are an experimental feature. 
2791 </para>
2792 </sect3>
2793
2794 </sect2>
2795
2796 <sect2 id="sec-kinding">
2797 <title>Explicitly-kinded quantification</title>
2798
2799 <para>
2800 Haskell infers the kind of each type variable.  Sometimes it is nice to be able
2801 to give the kind explicitly as (machine-checked) documentation, 
2802 just as it is nice to give a type signature for a function.  On some occasions,
2803 it is essential to do so.  For example, in his paper "Restricted Data Types in Haskell" (Haskell Workshop 1999)
2804 John Hughes had to define the data type:
2805 <screen>
2806      data Set cxt a = Set [a]
2807                     | Unused (cxt a -> ())
2808 </screen>
2809 The only use for the <literal>Unused</literal> constructor was to force the correct
2810 kind for the type variable <literal>cxt</literal>.
2811 </para>
2812 <para>
2813 GHC now instead allows you to specify the kind of a type variable directly, wherever
2814 a type variable is explicitly bound.  Namely:
2815 <itemizedlist>
2816 <listitem><para><literal>data</literal> declarations:
2817 <screen>
2818   data Set (cxt :: * -> *) a = Set [a]
2819 </screen></para></listitem>
2820 <listitem><para><literal>type</literal> declarations:
2821 <screen>
2822   type T (f :: * -> *) = f Int
2823 </screen></para></listitem>
2824 <listitem><para><literal>class</literal> declarations:
2825 <screen>
2826   class (Eq a) => C (f :: * -> *) a where ...
2827 </screen></para></listitem>
2828 <listitem><para><literal>forall</literal>'s in type signatures:
2829 <screen>
2830   f :: forall (cxt :: * -> *). Set cxt Int
2831 </screen></para></listitem>
2832 </itemizedlist>
2833 </para>
2834
2835 <para>
2836 The parentheses are required.  Some of the spaces are required too, to
2837 separate the lexemes.  If you write <literal>(f::*->*)</literal> you
2838 will get a parse error, because "<literal>::*->*</literal>" is a
2839 single lexeme in Haskell.
2840 </para>
2841
2842 <para>
2843 As part of the same extension, you can put kind annotations in types
2844 as well.  Thus:
2845 <screen>
2846    f :: (Int :: *) -> Int
2847    g :: forall a. a -> (a :: *)
2848 </screen>
2849 The syntax is
2850 <screen>
2851    atype ::= '(' ctype '::' kind ')
2852 </screen>
2853 The parentheses are required.
2854 </para>
2855 </sect2>
2856
2857
2858 <sect2 id="universal-quantification">
2859 <title>Arbitrary-rank polymorphism
2860 </title>
2861
2862 <para>
2863 Haskell type signatures are implicitly quantified.  The new keyword <literal>forall</literal>
2864 allows us to say exactly what this means.  For example:
2865 </para>
2866 <para>
2867 <programlisting>
2868         g :: b -> b
2869 </programlisting>
2870 means this:
2871 <programlisting>
2872         g :: forall b. (b -> b)
2873 </programlisting>
2874 The two are treated identically.
2875 </para>
2876
2877 <para>
2878 However, GHC's type system supports <emphasis>arbitrary-rank</emphasis> 
2879 explicit universal quantification in
2880 types. 
2881 For example, all the following types are legal:
2882 <programlisting>
2883     f1 :: forall a b. a -> b -> a
2884     g1 :: forall a b. (Ord a, Eq  b) => a -> b -> a
2885
2886     f2 :: (forall a. a->a) -> Int -> Int
2887     g2 :: (forall a. Eq a => [a] -> a -> Bool) -> Int -> Int
2888
2889     f3 :: ((forall a. a->a) -> Int) -> Bool -> Bool
2890 </programlisting>
2891 Here, <literal>f1</literal> and <literal>g1</literal> are rank-1 types, and
2892 can be written in standard Haskell (e.g. <literal>f1 :: a->b->a</literal>).
2893 The <literal>forall</literal> makes explicit the universal quantification that
2894 is implicitly added by Haskell.
2895 </para>
2896 <para>
2897 The functions <literal>f2</literal> and <literal>g2</literal> have rank-2 types;
2898 the <literal>forall</literal> is on the left of a function arrow.  As <literal>g2</literal>
2899 shows, the polymorphic type on the left of the function arrow can be overloaded.
2900 </para>
2901 <para>
2902 The function <literal>f3</literal> has a rank-3 type;
2903 it has rank-2 types on the left of a function arrow.
2904 </para>
2905 <para>
2906 GHC allows types of arbitrary rank; you can nest <literal>forall</literal>s
2907 arbitrarily deep in function arrows.   (GHC used to be restricted to rank 2, but
2908 that restriction has now been lifted.)
2909 In particular, a forall-type (also called a "type scheme"),
2910 including an operational type class context, is legal:
2911 <itemizedlist>
2912 <listitem> <para> On the left of a function arrow </para> </listitem>
2913 <listitem> <para> On the right of a function arrow (see <xref linkend="hoist"/>) </para> </listitem>
2914 <listitem> <para> As the argument of a constructor, or type of a field, in a data type declaration. For
2915 example, any of the <literal>f1,f2,f3,g1,g2</literal> above would be valid
2916 field type signatures.</para> </listitem>
2917 <listitem> <para> As the type of an implicit parameter </para> </listitem>
2918 <listitem> <para> In a pattern type signature (see <xref linkend="scoped-type-variables"/>) </para> </listitem>
2919 </itemizedlist>
2920 There is one place you cannot put a <literal>forall</literal>:
2921 you cannot instantiate a type variable with a forall-type.  So you cannot 
2922 make a forall-type the argument of a type constructor.  So these types are illegal:
2923 <programlisting>
2924     x1 :: [forall a. a->a]
2925     x2 :: (forall a. a->a, Int)
2926     x3 :: Maybe (forall a. a->a)
2927 </programlisting>
2928 Of course <literal>forall</literal> becomes a keyword; you can't use <literal>forall</literal> as
2929 a type variable any more!
2930 </para>
2931
2932
2933 <sect3 id="univ">
2934 <title>Examples
2935 </title>
2936
2937 <para>
2938 In a <literal>data</literal> or <literal>newtype</literal> declaration one can quantify
2939 the types of the constructor arguments.  Here are several examples:
2940 </para>
2941
2942 <para>
2943
2944 <programlisting>
2945 data T a = T1 (forall b. b -> b -> b) a
2946
2947 data MonadT m = MkMonad { return :: forall a. a -> m a,
2948                           bind   :: forall a b. m a -> (a -> m b) -> m b
2949                         }
2950
2951 newtype Swizzle = MkSwizzle (Ord a => [a] -> [a])
2952 </programlisting>
2953
2954 </para>
2955
2956 <para>
2957 The constructors have rank-2 types:
2958 </para>
2959
2960 <para>
2961
2962 <programlisting>
2963 T1 :: forall a. (forall b. b -> b -> b) -> a -> T a
2964 MkMonad :: forall m. (forall a. a -> m a)
2965                   -> (forall a b. m a -> (a -> m b) -> m b)
2966                   -> MonadT m
2967 MkSwizzle :: (Ord a => [a] -> [a]) -> Swizzle
2968 </programlisting>
2969
2970 </para>
2971
2972 <para>
2973 Notice that you don't need to use a <literal>forall</literal> if there's an
2974 explicit context.  For example in the first argument of the
2975 constructor <function>MkSwizzle</function>, an implicit "<literal>forall a.</literal>" is
2976 prefixed to the argument type.  The implicit <literal>forall</literal>
2977 quantifies all type variables that are not already in scope, and are
2978 mentioned in the type quantified over.
2979 </para>
2980
2981 <para>
2982 As for type signatures, implicit quantification happens for non-overloaded
2983 types too.  So if you write this:
2984
2985 <programlisting>
2986   data T a = MkT (Either a b) (b -> b)
2987 </programlisting>
2988
2989 it's just as if you had written this:
2990
2991 <programlisting>
2992   data T a = MkT (forall b. Either a b) (forall b. b -> b)
2993 </programlisting>
2994
2995 That is, since the type variable <literal>b</literal> isn't in scope, it's
2996 implicitly universally quantified.  (Arguably, it would be better
2997 to <emphasis>require</emphasis> explicit quantification on constructor arguments
2998 where that is what is wanted.  Feedback welcomed.)
2999 </para>
3000
3001 <para>
3002 You construct values of types <literal>T1, MonadT, Swizzle</literal> by applying
3003 the constructor to suitable values, just as usual.  For example,
3004 </para>
3005
3006 <para>
3007
3008 <programlisting>
3009     a1 :: T Int
3010     a1 = T1 (\xy->x) 3
3011     
3012     a2, a3 :: Swizzle
3013     a2 = MkSwizzle sort
3014     a3 = MkSwizzle reverse
3015     
3016     a4 :: MonadT Maybe
3017     a4 = let r x = Just x
3018              b m k = case m of
3019                        Just y -> k y
3020                        Nothing -> Nothing
3021          in
3022          MkMonad r b
3023
3024     mkTs :: (forall b. b -> b -> b) -> a -> [T a]
3025     mkTs f x y = [T1 f x, T1 f y]
3026 </programlisting>
3027
3028 </para>
3029
3030 <para>
3031 The type of the argument can, as usual, be more general than the type
3032 required, as <literal>(MkSwizzle reverse)</literal> shows.  (<function>reverse</function>
3033 does not need the <literal>Ord</literal> constraint.)
3034 </para>
3035
3036 <para>
3037 When you use pattern matching, the bound variables may now have
3038 polymorphic types.  For example:
3039 </para>
3040
3041 <para>
3042
3043 <programlisting>
3044     f :: T a -> a -> (a, Char)
3045     f (T1 w k) x = (w k x, w 'c' 'd')
3046
3047     g :: (Ord a, Ord b) => Swizzle -> [a] -> (a -> b) -> [b]
3048     g (MkSwizzle s) xs f = s (map f (s xs))
3049
3050     h :: MonadT m -> [m a] -> m [a]
3051     h m [] = return m []
3052     h m (x:xs) = bind m x          $ \y ->
3053                  bind m (h m xs)   $ \ys ->
3054                  return m (y:ys)
3055 </programlisting>
3056
3057 </para>
3058
3059 <para>
3060 In the function <function>h</function> we use the record selectors <literal>return</literal>
3061 and <literal>bind</literal> to extract the polymorphic bind and return functions
3062 from the <literal>MonadT</literal> data structure, rather than using pattern
3063 matching.
3064 </para>
3065 </sect3>
3066
3067 <sect3>
3068 <title>Type inference</title>
3069
3070 <para>
3071 In general, type inference for arbitrary-rank types is undecidable.
3072 GHC uses an algorithm proposed by Odersky and Laufer ("Putting type annotations to work", POPL'96)
3073 to get a decidable algorithm by requiring some help from the programmer.
3074 We do not yet have a formal specification of "some help" but the rule is this:
3075 </para>
3076 <para>
3077 <emphasis>For a lambda-bound or case-bound variable, x, either the programmer
3078 provides an explicit polymorphic type for x, or GHC's type inference will assume
3079 that x's type has no foralls in it</emphasis>.
3080 </para>
3081 <para>
3082 What does it mean to "provide" an explicit type for x?  You can do that by 
3083 giving a type signature for x directly, using a pattern type signature
3084 (<xref linkend="scoped-type-variables"/>), thus:
3085 <programlisting>
3086      \ f :: (forall a. a->a) -> (f True, f 'c')
3087 </programlisting>
3088 Alternatively, you can give a type signature to the enclosing
3089 context, which GHC can "push down" to find the type for the variable:
3090 <programlisting>
3091      (\ f -> (f True, f 'c')) :: (forall a. a->a) -> (Bool,Char)
3092 </programlisting>
3093 Here the type signature on the expression can be pushed inwards
3094 to give a type signature for f.  Similarly, and more commonly,
3095 one can give a type signature for the function itself:
3096 <programlisting>
3097      h :: (forall a. a->a) -> (Bool,Char)
3098      h f = (f True, f 'c')
3099 </programlisting>
3100 You don't need to give a type signature if the lambda bound variable
3101 is a constructor argument.  Here is an example we saw earlier:
3102 <programlisting>
3103     f :: T a -> a -> (a, Char)
3104     f (T1 w k) x = (w k x, w 'c' 'd')
3105 </programlisting>
3106 Here we do not need to give a type signature to <literal>w</literal>, because
3107 it is an argument of constructor <literal>T1</literal> and that tells GHC all
3108 it needs to know.
3109 </para>
3110
3111 </sect3>
3112
3113
3114 <sect3 id="implicit-quant">
3115 <title>Implicit quantification</title>
3116
3117 <para>
3118 GHC performs implicit quantification as follows.  <emphasis>At the top level (only) of 
3119 user-written types, if and only if there is no explicit <literal>forall</literal>,
3120 GHC finds all the type variables mentioned in the type that are not already
3121 in scope, and universally quantifies them.</emphasis>  For example, the following pairs are 
3122 equivalent:
3123 <programlisting>
3124   f :: a -> a
3125   f :: forall a. a -> a
3126
3127   g (x::a) = let
3128                 h :: a -> b -> b
3129                 h x y = y
3130              in ...
3131   g (x::a) = let
3132                 h :: forall b. a -> b -> b
3133                 h x y = y
3134              in ...
3135 </programlisting>
3136 </para>
3137 <para>
3138 Notice that GHC does <emphasis>not</emphasis> find the innermost possible quantification
3139 point.  For example:
3140 <programlisting>
3141   f :: (a -> a) -> Int
3142            -- MEANS
3143   f :: forall a. (a -> a) -> Int
3144            -- NOT
3145   f :: (forall a. a -> a) -> Int
3146
3147
3148   g :: (Ord a => a -> a) -> Int
3149            -- MEANS the illegal type
3150   g :: forall a. (Ord a => a -> a) -> Int
3151            -- NOT
3152   g :: (forall a. Ord a => a -> a) -> Int
3153 </programlisting>
3154 The latter produces an illegal type, which you might think is silly,
3155 but at least the rule is simple.  If you want the latter type, you
3156 can write your for-alls explicitly.  Indeed, doing so is strongly advised
3157 for rank-2 types.
3158 </para>
3159 </sect3>
3160 </sect2>
3161
3162
3163
3164
3165 <sect2 id="scoped-type-variables">
3166 <title>Scoped type variables
3167 </title>
3168
3169 <para>
3170 A <emphasis>lexically scoped type variable</emphasis> can be bound by:
3171 <itemizedlist>
3172 <listitem><para>A declaration type signature (<xref linkend="decl-type-sigs"/>)</para></listitem>
3173 <listitem><para>A pattern type signature (<xref linkend="pattern-type-sigs"/>)</para></listitem>
3174 <listitem><para>A result type signature (<xref linkend="result-type-sigs"/>)</para></listitem>
3175 </itemizedlist>
3176 For example:
3177 <programlisting>
3178 f (xs::[a]) = ys ++ ys
3179            where
3180               ys :: [a]
3181               ys = reverse xs
3182 </programlisting>
3183 The pattern <literal>(xs::[a])</literal> includes a type signature for <varname>xs</varname>.
3184 This brings the type variable <literal>a</literal> into scope; it scopes over
3185 all the patterns and right hand sides for this equation for <function>f</function>.
3186 In particular, it is in scope at the type signature for <varname>y</varname>.
3187 </para>
3188
3189 <para>
3190 At ordinary type signatures, such as that for <varname>ys</varname>, any type variables
3191 mentioned in the type signature <emphasis>that are not in scope</emphasis> are
3192 implicitly universally quantified.  (If there are no type variables in
3193 scope, all type variables mentioned in the signature are universally
3194 quantified, which is just as in Haskell 98.)  In this case, since <varname>a</varname>
3195 is in scope, it is not universally quantified, so the type of <varname>ys</varname> is
3196 the same as that of <varname>xs</varname>.  In Haskell 98 it is not possible to declare
3197 a type for <varname>ys</varname>; a major benefit of scoped type variables is that
3198 it becomes possible to do so.
3199 </para>
3200
3201 <para>
3202 Scoped type variables are implemented in both GHC and Hugs.  Where the
3203 implementations differ from the specification below, those differences
3204 are noted.
3205 </para>
3206
3207 <para>
3208 So much for the basic idea.  Here are the details.
3209 </para>
3210
3211 <sect3>
3212 <title>What a scoped type variable means</title>
3213 <para>
3214 A lexically-scoped type variable is simply
3215 the name for a type.   The restriction it expresses is that all occurrences
3216 of the same name mean the same type.  For example:
3217 <programlisting>
3218   f :: [Int] -> Int -> Int
3219   f (xs::[a]) (y::a) = (head xs + y) :: a
3220 </programlisting>
3221 The pattern type signatures on the left hand side of
3222 <literal>f</literal> express the fact that <literal>xs</literal>
3223 must be a list of things of some type <literal>a</literal>; and that <literal>y</literal>
3224 must have this same type.  The type signature on the expression <literal>(head xs)</literal>
3225 specifies that this expression must have the same type <literal>a</literal>.
3226 <emphasis>There is no requirement that the type named by "<literal>a</literal>" is
3227 in fact a type variable</emphasis>.  Indeed, in this case, the type named by "<literal>a</literal>" is
3228 <literal>Int</literal>.  (This is a slight liberalisation from the original rather complex
3229 rules, which specified that a pattern-bound type variable should be universally quantified.)
3230 For example, all of these are legal:</para>
3231
3232 <programlisting>
3233   t (x::a) (y::a) = x+y*2
3234
3235   f (x::a) (y::b) = [x,y]       -- a unifies with b
3236
3237   g (x::a) = x + 1::Int         -- a unifies with Int
3238
3239   h x = let k (y::a) = [x,y]    -- a is free in the
3240         in k x                  -- environment
3241
3242   k (x::a) True    = ...        -- a unifies with Int
3243   k (x::Int) False = ...
3244
3245   w :: [b] -> [b]
3246   w (x::a) = x                  -- a unifies with [b]
3247 </programlisting>
3248
3249 </sect3>
3250
3251 <sect3>
3252 <title>Scope and implicit quantification</title>
3253
3254 <para>
3255
3256 <itemizedlist>
3257 <listitem>
3258
3259 <para>
3260 All the type variables mentioned in a pattern,
3261 that are not already in scope,
3262 are brought into scope by the pattern.  We describe this set as
3263 the <emphasis>type variables bound by the pattern</emphasis>.
3264 For example:
3265 <programlisting>
3266   f (x::a) = let g (y::(a,b)) = fst y
3267              in
3268              g (x,True)
3269 </programlisting>
3270 The pattern <literal>(x::a)</literal> brings the type variable
3271 <literal>a</literal> into scope, as well as the term 
3272 variable <literal>x</literal>.  The pattern <literal>(y::(a,b))</literal>
3273 contains an occurrence of the already-in-scope type variable <literal>a</literal>,
3274 and brings into scope the type variable <literal>b</literal>.
3275 </para>
3276 </listitem>
3277
3278 <listitem>
3279 <para>
3280 The type variable(s) bound by the pattern have the same scope
3281 as the term variable(s) bound by the pattern.  For example:
3282 <programlisting>
3283   let
3284     f (x::a) = &lt;...rhs of f...>
3285     (p::b, q::b) = (1,2)
3286   in &lt;...body of let...>
3287 </programlisting>
3288 Here, the type variable <literal>a</literal> scopes over the right hand side of <literal>f</literal>,
3289 just like <literal>x</literal> does; while the type variable <literal>b</literal> scopes over the
3290 body of the <literal>let</literal>, and all the other definitions in the <literal>let</literal>,
3291 just like <literal>p</literal> and <literal>q</literal> do.
3292 Indeed, the newly bound type variables also scope over any ordinary, separate
3293 type signatures in the <literal>let</literal> group.
3294 </para>
3295 </listitem>
3296
3297
3298 <listitem>
3299 <para>
3300 The type variables bound by the pattern may be 
3301 mentioned in ordinary type signatures or pattern 
3302 type signatures anywhere within their scope.
3303
3304 </para>
3305 </listitem>
3306
3307 <listitem>
3308 <para>
3309  In ordinary type signatures, any type variable mentioned in the
3310 signature that is in scope is <emphasis>not</emphasis> universally quantified.
3311
3312 </para>
3313 </listitem>
3314
3315 <listitem>
3316
3317 <para>
3318  Ordinary type signatures do not bring any new type variables
3319 into scope (except in the type signature itself!). So this is illegal:
3320
3321 <programlisting>
3322   f :: a -> a
3323   f x = x::a
3324 </programlisting>
3325
3326 It's illegal because <varname>a</varname> is not in scope in the body of <function>f</function>,
3327 so the ordinary signature <literal>x::a</literal> is equivalent to <literal>x::forall a.a</literal>;
3328 and that is an incorrect typing.
3329
3330 </para>
3331 </listitem>
3332
3333 <listitem>
3334 <para>
3335 The pattern type signature is a monotype:
3336 </para>
3337
3338 <itemizedlist>
3339 <listitem> <para> 
3340 A pattern type signature cannot contain any explicit <literal>forall</literal> quantification.
3341 </para> </listitem>
3342
3343 <listitem>  <para> 
3344 The type variables bound by a pattern type signature can only be instantiated to monotypes,
3345 not to type schemes.
3346 </para> </listitem>
3347
3348 <listitem>  <para> 
3349 There is no implicit universal quantification on pattern type signatures (in contrast to
3350 ordinary type signatures).
3351 </para> </listitem>
3352
3353 </itemizedlist>
3354
3355 </listitem>
3356
3357 <listitem>
3358 <para>
3359
3360 The type variables in the head of a <literal>class</literal> or <literal>instance</literal> declaration
3361 scope over the methods defined in the <literal>where</literal> part.  For example:
3362
3363
3364 <programlisting>
3365   class C a where
3366     op :: [a] -> a
3367
3368     op xs = let ys::[a]
3369                 ys = reverse xs
3370             in
3371             head ys
3372 </programlisting>
3373
3374
3375 (Not implemented in Hugs yet, Dec 98).
3376 </para>
3377 </listitem>
3378
3379 </itemizedlist>
3380
3381 </para>
3382
3383 </sect3>
3384
3385 <sect3 id="decl-type-sigs">
3386 <title>Declaration type signatures</title>
3387 <para>A declaration type signature that has <emphasis>explicit</emphasis>
3388 quantification (using <literal>forall</literal>) brings into scope the
3389 explicitly-quantified
3390 type variables, in the definition of the named function(s).  For example:
3391 <programlisting>
3392   f :: forall a. [a] -> [a]
3393   f (x:xs) = xs ++ [ x :: a ]
3394 </programlisting>
3395 The "<literal>forall a</literal>" brings "<literal>a</literal>" into scope in
3396 the definition of "<literal>f</literal>".
3397 </para>
3398 <para>This only happens if the quantification in <literal>f</literal>'s type
3399 signature is explicit.  For example:
3400 <programlisting>
3401   g :: [a] -> [a]
3402   g (x:xs) = xs ++ [ x :: a ]
3403 </programlisting>
3404 This program will be rejected, because "<literal>a</literal>" does not scope
3405 over the definition of "<literal>f</literal>", so "<literal>x::a</literal>"
3406 means "<literal>x::forall a. a</literal>" by Haskell's usual implicit
3407 quantification rules.
3408 </para>
3409 </sect3>
3410
3411 <sect3 id="pattern-type-sigs">
3412 <title>Where a pattern type signature can occur</title>
3413
3414 <para>
3415 A pattern type signature can occur in any pattern.  For example:
3416 <itemizedlist>
3417
3418 <listitem>
3419 <para>
3420 A pattern type signature can be on an arbitrary sub-pattern, not
3421 just on a variable:
3422
3423
3424 <programlisting>
3425   f ((x,y)::(a,b)) = (y,x) :: (b,a)
3426 </programlisting>
3427
3428
3429 </para>
3430 </listitem>
3431 <listitem>
3432
3433 <para>
3434  Pattern type signatures, including the result part, can be used
3435 in lambda abstractions:
3436
3437 <programlisting>
3438   (\ (x::a, y) :: a -> x)
3439 </programlisting>
3440 </para>
3441 </listitem>
3442 <listitem>
3443
3444 <para>
3445  Pattern type signatures, including the result part, can be used
3446 in <literal>case</literal> expressions:
3447
3448 <programlisting>
3449   case e of { ((x::a, y) :: (a,b)) -> x }
3450 </programlisting>
3451
3452 Note that the <literal>-&gt;</literal> symbol in a case alternative
3453 leads to difficulties when parsing a type signature in the pattern: in
3454 the absence of the extra parentheses in the example above, the parser
3455 would try to interpret the <literal>-&gt;</literal> as a function
3456 arrow and give a parse error later.
3457
3458 </para>
3459
3460 </listitem>
3461
3462 <listitem>
3463 <para>
3464 To avoid ambiguity, the type after the &ldquo;<literal>::</literal>&rdquo; in a result
3465 pattern signature on a lambda or <literal>case</literal> must be atomic (i.e. a single
3466 token or a parenthesised type of some sort).  To see why,
3467 consider how one would parse this:
3468
3469
3470 <programlisting>
3471   \ x :: a -> b -> x
3472 </programlisting>
3473
3474
3475 </para>
3476 </listitem>
3477
3478 <listitem>
3479
3480 <para>
3481  Pattern type signatures can bind existential type variables.
3482 For example:
3483
3484
3485 <programlisting>
3486   data T = forall a. MkT [a]
3487
3488   f :: T -> T
3489   f (MkT [t::a]) = MkT t3
3490                  where
3491                    t3::[a] = [t,t,t]
3492 </programlisting>
3493
3494
3495 </para>
3496 </listitem>
3497
3498
3499 <listitem>
3500
3501 <para>
3502 Pattern type signatures 
3503 can be used in pattern bindings:
3504
3505 <programlisting>
3506   f x = let (y, z::a) = x in ...
3507   f1 x                = let (y, z::Int) = x in ...
3508   f2 (x::(Int,a))     = let (y, z::a)   = x in ...
3509   f3 :: (b->b)        = \x -> x
3510 </programlisting>
3511
3512 In all such cases, the binding is not generalised over the pattern-bound
3513 type variables.  Thus <literal>f3</literal> is monomorphic; <literal>f3</literal>
3514 has type <literal>b -&gt; b</literal> for some type <literal>b</literal>, 
3515 and <emphasis>not</emphasis> <literal>forall b. b -&gt; b</literal>.
3516 In contrast, the binding
3517 <programlisting>
3518   f4 :: b->b
3519   f4 = \x -> x
3520 </programlisting>
3521 makes a polymorphic function, but <literal>b</literal> is not in scope anywhere
3522 in <literal>f4</literal>'s scope.
3523
3524 </para>
3525 </listitem>
3526 </itemizedlist>
3527 </para>
3528 <para>Pattern type signatures are completely orthogonal to ordinary, separate
3529 type signatures.  The two can be used independently or together.</para>
3530
3531 </sect3>
3532
3533 <sect3 id="result-type-sigs">
3534 <title>Result type signatures</title>
3535
3536 <para>
3537 The result type of a function can be given a signature, thus:
3538
3539
3540 <programlisting>
3541   f (x::a) :: [a] = [x,x,x]
3542 </programlisting>
3543
3544
3545 The final <literal>:: [a]</literal> after all the patterns gives a signature to the
3546 result type.  Sometimes this is the only way of naming the type variable
3547 you want:
3548
3549
3550 <programlisting>
3551   f :: Int -> [a] -> [a]
3552   f n :: ([a] -> [a]) = let g (x::a, y::a) = (y,x)
3553                         in \xs -> map g (reverse xs `zip` xs)
3554 </programlisting>
3555
3556 </para>
3557 <para>
3558 The type variables bound in a result type signature scope over the right hand side
3559 of the definition. However, consider this corner-case:
3560 <programlisting>
3561   rev1 :: [a] -> [a] = \xs -> reverse xs
3562
3563   foo ys = rev (ys::[a])
3564 </programlisting>
3565 The signature on <literal>rev1</literal> is considered a pattern type signature, not a result
3566 type signature, and the type variables it binds have the same scope as <literal>rev1</literal>
3567 itself (i.e. the right-hand side of <literal>rev1</literal> and the rest of the module too).
3568 In particular, the expression <literal>(ys::[a])</literal> is OK, because the type variable <literal>a</literal>
3569 is in scope (otherwise it would mean <literal>(ys::forall a.[a])</literal>, which would be rejected).  
3570 </para>
3571 <para>
3572 As mentioned above, <literal>rev1</literal> is made monomorphic by this scoping rule.
3573 For example, the following program would be rejected, because it claims that <literal>rev1</literal>
3574 is polymorphic:
3575 <programlisting>
3576   rev1 :: [b] -> [b]
3577   rev1 :: [a] -> [a] = \xs -> reverse xs
3578 </programlisting>
3579 </para>
3580
3581 <para>
3582 Result type signatures are not yet implemented in Hugs.
3583 </para>
3584
3585 </sect3>
3586
3587 </sect2>
3588
3589 <sect2 id="deriving-typeable">
3590 <title>Deriving clause for classes <literal>Typeable</literal> and <literal>Data</literal></title>
3591
3592 <para>
3593 Haskell 98 allows the programmer to add "<literal>deriving( Eq, Ord )</literal>" to a data type 
3594 declaration, to generate a standard instance declaration for classes specified in the <literal>deriving</literal> clause.  
3595 In Haskell 98, the only classes that may appear in the <literal>deriving</literal> clause are the standard
3596 classes <literal>Eq</literal>, <literal>Ord</literal>, 
3597 <literal>Enum</literal>, <literal>Ix</literal>, <literal>Bounded</literal>, <literal>Read</literal>, and <literal>Show</literal>.
3598 </para>
3599 <para>
3600 GHC extends this list with two more classes that may be automatically derived 
3601 (provided the <option>-fglasgow-exts</option> flag is specified):
3602 <literal>Typeable</literal>, and <literal>Data</literal>.  These classes are defined in the library
3603 modules <literal>Data.Typeable</literal> and <literal>Data.Generics</literal> respectively, and the
3604 appropriate class must be in scope before it can be mentioned in the <literal>deriving</literal> clause.
3605 </para>
3606 <para>An instance of <literal>Typeable</literal> can only be derived if the
3607 data type has seven or fewer type parameters, all of kind <literal>*</literal>.
3608 The reason for this is that the <literal>Typeable</literal> class is derived using the scheme
3609 described in
3610 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/hmap/gmap2.ps">
3611 Scrap More Boilerplate: Reflection, Zips, and Generalised Casts
3612 </ulink>.
3613 (Section 7.4 of the paper describes the multiple <literal>Typeable</literal> classes that
3614 are used, and only <literal>Typeable1</literal> up to
3615 <literal>Typeable7</literal> are provided in the library.)
3616 In other cases, there is nothing to stop the programmer writing a <literal>TypableX</literal>
3617 class, whose kind suits that of the data type constructor, and
3618 then writing the data type instance by hand.
3619 </para>
3620 </sect2>
3621
3622 <sect2 id="newtype-deriving">
3623 <title>Generalised derived instances for newtypes</title>
3624
3625 <para>
3626 When you define an abstract type using <literal>newtype</literal>, you may want
3627 the new type to inherit some instances from its representation. In
3628 Haskell 98, you can inherit instances of <literal>Eq</literal>, <literal>Ord</literal>,
3629 <literal>Enum</literal> and <literal>Bounded</literal> by deriving them, but for any
3630 other classes you have to write an explicit instance declaration. For
3631 example, if you define
3632
3633 <programlisting> 
3634   newtype Dollars = Dollars Int 
3635 </programlisting> 
3636
3637 and you want to use arithmetic on <literal>Dollars</literal>, you have to
3638 explicitly define an instance of <literal>Num</literal>:
3639
3640 <programlisting> 
3641   instance Num Dollars where
3642     Dollars a + Dollars b = Dollars (a+b)
3643     ...
3644 </programlisting>
3645 All the instance does is apply and remove the <literal>newtype</literal>
3646 constructor. It is particularly galling that, since the constructor
3647 doesn't appear at run-time, this instance declaration defines a
3648 dictionary which is <emphasis>wholly equivalent</emphasis> to the <literal>Int</literal>
3649 dictionary, only slower!
3650 </para>
3651
3652
3653 <sect3> <title> Generalising the deriving clause </title>
3654 <para>
3655 GHC now permits such instances to be derived instead, so one can write 
3656 <programlisting> 
3657   newtype Dollars = Dollars Int deriving (Eq,Show,Num)
3658 </programlisting> 
3659
3660 and the implementation uses the <emphasis>same</emphasis> <literal>Num</literal> dictionary
3661 for <literal>Dollars</literal> as for <literal>Int</literal>. Notionally, the compiler
3662 derives an instance declaration of the form
3663
3664 <programlisting> 
3665   instance Num Int => Num Dollars
3666 </programlisting> 
3667
3668 which just adds or removes the <literal>newtype</literal> constructor according to the type.
3669 </para>
3670 <para>
3671
3672 We can also derive instances of constructor classes in a similar
3673 way. For example, suppose we have implemented state and failure monad
3674 transformers, such that
3675
3676 <programlisting> 
3677   instance Monad m => Monad (State s m) 
3678   instance Monad m => Monad (Failure m)
3679 </programlisting> 
3680 In Haskell 98, we can define a parsing monad by 
3681 <programlisting> 
3682   type Parser tok m a = State [tok] (Failure m) a
3683 </programlisting> 
3684
3685 which is automatically a monad thanks to the instance declarations
3686 above. With the extension, we can make the parser type abstract,
3687 without needing to write an instance of class <literal>Monad</literal>, via
3688
3689 <programlisting> 
3690   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
3691                          deriving Monad
3692 </programlisting>
3693 In this case the derived instance declaration is of the form 
3694 <programlisting> 
3695   instance Monad (State [tok] (Failure m)) => Monad (Parser tok m) 
3696 </programlisting> 
3697
3698 Notice that, since <literal>Monad</literal> is a constructor class, the
3699 instance is a <emphasis>partial application</emphasis> of the new type, not the
3700 entire left hand side. We can imagine that the type declaration is
3701 ``eta-converted'' to generate the context of the instance
3702 declaration.
3703 </para>
3704 <para>
3705
3706 We can even derive instances of multi-parameter classes, provided the
3707 newtype is the last class parameter. In this case, a ``partial
3708 application'' of the class appears in the <literal>deriving</literal>
3709 clause. For example, given the class
3710
3711 <programlisting> 
3712   class StateMonad s m | m -> s where ... 
3713   instance Monad m => StateMonad s (State s m) where ... 
3714 </programlisting> 
3715 then we can derive an instance of <literal>StateMonad</literal> for <literal>Parser</literal>s by 
3716 <programlisting> 
3717   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
3718                          deriving (Monad, StateMonad [tok])
3719 </programlisting>
3720
3721 The derived instance is obtained by completing the application of the
3722 class to the new type:
3723
3724 <programlisting> 
3725   instance StateMonad [tok] (State [tok] (Failure m)) =>
3726            StateMonad [tok] (Parser tok m)
3727 </programlisting>
3728 </para>
3729 <para>
3730
3731 As a result of this extension, all derived instances in newtype
3732  declarations are treated uniformly (and implemented just by reusing
3733 the dictionary for the representation type), <emphasis>except</emphasis>
3734 <literal>Show</literal> and <literal>Read</literal>, which really behave differently for
3735 the newtype and its representation.
3736 </para>
3737 </sect3>
3738
3739 <sect3> <title> A more precise specification </title>
3740 <para>
3741 Derived instance declarations are constructed as follows. Consider the
3742 declaration (after expansion of any type synonyms)
3743
3744 <programlisting> 
3745   newtype T v1...vn = T' (S t1...tk vk+1...vn) deriving (c1...cm) 
3746 </programlisting> 
3747
3748 where 
3749  <itemizedlist>
3750 <listitem><para>
3751   <literal>S</literal> is a type constructor, 
3752 </para></listitem>
3753 <listitem><para>
3754   The <literal>t1...tk</literal> are types,
3755 </para></listitem>
3756 <listitem><para>
3757   The <literal>vk+1...vn</literal> are type variables which do not occur in any of
3758   the <literal>ti</literal>, and
3759 </para></listitem>
3760 <listitem><para>
3761   The <literal>ci</literal> are partial applications of
3762   classes of the form <literal>C t1'...tj'</literal>, where the arity of <literal>C</literal>
3763   is exactly <literal>j+1</literal>.  That is, <literal>C</literal> lacks exactly one type argument.
3764 </para></listitem>
3765 <listitem><para>
3766   None of the <literal>ci</literal> is <literal>Read</literal>, <literal>Show</literal>, 
3767                 <literal>Typeable</literal>, or <literal>Data</literal>.  These classes
3768                 should not "look through" the type or its constructor.  You can still
3769                 derive these classes for a newtype, but it happens in the usual way, not 
3770                 via this new mechanism.  
3771 </para></listitem>
3772 </itemizedlist>
3773 Then, for each <literal>ci</literal>, the derived instance
3774 declaration is:
3775 <programlisting> 
3776   instance ci (S t1...tk vk+1...v) => ci (T v1...vp)
3777 </programlisting>
3778 where <literal>p</literal> is chosen so that <literal>T v1...vp</literal> is of the 
3779 right <emphasis>kind</emphasis> for the last parameter of class <literal>Ci</literal>.
3780 </para>
3781 <para>
3782
3783 As an example which does <emphasis>not</emphasis> work, consider 
3784 <programlisting> 
3785   newtype NonMonad m s = NonMonad (State s m s) deriving Monad 
3786 </programlisting> 
3787 Here we cannot derive the instance 
3788 <programlisting> 
3789   instance Monad (State s m) => Monad (NonMonad m) 
3790 </programlisting> 
3791
3792 because the type variable <literal>s</literal> occurs in <literal>State s m</literal>,
3793 and so cannot be "eta-converted" away. It is a good thing that this
3794 <literal>deriving</literal> clause is rejected, because <literal>NonMonad m</literal> is
3795 not, in fact, a monad --- for the same reason. Try defining
3796 <literal>>>=</literal> with the correct type: you won't be able to.
3797 </para>
3798 <para>
3799
3800 Notice also that the <emphasis>order</emphasis> of class parameters becomes
3801 important, since we can only derive instances for the last one. If the
3802 <literal>StateMonad</literal> class above were instead defined as
3803
3804 <programlisting> 
3805   class StateMonad m s | m -> s where ... 
3806 </programlisting>
3807
3808 then we would not have been able to derive an instance for the
3809 <literal>Parser</literal> type above. We hypothesise that multi-parameter
3810 classes usually have one "main" parameter for which deriving new
3811 instances is most interesting.
3812 </para>
3813 <para>Lastly, all of this applies only for classes other than
3814 <literal>Read</literal>, <literal>Show</literal>, <literal>Typeable</literal>, 
3815 and <literal>Data</literal>, for which the built-in derivation applies (section
3816 4.3.3. of the Haskell Report).
3817 (For the standard classes <literal>Eq</literal>, <literal>Ord</literal>,
3818 <literal>Ix</literal>, and <literal>Bounded</literal> it is immaterial whether
3819 the standard method is used or the one described here.)
3820 </para>
3821 </sect3>
3822
3823 </sect2>
3824
3825 <sect2 id="typing-binds">
3826 <title>Generalised typing of mutually recursive bindings</title>
3827
3828 <para>
3829 The Haskell Report specifies that a group of bindings (at top level, or in a
3830 <literal>let</literal> or <literal>where</literal>) should be sorted into
3831 strongly-connected components, and then type-checked in dependency order
3832 (<ulink url="http://haskell.org/onlinereport/decls.html#sect4.5.1">Haskell
3833 Report, Section 4.5.1</ulink>).  
3834 As each group is type-checked, any binders of the group that
3835 have
3836 an explicit type signature are put in the type environment with the specified
3837 polymorphic type,
3838 and all others are monomorphic until the group is generalised 
3839 (<ulink url="http://haskell.org/onlinereport/decls.html#sect4.5.2">Haskell Report, Section 4.5.2</ulink>).
3840 </para>
3841
3842 <para>Following a suggestion of Mark Jones, in his paper
3843 <ulink url="http://www.cse.ogi.edu/~mpj/thih/">Typing Haskell in
3844 Haskell</ulink>,
3845 GHC implements a more general scheme.  If <option>-fglasgow-exts</option> is
3846 specified:
3847 <emphasis>the dependency analysis ignores references to variables that have an explicit
3848 type signature</emphasis>.
3849 As a result of this refined dependency analysis, the dependency groups are smaller, and more bindings will
3850 typecheck.  For example, consider:
3851 <programlisting>
3852   f :: Eq a =&gt; a -> Bool
3853   f x = (x == x) || g True || g "Yes"
3854   
3855   g y = (y &lt;= y) || f True
3856 </programlisting>
3857 This is rejected by Haskell 98, but under Jones's scheme the definition for
3858 <literal>g</literal> is typechecked first, separately from that for
3859 <literal>f</literal>,
3860 because the reference to <literal>f</literal> in <literal>g</literal>'s right
3861 hand side is ingored by the dependency analysis.  Then <literal>g</literal>'s
3862 type is generalised, to get
3863 <programlisting>
3864   g :: Ord a =&gt; a -> Bool
3865 </programlisting>
3866 Now, the defintion for <literal>f</literal> is typechecked, with this type for
3867 <literal>g</literal> in the type environment.
3868 </para>
3869
3870 <para>
3871 The same refined dependency analysis also allows the type signatures of 
3872 mutually-recursive functions to have different contexts, something that is illegal in
3873 Haskell 98 (Section 4.5.2, last sentence).  With
3874 <option>-fglasgow-exts</option>
3875 GHC only insists that the type signatures of a <emphasis>refined</emphasis> group have identical
3876 type signatures; in practice this means that only variables bound by the same
3877 pattern binding must have the same context.  For example, this is fine:
3878 <programlisting>
3879   f :: Eq a =&gt; a -> Bool
3880   f x = (x == x) || g True
3881   
3882   g :: Ord a =&gt; a -> Bool
3883   g y = (y &lt;= y) || f True
3884 </programlisting>
3885 </para>
3886 </sect2>
3887
3888 </sect1>
3889 <!-- ==================== End of type system extensions =================  -->
3890   
3891 <!-- ====================== Generalised algebraic data types =======================  -->
3892
3893 <sect1 id="gadt">
3894 <title>Generalised Algebraic Data Types</title>
3895
3896 <para>Generalised Algebraic Data Types (GADTs) generalise ordinary algebraic data types by allowing you
3897 to give the type signatures of constructors explicitly.  For example:
3898 <programlisting>
3899   data Term a where
3900       Lit    :: Int -> Term Int
3901       Succ   :: Term Int -> Term Int
3902       IsZero :: Term Int -> Term Bool   
3903       If     :: Term Bool -> Term a -> Term a -> Term a
3904       Pair   :: Term a -> Term b -> Term (a,b)
3905 </programlisting>
3906 Notice that the return type of the constructors is not always <literal>Term a</literal>, as is the
3907 case with ordinary vanilla data types.  Now we can write a well-typed <literal>eval</literal> function
3908 for these <literal>Terms</literal>:
3909 <programlisting>
3910   eval :: Term a -> a
3911   eval (Lit i)      = i
3912   eval (Succ t)     = 1 + eval t
3913   eval (IsZero t)   = eval t == 0
3914   eval (If b e1 e2) = if eval b then eval e1 else eval e2
3915   eval (Pair e1 e2) = (eval e1, eval e2)
3916 </programlisting>
3917 These and many other examples are given in papers by Hongwei Xi, and Tim Sheard.
3918 </para>
3919 <para> The extensions to GHC are these:
3920 <itemizedlist>
3921 <listitem><para>
3922   Data type declarations have a 'where' form, as exemplified above.  The type signature of
3923 each constructor is independent, and is implicitly universally quantified as usual. Unlike a normal
3924 Haskell data type declaration, the type variable(s) in the "<literal>data Term a where</literal>" header 
3925 have no scope.  Indeed, one can write a kind signature instead:
3926 <programlisting>
3927   data Term :: * -> * where ...
3928 </programlisting>
3929 or even a mixture of the two:
3930 <programlisting>
3931   data Foo a :: (* -> *) -> * where ...
3932 </programlisting>
3933 The type variables (if given) may be explicitly kinded, so we could also write the header for <literal>Foo</literal>
3934 like this:
3935 <programlisting>
3936   data Foo a (b :: * -> *) where ...
3937 </programlisting>
3938 </para></listitem>
3939
3940 <listitem><para>
3941 There are no restrictions on the type of the data constructor, except that the result
3942 type must begin with the type constructor being defined.  For example, in the <literal>Term</literal> data
3943 type above, the type of each constructor must end with <literal> ... -> Term ...</literal>.
3944 </para></listitem>
3945
3946 <listitem><para>
3947 You can use record syntax on a GADT-style data type declaration:
3948
3949 <programlisting>
3950   data Term a where
3951       Lit    { val  :: Int }      :: Term Int
3952       Succ   { num  :: Term Int } :: Term Int
3953       Pred   { num  :: Term Int } :: Term Int
3954       IsZero { arg  :: Term Int } :: Term Bool  
3955       Pair   { arg1 :: Term a
3956              , arg2 :: Term b
3957              }                    :: Term (a,b)
3958       If     { cnd  :: Term Bool
3959              , tru  :: Term a
3960              , fls  :: Term a
3961              }                    :: Term a
3962 </programlisting>
3963 For every constructor that has a field <literal>f</literal>, (a) the type of
3964 field <literal>f</literal> must be the same; and (b) the
3965 result type of the constructor must be the same; both modulo alpha conversion.
3966 Hence, in our example, we cannot merge the <literal>num</literal> and <literal>arg</literal>
3967 fields above into a 
3968 single name.  Although their field types are both <literal>Term Int</literal>,
3969 their selector functions actually have different types:
3970
3971 <programlisting>
3972   num :: Term Int -> Term Int
3973   arg :: Term Bool -> Term Int
3974 </programlisting>
3975
3976 At the moment, record updates are not yet possible with GADT, so support is 
3977 limited to record construction, selection and pattern matching:
3978
3979 <programlisting>
3980   someTerm :: Term Bool
3981   someTerm = IsZero { arg = Succ { num = Lit { val = 0 } } }
3982
3983   eval :: Term a -> a
3984   eval Lit    { val = i } = i
3985   eval Succ   { num = t } = eval t + 1
3986   eval Pred   { num = t } = eval t - 1
3987   eval IsZero { arg = t } = eval t == 0
3988   eval Pair   { arg1 = t1, arg2 = t2 } = (eval t1, eval t2)
3989   eval t@If{} = if eval (cnd t) then eval (tru t) else eval (fls t)
3990 </programlisting>
3991
3992 </para></listitem>
3993
3994 <listitem><para>
3995 You can use strictness annotations, in the obvious places
3996 in the constructor type:
3997 <programlisting>
3998   data Term a where
3999       Lit    :: !Int -> Term Int
4000       If     :: Term Bool -> !(Term a) -> !(Term a) -> Term a
4001       Pair   :: Term a -> Term b -> Term (a,b)
4002 </programlisting>
4003 </para></listitem>
4004
4005 <listitem><para>
4006 You can use a <literal>deriving</literal> clause on a GADT-style data type
4007 declaration, but only if the data type could also have been declared in
4008 Haskell-98 syntax.   For example, these two declarations are equivalent
4009 <programlisting>
4010   data Maybe1 a where {
4011       Nothing1 :: Maybe a ;
4012       Just1    :: a -> Maybe a
4013     } deriving( Eq, Ord )
4014
4015   data Maybe2 a = Nothing2 | Just2 a 
4016        deriving( Eq, Ord )
4017 </programlisting>
4018 This simply allows you to declare a vanilla Haskell-98 data type using the
4019 <literal>where</literal> form without losing the <literal>deriving</literal> clause.
4020 </para></listitem>
4021
4022 <listitem><para>
4023 Pattern matching causes type refinement.  For example, in the right hand side of the equation
4024 <programlisting>
4025   eval :: Term a -> a
4026   eval (Lit i) =  ...
4027 </programlisting>
4028 the type <literal>a</literal> is refined to <literal>Int</literal>.  (That's the whole point!)
4029 A precise specification of the type rules is beyond what this user manual aspires to, but there is a paper
4030 about the ideas: "Wobbly types: practical type inference for generalised algebraic data types", on Simon PJ's home page.</para>
4031
4032 <para> The general principle is this: <emphasis>type refinement is only carried out based on user-supplied type annotations</emphasis>.
4033 So if no type signature is supplied for <literal>eval</literal>, no type refinement happens, and lots of obscure error messages will
4034 occur.  However, the refinement is quite general.  For example, if we had:
4035 <programlisting>
4036   eval :: Term a -> a -> a
4037   eval (Lit i) j =  i+j
4038 </programlisting>
4039 the pattern match causes the type <literal>a</literal> to be refined to <literal>Int</literal> (because of the type
4040 of the constructor <literal>Lit</literal>, and that refinement also applies to the type of <literal>j</literal>, and
4041 the result type of the <literal>case</literal> expression.  Hence the addition <literal>i+j</literal> is legal.
4042 </para>
4043 </listitem>
4044 </itemizedlist>
4045 </para>
4046
4047 <para>Notice that GADTs generalise existential types.  For example, these two declarations are equivalent:
4048 <programlisting>
4049   data T a = forall b. MkT b (b->a)
4050   data T' a where { MKT :: b -> (b->a) -> T' a }
4051 </programlisting>
4052 </para>
4053 </sect1>
4054
4055 <!-- ====================== End of Generalised algebraic data types =======================  -->
4056
4057 <!-- ====================== TEMPLATE HASKELL =======================  -->
4058
4059 <sect1 id="template-haskell">
4060 <title>Template Haskell</title>
4061
4062 <para>Template Haskell allows you to do compile-time meta-programming in Haskell.  There is a "home page" for
4063 Template Haskell at <ulink url="http://www.haskell.org/th/">
4064 http://www.haskell.org/th/</ulink>, while
4065 the background to
4066 the main technical innovations is discussed in "<ulink
4067 url="http://research.microsoft.com/~simonpj/papers/meta-haskell">
4068 Template Meta-programming for Haskell</ulink>" (Proc Haskell Workshop 2002).
4069 The details of the Template Haskell design are still in flux.  Make sure you
4070 consult the <ulink url="http://www.haskell.org/ghc/docs/latest/html/libraries/index.html">online library reference material</ulink> 
4071 (search for the type ExpQ).
4072 [Temporary: many changes to the original design are described in 
4073       <ulink url="http://research.microsoft.com/~simonpj/tmp/notes2.ps">"http://research.microsoft.com/~simonpj/tmp/notes2.ps"</ulink>.
4074 Not all of these changes are in GHC 6.2.]
4075 </para>
4076
4077 <para> The first example from that paper is set out below as a worked example to help get you started. 
4078 </para>
4079
4080 <para>
4081 The documentation here describes the realisation in GHC.  (It's rather sketchy just now;
4082 Tim Sheard is going to expand it.)
4083 </para>
4084
4085     <sect2>
4086       <title>Syntax</title>
4087
4088       <para> Template Haskell has the following new syntactic
4089       constructions.  You need to use the flag
4090       <option>-fth</option><indexterm><primary><option>-fth</option></primary>
4091       </indexterm>to switch these syntactic extensions on
4092       (<option>-fth</option> is currently implied by
4093       <option>-fglasgow-exts</option>, but you are encouraged to
4094       specify it explicitly).</para>
4095
4096         <itemizedlist>
4097               <listitem><para>
4098                   A splice is written <literal>$x</literal>, where <literal>x</literal> is an
4099                   identifier, or <literal>$(...)</literal>, where the "..." is an arbitrary expression.
4100                   There must be no space between the "$" and the identifier or parenthesis.  This use
4101                   of "$" overrides its meaning as an infix operator, just as "M.x" overrides the meaning
4102                   of "." as an infix operator.  If you want the infix operator, put spaces around it.
4103                   </para>
4104               <para> A splice can occur in place of 
4105                   <itemizedlist>
4106                     <listitem><para> an expression; the spliced expression must
4107                     have type <literal>Q Exp</literal></para></listitem>
4108                     <listitem><para> a list of top-level declarations; ; the spliced expression must have type <literal>Q [Dec]</literal></para></listitem>
4109                     <listitem><para> [Planned, but not implemented yet.] a
4110                     type; the spliced expression must have type <literal>Q Typ</literal>.</para></listitem>
4111                     </itemizedlist>
4112            (Note that the syntax for a declaration splice uses "<literal>$</literal>" not "<literal>splice</literal>" as in
4113         the paper. Also the type of the enclosed expression must be  <literal>Q [Dec]</literal>, not  <literal>[Q Dec]</literal>
4114         as in the paper.)
4115                 </para></listitem>
4116
4117
4118               <listitem><para>
4119                   A expression quotation is written in Oxford brackets, thus:
4120                   <itemizedlist>
4121                     <listitem><para> <literal>[| ... |]</literal>, where the "..." is an expression; 
4122                              the quotation has type <literal>Expr</literal>.</para></listitem>
4123                     <listitem><para> <literal>[d| ... |]</literal>, where the "..." is a list of top-level declarations;
4124                              the quotation has type <literal>Q [Dec]</literal>.</para></listitem>
4125                     <listitem><para>  [Planned, but not implemented yet.]  <literal>[t| ... |]</literal>, where the "..." is a type; 
4126                              the quotation has type <literal>Type</literal>.</para></listitem>
4127                   </itemizedlist></para></listitem>
4128
4129               <listitem><para>
4130                   Reification is written thus:
4131                   <itemizedlist>
4132                     <listitem><para> <literal>reifyDecl T</literal>, where <literal>T</literal> is a type constructor; this expression
4133                       has type <literal>Dec</literal>. </para></listitem>
4134                     <listitem><para> <literal>reifyDecl C</literal>, where <literal>C</literal> is a class; has type <literal>Dec</literal>.</para></listitem>
4135                     <listitem><para> <literal>reifyType f</literal>, where <literal>f</literal> is an identifier; has type <literal>Typ</literal>.</para></listitem>
4136                     <listitem><para> Still to come: fixities </para></listitem>
4137                     
4138                   </itemizedlist></para>
4139                 </listitem>
4140
4141                   
4142         </itemizedlist>
4143 </sect2>
4144
4145 <sect2>  <title> Using Template Haskell </title>
4146 <para>
4147 <itemizedlist>
4148     <listitem><para>
4149     The data types and monadic constructor functions for Template Haskell are in the library
4150     <literal>Language.Haskell.THSyntax</literal>.
4151     </para></listitem>
4152
4153     <listitem><para>
4154     You can only run a function at compile time if it is imported from another module.  That is,
4155             you can't define a function in a module, and call it from within a splice in the same module.
4156             (It would make sense to do so, but it's hard to implement.)
4157    </para></listitem>
4158
4159     <listitem><para>
4160             The flag <literal>-ddump-splices</literal> shows the expansion of all top-level splices as they happen.
4161    </para></listitem>
4162     <listitem><para>
4163             If you are building GHC from source, you need at least a stage-2 bootstrap compiler to
4164               run Template Haskell.  A stage-1 compiler will reject the TH constructs.  Reason: TH
4165               compiles and runs a program, and then looks at the result.  So it's important that
4166               the program it compiles produces results whose representations are identical to
4167               those of the compiler itself.
4168    </para></listitem>
4169 </itemizedlist>
4170 </para>
4171 <para> Template Haskell works in any mode (<literal>--make</literal>, <literal>--interactive</literal>,
4172         or file-at-a-time).  There used to be a restriction to the former two, but that restriction 
4173         has been lifted.
4174 </para>
4175 </sect2>
4176  
4177 <sect2>  <title> A Template Haskell Worked Example </title>
4178 <para>To help you get over the confidence barrier, try out this skeletal worked example.
4179   First cut and paste the two modules below into "Main.hs" and "Printf.hs":</para>
4180
4181 <programlisting>
4182
4183 {- Main.hs -}
4184 module Main where
4185
4186 -- Import our template "pr"
4187 import Printf ( pr )
4188
4189 -- The splice operator $ takes the Haskell source code
4190 -- generated at compile time by "pr" and splices it into
4191 -- the argument of "putStrLn".
4192 main = putStrLn ( $(pr "Hello") )
4193
4194
4195 {- Printf.hs -}
4196 module Printf where
4197
4198 -- Skeletal printf from the paper.
4199 -- It needs to be in a separate module to the one where
4200 -- you intend to use it.
4201
4202 -- Import some Template Haskell syntax
4203 import Language.Haskell.TH
4204
4205 -- Describe a format string
4206 data Format = D | S | L String
4207
4208 -- Parse a format string.  This is left largely to you
4209 -- as we are here interested in building our first ever
4210 -- Template Haskell program and not in building printf.
4211 parse :: String -> [Format]
4212 parse s   = [ L s ]
4213
4214 -- Generate Haskell source code from a parsed representation
4215 -- of the format string.  This code will be spliced into
4216 -- the module which calls "pr", at compile time.
4217 gen :: [Format] -> ExpQ
4218 gen [D]   = [| \n -> show n |]
4219 gen [S]   = [| \s -> s |]
4220 gen [L s] = stringE s
4221
4222 -- Here we generate the Haskell code for the splice
4223 -- from an input format string.
4224 pr :: String -> ExpQ
4225 pr s      = gen (parse s)
4226 </programlisting>
4227
4228 <para>Now run the compiler (here we are a Cygwin prompt on Windows):
4229 </para>
4230 <programlisting>
4231 $ ghc --make -fth main.hs -o main.exe
4232 </programlisting>
4233
4234 <para>Run "main.exe" and here is your output:</para>
4235
4236 <programlisting>
4237 $ ./main
4238 Hello
4239 </programlisting>
4240
4241 </sect2>
4242  
4243 </sect1>
4244
4245 <!-- ===================== Arrow notation ===================  -->
4246
4247 <sect1 id="arrow-notation">
4248 <title>Arrow notation
4249 </title>
4250
4251 <para>Arrows are a generalization of monads introduced by John Hughes.
4252 For more details, see
4253 <itemizedlist>
4254
4255 <listitem>
4256 <para>
4257 &ldquo;Generalising Monads to Arrows&rdquo;,
4258 John Hughes, in <citetitle>Science of Computer Programming</citetitle> 37,
4259 pp67&ndash;111, May 2000.
4260 </para>
4261 </listitem>
4262
4263 <listitem>
4264 <para>
4265 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/notation.html">A New Notation for Arrows</ulink>&rdquo;,
4266 Ross Paterson, in <citetitle>ICFP</citetitle>, Sep 2001.
4267 </para>
4268 </listitem>
4269
4270 <listitem>
4271 <para>
4272 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/fop.html">Arrows and Computation</ulink>&rdquo;,
4273 Ross Paterson, in <citetitle>The Fun of Programming</citetitle>,
4274 Palgrave, 2003.
4275 </para>
4276 </listitem>
4277
4278 </itemizedlist>
4279 and the arrows web page at
4280 <ulink url="http://www.haskell.org/arrows/"><literal>http://www.haskell.org/arrows/</literal></ulink>.
4281 With the <option>-farrows</option> flag, GHC supports the arrow
4282 notation described in the second of these papers.
4283 What follows is a brief introduction to the notation;
4284 it won't make much sense unless you've read Hughes's paper.
4285 This notation is translated to ordinary Haskell,
4286 using combinators from the
4287 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4288 module.
4289 </para>
4290
4291 <para>The extension adds a new kind of expression for defining arrows:
4292 <screen>
4293 <replaceable>exp</replaceable><superscript>10</superscript> ::= ...
4294        |  proc <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
4295 </screen>
4296 where <literal>proc</literal> is a new keyword.
4297 The variables of the pattern are bound in the body of the 
4298 <literal>proc</literal>-expression,
4299 which is a new sort of thing called a <firstterm>command</firstterm>.
4300 The syntax of commands is as follows:
4301 <screen>
4302 <replaceable>cmd</replaceable>   ::= <replaceable>exp</replaceable><superscript>10</superscript> -&lt;  <replaceable>exp</replaceable>
4303        |  <replaceable>exp</replaceable><superscript>10</superscript> -&lt;&lt; <replaceable>exp</replaceable>
4304        |  <replaceable>cmd</replaceable><superscript>0</superscript>
4305 </screen>
4306 with <replaceable>cmd</replaceable><superscript>0</superscript> up to
4307 <replaceable>cmd</replaceable><superscript>9</superscript> defined using
4308 infix operators as for expressions, and
4309 <screen>
4310 <replaceable>cmd</replaceable><superscript>10</superscript> ::= \ <replaceable>apat</replaceable> ... <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
4311        |  let <replaceable>decls</replaceable> in <replaceable>cmd</replaceable>
4312        |  if <replaceable>exp</replaceable> then <replaceable>cmd</replaceable> else <replaceable>cmd</replaceable>
4313        |  case <replaceable>exp</replaceable> of { <replaceable>calts</replaceable> }
4314        |  do { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> ; <replaceable>cmd</replaceable> }
4315        |  <replaceable>fcmd</replaceable>
4316
4317 <replaceable>fcmd</replaceable>  ::= <replaceable>fcmd</replaceable> <replaceable>aexp</replaceable>
4318        |  ( <replaceable>cmd</replaceable> )
4319        |  (| <replaceable>aexp</replaceable> <replaceable>cmd</replaceable> ... <replaceable>cmd</replaceable> |)
4320
4321 <replaceable>cstmt</replaceable> ::= let <replaceable>decls</replaceable>
4322        |  <replaceable>pat</replaceable> &lt;- <replaceable>cmd</replaceable>
4323        |  rec { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> [;] }
4324        |  <replaceable>cmd</replaceable>
4325 </screen>
4326 where <replaceable>calts</replaceable> are like <replaceable>alts</replaceable>
4327 except that the bodies are commands instead of expressions.
4328 </para>
4329
4330 <para>
4331 Commands produce values, but (like monadic computations)
4332 may yield more than one value,
4333 or none, and may do other things as well.
4334 For the most part, familiarity with monadic notation is a good guide to
4335 using commands.
4336 However the values of expressions, even monadic ones,
4337 are determined by the values of the variables they contain;
4338 this is not necessarily the case for commands.
4339 </para>
4340
4341 <para>
4342 A simple example of the new notation is the expression
4343 <screen>
4344 proc x -> f -&lt; x+1
4345 </screen>
4346 We call this a <firstterm>procedure</firstterm> or
4347 <firstterm>arrow abstraction</firstterm>.
4348 As with a lambda expression, the variable <literal>x</literal>
4349 is a new variable bound within the <literal>proc</literal>-expression.
4350 It refers to the input to the arrow.
4351 In the above example, <literal>-&lt;</literal> is not an identifier but an
4352 new reserved symbol used for building commands from an expression of arrow
4353 type and an expression to be fed as input to that arrow.
4354 (The weird look will make more sense later.)
4355 It may be read as analogue of application for arrows.
4356 The above example is equivalent to the Haskell expression
4357 <screen>
4358 arr (\ x -> x+1) >>> f
4359 </screen>
4360 That would make no sense if the expression to the left of
4361 <literal>-&lt;</literal> involves the bound variable <literal>x</literal>.
4362 More generally, the expression to the left of <literal>-&lt;</literal>
4363 may not involve any <firstterm>local variable</firstterm>,
4364 i.e. a variable bound in the current arrow abstraction.
4365 For such a situation there is a variant <literal>-&lt;&lt;</literal>, as in
4366 <screen>
4367 proc x -> f x -&lt;&lt; x+1
4368 </screen>
4369 which is equivalent to
4370 <screen>
4371 arr (\ x -> (f x, x+1)) >>> app
4372 </screen>
4373 so in this case the arrow must belong to the <literal>ArrowApply</literal>
4374 class.
4375 Such an arrow is equivalent to a monad, so if you're using this form
4376 you may find a monadic formulation more convenient.
4377 </para>
4378
4379 <sect2>
4380 <title>do-notation for commands</title>
4381
4382 <para>
4383 Another form of command is a form of <literal>do</literal>-notation.
4384 For example, you can write
4385 <screen>
4386 proc x -> do
4387         y &lt;- f -&lt; x+1
4388         g -&lt; 2*y
4389         let z = x+y
4390         t &lt;- h -&lt; x*z
4391         returnA -&lt; t+z
4392 </screen>
4393 You can read this much like ordinary <literal>do</literal>-notation,
4394 but with commands in place of monadic expressions.
4395 The first line sends the value of <literal>x+1</literal> as an input to
4396 the arrow <literal>f</literal>, and matches its output against
4397 <literal>y</literal>.
4398 In the next line, the output is discarded.
4399 The arrow <function>returnA</function> is defined in the
4400 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4401 module as <literal>arr id</literal>.
4402 The above example is treated as an abbreviation for
4403 <screen>
4404 arr (\ x -> (x, x)) >>>
4405         first (arr (\ x -> x+1) >>> f) >>>
4406         arr (\ (y, x) -> (y, (x, y))) >>>
4407         first (arr (\ y -> 2*y) >>> g) >>>
4408         arr snd >>>
4409         arr (\ (x, y) -> let z = x+y in ((x, z), z)) >>>
4410         first (arr (\ (x, z) -> x*z) >>> h) >>>
4411         arr (\ (t, z) -> t+z) >>>
4412         returnA
4413 </screen>
4414 Note that variables not used later in the composition are projected out.
4415 After simplification using rewrite rules (see <xref linkend="rewrite-rules"/>)
4416 defined in the
4417 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4418 module, this reduces to
4419 <screen>
4420 arr (\ x -> (x+1, x)) >>>
4421         first f >>>
4422         arr (\ (y, x) -> (2*y, (x, y))) >>>
4423         first g >>>
4424         arr (\ (_, (x, y)) -> let z = x+y in (x*z, z)) >>>
4425         first h >>>
4426         arr (\ (t, z) -> t+z)
4427 </screen>
4428 which is what you might have written by hand.
4429 With arrow notation, GHC keeps track of all those tuples of variables for you.
4430 </para>
4431
4432 <para>
4433 Note that although the above translation suggests that
4434 <literal>let</literal>-bound variables like <literal>z</literal> must be
4435 monomorphic, the actual translation produces Core,
4436 so polymorphic variables are allowed.
4437 </para>
4438
4439 <para>
4440 It's also possible to have mutually recursive bindings,
4441 using the new <literal>rec</literal> keyword, as in the following example:
4442 <programlisting>
4443 counter :: ArrowCircuit a => a Bool Int
4444 counter = proc reset -> do
4445         rec     output &lt;- returnA -&lt; if reset then 0 else next
4446                 next &lt;- delay 0 -&lt; output+1
4447         returnA -&lt; output
4448 </programlisting>
4449 The translation of such forms uses the <function>loop</function> combinator,
4450 so the arrow concerned must belong to the <literal>ArrowLoop</literal> class.
4451 </para>
4452
4453 </sect2>
4454
4455 <sect2>
4456 <title>Conditional commands</title>
4457
4458 <para>
4459 In the previous example, we used a conditional expression to construct the
4460 input for an arrow.
4461 Sometimes we want to conditionally execute different commands, as in
4462 <screen>
4463 proc (x,y) ->
4464         if f x y
4465         then g -&lt; x+1
4466         else h -&lt; y+2
4467 </screen>
4468 which is translated to
4469 <screen>
4470 arr (\ (x,y) -> if f x y then Left x else Right y) >>>
4471         (arr (\x -> x+1) >>> f) ||| (arr (\y -> y+2) >>> g)
4472 </screen>
4473 Since the translation uses <function>|||</function>,
4474 the arrow concerned must belong to the <literal>ArrowChoice</literal> class.
4475 </para>
4476
4477 <para>
4478 There are also <literal>case</literal> commands, like
4479 <screen>
4480 case input of
4481     [] -> f -&lt; ()
4482     [x] -> g -&lt; x+1
4483     x1:x2:xs -> do
4484         y &lt;- h -&lt; (x1, x2)
4485         ys &lt;- k -&lt; xs
4486         returnA -&lt; y:ys
4487 </screen>
4488 The syntax is the same as for <literal>case</literal> expressions,
4489 except that the bodies of the alternatives are commands rather than expressions.
4490 The translation is similar to that of <literal>if</literal> commands.
4491 </para>
4492
4493 </sect2>
4494
4495 <sect2>
4496 <title>Defining your own control structures</title>
4497
4498 <para>
4499 As we're seen, arrow notation provides constructs,
4500 modelled on those for expressions,
4501 for sequencing, value recursion and conditionals.
4502 But suitable combinators,
4503 which you can define in ordinary Haskell,
4504 may also be used to build new commands out of existing ones.
4505 The basic idea is that a command defines an arrow from environments to values.
4506 These environments assign values to the free local variables of the command.
4507 Thus combinators that produce arrows from arrows
4508 may also be used to build commands from commands.
4509 For example, the <literal>ArrowChoice</literal> class includes a combinator
4510 <programlisting>
4511 ArrowChoice a => (&lt;+>) :: a e c -> a e c -> a e c
4512 </programlisting>
4513 so we can use it to build commands:
4514 <programlisting>
4515 expr' = proc x -> do
4516                 returnA -&lt; x
4517         &lt;+> do
4518                 symbol Plus -&lt; ()
4519                 y &lt;- term -&lt; ()
4520                 expr' -&lt; x + y
4521         &lt;+> do
4522                 symbol Minus -&lt; ()
4523                 y &lt;- term -&lt; ()
4524                 expr' -&lt; x - y
4525 </programlisting>
4526 (The <literal>do</literal> on the first line is needed to prevent the first
4527 <literal>&lt;+> ...</literal> from being interpreted as part of the
4528 expression on the previous line.)
4529 This is equivalent to
4530 <programlisting>
4531 expr' = (proc x -> returnA -&lt; x)
4532         &lt;+> (proc x -> do
4533                 symbol Plus -&lt; ()
4534                 y &lt;- term -&lt; ()
4535                 expr' -&lt; x + y)
4536         &lt;+> (proc x -> do
4537                 symbol Minus -&lt; ()
4538                 y &lt;- term -&lt; ()
4539                 expr' -&lt; x - y)
4540 </programlisting>
4541 It is essential that this operator be polymorphic in <literal>e</literal>
4542 (representing the environment input to the command
4543 and thence to its subcommands)
4544 and satisfy the corresponding naturality property
4545 <screen>
4546 arr k >>> (f &lt;+> g) = (arr k >>> f) &lt;+> (arr k >>> g)
4547 </screen>
4548 at least for strict <literal>k</literal>.
4549 (This should be automatic if you're not using <function>seq</function>.)
4550 This ensures that environments seen by the subcommands are environments
4551 of the whole command,
4552 and also allows the translation to safely trim these environments.
4553 The operator must also not use any variable defined within the current
4554 arrow abstraction.
4555 </para>
4556
4557 <para>
4558 We could define our own operator
4559 <programlisting>
4560 untilA :: ArrowChoice a => a e () -> a e Bool -> a e ()
4561 untilA body cond = proc x ->
4562         if cond x then returnA -&lt; ()
4563         else do
4564                 body -&lt; x
4565                 untilA body cond -&lt; x
4566 </programlisting>
4567 and use it in the same way.
4568 Of course this infix syntax only makes sense for binary operators;
4569 there is also a more general syntax involving special brackets:
4570 <screen>
4571 proc x -> do
4572         y &lt;- f -&lt; x+1
4573         (|untilA (increment -&lt; x+y) (within 0.5 -&lt; x)|)
4574 </screen>
4575 </para>
4576
4577 </sect2>
4578
4579 <sect2>
4580 <title>Primitive constructs</title>
4581
4582 <para>
4583 Some operators will need to pass additional inputs to their subcommands.
4584 For example, in an arrow type supporting exceptions,
4585 the operator that attaches an exception handler will wish to pass the
4586 exception that occurred to the handler.
4587 Such an operator might have a type
4588 <screen>
4589 handleA :: ... => a e c -> a (e,Ex) c -> a e c
4590 </screen>
4591 where <literal>Ex</literal> is the type of exceptions handled.
4592 You could then use this with arrow notation by writing a command
4593 <screen>
4594 body `handleA` \ ex -> handler
4595 </screen>
4596 so that if an exception is raised in the command <literal>body</literal>,
4597 the variable <literal>ex</literal> is bound to the value of the exception
4598 and the command <literal>handler</literal>,
4599 which typically refers to <literal>ex</literal>, is entered.
4600 Though the syntax here looks like a functional lambda,
4601 we are talking about commands, and something different is going on.
4602 The input to the arrow represented by a command consists of values for
4603 the free local variables in the command, plus a stack of anonymous values.
4604 In all the prior examples, this stack was empty.
4605 In the second argument to <function>handleA</function>,
4606 this stack consists of one value, the value of the exception.
4607 The command form of lambda merely gives this value a name.
4608 </para>
4609
4610 <para>
4611 More concretely,
4612 the values on the stack are paired to the right of the environment.
4613 So operators like <function>handleA</function> that pass
4614 extra inputs to their subcommands can be designed for use with the notation
4615 by pairing the values with the environment in this way.
4616 More precisely, the type of each argument of the operator (and its result)
4617 should have the form
4618 <screen>
4619 a (...(e,t1), ... tn) t
4620 </screen>
4621 where <replaceable>e</replaceable> is a polymorphic variable
4622 (representing the environment)
4623 and <replaceable>ti</replaceable> are the types of the values on the stack,
4624 with <replaceable>t1</replaceable> being the <quote>top</quote>.
4625 The polymorphic variable <replaceable>e</replaceable> must not occur in
4626 <replaceable>a</replaceable>, <replaceable>ti</replaceable> or
4627 <replaceable>t</replaceable>.
4628 However the arrows involved need not be the same.
4629 Here are some more examples of suitable operators:
4630 <screen>
4631 bracketA :: ... => a e b -> a (e,b) c -> a (e,c) d -> a e d
4632 runReader :: ... => a e c -> a' (e,State) c
4633 runState :: ... => a e c -> a' (e,State) (c,State)
4634 </screen>
4635 We can supply the extra input required by commands built with the last two
4636 by applying them to ordinary expressions, as in
4637 <screen>
4638 proc x -> do
4639         s &lt;- ...
4640         (|runReader (do { ... })|) s
4641 </screen>
4642 which adds <literal>s</literal> to the stack of inputs to the command
4643 built using <function>runReader</function>.
4644 </para>
4645
4646 <para>
4647 The command versions of lambda abstraction and application are analogous to
4648 the expression versions.
4649 In particular, the beta and eta rules describe equivalences of commands.
4650 These three features (operators, lambda abstraction and application)
4651 are the core of the notation; everything else can be built using them,
4652 though the results would be somewhat clumsy.
4653 For example, we could simulate <literal>do</literal>-notation by defining
4654 <programlisting>
4655 bind :: Arrow a => a e b -> a (e,b) c -> a e c
4656 u `bind` f = returnA &amp;&amp;&amp; u >>> f
4657
4658 bind_ :: Arrow a => a e b -> a e c -> a e c
4659 u `bind_` f = u `bind` (arr fst >>> f)
4660 </programlisting>
4661 We could simulate <literal>if</literal> by defining
4662 <programlisting>
4663 cond :: ArrowChoice a => a e b -> a e b -> a (e,Bool) b
4664 cond f g = arr (\ (e,b) -> if b then Left e else Right e) >>> f ||| g
4665 </programlisting>
4666 </para>
4667
4668 </sect2>
4669
4670 <sect2>
4671 <title>Differences with the paper</title>
4672
4673 <itemizedlist>
4674
4675 <listitem>
4676 <para>Instead of a single form of arrow application (arrow tail) with two
4677 translations, the implementation provides two forms
4678 <quote><literal>-&lt;</literal></quote> (first-order)
4679 and <quote><literal>-&lt;&lt;</literal></quote> (higher-order).
4680 </para>
4681 </listitem>
4682
4683 <listitem>
4684 <para>User-defined operators are flagged with banana brackets instead of
4685 a new <literal>form</literal> keyword.
4686 </para>
4687 </listitem>
4688
4689 </itemizedlist>
4690
4691 </sect2>
4692
4693 <sect2>
4694 <title>Portability</title>
4695
4696 <para>
4697 Although only GHC implements arrow notation directly,
4698 there is also a preprocessor
4699 (available from the 
4700 <ulink url="http://www.haskell.org/arrows/">arrows web page</ulink>)
4701 that translates arrow notation into Haskell 98
4702 for use with other Haskell systems.
4703 You would still want to check arrow programs with GHC;
4704 tracing type errors in the preprocessor output is not easy.
4705 Modules intended for both GHC and the preprocessor must observe some
4706 additional restrictions:
4707 <itemizedlist>
4708
4709 <listitem>
4710 <para>
4711 The module must import
4712 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>.
4713 </para>
4714 </listitem>
4715
4716 <listitem>
4717 <para>
4718 The preprocessor cannot cope with other Haskell extensions.
4719 These would have to go in separate modules.
4720 </para>
4721 </listitem>
4722
4723 <listitem>
4724 <para>
4725 Because the preprocessor targets Haskell (rather than Core),
4726 <literal>let</literal>-bound variables are monomorphic.
4727 </para>
4728 </listitem>
4729
4730 </itemizedlist>
4731 </para>
4732
4733 </sect2>
4734
4735 </sect1>
4736
4737 <!-- ==================== ASSERTIONS =================  -->
4738
4739 <sect1 id="sec-assertions">
4740 <title>Assertions
4741 <indexterm><primary>Assertions</primary></indexterm>
4742 </title>
4743
4744 <para>
4745 If you want to make use of assertions in your standard Haskell code, you
4746 could define a function like the following:
4747 </para>
4748
4749 <para>
4750
4751 <programlisting>
4752 assert :: Bool -> a -> a
4753 assert False x = error "assertion failed!"
4754 assert _     x = x
4755 </programlisting>
4756
4757 </para>
4758
4759 <para>
4760 which works, but gives you back a less than useful error message --
4761 an assertion failed, but which and where?
4762 </para>
4763
4764 <para>
4765 One way out is to define an extended <function>assert</function> function which also
4766 takes a descriptive string to include in the error message and
4767 perhaps combine this with the use of a pre-processor which inserts
4768 the source location where <function>assert</function> was used.
4769 </para>
4770
4771 <para>
4772 Ghc offers a helping hand here, doing all of this for you. For every
4773 use of <function>assert</function> in the user's source:
4774 </para>
4775
4776 <para>
4777
4778 <programlisting>
4779 kelvinToC :: Double -> Double
4780 kelvinToC k = assert (k &gt;= 0.0) (k+273.15)
4781 </programlisting>
4782
4783 </para>
4784
4785 <para>
4786 Ghc will rewrite this to also include the source location where the
4787 assertion was made,
4788 </para>
4789
4790 <para>
4791
4792 <programlisting>
4793 assert pred val ==> assertError "Main.hs|15" pred val
4794 </programlisting>
4795
4796 </para>
4797
4798 <para>
4799 The rewrite is only performed by the compiler when it spots
4800 applications of <function>Control.Exception.assert</function>, so you
4801 can still define and use your own versions of
4802 <function>assert</function>, should you so wish. If not, import
4803 <literal>Control.Exception</literal> to make use
4804 <function>assert</function> in your code.
4805 </para>
4806
4807 <para>
4808 GHC ignores assertions when optimisation is turned on with the
4809       <option>-O</option><indexterm><primary><option>-O</option></primary></indexterm> flag.  That is, expressions of the form
4810 <literal>assert pred e</literal> will be rewritten to
4811 <literal>e</literal>.  You can also disable assertions using the
4812       <option>-fignore-asserts</option>
4813       option<indexterm><primary><option>-fignore-asserts</option></primary>
4814       </indexterm>.</para>
4815
4816 <para>
4817 Assertion failures can be caught, see the documentation for the
4818 <literal>Control.Exception</literal> library for the details.
4819 </para>
4820
4821 </sect1>
4822
4823
4824 <!-- =============================== PRAGMAS ===========================  -->
4825
4826   <sect1 id="pragmas">
4827     <title>Pragmas</title>
4828
4829     <indexterm><primary>pragma</primary></indexterm>
4830
4831     <para>GHC supports several pragmas, or instructions to the
4832     compiler placed in the source code.  Pragmas don't normally affect
4833     the meaning of the program, but they might affect the efficiency
4834     of the generated code.</para>
4835
4836     <para>Pragmas all take the form
4837
4838 <literal>{-# <replaceable>word</replaceable> ... #-}</literal>  
4839
4840     where <replaceable>word</replaceable> indicates the type of
4841     pragma, and is followed optionally by information specific to that
4842     type of pragma.  Case is ignored in
4843     <replaceable>word</replaceable>.  The various values for
4844     <replaceable>word</replaceable> that GHC understands are described
4845     in the following sections; any pragma encountered with an
4846     unrecognised <replaceable>word</replaceable> is (silently)
4847     ignored.</para>
4848
4849     <sect2 id="deprecated-pragma">
4850       <title>DEPRECATED pragma</title>
4851       <indexterm><primary>DEPRECATED</primary>
4852       </indexterm>
4853
4854       <para>The DEPRECATED pragma lets you specify that a particular
4855       function, class, or type, is deprecated.  There are two
4856       forms.
4857
4858       <itemizedlist>
4859         <listitem>
4860           <para>You can deprecate an entire module thus:</para>
4861 <programlisting>
4862    module Wibble {-# DEPRECATED "Use Wobble instead" #-} where
4863      ...
4864 </programlisting>
4865           <para>When you compile any module that import
4866           <literal>Wibble</literal>, GHC will print the specified
4867           message.</para>
4868         </listitem>
4869
4870         <listitem>
4871           <para>You can deprecate a function, class, type, or data constructor, with the
4872           following top-level declaration:</para>
4873 <programlisting>
4874    {-# DEPRECATED f, C, T "Don't use these" #-}
4875 </programlisting>
4876           <para>When you compile any module that imports and uses any
4877           of the specified entities, GHC will print the specified
4878           message.</para>
4879           <para> You can only depecate entities declared at top level in the module
4880           being compiled, and you can only use unqualified names in the list of
4881           entities being deprecated.  A capitalised name, such as <literal>T</literal>
4882           refers to <emphasis>either</emphasis> the type constructor <literal>T</literal>
4883           <emphasis>or</emphasis> the data constructor <literal>T</literal>, or both if
4884           both are in scope.  If both are in scope, there is currently no way to deprecate 
4885           one without the other (c.f. fixities <xref linkend="infix-tycons"/>).</para>
4886         </listitem>
4887       </itemizedlist>
4888       Any use of the deprecated item, or of anything from a deprecated
4889       module, will be flagged with an appropriate message.  However,
4890       deprecations are not reported for
4891       (a) uses of a deprecated function within its defining module, and
4892       (b) uses of a deprecated function in an export list.
4893       The latter reduces spurious complaints within a library
4894       in which one module gathers together and re-exports 
4895       the exports of several others.
4896       </para>
4897       <para>You can suppress the warnings with the flag
4898       <option>-fno-warn-deprecations</option>.</para>
4899     </sect2>
4900
4901     <sect2 id="include-pragma">
4902       <title>INCLUDE pragma</title>
4903
4904       <para>The <literal>INCLUDE</literal> pragma is for specifying the names
4905         of C header files that should be <literal>#include</literal>'d into
4906         the C source code generated by the compiler for the current module (if
4907         compiling via C).  For example:</para>
4908
4909 <programlisting>
4910 {-# INCLUDE "foo.h" #-}
4911 {-# INCLUDE &lt;stdio.h&gt; #-}</programlisting>
4912
4913       <para>The <literal>INCLUDE</literal> pragma(s) must appear at the top of
4914         your source file with any <literal>OPTIONS_GHC</literal>
4915         pragma(s).</para>
4916
4917       <para>An <literal>INCLUDE</literal> pragma is  the preferred alternative
4918         to the <option>-#include</option> option (<xref
4919           linkend="options-C-compiler" />), because the
4920         <literal>INCLUDE</literal> pragma is understood by other
4921         compilers.  Yet another alternative is to add the include file to each
4922         <literal>foreign import</literal> declaration in your code, but we
4923         don't recommend using this approach with GHC.</para>
4924     </sect2>
4925
4926     <sect2 id="inline-noinline-pragma">
4927       <title>INLINE and NOINLINE pragmas</title>
4928
4929       <para>These pragmas control the inlining of function
4930       definitions.</para>
4931
4932       <sect3 id="inline-pragma">
4933         <title>INLINE pragma</title>
4934         <indexterm><primary>INLINE</primary></indexterm>
4935
4936         <para>GHC (with <option>-O</option>, as always) tries to
4937         inline (or &ldquo;unfold&rdquo;) functions/values that are
4938         &ldquo;small enough,&rdquo; thus avoiding the call overhead
4939         and possibly exposing other more-wonderful optimisations.
4940         Normally, if GHC decides a function is &ldquo;too
4941         expensive&rdquo; to inline, it will not do so, nor will it
4942         export that unfolding for other modules to use.</para>
4943
4944         <para>The sledgehammer you can bring to bear is the
4945         <literal>INLINE</literal><indexterm><primary>INLINE
4946         pragma</primary></indexterm> pragma, used thusly:</para>
4947
4948 <programlisting>
4949 key_function :: Int -> String -> (Bool, Double)
4950
4951 #ifdef __GLASGOW_HASKELL__
4952 {-# INLINE key_function #-}
4953 #endif
4954 </programlisting>
4955
4956         <para>(You don't need to do the C pre-processor carry-on
4957         unless you're going to stick the code through HBC&mdash;it
4958         doesn't like <literal>INLINE</literal> pragmas.)</para>
4959
4960         <para>The major effect of an <literal>INLINE</literal> pragma
4961         is to declare a function's &ldquo;cost&rdquo; to be very low.
4962         The normal unfolding machinery will then be very keen to
4963         inline it.</para>
4964
4965         <para>Syntactically, an <literal>INLINE</literal> pragma for a
4966         function can be put anywhere its type signature could be
4967         put.</para>
4968
4969         <para><literal>INLINE</literal> pragmas are a particularly
4970         good idea for the
4971         <literal>then</literal>/<literal>return</literal> (or
4972         <literal>bind</literal>/<literal>unit</literal>) functions in
4973         a monad.  For example, in GHC's own
4974         <literal>UniqueSupply</literal> monad code, we have:</para>
4975
4976 <programlisting>
4977 #ifdef __GLASGOW_HASKELL__
4978 {-# INLINE thenUs #-}
4979 {-# INLINE returnUs #-}
4980 #endif
4981 </programlisting>
4982
4983         <para>See also the <literal>NOINLINE</literal> pragma (<xref
4984         linkend="noinline-pragma"/>).</para>
4985       </sect3>
4986
4987       <sect3 id="noinline-pragma">
4988         <title>NOINLINE pragma</title>
4989         
4990         <indexterm><primary>NOINLINE</primary></indexterm>
4991         <indexterm><primary>NOTINLINE</primary></indexterm>
4992
4993         <para>The <literal>NOINLINE</literal> pragma does exactly what
4994         you'd expect: it stops the named function from being inlined
4995         by the compiler.  You shouldn't ever need to do this, unless
4996         you're very cautious about code size.</para>
4997
4998         <para><literal>NOTINLINE</literal> is a synonym for
4999         <literal>NOINLINE</literal> (<literal>NOINLINE</literal> is
5000         specified by Haskell 98 as the standard way to disable
5001         inlining, so it should be used if you want your code to be
5002         portable).</para>
5003       </sect3>
5004
5005       <sect3 id="phase-control">
5006         <title>Phase control</title>
5007
5008         <para> Sometimes you want to control exactly when in GHC's
5009         pipeline the INLINE pragma is switched on.  Inlining happens
5010         only during runs of the <emphasis>simplifier</emphasis>.  Each
5011         run of the simplifier has a different <emphasis>phase
5012         number</emphasis>; the phase number decreases towards zero.
5013         If you use <option>-dverbose-core2core</option> you'll see the
5014         sequence of phase numbers for successive runs of the
5015         simplifier.  In an INLINE pragma you can optionally specify a
5016         phase number, thus:</para>
5017
5018         <itemizedlist>
5019           <listitem>
5020             <para>You can say "inline <literal>f</literal> in Phase 2
5021             and all subsequent phases":
5022 <programlisting>
5023   {-# INLINE [2] f #-}
5024 </programlisting>
5025             </para>
5026           </listitem>
5027
5028           <listitem>
5029             <para>You can say "inline <literal>g</literal> in all
5030             phases up to, but not including, Phase 3":
5031 <programlisting>
5032   {-# INLINE [~3] g #-}
5033 </programlisting>
5034             </para>
5035           </listitem>
5036
5037           <listitem>
5038             <para>If you omit the phase indicator, you mean "inline in
5039             all phases".</para>
5040           </listitem>
5041         </itemizedlist>
5042
5043         <para>You can use a phase number on a NOINLINE pragma too:</para>
5044
5045         <itemizedlist>
5046           <listitem>
5047             <para>You can say "do not inline <literal>f</literal>
5048             until Phase 2; in Phase 2 and subsequently behave as if
5049             there was no pragma at all":
5050 <programlisting>
5051   {-# NOINLINE [2] f #-}
5052 </programlisting>
5053             </para>
5054           </listitem>
5055
5056           <listitem>
5057             <para>You can say "do not inline <literal>g</literal> in
5058             Phase 3 or any subsequent phase; before that, behave as if
5059             there was no pragma":
5060 <programlisting>
5061   {-# NOINLINE [~3] g #-}
5062 </programlisting>
5063             </para>
5064           </listitem>
5065
5066           <listitem>
5067             <para>If you omit the phase indicator, you mean "never
5068             inline this function".</para>
5069           </listitem>
5070         </itemizedlist>
5071
5072         <para>The same phase-numbering control is available for RULES
5073         (<xref linkend="rewrite-rules"/>).</para>
5074       </sect3>
5075     </sect2>
5076
5077     <sect2 id="language-pragma">
5078       <title>LANGUAGE pragma</title>
5079
5080       <indexterm><primary>LANGUAGE</primary><secondary>pragma</secondary></indexterm>
5081       <indexterm><primary>pragma</primary><secondary>LANGUAGE</secondary></indexterm>
5082
5083       <para>This allows language extensions to be enabled in a portable way.
5084         It is the intention that all Haskell compilers support the
5085         <literal>LANGUAGE</literal> pragma with the same syntax, although not
5086         all extensions are supported by all compilers, of
5087         course.  The <literal>LANGUAGE</literal> pragma should be used instead
5088         of <literal>OPTIONS_GHC</literal>, if possible.</para>
5089
5090       <para>For example, to enable the FFI and preprocessing with CPP:</para>
5091
5092 <programlisting>{-# LANGUAGE ForeignFunctionInterface, CPP #-}</programlisting>
5093
5094       <para>Any extension from the <literal>Extension</literal> type defined in
5095         <ulink
5096           url="../libraries/Cabal/Language-Haskell-Extension.html"><literal>Language.Haskell.Extension</literal></ulink> may be used.  GHC will report an error if any of the requested extensions are not supported.</para>
5097     </sect2>
5098
5099
5100     <sect2 id="line-pragma">
5101       <title>LINE pragma</title>
5102
5103       <indexterm><primary>LINE</primary><secondary>pragma</secondary></indexterm>
5104       <indexterm><primary>pragma</primary><secondary>LINE</secondary></indexterm>
5105       <para>This pragma is similar to C's <literal>&num;line</literal>
5106       pragma, and is mainly for use in automatically generated Haskell
5107       code.  It lets you specify the line number and filename of the
5108       original code; for example</para>
5109
5110 <programlisting>{-# LINE 42 "Foo.vhs" #-}</programlisting>
5111
5112       <para>if you'd generated the current file from something called
5113       <filename>Foo.vhs</filename> and this line corresponds to line
5114       42 in the original.  GHC will adjust its error messages to refer
5115       to the line/file named in the <literal>LINE</literal>
5116       pragma.</para>
5117     </sect2>
5118
5119     <sect2 id="options-pragma">
5120       <title>OPTIONS_GHC pragma</title>
5121       <indexterm><primary>OPTIONS_GHC</primary>
5122       </indexterm>
5123       <indexterm><primary>pragma</primary><secondary>OPTIONS_GHC</secondary>
5124       </indexterm>
5125
5126       <para>The <literal>OPTIONS_GHC</literal> pragma is used to specify
5127       additional options that are given to the compiler when compiling
5128       this source file.  See <xref linkend="source-file-options"/> for
5129       details.</para>
5130
5131       <para>Previous versions of GHC accepted <literal>OPTIONS</literal> rather
5132         than <literal>OPTIONS_GHC</literal>, but that is now deprecated.</para>
5133     </sect2>
5134
5135     <sect2 id="rules">
5136       <title>RULES pragma</title>
5137
5138       <para>The RULES pragma lets you specify rewrite rules.  It is
5139       described in <xref linkend="rewrite-rules"/>.</para>
5140     </sect2>
5141
5142     <sect2 id="specialize-pragma">
5143       <title>SPECIALIZE pragma</title>
5144
5145       <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
5146       <indexterm><primary>pragma, SPECIALIZE</primary></indexterm>
5147       <indexterm><primary>overloading, death to</primary></indexterm>
5148
5149       <para>(UK spelling also accepted.)  For key overloaded
5150       functions, you can create extra versions (NB: more code space)
5151       specialised to particular types.  Thus, if you have an
5152       overloaded function:</para>
5153
5154 <programlisting>
5155   hammeredLookup :: Ord key => [(key, value)] -> key -> value
5156 </programlisting>
5157
5158       <para>If it is heavily used on lists with
5159       <literal>Widget</literal> keys, you could specialise it as
5160       follows:</para>
5161
5162 <programlisting>
5163   {-# SPECIALIZE hammeredLookup :: [(Widget, value)] -> Widget -> value #-}
5164 </programlisting>
5165
5166       <para>A <literal>SPECIALIZE</literal> pragma for a function can
5167       be put anywhere its type signature could be put.</para>
5168
5169       <para>A <literal>SPECIALIZE</literal> has the effect of generating
5170       (a) a specialised version of the function and (b) a rewrite rule
5171       (see <xref linkend="rewrite-rules"/>) that rewrites a call to the
5172       un-specialised function into a call to the specialised one.</para>
5173
5174       <para>The type in a SPECIALIZE pragma can be any type that is less
5175         polymorphic than the type of the original function.  In concrete terms,
5176         if the original function is <literal>f</literal> then the pragma
5177 <programlisting>
5178   {-# SPECIALIZE f :: &lt;type&gt; #-}
5179 </programlisting>
5180       is valid if and only if the defintion
5181 <programlisting>
5182   f_spec :: &lt;type&gt;
5183   f_spec = f
5184 </programlisting>
5185       is valid.  Here are some examples (where we only give the type signature
5186       for the original function, not its code):
5187 <programlisting>
5188   f :: Eq a => a -> b -> b
5189   {-# SPECIALISE f :: Int -> b -> b #-}
5190
5191   g :: (Eq a, Ix b) => a -> b -> b
5192   {-# SPECIALISE g :: (Eq a) => a -> Int -> Int #-}
5193
5194   h :: Eq a => a -> a -> a
5195   {-# SPECIALISE h :: (Eq a) => [a] -> [a] -> [a] #-}
5196 </programlisting>  
5197 The last of these examples will generate a 
5198 RULE with a somewhat-complex left-hand side (try it yourself), so it might not fire very
5199 well.  If you use this kind of specialisation, let us know how well it works.
5200 </para>
5201
5202 <para>A <literal>SPECIALIZE</literal> pragma can optionally be followed with a
5203 <literal>INLINE</literal> or <literal>NOINLINE</literal> pragma, optionally 
5204 followed by a phase, as described in <xref linkend="inline-noinline-pragma"/>.
5205 The <literal>INLINE</literal> pragma affects the specialised verison of the
5206 function (only), and applies even if the function is recursive.  The motivating
5207 example is this:
5208 <programlisting>
5209 -- A GADT for arrays with type-indexed representation
5210 data Arr e where
5211   ArrInt :: !Int -> ByteArray# -> Arr Int
5212   ArrPair :: !Int -> Arr e1 -> Arr e2 -> Arr (e1, e2)
5213
5214 (!:) :: Arr e -> Int -> e
5215 {-# SPECIALISE INLINE (!:) :: Arr Int -> Int -> Int #-}
5216 {-# SPECIALISE INLINE (!:) :: Arr (a, b) -> Int -> (a, b) #-}
5217 (ArrInt _ ba)     !: (I# i) = I# (indexIntArray# ba i)
5218 (ArrPair _ a1 a2) !: i      = (a1 !: i, a2 !: i)
5219 </programlisting>
5220 Here, <literal>(!:)</literal> is a recursive function that indexes arrays
5221 of type <literal>Arr e</literal>.  Consider a call to  <literal>(!:)</literal>
5222 at type <literal>(Int,Int)</literal>.  The second specialisation will fire, and
5223 the specialised function will be inlined.  It has two calls to
5224 <literal>(!:)</literal>,
5225 both at type <literal>Int</literal>.  Both these calls fire the first
5226 specialisation, whose body is also inlined.  The result is a type-based
5227 unrolling of the indexing function.</para>
5228 <para>Warning: you can make GHC diverge by using <literal>SPECIALISE INLINE</literal>
5229 on an ordinarily-recursive function.</para>
5230
5231       <para>Note: In earlier versions of GHC, it was possible to provide your own
5232       specialised function for a given type:
5233
5234 <programlisting>
5235 {-# SPECIALIZE hammeredLookup :: [(Int, value)] -> Int -> value = intLookup #-}
5236 </programlisting>
5237
5238       This feature has been removed, as it is now subsumed by the
5239       <literal>RULES</literal> pragma (see <xref linkend="rule-spec"/>).</para>
5240
5241     </sect2>
5242
5243 <sect2 id="specialize-instance-pragma">
5244 <title>SPECIALIZE instance pragma
5245 </title>
5246
5247 <para>
5248 <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
5249 <indexterm><primary>overloading, death to</primary></indexterm>
5250 Same idea, except for instance declarations.  For example:
5251
5252 <programlisting>
5253 instance (Eq a) => Eq (Foo a) where { 
5254    {-# SPECIALIZE instance Eq (Foo [(Int, Bar)]) #-}
5255    ... usual stuff ...
5256  }
5257 </programlisting>
5258 The pragma must occur inside the <literal>where</literal> part
5259 of the instance declaration.
5260 </para>
5261 <para>
5262 Compatible with HBC, by the way, except perhaps in the placement
5263 of the pragma.
5264 </para>
5265
5266 </sect2>
5267
5268     <sect2 id="unpack-pragma">
5269       <title>UNPACK pragma</title>
5270
5271       <indexterm><primary>UNPACK</primary></indexterm>
5272       
5273       <para>The <literal>UNPACK</literal> indicates to the compiler
5274       that it should unpack the contents of a constructor field into
5275       the constructor itself, removing a level of indirection.  For
5276       example:</para>
5277
5278 <programlisting>
5279 data T = T {-# UNPACK #-} !Float
5280            {-# UNPACK #-} !Float
5281 </programlisting>
5282
5283       <para>will create a constructor <literal>T</literal> containing
5284       two unboxed floats.  This may not always be an optimisation: if
5285       the <function>T</function> constructor is scrutinised and the
5286       floats passed to a non-strict function for example, they will
5287       have to be reboxed (this is done automatically by the
5288       compiler).</para>
5289
5290       <para>Unpacking constructor fields should only be used in
5291       conjunction with <option>-O</option>, in order to expose
5292       unfoldings to the compiler so the reboxing can be removed as
5293       often as possible.  For example:</para>
5294
5295 <programlisting>
5296 f :: T -&#62; Float
5297 f (T f1 f2) = f1 + f2
5298 </programlisting>
5299
5300       <para>The compiler will avoid reboxing <function>f1</function>
5301       and <function>f2</function> by inlining <function>+</function>
5302       on floats, but only when <option>-O</option> is on.</para>
5303
5304       <para>Any single-constructor data is eligible for unpacking; for
5305       example</para>
5306
5307 <programlisting>
5308 data T = T {-# UNPACK #-} !(Int,Int)
5309 </programlisting>
5310
5311       <para>will store the two <literal>Int</literal>s directly in the
5312       <function>T</function> constructor, by flattening the pair.
5313       Multi-level unpacking is also supported:</para>
5314
5315 <programlisting>
5316 data T = T {-# UNPACK #-} !S
5317 data S = S {-# UNPACK #-} !Int {-# UNPACK #-} !Int
5318 </programlisting>
5319
5320       <para>will store two unboxed <literal>Int&num;</literal>s
5321       directly in the <function>T</function> constructor.  The
5322       unpacker can see through newtypes, too.</para>
5323
5324       <para>If a field cannot be unpacked, you will not get a warning,
5325       so it might be an idea to check the generated code with
5326       <option>-ddump-simpl</option>.</para>
5327
5328       <para>See also the <option>-funbox-strict-fields</option> flag,
5329       which essentially has the effect of adding
5330       <literal>{-#&nbsp;UNPACK&nbsp;#-}</literal> to every strict
5331       constructor field.</para>
5332     </sect2>
5333
5334 </sect1>
5335
5336 <!--  ======================= REWRITE RULES ======================== -->
5337
5338 <sect1 id="rewrite-rules">
5339 <title>Rewrite rules
5340
5341 <indexterm><primary>RULES pragma</primary></indexterm>
5342 <indexterm><primary>pragma, RULES</primary></indexterm>
5343 <indexterm><primary>rewrite rules</primary></indexterm></title>
5344
5345 <para>
5346 The programmer can specify rewrite rules as part of the source program
5347 (in a pragma).  GHC applies these rewrite rules wherever it can, provided (a) 
5348 the <option>-O</option> flag (<xref linkend="options-optimise"/>) is on, 
5349 and (b) the <option>-frules-off</option> flag
5350 (<xref linkend="options-f"/>) is not specified.
5351 </para>
5352
5353 <para>
5354 Here is an example:
5355
5356 <programlisting>
5357   {-# RULES
5358         "map/map"       forall f g xs. map f (map g xs) = map (f.g) xs
5359   #-}
5360 </programlisting>
5361
5362 </para>
5363
5364 <sect2>
5365 <title>Syntax</title>
5366
5367 <para>
5368 From a syntactic point of view:
5369
5370 <itemizedlist>
5371 <listitem>
5372
5373 <para>
5374  There may be zero or more rules in a <literal>RULES</literal> pragma.
5375 </para>
5376 </listitem>
5377
5378 <listitem>
5379
5380 <para>
5381  Each rule has a name, enclosed in double quotes.  The name itself has
5382 no significance at all.  It is only used when reporting how many times the rule fired.
5383 </para>
5384 </listitem>
5385
5386 <listitem>
5387 <para>
5388 A rule may optionally have a phase-control number (see <xref linkend="phase-control"/>),
5389 immediately after the name of the rule.  Thus:
5390 <programlisting>
5391   {-# RULES
5392         "map/map" [2]  forall f g xs. map f (map g xs) = map (f.g) xs
5393   #-}
5394 </programlisting>
5395 The "[2]" means that the rule is active in Phase 2 and subsequent phases.  The inverse
5396 notation "[~2]" is also accepted, meaning that the rule is active up to, but not including,
5397 Phase 2.
5398 </para>
5399 </listitem>
5400
5401
5402 <listitem>
5403
5404 <para>
5405  Layout applies in a <literal>RULES</literal> pragma.  Currently no new indentation level
5406 is set, so you must lay out your rules starting in the same column as the
5407 enclosing definitions.
5408 </para>
5409 </listitem>
5410
5411 <listitem>
5412
5413 <para>
5414  Each variable mentioned in a rule must either be in scope (e.g. <function>map</function>),
5415 or bound by the <literal>forall</literal> (e.g. <function>f</function>, <function>g</function>, <function>xs</function>).  The variables bound by
5416 the <literal>forall</literal> are called the <emphasis>pattern</emphasis> variables.  They are separated
5417 by spaces, just like in a type <literal>forall</literal>.
5418 </para>
5419 </listitem>
5420 <listitem>
5421
5422 <para>
5423  A pattern variable may optionally have a type signature.
5424 If the type of the pattern variable is polymorphic, it <emphasis>must</emphasis> have a type signature.
5425 For example, here is the <literal>foldr/build</literal> rule:
5426
5427 <programlisting>
5428 "fold/build"  forall k z (g::forall b. (a->b->b) -> b -> b) .
5429               foldr k z (build g) = g k z
5430 </programlisting>
5431
5432 Since <function>g</function> has a polymorphic type, it must have a type signature.
5433
5434 </para>
5435 </listitem>
5436 <listitem>
5437
5438 <para>
5439 The left hand side of a rule must consist of a top-level variable applied
5440 to arbitrary expressions.  For example, this is <emphasis>not</emphasis> OK:
5441
5442 <programlisting>
5443 "wrong1"   forall e1 e2.  case True of { True -> e1; False -> e2 } = e1
5444 "wrong2"   forall f.      f True = True
5445 </programlisting>
5446
5447 In <literal>"wrong1"</literal>, the LHS is not an application; in <literal>"wrong2"</literal>, the LHS has a pattern variable
5448 in the head.
5449 </para>
5450 </listitem>
5451 <listitem>
5452
5453 <para>
5454  A rule does not need to be in the same module as (any of) the
5455 variables it mentions, though of course they need to be in scope.
5456 </para>
5457 </listitem>
5458 <listitem>
5459
5460 <para>
5461  Rules are automatically exported from a module, just as instance declarations are.
5462 </para>
5463 </listitem>
5464
5465 </itemizedlist>
5466
5467 </para>
5468
5469 </sect2>
5470
5471 <sect2>
5472 <title>Semantics</title>
5473
5474 <para>
5475 From a semantic point of view:
5476
5477 <itemizedlist>
5478 <listitem>
5479
5480 <para>
5481 Rules are only applied if you use the <option>-O</option> flag.
5482 </para>
5483 </listitem>
5484
5485 <listitem>
5486 <para>
5487  Rules are regarded as left-to-right rewrite rules.
5488 When GHC finds an expression that is a substitution instance of the LHS
5489 of a rule, it replaces the expression by the (appropriately-substituted) RHS.
5490 By "a substitution instance" we mean that the LHS can be made equal to the
5491 expression by substituting for the pattern variables.
5492
5493 </para>
5494 </listitem>
5495 <listitem>
5496
5497 <para>
5498  The LHS and RHS of a rule are typechecked, and must have the
5499 same type.
5500
5501 </para>
5502 </listitem>
5503 <listitem>
5504
5505 <para>
5506  GHC makes absolutely no attempt to verify that the LHS and RHS
5507 of a rule have the same meaning.  That is undecidable in general, and
5508 infeasible in most interesting cases.  The responsibility is entirely the programmer's!
5509
5510 </para>
5511 </listitem>
5512 <listitem>
5513
5514 <para>
5515  GHC makes no attempt to make sure that the rules are confluent or
5516 terminating.  For example:
5517
5518 <programlisting>
5519   "loop"        forall x,y.  f x y = f y x
5520 </programlisting>
5521
5522 This rule will cause the compiler to go into an infinite loop.
5523
5524 </para>
5525 </listitem>
5526 <listitem>
5527
5528 <para>
5529  If more than one rule matches a call, GHC will choose one arbitrarily to apply.
5530
5531 </para>
5532 </listitem>
5533 <listitem>
5534 <para>
5535  GHC currently uses a very simple, syntactic, matching algorithm
5536 for matching a rule LHS with an expression.  It seeks a substitution
5537 which makes the LHS and expression syntactically equal modulo alpha
5538 conversion.  The pattern (rule), but not the expression, is eta-expanded if
5539 necessary.  (Eta-expanding the expression can lead to laziness bugs.)
5540 But not beta conversion (that's called higher-order matching).
5541 </para>
5542
5543 <para>
5544 Matching is carried out on GHC's intermediate language, which includes
5545 type abstractions and applications.  So a rule only matches if the
5546 types match too.  See <xref linkend="rule-spec"/> below.
5547 </para>
5548 </listitem>
5549 <listitem>
5550
5551 <para>
5552  GHC keeps trying to apply the rules as it optimises the program.
5553 For example, consider:
5554
5555 <programlisting>
5556   let s = map f
5557       t = map g
5558   in
5559   s (t xs)
5560 </programlisting>
5561
5562 The expression <literal>s (t xs)</literal> does not match the rule <literal>"map/map"</literal>, but GHC
5563 will substitute for <varname>s</varname> and <varname>t</varname>, giving an expression which does match.
5564 If <varname>s</varname> or <varname>t</varname> was (a) used more than once, and (b) large or a redex, then it would
5565 not be substituted, and the rule would not fire.
5566
5567 </para>
5568 </listitem>
5569 <listitem>
5570
5571 <para>
5572  In the earlier phases of compilation, GHC inlines <emphasis>nothing
5573 that appears on the LHS of a rule</emphasis>, because once you have substituted
5574 for something you can't match against it (given the simple minded
5575 matching).  So if you write the rule
5576
5577 <programlisting>
5578         "map/map"       forall f,g.  map f . map g = map (f.g)
5579 </programlisting>
5580
5581 this <emphasis>won't</emphasis> match the expression <literal>map f (map g xs)</literal>.
5582 It will only match something written with explicit use of ".".
5583 Well, not quite.  It <emphasis>will</emphasis> match the expression
5584
5585 <programlisting>
5586 wibble f g xs
5587 </programlisting>
5588
5589 where <function>wibble</function> is defined:
5590
5591 <programlisting>
5592 wibble f g = map f . map g
5593 </programlisting>
5594
5595 because <function>wibble</function> will be inlined (it's small).
5596
5597 Later on in compilation, GHC starts inlining even things on the
5598 LHS of rules, but still leaves the rules enabled.  This inlining
5599 policy is controlled by the per-simplification-pass flag <option>-finline-phase</option><emphasis>n</emphasis>.
5600
5601 </para>
5602 </listitem>
5603 <listitem>
5604
5605 <para>
5606  All rules are implicitly exported from the module, and are therefore
5607 in force in any module that imports the module that defined the rule, directly
5608 or indirectly.  (That is, if A imports B, which imports C, then C's rules are
5609 in force when compiling A.)  The situation is very similar to that for instance
5610 declarations.
5611 </para>
5612 </listitem>
5613
5614 </itemizedlist>
5615
5616 </para>
5617
5618 </sect2>
5619
5620 <sect2>
5621 <title>List fusion</title>
5622
5623 <para>
5624 The RULES mechanism is used to implement fusion (deforestation) of common list functions.
5625 If a "good consumer" consumes an intermediate list constructed by a "good producer", the
5626 intermediate list should be eliminated entirely.
5627 </para>
5628
5629 <para>
5630 The following are good producers:
5631
5632 <itemizedlist>
5633 <listitem>
5634
5635 <para>
5636  List comprehensions
5637 </para>
5638 </listitem>
5639 <listitem>
5640
5641 <para>
5642  Enumerations of <literal>Int</literal> and <literal>Char</literal> (e.g. <literal>['a'..'z']</literal>).
5643 </para>
5644 </listitem>
5645 <listitem>
5646
5647 <para>
5648  Explicit lists (e.g. <literal>[True, False]</literal>)
5649 </para>
5650 </listitem>
5651 <listitem>
5652
5653 <para>
5654  The cons constructor (e.g <literal>3:4:[]</literal>)
5655 </para>
5656 </listitem>
5657 <listitem>
5658
5659 <para>
5660  <function>++</function>
5661 </para>
5662 </listitem>
5663
5664 <listitem>
5665 <para>
5666  <function>map</function>
5667 </para>
5668 </listitem>
5669
5670 <listitem>
5671 <para>
5672 <function>take</function>, <function>filter</function>
5673 </para>
5674 </listitem>
5675 <listitem>
5676
5677 <para>
5678  <function>iterate</function>, <function>repeat</function>
5679 </para>
5680 </listitem>
5681 <listitem>
5682
5683 <para>
5684  <function>zip</function>, <function>zipWith</function>
5685 </para>
5686 </listitem>
5687
5688 </itemizedlist>
5689
5690 </para>
5691
5692 <para>
5693 The following are good consumers:
5694
5695 <itemizedlist>
5696 <listitem>
5697
5698 <para>
5699  List comprehensions
5700 </para>
5701 </listitem>
5702 <listitem>
5703
5704 <para>
5705  <function>array</function> (on its second argument)
5706 </para>
5707 </listitem>
5708 <listitem>
5709
5710 <para>
5711  <function>length</function>
5712 </para>
5713 </listitem>
5714 <listitem>
5715
5716 <para>
5717  <function>++</function> (on its first argument)
5718 </para>
5719 </listitem>
5720
5721 <listitem>
5722 <para>
5723  <function>foldr</function>
5724 </para>
5725 </listitem>
5726
5727 <listitem>
5728 <para>
5729  <function>map</function>
5730 </para>
5731 </listitem>
5732 <listitem>
5733
5734 <para>
5735 <function>take</function>, <function>filter</function>
5736 </para>
5737 </listitem>
5738 <listitem>
5739
5740 <para>
5741  <function>concat</function>
5742 </para>
5743 </listitem>
5744 <listitem>
5745
5746 <para>
5747  <function>unzip</function>, <function>unzip2</function>, <function>unzip3</function>, <function>unzip4</function>
5748 </para>
5749 </listitem>
5750 <listitem>
5751
5752 <para>
5753  <function>zip</function>, <function>zipWith</function> (but on one argument only; if both are good producers, <function>zip</function>
5754 will fuse with one but not the other)
5755 </para>
5756 </listitem>
5757 <listitem>
5758
5759 <para>
5760  <function>partition</function>
5761 </para>
5762 </listitem>
5763 <listitem>
5764
5765 <para>
5766  <function>head</function>
5767 </para>
5768 </listitem>
5769 <listitem>
5770
5771 <para>
5772  <function>and</function>, <function>or</function>, <function>any</function>, <function>all</function>
5773 </para>
5774 </listitem>
5775 <listitem>
5776
5777 <para>
5778  <function>sequence&lowbar;</function>
5779 </para>
5780 </listitem>
5781 <listitem>
5782
5783 <para>
5784  <function>msum</function>
5785 </para>
5786 </listitem>
5787 <listitem>
5788
5789 <para>
5790  <function>sortBy</function>
5791 </para>
5792 </listitem>
5793
5794 </itemizedlist>
5795
5796 </para>
5797
5798  <para>
5799 So, for example, the following should generate no intermediate lists:
5800
5801 <programlisting>
5802 array (1,10) [(i,i*i) | i &#60;- map (+ 1) [0..9]]
5803 </programlisting>
5804
5805 </para>
5806
5807 <para>
5808 This list could readily be extended; if there are Prelude functions that you use
5809 a lot which are not included, please tell us.
5810 </para>
5811
5812 <para>
5813 If you want to write your own good consumers or producers, look at the
5814 Prelude definitions of the above functions to see how to do so.
5815 </para>
5816
5817 </sect2>
5818
5819 <sect2 id="rule-spec">
5820 <title>Specialisation
5821 </title>
5822
5823 <para>
5824 Rewrite rules can be used to get the same effect as a feature
5825 present in earlier versions of GHC.
5826 For example, suppose that:
5827
5828 <programlisting>
5829 genericLookup :: Ord a => Table a b   -> a   -> b
5830 intLookup     ::          Table Int b -> Int -> b
5831 </programlisting>
5832
5833 where <function>intLookup</function> is an implementation of
5834 <function>genericLookup</function> that works very fast for
5835 keys of type <literal>Int</literal>.  You might wish
5836 to tell GHC to use <function>intLookup</function> instead of
5837 <function>genericLookup</function> whenever the latter was called with
5838 type <literal>Table Int b -&gt; Int -&gt; b</literal>.
5839 It used to be possible to write
5840
5841 <programlisting>
5842 {-# SPECIALIZE genericLookup :: Table Int b -> Int -> b = intLookup #-}
5843 </programlisting>
5844
5845 This feature is no longer in GHC, but rewrite rules let you do the same thing:
5846
5847 <programlisting>
5848 {-# RULES "genericLookup/Int" genericLookup = intLookup #-}
5849 </programlisting>
5850
5851 This slightly odd-looking rule instructs GHC to replace
5852 <function>genericLookup</function> by <function>intLookup</function>
5853 <emphasis>whenever the types match</emphasis>.
5854 What is more, this rule does not need to be in the same
5855 file as <function>genericLookup</function>, unlike the
5856 <literal>SPECIALIZE</literal> pragmas which currently do (so that they
5857 have an original definition available to specialise).
5858 </para>
5859
5860 <para>It is <emphasis>Your Responsibility</emphasis> to make sure that
5861 <function>intLookup</function> really behaves as a specialised version
5862 of <function>genericLookup</function>!!!</para>
5863
5864 <para>An example in which using <literal>RULES</literal> for
5865 specialisation will Win Big:
5866
5867 <programlisting>
5868 toDouble :: Real a => a -> Double
5869 toDouble = fromRational . toRational
5870
5871 {-# RULES "toDouble/Int" toDouble = i2d #-}
5872 i2d (I# i) = D# (int2Double# i) -- uses Glasgow prim-op directly
5873 </programlisting>
5874
5875 The <function>i2d</function> function is virtually one machine
5876 instruction; the default conversion&mdash;via an intermediate
5877 <literal>Rational</literal>&mdash;is obscenely expensive by
5878 comparison.
5879 </para>
5880
5881 </sect2>
5882
5883 <sect2>
5884 <title>Controlling what's going on</title>
5885
5886 <para>
5887
5888 <itemizedlist>
5889 <listitem>
5890
5891 <para>
5892  Use <option>-ddump-rules</option> to see what transformation rules GHC is using.
5893 </para>
5894 </listitem>
5895 <listitem>
5896
5897 <para>
5898  Use <option>-ddump-simpl-stats</option> to see what rules are being fired.
5899 If you add <option>-dppr-debug</option> you get a more detailed listing.
5900 </para>
5901 </listitem>
5902 <listitem>
5903
5904 <para>
5905  The definition of (say) <function>build</function> in <filename>GHC/Base.lhs</filename> looks llike this:
5906
5907 <programlisting>
5908         build   :: forall a. (forall b. (a -> b -> b) -> b -> b) -> [a]
5909         {-# INLINE build #-}
5910         build g = g (:) []
5911 </programlisting>
5912
5913 Notice the <literal>INLINE</literal>!  That prevents <literal>(:)</literal> from being inlined when compiling
5914 <literal>PrelBase</literal>, so that an importing module will &ldquo;see&rdquo; the <literal>(:)</literal>, and can
5915 match it on the LHS of a rule.  <literal>INLINE</literal> prevents any inlining happening
5916 in the RHS of the <literal>INLINE</literal> thing.  I regret the delicacy of this.
5917
5918 </para>
5919 </listitem>
5920 <listitem>
5921
5922 <para>
5923  In <filename>libraries/base/GHC/Base.lhs</filename> look at the rules for <function>map</function> to
5924 see how to write rules that will do fusion and yet give an efficient
5925 program even if fusion doesn't happen.  More rules in <filename>GHC/List.lhs</filename>.
5926 </para>
5927 </listitem>
5928
5929 </itemizedlist>
5930
5931 </para>
5932
5933 </sect2>
5934
5935 <sect2 id="core-pragma">
5936   <title>CORE pragma</title>
5937
5938   <indexterm><primary>CORE pragma</primary></indexterm>
5939   <indexterm><primary>pragma, CORE</primary></indexterm>
5940   <indexterm><primary>core, annotation</primary></indexterm>
5941
5942 <para>
5943   The external core format supports <quote>Note</quote> annotations;
5944   the <literal>CORE</literal> pragma gives a way to specify what these
5945   should be in your Haskell source code.  Syntactically, core
5946   annotations are attached to expressions and take a Haskell string
5947   literal as an argument.  The following function definition shows an
5948   example:
5949
5950 <programlisting>
5951 f x = ({-# CORE "foo" #-} show) ({-# CORE "bar" #-} x)
5952 </programlisting>
5953
5954   Semantically, this is equivalent to:
5955
5956 <programlisting>
5957 g x = show x
5958 </programlisting>
5959 </para>
5960
5961 <para>
5962   However, when external for is generated (via
5963   <option>-fext-core</option>), there will be Notes attached to the
5964   expressions <function>show</function> and <varname>x</varname>.
5965   The core function declaration for <function>f</function> is:
5966 </para>
5967
5968 <programlisting>
5969   f :: %forall a . GHCziShow.ZCTShow a ->
5970                    a -> GHCziBase.ZMZN GHCziBase.Char =
5971     \ @ a (zddShow::GHCziShow.ZCTShow a) (eta::a) ->
5972         (%note "foo"
5973          %case zddShow %of (tpl::GHCziShow.ZCTShow a)
5974            {GHCziShow.ZCDShow
5975             (tpl1::GHCziBase.Int ->
5976                    a ->
5977                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
5978 r)
5979             (tpl2::a -> GHCziBase.ZMZN GHCziBase.Char)
5980             (tpl3::GHCziBase.ZMZN a ->
5981                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
5982 r) ->
5983               tpl2})
5984         (%note "foo"
5985          eta);
5986 </programlisting>
5987
5988 <para>
5989   Here, we can see that the function <function>show</function> (which
5990   has been expanded out to a case expression over the Show dictionary)
5991   has a <literal>%note</literal> attached to it, as does the
5992   expression <varname>eta</varname> (which used to be called
5993   <varname>x</varname>).
5994 </para>
5995
5996 </sect2>
5997
5998 </sect1>
5999
6000 <sect1 id="generic-classes">
6001 <title>Generic classes</title>
6002
6003     <para>(Note: support for generic classes is currently broken in
6004     GHC 5.02).</para>
6005
6006 <para>
6007 The ideas behind this extension are described in detail in "Derivable type classes",
6008 Ralf Hinze and Simon Peyton Jones, Haskell Workshop, Montreal Sept 2000, pp94-105.
6009 An example will give the idea:
6010 </para>
6011
6012 <programlisting>
6013   import Generics
6014
6015   class Bin a where
6016     toBin   :: a -> [Int]
6017     fromBin :: [Int] -> (a, [Int])
6018   
6019     toBin {| Unit |}    Unit      = []
6020     toBin {| a :+: b |} (Inl x)   = 0 : toBin x
6021     toBin {| a :+: b |} (Inr y)   = 1 : toBin y
6022     toBin {| a :*: b |} (x :*: y) = toBin x ++ toBin y
6023   
6024     fromBin {| Unit |}    bs      = (Unit, bs)
6025     fromBin {| a :+: b |} (0:bs)  = (Inl x, bs')    where (x,bs') = fromBin bs
6026     fromBin {| a :+: b |} (1:bs)  = (Inr y, bs')    where (y,bs') = fromBin bs
6027     fromBin {| a :*: b |} bs      = (x :*: y, bs'') where (x,bs' ) = fromBin bs
6028                                                           (y,bs'') = fromBin bs'
6029 </programlisting>
6030 <para>
6031 This class declaration explains how <literal>toBin</literal> and <literal>fromBin</literal>
6032 work for arbitrary data types.  They do so by giving cases for unit, product, and sum,
6033 which are defined thus in the library module <literal>Generics</literal>:
6034 </para>
6035 <programlisting>
6036   data Unit    = Unit
6037   data a :+: b = Inl a | Inr b
6038   data a :*: b = a :*: b
6039 </programlisting>
6040 <para>
6041 Now you can make a data type into an instance of Bin like this:
6042 <programlisting>
6043   instance (Bin a, Bin b) => Bin (a,b)
6044   instance Bin a => Bin [a]
6045 </programlisting>
6046 That is, just leave off the "where" clause.  Of course, you can put in the
6047 where clause and over-ride whichever methods you please.
6048 </para>
6049
6050     <sect2>
6051       <title> Using generics </title>
6052       <para>To use generics you need to</para>
6053       <itemizedlist>
6054         <listitem>
6055           <para>Use the flags <option>-fglasgow-exts</option> (to enable the extra syntax), 
6056                 <option>-fgenerics</option> (to generate extra per-data-type code),
6057                 and <option>-package lang</option> (to make the <literal>Generics</literal> library
6058                 available.  </para>
6059         </listitem>
6060         <listitem>
6061           <para>Import the module <literal>Generics</literal> from the
6062           <literal>lang</literal> package.  This import brings into
6063           scope the data types <literal>Unit</literal>,
6064           <literal>:*:</literal>, and <literal>:+:</literal>.  (You
6065           don't need this import if you don't mention these types
6066           explicitly; for example, if you are simply giving instance
6067           declarations.)</para>
6068         </listitem>
6069       </itemizedlist>
6070     </sect2>
6071
6072 <sect2> <title> Changes wrt the paper </title>
6073 <para>
6074 Note that the type constructors <literal>:+:</literal> and <literal>:*:</literal> 
6075 can be written infix (indeed, you can now use
6076 any operator starting in a colon as an infix type constructor).  Also note that
6077 the type constructors are not exactly as in the paper (Unit instead of 1, etc).
6078 Finally, note that the syntax of the type patterns in the class declaration
6079 uses "<literal>{|</literal>" and "<literal>|}</literal>" brackets; curly braces
6080 alone would ambiguous when they appear on right hand sides (an extension we 
6081 anticipate wanting).
6082 </para>
6083 </sect2>
6084
6085 <sect2> <title>Terminology and restrictions</title>
6086 <para>
6087 Terminology.  A "generic default method" in a class declaration
6088 is one that is defined using type patterns as above.
6089 A "polymorphic default method" is a default method defined as in Haskell 98.
6090 A "generic class declaration" is a class declaration with at least one
6091 generic default method.
6092 </para>
6093
6094 <para>
6095 Restrictions:
6096 <itemizedlist>
6097 <listitem>
6098 <para>
6099 Alas, we do not yet implement the stuff about constructor names and 
6100 field labels.
6101 </para>
6102 </listitem>
6103
6104 <listitem>
6105 <para>
6106 A generic class can have only one parameter; you can't have a generic
6107 multi-parameter class.
6108 </para>
6109 </listitem>
6110
6111 <listitem>
6112 <para>
6113 A default method must be defined entirely using type patterns, or entirely
6114 without.  So this is illegal:
6115 <programlisting>
6116   class Foo a where
6117     op :: a -> (a, Bool)
6118     op {| Unit |} Unit = (Unit, True)
6119     op x               = (x,    False)
6120 </programlisting>
6121 However it is perfectly OK for some methods of a generic class to have 
6122 generic default methods and others to have polymorphic default methods.
6123 </para>
6124 </listitem>
6125
6126 <listitem>
6127 <para>
6128 The type variable(s) in the type pattern for a generic method declaration
6129 scope over the right hand side.  So this is legal (note the use of the type variable ``p'' in a type signature on the right hand side:
6130 <programlisting>
6131   class Foo a where
6132     op :: a -> Bool
6133     op {| p :*: q |} (x :*: y) = op (x :: p)
6134     ...
6135 </programlisting>
6136 </para>
6137 </listitem>
6138
6139 <listitem>
6140 <para>
6141 The type patterns in a generic default method must take one of the forms:
6142 <programlisting>
6143        a :+: b
6144        a :*: b
6145        Unit
6146 </programlisting>
6147 where "a" and "b" are type variables.  Furthermore, all the type patterns for
6148 a single type constructor (<literal>:*:</literal>, say) must be identical; they
6149 must use the same type variables.  So this is illegal:
6150 <programlisting>
6151   class Foo a where
6152     op :: a -> Bool
6153     op {| a :+: b |} (Inl x) = True
6154     op {| p :+: q |} (Inr y) = False
6155 </programlisting>
6156 The type patterns must be identical, even in equations for different methods of the class.
6157 So this too is illegal:
6158 <programlisting>
6159   class Foo a where
6160     op1 :: a -> Bool
6161     op1 {| a :*: b |} (x :*: y) = True
6162
6163     op2 :: a -> Bool
6164     op2 {| p :*: q |} (x :*: y) = False
6165 </programlisting>
6166 (The reason for this restriction is that we gather all the equations for a particular type consructor
6167 into a single generic instance declaration.)
6168 </para>
6169 </listitem>
6170
6171 <listitem>
6172 <para>
6173 A generic method declaration must give a case for each of the three type constructors.
6174 </para>
6175 </listitem>
6176
6177 <listitem>
6178 <para>
6179 The type for a generic method can be built only from:
6180   <itemizedlist>
6181   <listitem> <para> Function arrows </para> </listitem>
6182   <listitem> <para> Type variables </para> </listitem>
6183   <listitem> <para> Tuples </para> </listitem>
6184   <listitem> <para> Arbitrary types not involving type variables </para> </listitem>
6185   </itemizedlist>
6186 Here are some example type signatures for generic methods:
6187 <programlisting>
6188     op1 :: a -> Bool
6189     op2 :: Bool -> (a,Bool)
6190     op3 :: [Int] -> a -> a
6191     op4 :: [a] -> Bool
6192 </programlisting>
6193 Here, op1, op2, op3 are OK, but op4 is rejected, because it has a type variable
6194 inside a list.  
6195 </para>
6196 <para>
6197 This restriction is an implementation restriction: we just havn't got around to
6198 implementing the necessary bidirectional maps over arbitrary type constructors.
6199 It would be relatively easy to add specific type constructors, such as Maybe and list,
6200 to the ones that are allowed.</para>
6201 </listitem>
6202
6203 <listitem>
6204 <para>
6205 In an instance declaration for a generic class, the idea is that the compiler
6206 will fill in the methods for you, based on the generic templates.  However it can only
6207 do so if
6208   <itemizedlist>
6209   <listitem>
6210   <para>
6211   The instance type is simple (a type constructor applied to type variables, as in Haskell 98).
6212   </para>
6213   </listitem>
6214   <listitem>
6215   <para>
6216   No constructor of the instance type has unboxed fields.
6217   </para>
6218   </listitem>
6219   </itemizedlist>
6220 (Of course, these things can only arise if you are already using GHC extensions.)
6221 However, you can still give an instance declarations for types which break these rules,
6222 provided you give explicit code to override any generic default methods.
6223 </para>
6224 </listitem>
6225
6226 </itemizedlist>
6227 </para>
6228
6229 <para>
6230 The option <option>-ddump-deriv</option> dumps incomprehensible stuff giving details of 
6231 what the compiler does with generic declarations.
6232 </para>
6233
6234 </sect2>
6235
6236 <sect2> <title> Another example </title>
6237 <para>
6238 Just to finish with, here's another example I rather like:
6239 <programlisting>
6240   class Tag a where
6241     nCons :: a -> Int
6242     nCons {| Unit |}    _ = 1
6243     nCons {| a :*: b |} _ = 1
6244     nCons {| a :+: b |} _ = nCons (bot::a) + nCons (bot::b)
6245   
6246     tag :: a -> Int
6247     tag {| Unit |}    _       = 1
6248     tag {| a :*: b |} _       = 1   
6249     tag {| a :+: b |} (Inl x) = tag x
6250     tag {| a :+: b |} (Inr y) = nCons (bot::a) + tag y
6251 </programlisting>
6252 </para>
6253 </sect2>
6254 </sect1>
6255
6256
6257
6258 <!-- Emacs stuff:
6259      ;;; Local Variables: ***
6260      ;;; mode: xml ***
6261      ;;; sgml-parent-document: ("users_guide.xml" "book" "chapter" "sect1") ***
6262      ;;; End: ***
6263  -->
6264