Better documentation for -XLiberalTypeSynonyms, and steal forall keyword
[ghc-hetmet.git] / docs / users_guide / glasgow_exts.xml
1 <?xml version="1.0" encoding="iso-8859-1"?>
2 <para>
3 <indexterm><primary>language, GHC</primary></indexterm>
4 <indexterm><primary>extensions, GHC</primary></indexterm>
5 As with all known Haskell systems, GHC implements some extensions to
6 the language.  They are all enabled by options; by default GHC
7 understands only plain Haskell 98.
8 </para>
9
10 <para>
11 Some of the Glasgow extensions serve to give you access to the
12 underlying facilities with which we implement Haskell.  Thus, you can
13 get at the Raw Iron, if you are willing to write some non-portable
14 code at a more primitive level.  You need not be &ldquo;stuck&rdquo;
15 on performance because of the implementation costs of Haskell's
16 &ldquo;high-level&rdquo; features&mdash;you can always code
17 &ldquo;under&rdquo; them.  In an extreme case, you can write all your
18 time-critical code in C, and then just glue it together with Haskell!
19 </para>
20
21 <para>
22 Before you get too carried away working at the lowest level (e.g.,
23 sloshing <literal>MutableByteArray&num;</literal>s around your
24 program), you may wish to check if there are libraries that provide a
25 &ldquo;Haskellised veneer&rdquo; over the features you want.  The
26 separate <ulink url="../libraries/index.html">libraries
27 documentation</ulink> describes all the libraries that come with GHC.
28 </para>
29
30 <!-- LANGUAGE OPTIONS -->
31   <sect1 id="options-language">
32     <title>Language options</title>
33
34     <indexterm><primary>language</primary><secondary>option</secondary>
35     </indexterm>
36     <indexterm><primary>options</primary><secondary>language</secondary>
37     </indexterm>
38     <indexterm><primary>extensions</primary><secondary>options controlling</secondary>
39     </indexterm>
40
41     <para>The language option flag control what variation of the language are
42     permitted.  Leaving out all of them gives you standard Haskell
43     98.</para>
44
45     <para>Generally speaking, all the language options are introduced by "<option>-X</option>", 
46     e.g. <option>-XTemplateHaskell</option>.
47     </para>
48
49    <para> All the language options can be turned off by using the prefix "<option>No</option>"; 
50       e.g. "<option>-XNoTemplateHaskell</option>".</para>
51
52    <para> Language options recognised by Cabal can also be enabled using the <literal>LANGUAGE</literal> pragma,
53    thus <literal>{-# LANGUAGE TemplateHaskell #-}</literal> (see <xref linkend="language-pragma"/>>). </para>
54
55     <para>Turning on an option that enables special syntax
56     <emphasis>might</emphasis> cause working Haskell 98 code to fail
57     to compile, perhaps because it uses a variable name which has
58     become a reserved word.  So, together with each option below, we
59     list the special syntax which is enabled by this option.  We use
60     notation and nonterminal names from the Haskell 98 lexical syntax
61     (see the Haskell 98 Report).  There are two classes of special
62     syntax:</para>
63
64     <itemizedlist>
65       <listitem>
66         <para>New reserved words and symbols: character sequences
67         which are no longer available for use as identifiers in the
68         program.</para>
69       </listitem>
70       <listitem>
71         <para>Other special syntax: sequences of characters that have
72         a different meaning when this particular option is turned
73         on.</para>
74       </listitem>
75     </itemizedlist>
76
77     <para>We are only listing syntax changes here that might affect
78     existing working programs (i.e. "stolen" syntax).  Many of these
79     extensions will also enable new context-free syntax, but in all
80     cases programs written to use the new syntax would not be
81     compilable without the option enabled.</para>
82
83     <variablelist>
84
85       <varlistentry>
86         <term>
87           <option>-fglasgow-exts</option>:
88           <indexterm><primary><option>-fglasgow-exts</option></primary></indexterm>
89         </term>
90         <listitem>
91           <para>This simultaneously enables all of the extensions to
92           Haskell 98 described in <xref
93           linkend="ghc-language-features"/>, except where otherwise
94           noted. We are trying to move away from this portmanteau flag, 
95           and towards enabling features individually.</para>
96
97           <para>New reserved words: <literal>forall</literal> (only in
98           types), <literal>mdo</literal>.</para>
99
100           <para>Other syntax stolen:
101               <replaceable>varid</replaceable>{<literal>&num;</literal>},
102               <replaceable>char</replaceable><literal>&num;</literal>,      
103               <replaceable>string</replaceable><literal>&num;</literal>,    
104               <replaceable>integer</replaceable><literal>&num;</literal>,    
105               <replaceable>float</replaceable><literal>&num;</literal>,    
106               <replaceable>float</replaceable><literal>&num;&num;</literal>,    
107               <literal>(&num;</literal>, <literal>&num;)</literal>,         
108               <literal>|)</literal>, <literal>{|</literal>.</para>
109
110           <para>Implies these specific language options: 
111             <option>-XForeignFunctionInterface</option>,
112             <option>-XImplicitParams</option>,
113             <option>-XScopedTypeVariables</option>,
114             <option>-XGADTs</option>, 
115             <option>-XTypeFamilies</option>. </para>
116         </listitem>
117       </varlistentry>
118
119       <varlistentry>
120         <term>
121           <option>-XForeignFunctionInterface</option>:
122           <indexterm><primary><option>-XForeignFunctionInterface</option></primary></indexterm>
123         </term>
124         <listitem>
125           <para>This option enables the language extension defined in the
126           Haskell 98 Foreign Function Interface Addendum.</para>
127
128           <para>New reserved words: <literal>foreign</literal>.</para>
129         </listitem>
130       </varlistentry>
131
132       <varlistentry>
133         <term>
134           <option>-XMagicHash</option>:
135         </term>
136         <listitem>
137           <para> Allow "&num;" as a <link linkend="magic-hash">postfix modifier on identifiers</link>.
138           </para>
139         </listitem>
140       </varlistentry>
141
142       <varlistentry>
143         <term>
144           <option>-XMonomorphismRestriction</option>,<option>-XMonoPatBinds</option>:
145         </term>
146         <listitem>
147           <para> These two flags control how generalisation is done.
148             See <xref linkend="monomorphism"/>.
149           </para>
150         </listitem>
151       </varlistentry>
152
153       <varlistentry>
154         <term>
155           <option>-XExtendedDefaultRules</option>:
156           <indexterm><primary><option>-XExtendedDefaultRules</option></primary></indexterm>
157         </term>
158         <listitem>
159           <para> Use GHCi's extended default rules in a regular module (<xref linkend="extended-default-rules"/>).
160           Independent of the <option>-fglasgow-exts</option>
161           flag. </para>
162         </listitem>
163       </varlistentry>
164
165       <varlistentry>
166         <term>
167           <option>-XRank2Types</option>
168           <indexterm><primary><option>-XRank2Types</option></primary></indexterm>
169         </term>
170         <term>
171           <option>-XRankNTypes</option>
172           <indexterm><primary><option>-XRankNTypes</option></primary></indexterm>
173         </term>
174         <term>
175           <option>-XPolymorphicComponents</option>
176           <indexterm><primary><option>-XPolymorphicComponents</option></primary></indexterm>
177         </term>
178         <listitem>
179           <para> These flags control higher-rank polymorphism.  
180             See <xref linkend="universal-quantification"/>.</para>
181           <para>New reserved words: <literal>forall</literal>.</para>
182         </listitem>
183       </varlistentry>
184
185       <varlistentry>
186         <term>
187           <option>-XLiberalTypeSynonyms</option>
188           <indexterm><primary><option>-XLiberalTypeSynonyms</option></primary></indexterm>
189         </term>
190         <listitem>
191           <para> Allow more liberal type synonyms.
192             See <xref linkend="type-synonyms"/>.</para>
193           <para>New reserved words: <literal>forall</literal>.</para>
194         </listitem>
195       </varlistentry>
196
197       <varlistentry>
198         <term>
199           <option>-XOverlappingInstances</option>
200           <indexterm><primary><option>-XOverlappingInstances</option></primary></indexterm>
201         </term>
202         <term>
203           <option>-XUndecidableInstances</option>
204           <indexterm><primary><option>-XUndecidableInstances</option></primary></indexterm>
205         </term>
206         <term>
207           <option>-XIncoherentInstances</option>
208           <indexterm><primary><option>-XIncoherentInstances</option></primary></indexterm>
209         </term>
210         <term>
211           <option>-fcontext-stack=N</option>
212           <indexterm><primary><option>-fcontext-stack</option></primary></indexterm>
213         </term>
214         <listitem>
215           <para> See <xref linkend="instance-decls"/>. </para>
216         </listitem>
217       </varlistentry>
218
219       <varlistentry>
220         <term>
221           <option>-finline-phase</option>
222           <indexterm><primary><option>-finline-phase</option></primary></indexterm>
223         </term>
224         <listitem>
225           <para>See <xref linkend="rewrite-rules"/>.  Only relevant if
226           you also use <option>-fglasgow-exts</option>.</para>
227         </listitem>
228       </varlistentry>
229
230       <varlistentry>
231         <term>
232           <option>-XArrows</option>
233           <indexterm><primary><option>-XArrows</option></primary></indexterm>
234         </term>
235         <listitem>
236           <para>See <xref linkend="arrow-notation"/>.  Independent of
237           <option>-fglasgow-exts</option>.</para>
238
239           <para>New reserved words/symbols: <literal>rec</literal>,
240           <literal>proc</literal>, <literal>-&lt;</literal>,
241           <literal>&gt;-</literal>, <literal>-&lt;&lt;</literal>,
242           <literal>&gt;&gt;-</literal>.</para>
243
244           <para>Other syntax stolen: <literal>(|</literal>,
245           <literal>|)</literal>.</para>
246         </listitem>
247       </varlistentry>
248
249       <varlistentry>
250         <term>
251           <option>-XGenerics</option>
252           <indexterm><primary><option>-XGenerics</option></primary></indexterm>
253         </term>
254         <listitem>
255           <para>See <xref linkend="generic-classes"/>.  Independent of
256           <option>-fglasgow-exts</option>.</para>
257         </listitem>
258       </varlistentry>
259
260       <varlistentry>
261         <term><option>-XNoImplicitPrelude</option></term>
262         <listitem>
263           <para><indexterm><primary>-XNoImplicitPrelude
264           option</primary></indexterm> GHC normally imports
265           <filename>Prelude.hi</filename> files for you.  If you'd
266           rather it didn't, then give it a
267           <option>-XNoImplicitPrelude</option> option.  The idea is
268           that you can then import a Prelude of your own.  (But don't
269           call it <literal>Prelude</literal>; the Haskell module
270           namespace is flat, and you must not conflict with any
271           Prelude module.)</para>
272
273           <para>Even though you have not imported the Prelude, most of
274           the built-in syntax still refers to the built-in Haskell
275           Prelude types and values, as specified by the Haskell
276           Report.  For example, the type <literal>[Int]</literal>
277           still means <literal>Prelude.[] Int</literal>; tuples
278           continue to refer to the standard Prelude tuples; the
279           translation for list comprehensions continues to use
280           <literal>Prelude.map</literal> etc.</para>
281
282           <para>However, <option>-XNoImplicitPrelude</option> does
283           change the handling of certain built-in syntax: see <xref
284           linkend="rebindable-syntax"/>.</para>
285         </listitem>
286       </varlistentry>
287
288       <varlistentry>
289         <term><option>-XImplicitParams</option></term>
290         <listitem>
291           <para>Enables implicit parameters (see <xref
292           linkend="implicit-parameters"/>).  Currently also implied by 
293           <option>-fglasgow-exts</option>.</para>
294
295           <para>Syntax stolen:
296           <literal>?<replaceable>varid</replaceable></literal>,
297           <literal>%<replaceable>varid</replaceable></literal>.</para>
298         </listitem>
299       </varlistentry>
300
301       <varlistentry>
302         <term><option>-XOverloadedStrings</option></term>
303         <listitem>
304           <para>Enables overloaded string literals (see <xref
305           linkend="overloaded-strings"/>).</para>
306         </listitem>
307       </varlistentry>
308
309       <varlistentry>
310         <term><option>-XScopedTypeVariables</option></term>
311         <listitem>
312           <para>Enables lexically-scoped type variables (see <xref
313           linkend="scoped-type-variables"/>).  Implied by
314           <option>-fglasgow-exts</option>.</para>
315         </listitem>
316       </varlistentry>
317
318       <varlistentry>
319         <term><option>-XTemplateHaskell</option></term>
320         <listitem>
321           <para>Enables Template Haskell (see <xref
322           linkend="template-haskell"/>).  This flag must
323           be given explicitly; it is no longer implied by
324           <option>-fglasgow-exts</option>.</para>
325
326           <para>Syntax stolen: <literal>[|</literal>,
327           <literal>[e|</literal>, <literal>[p|</literal>,
328           <literal>[d|</literal>, <literal>[t|</literal>,
329           <literal>$(</literal>,
330           <literal>$<replaceable>varid</replaceable></literal>.</para>
331         </listitem>
332       </varlistentry>
333
334       <varlistentry>
335         <term><option>-XQuasiQuotes</option></term>
336         <listitem>
337           <para>Enables quasiquotation (see <xref
338           linkend="th-quasiquotation"/>).</para>
339
340           <para>Syntax stolen:
341           <literal>[:<replaceable>varid</replaceable>|</literal>.</para>
342         </listitem>
343       </varlistentry>
344
345     </variablelist>
346   </sect1>
347
348 <!-- UNBOXED TYPES AND PRIMITIVE OPERATIONS -->
349 <sect1 id="primitives">
350   <title>Unboxed types and primitive operations</title>
351
352 <para>GHC is built on a raft of primitive data types and operations;
353 "primitive" in the sense that they cannot be defined in Haskell itself.
354 While you really can use this stuff to write fast code,
355   we generally find it a lot less painful, and more satisfying in the
356   long run, to use higher-level language features and libraries.  With
357   any luck, the code you write will be optimised to the efficient
358   unboxed version in any case.  And if it isn't, we'd like to know
359   about it.</para>
360
361 <para>All these primitive data types and operations are exported by the 
362 library <literal>GHC.Prim</literal>, for which there is 
363 <ulink url="../libraries/base/GHC.Prim.html">detailed online documentation</ulink>.
364 (This documentation is generated from the file <filename>compiler/prelude/primops.txt.pp</filename>.)
365 </para>
366 <para>
367 If you want to mention any of the primitive data types or operations in your
368 program, you must first import <literal>GHC.Prim</literal> to bring them
369 into scope.  Many of them have names ending in "&num;", and to mention such
370 names you need the <option>-XMagicHash</option> extension (<xref linkend="magic-hash"/>).
371 </para>
372
373 <para>The primops make extensive use of <link linkend="glasgow-unboxed">unboxed types</link> 
374 and <link linkend="unboxed-tuples">unboxed tuples</link>, which
375 we briefly summarise here. </para>
376   
377 <sect2 id="glasgow-unboxed">
378 <title>Unboxed types
379 </title>
380
381 <para>
382 <indexterm><primary>Unboxed types (Glasgow extension)</primary></indexterm>
383 </para>
384
385 <para>Most types in GHC are <firstterm>boxed</firstterm>, which means
386 that values of that type are represented by a pointer to a heap
387 object.  The representation of a Haskell <literal>Int</literal>, for
388 example, is a two-word heap object.  An <firstterm>unboxed</firstterm>
389 type, however, is represented by the value itself, no pointers or heap
390 allocation are involved.
391 </para>
392
393 <para>
394 Unboxed types correspond to the &ldquo;raw machine&rdquo; types you
395 would use in C: <literal>Int&num;</literal> (long int),
396 <literal>Double&num;</literal> (double), <literal>Addr&num;</literal>
397 (void *), etc.  The <emphasis>primitive operations</emphasis>
398 (PrimOps) on these types are what you might expect; e.g.,
399 <literal>(+&num;)</literal> is addition on
400 <literal>Int&num;</literal>s, and is the machine-addition that we all
401 know and love&mdash;usually one instruction.
402 </para>
403
404 <para>
405 Primitive (unboxed) types cannot be defined in Haskell, and are
406 therefore built into the language and compiler.  Primitive types are
407 always unlifted; that is, a value of a primitive type cannot be
408 bottom.  We use the convention (but it is only a convention) 
409 that primitive types, values, and
410 operations have a <literal>&num;</literal> suffix (see <xref linkend="magic-hash"/>).
411 For some primitive types we have special syntax for literals, also
412 described in the <link linkend="magic-hash">same section</link>.
413 </para>
414
415 <para>
416 Primitive values are often represented by a simple bit-pattern, such
417 as <literal>Int&num;</literal>, <literal>Float&num;</literal>,
418 <literal>Double&num;</literal>.  But this is not necessarily the case:
419 a primitive value might be represented by a pointer to a
420 heap-allocated object.  Examples include
421 <literal>Array&num;</literal>, the type of primitive arrays.  A
422 primitive array is heap-allocated because it is too big a value to fit
423 in a register, and would be too expensive to copy around; in a sense,
424 it is accidental that it is represented by a pointer.  If a pointer
425 represents a primitive value, then it really does point to that value:
426 no unevaluated thunks, no indirections&hellip;nothing can be at the
427 other end of the pointer than the primitive value.
428 A numerically-intensive program using unboxed types can
429 go a <emphasis>lot</emphasis> faster than its &ldquo;standard&rdquo;
430 counterpart&mdash;we saw a threefold speedup on one example.
431 </para>
432
433 <para>
434 There are some restrictions on the use of primitive types:
435 <itemizedlist>
436 <listitem><para>The main restriction
437 is that you can't pass a primitive value to a polymorphic
438 function or store one in a polymorphic data type.  This rules out
439 things like <literal>[Int&num;]</literal> (i.e. lists of primitive
440 integers).  The reason for this restriction is that polymorphic
441 arguments and constructor fields are assumed to be pointers: if an
442 unboxed integer is stored in one of these, the garbage collector would
443 attempt to follow it, leading to unpredictable space leaks.  Or a
444 <function>seq</function> operation on the polymorphic component may
445 attempt to dereference the pointer, with disastrous results.  Even
446 worse, the unboxed value might be larger than a pointer
447 (<literal>Double&num;</literal> for instance).
448 </para>
449 </listitem>
450 <listitem><para> You cannot define a newtype whose representation type
451 (the argument type of the data constructor) is an unboxed type.  Thus,
452 this is illegal:
453 <programlisting>
454   newtype A = MkA Int#
455 </programlisting>
456 </para></listitem>
457 <listitem><para> You cannot bind a variable with an unboxed type
458 in a <emphasis>top-level</emphasis> binding.
459 </para></listitem>
460 <listitem><para> You cannot bind a variable with an unboxed type
461 in a <emphasis>recursive</emphasis> binding.
462 </para></listitem>
463 <listitem><para> You may bind unboxed variables in a (non-recursive,
464 non-top-level) pattern binding, but any such variable causes the entire
465 pattern-match
466 to become strict.  For example:
467 <programlisting>
468   data Foo = Foo Int Int#
469
470   f x = let (Foo a b, w) = ..rhs.. in ..body..
471 </programlisting>
472 Since <literal>b</literal> has type <literal>Int#</literal>, the entire pattern
473 match
474 is strict, and the program behaves as if you had written
475 <programlisting>
476   data Foo = Foo Int Int#
477
478   f x = case ..rhs.. of { (Foo a b, w) -> ..body.. }
479 </programlisting>
480 </para>
481 </listitem>
482 </itemizedlist>
483 </para>
484
485 </sect2>
486
487 <sect2 id="unboxed-tuples">
488 <title>Unboxed Tuples
489 </title>
490
491 <para>
492 Unboxed tuples aren't really exported by <literal>GHC.Exts</literal>,
493 they're available by default with <option>-fglasgow-exts</option>.  An
494 unboxed tuple looks like this:
495 </para>
496
497 <para>
498
499 <programlisting>
500 (# e_1, ..., e_n #)
501 </programlisting>
502
503 </para>
504
505 <para>
506 where <literal>e&lowbar;1..e&lowbar;n</literal> are expressions of any
507 type (primitive or non-primitive).  The type of an unboxed tuple looks
508 the same.
509 </para>
510
511 <para>
512 Unboxed tuples are used for functions that need to return multiple
513 values, but they avoid the heap allocation normally associated with
514 using fully-fledged tuples.  When an unboxed tuple is returned, the
515 components are put directly into registers or on the stack; the
516 unboxed tuple itself does not have a composite representation.  Many
517 of the primitive operations listed in <literal>primops.txt.pp</literal> return unboxed
518 tuples.
519 In particular, the <literal>IO</literal> and <literal>ST</literal> monads use unboxed
520 tuples to avoid unnecessary allocation during sequences of operations.
521 </para>
522
523 <para>
524 There are some pretty stringent restrictions on the use of unboxed tuples:
525 <itemizedlist>
526 <listitem>
527
528 <para>
529 Values of unboxed tuple types are subject to the same restrictions as
530 other unboxed types; i.e. they may not be stored in polymorphic data
531 structures or passed to polymorphic functions.
532
533 </para>
534 </listitem>
535 <listitem>
536
537 <para>
538 No variable can have an unboxed tuple type, nor may a constructor or function
539 argument have an unboxed tuple type.  The following are all illegal:
540
541
542 <programlisting>
543   data Foo = Foo (# Int, Int #)
544
545   f :: (# Int, Int #) -&#62; (# Int, Int #)
546   f x = x
547
548   g :: (# Int, Int #) -&#62; Int
549   g (# a,b #) = a
550
551   h x = let y = (# x,x #) in ...
552 </programlisting>
553 </para>
554 </listitem>
555 </itemizedlist>
556 </para>
557 <para>
558 The typical use of unboxed tuples is simply to return multiple values,
559 binding those multiple results with a <literal>case</literal> expression, thus:
560 <programlisting>
561   f x y = (# x+1, y-1 #)
562   g x = case f x x of { (# a, b #) -&#62; a + b }
563 </programlisting>
564 You can have an unboxed tuple in a pattern binding, thus
565 <programlisting>
566   f x = let (# p,q #) = h x in ..body..
567 </programlisting>
568 If the types of <literal>p</literal> and <literal>q</literal> are not unboxed,
569 the resulting binding is lazy like any other Haskell pattern binding.  The 
570 above example desugars like this:
571 <programlisting>
572   f x = let t = case h x o f{ (# p,q #) -> (p,q)
573             p = fst t
574             q = snd t
575         in ..body..
576 </programlisting>
577 Indeed, the bindings can even be recursive.
578 </para>
579
580 </sect2>
581 </sect1>
582
583
584 <!-- ====================== SYNTACTIC EXTENSIONS =======================  -->
585
586 <sect1 id="syntax-extns">
587 <title>Syntactic extensions</title>
588  
589     <sect2 id="magic-hash">
590       <title>The magic hash</title>
591       <para>The language extension <option>-XMagicHash</option> allows "&num;" as a
592         postfix modifier to identifiers.  Thus, "x&num;" is a valid variable, and "T&num;" is
593         a valid type constructor or data constructor.</para>
594
595       <para>The hash sign does not change sematics at all.  We tend to use variable
596         names ending in "&num;" for unboxed values or types (e.g. <literal>Int&num;</literal>), 
597         but there is no requirement to do so; they are just plain ordinary variables.
598         Nor does the <option>-XMagicHash</option> extension bring anything into scope.
599         For example, to bring <literal>Int&num;</literal> into scope you must 
600         import <literal>GHC.Prim</literal> (see <xref linkend="primitives"/>); 
601         the <option>-XMagicHash</option> extension
602         then allows you to <emphasis>refer</emphasis> to the <literal>Int&num;</literal>
603         that is now in scope.</para>
604       <para> The <option>-XMagicHash</option> also enables some new forms of literals (see <xref linkend="glasgow-unboxed"/>):
605         <itemizedlist> 
606           <listitem><para> <literal>'x'&num;</literal> has type <literal>Char&num;</literal></para> </listitem>
607           <listitem><para> <literal>&quot;foo&quot;&num;</literal> has type <literal>Addr&num;</literal></para> </listitem>
608           <listitem><para> <literal>3&num;</literal> has type <literal>Int&num;</literal>. In general,
609           any Haskell 98 integer lexeme followed by a <literal>&num;</literal> is an <literal>Int&num;</literal> literal, e.g.
610             <literal>-0x3A&num;</literal> as well as <literal>32&num;</literal></para>.</listitem>
611           <listitem><para> <literal>3&num;&num;</literal> has type <literal>Word&num;</literal>. In general,
612           any non-negative Haskell 98 integer lexeme followed by <literal>&num;&num;</literal> 
613               is a <literal>Word&num;</literal>. </para> </listitem>
614           <listitem><para> <literal>3.2&num;</literal> has type <literal>Float&num;</literal>.</para> </listitem>
615           <listitem><para> <literal>3.2&num;&num;</literal> has type <literal>Double&num;</literal></para> </listitem>
616           </itemizedlist>
617       </para>
618    </sect2>
619
620     <!-- ====================== HIERARCHICAL MODULES =======================  -->
621
622
623     <sect2 id="hierarchical-modules">
624       <title>Hierarchical Modules</title>
625
626       <para>GHC supports a small extension to the syntax of module
627       names: a module name is allowed to contain a dot
628       <literal>&lsquo;.&rsquo;</literal>.  This is also known as the
629       &ldquo;hierarchical module namespace&rdquo; extension, because
630       it extends the normally flat Haskell module namespace into a
631       more flexible hierarchy of modules.</para>
632
633       <para>This extension has very little impact on the language
634       itself; modules names are <emphasis>always</emphasis> fully
635       qualified, so you can just think of the fully qualified module
636       name as <quote>the module name</quote>.  In particular, this
637       means that the full module name must be given after the
638       <literal>module</literal> keyword at the beginning of the
639       module; for example, the module <literal>A.B.C</literal> must
640       begin</para>
641
642 <programlisting>module A.B.C</programlisting>
643
644
645       <para>It is a common strategy to use the <literal>as</literal>
646       keyword to save some typing when using qualified names with
647       hierarchical modules.  For example:</para>
648
649 <programlisting>
650 import qualified Control.Monad.ST.Strict as ST
651 </programlisting>
652
653       <para>For details on how GHC searches for source and interface
654       files in the presence of hierarchical modules, see <xref
655       linkend="search-path"/>.</para>
656
657       <para>GHC comes with a large collection of libraries arranged
658       hierarchically; see the accompanying <ulink
659       url="../libraries/index.html">library
660       documentation</ulink>.  More libraries to install are available
661       from <ulink
662       url="http://hackage.haskell.org/packages/hackage.html">HackageDB</ulink>.</para>
663     </sect2>
664
665     <!-- ====================== PATTERN GUARDS =======================  -->
666
667 <sect2 id="pattern-guards">
668 <title>Pattern guards</title>
669
670 <para>
671 <indexterm><primary>Pattern guards (Glasgow extension)</primary></indexterm>
672 The discussion that follows is an abbreviated version of Simon Peyton Jones's original <ulink url="http://research.microsoft.com/~simonpj/Haskell/guards.html">proposal</ulink>. (Note that the proposal was written before pattern guards were implemented, so refers to them as unimplemented.)
673 </para>
674
675 <para>
676 Suppose we have an abstract data type of finite maps, with a
677 lookup operation:
678
679 <programlisting>
680 lookup :: FiniteMap -> Int -> Maybe Int
681 </programlisting>
682
683 The lookup returns <function>Nothing</function> if the supplied key is not in the domain of the mapping, and <function>(Just v)</function> otherwise,
684 where <varname>v</varname> is the value that the key maps to.  Now consider the following definition:
685 </para>
686
687 <programlisting>
688 clunky env var1 var2 | ok1 &amp;&amp; ok2 = val1 + val2
689 | otherwise  = var1 + var2
690 where
691   m1 = lookup env var1
692   m2 = lookup env var2
693   ok1 = maybeToBool m1
694   ok2 = maybeToBool m2
695   val1 = expectJust m1
696   val2 = expectJust m2
697 </programlisting>
698
699 <para>
700 The auxiliary functions are 
701 </para>
702
703 <programlisting>
704 maybeToBool :: Maybe a -&gt; Bool
705 maybeToBool (Just x) = True
706 maybeToBool Nothing  = False
707
708 expectJust :: Maybe a -&gt; a
709 expectJust (Just x) = x
710 expectJust Nothing  = error "Unexpected Nothing"
711 </programlisting>
712
713 <para>
714 What is <function>clunky</function> doing? The guard <literal>ok1 &amp;&amp;
715 ok2</literal> checks that both lookups succeed, using
716 <function>maybeToBool</function> to convert the <function>Maybe</function>
717 types to booleans. The (lazily evaluated) <function>expectJust</function>
718 calls extract the values from the results of the lookups, and binds the
719 returned values to <varname>val1</varname> and <varname>val2</varname>
720 respectively.  If either lookup fails, then clunky takes the
721 <literal>otherwise</literal> case and returns the sum of its arguments.
722 </para>
723
724 <para>
725 This is certainly legal Haskell, but it is a tremendously verbose and
726 un-obvious way to achieve the desired effect.  Arguably, a more direct way
727 to write clunky would be to use case expressions:
728 </para>
729
730 <programlisting>
731 clunky env var1 var2 = case lookup env var1 of
732   Nothing -&gt; fail
733   Just val1 -&gt; case lookup env var2 of
734     Nothing -&gt; fail
735     Just val2 -&gt; val1 + val2
736 where
737   fail = var1 + var2
738 </programlisting>
739
740 <para>
741 This is a bit shorter, but hardly better.  Of course, we can rewrite any set
742 of pattern-matching, guarded equations as case expressions; that is
743 precisely what the compiler does when compiling equations! The reason that
744 Haskell provides guarded equations is because they allow us to write down
745 the cases we want to consider, one at a time, independently of each other. 
746 This structure is hidden in the case version.  Two of the right-hand sides
747 are really the same (<function>fail</function>), and the whole expression
748 tends to become more and more indented. 
749 </para>
750
751 <para>
752 Here is how I would write clunky:
753 </para>
754
755 <programlisting>
756 clunky env var1 var2
757   | Just val1 &lt;- lookup env var1
758   , Just val2 &lt;- lookup env var2
759   = val1 + val2
760 ...other equations for clunky...
761 </programlisting>
762
763 <para>
764 The semantics should be clear enough.  The qualifiers are matched in order. 
765 For a <literal>&lt;-</literal> qualifier, which I call a pattern guard, the
766 right hand side is evaluated and matched against the pattern on the left. 
767 If the match fails then the whole guard fails and the next equation is
768 tried.  If it succeeds, then the appropriate binding takes place, and the
769 next qualifier is matched, in the augmented environment.  Unlike list
770 comprehensions, however, the type of the expression to the right of the
771 <literal>&lt;-</literal> is the same as the type of the pattern to its
772 left.  The bindings introduced by pattern guards scope over all the
773 remaining guard qualifiers, and over the right hand side of the equation.
774 </para>
775
776 <para>
777 Just as with list comprehensions, boolean expressions can be freely mixed
778 with among the pattern guards.  For example:
779 </para>
780
781 <programlisting>
782 f x | [y] &lt;- x
783     , y > 3
784     , Just z &lt;- h y
785     = ...
786 </programlisting>
787
788 <para>
789 Haskell's current guards therefore emerge as a special case, in which the
790 qualifier list has just one element, a boolean expression.
791 </para>
792 </sect2>
793
794     <!-- ===================== View patterns ===================  -->
795
796 <sect2 id="view-patterns">
797 <title>View patterns
798 </title>
799
800 <para>
801 View patterns are enabled by the flag <literal>-XViewPatterns</literal>.
802 More information and examples of view patterns can be found on the
803 <ulink url="http://hackage.haskell.org/trac/ghc/wiki/ViewPatterns">Wiki
804 page</ulink>.
805 </para>
806
807 <para>
808 View patterns are somewhat like pattern guards that can be nested inside
809 of other patterns.  They are a convenient way of pattern-matching
810 against values of abstract types. For example, in a programming language
811 implementation, we might represent the syntax of the types of the
812 language as follows:
813
814 <programlisting>
815 type Typ
816  
817 data TypView = Unit
818              | Arrow Typ Typ
819
820 view :: Type -> TypeView
821
822 -- additional operations for constructing Typ's ...
823 </programlisting>
824
825 The representation of Typ is held abstract, permitting implementations
826 to use a fancy representation (e.g., hash-consing to manage sharing).
827
828 Without view patterns, using this signature a little inconvenient: 
829 <programlisting>
830 size :: Typ -> Integer
831 size t = case view t of
832   Unit -> 1
833   Arrow t1 t2 -> size t1 + size t2
834 </programlisting>
835
836 It is necessary to iterate the case, rather than using an equational
837 function definition. And the situation is even worse when the matching
838 against <literal>t</literal> is buried deep inside another pattern.
839 </para>
840
841 <para>
842 View patterns permit calling the view function inside the pattern and
843 matching against the result: 
844 <programlisting>
845 size (view -> Unit) = 1
846 size (view -> Arrow t1 t2) = size t1 + size t2
847 </programlisting>
848
849 That is, we add a new form of pattern, written
850 <replaceable>expression</replaceable> <literal>-></literal>
851 <replaceable>pattern</replaceable> that means "apply the expression to
852 whatever we're trying to match against, and then match the result of
853 that application against the pattern". The expression can be any Haskell
854 expression of function type, and view patterns can be used wherever
855 patterns are used.
856 </para>
857
858 <para>
859 The semantics of a pattern <literal>(</literal>
860 <replaceable>exp</replaceable> <literal>-></literal>
861 <replaceable>pat</replaceable> <literal>)</literal> are as follows:
862
863 <itemizedlist>
864
865 <listitem> Scoping:
866
867 <para>The variables bound by the view pattern are the variables bound by
868 <replaceable>pat</replaceable>.
869 </para>
870
871 <para>
872 Any variables in <replaceable>exp</replaceable> are bound occurrences,
873 but variables bound "to the left" in a pattern are in scope.  This
874 feature permits, for example, one argument to a function to be used in
875 the view of another argument.  For example, the function
876 <literal>clunky</literal> from <xref linkend="pattern-guards" /> can be
877 written using view patterns as follows:
878
879 <programlisting>
880 clunky env (lookup env -> Just val1) (lookup env -> Just val2) = val1 + val2
881 ...other equations for clunky...
882 </programlisting>
883 </para>
884
885 <para>
886 More precisely, the scoping rules are: 
887 <itemizedlist>
888 <listitem>
889 <para>
890 In a single pattern, variables bound by patterns to the left of a view
891 pattern expression are in scope. For example:
892 <programlisting>
893 example :: Maybe ((String -> Integer,Integer), String) -> Bool
894 example Just ((f,_), f -> 4) = True
895 </programlisting>
896
897 Additionally, in function definitions, variables bound by matching earlier curried
898 arguments may be used in view pattern expressions in later arguments:
899 <programlisting>
900 example :: (String -> Integer) -> String -> Bool
901 example f (f -> 4) = True
902 </programlisting>
903 That is, the scoping is the same as it would be if the curried arguments
904 were collected into a tuple.  
905 </para>
906 </listitem>
907
908 <listitem>
909 <para>
910 In mutually recursive bindings, such as <literal>let</literal>,
911 <literal>where</literal>, or the top level, view patterns in one
912 declaration may not mention variables bound by other declarations.  That
913 is, each declaration must be self-contained.  For example, the following
914 program is not allowed:
915 <programlisting>
916 let {(x -> y) = e1 ;
917      (y -> x) = e2 } in x
918 </programlisting>
919
920 (We may lift this
921 restriction in the future; the only cost is that type checking patterns
922 would get a little more complicated.)  
923
924
925 </para>
926 </listitem>
927 </itemizedlist>
928
929 </para>
930 </listitem>
931
932 <listitem><para> Typing: If <replaceable>exp</replaceable> has type
933 <replaceable>T1</replaceable> <literal>-></literal>
934 <replaceable>T2</replaceable> and <replaceable>pat</replaceable> matches
935 a <replaceable>T2</replaceable>, then the whole view pattern matches a
936 <replaceable>T1</replaceable>.
937 </para></listitem>
938
939 <listitem><para> Matching: To the equations in Section 3.17.3 of the
940 <ulink url="http://www.haskell.org/onlinereport/">Haskell 98
941 Report</ulink>, add the following:
942 <programlisting>
943 case v of { (e -> p) -> e1 ; _ -> e2 } 
944  = 
945 case (e v) of { p -> e1 ; _ -> e2 }
946 </programlisting>
947 That is, to match a variable <replaceable>v</replaceable> against a pattern
948 <literal>(</literal> <replaceable>exp</replaceable>
949 <literal>-></literal> <replaceable>pat</replaceable>
950 <literal>)</literal>, evaluate <literal>(</literal>
951 <replaceable>exp</replaceable> <replaceable> v</replaceable>
952 <literal>)</literal> and match the result against
953 <replaceable>pat</replaceable>.  
954 </para></listitem>
955
956 <listitem><para> Efficiency: When the same view function is applied in
957 multiple branches of a function definition or a case expression (e.g.,
958 in <literal>size</literal> above), GHC makes an attempt to collect these
959 applications into a single nested case expression, so that the view
960 function is only applied once.  Pattern compilation in GHC follows the
961 matrix algorithm described in Chapter 4 of <ulink
962 url="http://research.microsoft.com/~simonpj/Papers/slpj-book-1987/">The
963 Implementation of Functional Programming Languages</ulink>.  When the
964 top rows of the first column of a matrix are all view patterns with the
965 "same" expression, these patterns are transformed into a single nested
966 case.  This includes, for example, adjacent view patterns that line up
967 in a tuple, as in
968 <programlisting>
969 f ((view -> A, p1), p2) = e1
970 f ((view -> B, p3), p4) = e2
971 </programlisting>
972 </para>
973
974 <para> The current notion of when two view pattern expressions are "the
975 same" is very restricted: it is not even full syntactic equality.
976 However, it does include variables, literals, applications, and tuples;
977 e.g., two instances of <literal>view ("hi", "there")</literal> will be
978 collected.  However, the current implementation does not compare up to
979 alpha-equivalence, so two instances of <literal>(x, view x ->
980 y)</literal> will not be coalesced.
981 </para>
982
983 </listitem>
984
985 </itemizedlist>
986 </para>
987
988 </sect2>
989
990     <!-- ===================== Recursive do-notation ===================  -->
991
992 <sect2 id="mdo-notation">
993 <title>The recursive do-notation
994 </title>
995
996 <para> The recursive do-notation (also known as mdo-notation) is implemented as described in
997 <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>,
998 by Levent Erkok, John Launchbury,
999 Haskell Workshop 2002, pages: 29-37. Pittsburgh, Pennsylvania. 
1000 This paper is essential reading for anyone making non-trivial use of mdo-notation,
1001 and we do not repeat it here.
1002 </para>
1003 <para>
1004 The do-notation of Haskell does not allow <emphasis>recursive bindings</emphasis>,
1005 that is, the variables bound in a do-expression are visible only in the textually following 
1006 code block. Compare this to a let-expression, where bound variables are visible in the entire binding
1007 group. It turns out that several applications can benefit from recursive bindings in
1008 the do-notation, and this extension provides the necessary syntactic support.
1009 </para>
1010 <para>
1011 Here is a simple (yet contrived) example:
1012 </para>
1013 <programlisting>
1014 import Control.Monad.Fix
1015
1016 justOnes = mdo xs &lt;- Just (1:xs)
1017                return xs
1018 </programlisting>
1019 <para>
1020 As you can guess <literal>justOnes</literal> will evaluate to <literal>Just [1,1,1,...</literal>.
1021 </para>
1022
1023 <para>
1024 The Control.Monad.Fix library introduces the <literal>MonadFix</literal> class. It's definition is:
1025 </para>
1026 <programlisting>
1027 class Monad m => MonadFix m where
1028    mfix :: (a -> m a) -> m a
1029 </programlisting>
1030 <para>
1031 The function <literal>mfix</literal>
1032 dictates how the required recursion operation should be performed.  For example, 
1033 <literal>justOnes</literal> desugars as follows:
1034 <programlisting>
1035 justOnes = mfix (\xs' -&gt; do { xs &lt;- Just (1:xs'); return xs }
1036 </programlisting>
1037 For full details of the way in which mdo is typechecked and desugared, see 
1038 the paper <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>.
1039 In particular, GHC implements the segmentation technique described in Section 3.2 of the paper.
1040 </para>
1041 <para>
1042 If recursive bindings are required for a monad,
1043 then that monad must be declared an instance of the <literal>MonadFix</literal> class.
1044 The following instances of <literal>MonadFix</literal> are automatically provided: List, Maybe, IO. 
1045 Furthermore, the Control.Monad.ST and Control.Monad.ST.Lazy modules provide the instances of the MonadFix class 
1046 for Haskell's internal state monad (strict and lazy, respectively).
1047 </para>
1048 <para>
1049 Here are some important points in using the recursive-do notation:
1050 <itemizedlist>
1051 <listitem><para>
1052 The recursive version of the do-notation uses the keyword <literal>mdo</literal> (rather
1053 than <literal>do</literal>).
1054 </para></listitem>
1055
1056 <listitem><para>
1057 It is enabled with the flag <literal>-XRecursiveDo</literal>, which is in turn implied by
1058 <literal>-fglasgow-exts</literal>.
1059 </para></listitem>
1060
1061 <listitem><para>
1062 Unlike ordinary do-notation, but like <literal>let</literal> and <literal>where</literal> bindings,
1063 name shadowing is not allowed; that is, all the names bound in a single <literal>mdo</literal> must
1064 be distinct (Section 3.3 of the paper).
1065 </para></listitem>
1066
1067 <listitem><para>
1068 Variables bound by a <literal>let</literal> statement in an <literal>mdo</literal>
1069 are monomorphic in the <literal>mdo</literal> (Section 3.1 of the paper).  However
1070 GHC breaks the <literal>mdo</literal> into segments to enhance polymorphism,
1071 and improve termination (Section 3.2 of the paper).
1072 </para></listitem>
1073 </itemizedlist>
1074 </para>
1075
1076 <para>
1077 The web page: <ulink url="http://www.cse.ogi.edu/PacSoft/projects/rmb/">http://www.cse.ogi.edu/PacSoft/projects/rmb/</ulink>
1078 contains up to date information on recursive monadic bindings.
1079 </para>
1080
1081 <para>
1082 Historical note: The old implementation of the mdo-notation (and most
1083 of the existing documents) used the name
1084 <literal>MonadRec</literal> for the class and the corresponding library.
1085 This name is not supported by GHC.
1086 </para>
1087
1088 </sect2>
1089
1090
1091    <!-- ===================== PARALLEL LIST COMPREHENSIONS ===================  -->
1092
1093   <sect2 id="parallel-list-comprehensions">
1094     <title>Parallel List Comprehensions</title>
1095     <indexterm><primary>list comprehensions</primary><secondary>parallel</secondary>
1096     </indexterm>
1097     <indexterm><primary>parallel list comprehensions</primary>
1098     </indexterm>
1099
1100     <para>Parallel list comprehensions are a natural extension to list
1101     comprehensions.  List comprehensions can be thought of as a nice
1102     syntax for writing maps and filters.  Parallel comprehensions
1103     extend this to include the zipWith family.</para>
1104
1105     <para>A parallel list comprehension has multiple independent
1106     branches of qualifier lists, each separated by a `|' symbol.  For
1107     example, the following zips together two lists:</para>
1108
1109 <programlisting>
1110    [ (x, y) | x &lt;- xs | y &lt;- ys ] 
1111 </programlisting>
1112
1113     <para>The behavior of parallel list comprehensions follows that of
1114     zip, in that the resulting list will have the same length as the
1115     shortest branch.</para>
1116
1117     <para>We can define parallel list comprehensions by translation to
1118     regular comprehensions.  Here's the basic idea:</para>
1119
1120     <para>Given a parallel comprehension of the form: </para>
1121
1122 <programlisting>
1123    [ e | p1 &lt;- e11, p2 &lt;- e12, ... 
1124        | q1 &lt;- e21, q2 &lt;- e22, ... 
1125        ... 
1126    ] 
1127 </programlisting>
1128
1129     <para>This will be translated to: </para>
1130
1131 <programlisting>
1132    [ e | ((p1,p2), (q1,q2), ...) &lt;- zipN [(p1,p2) | p1 &lt;- e11, p2 &lt;- e12, ...] 
1133                                          [(q1,q2) | q1 &lt;- e21, q2 &lt;- e22, ...] 
1134                                          ... 
1135    ] 
1136 </programlisting>
1137
1138     <para>where `zipN' is the appropriate zip for the given number of
1139     branches.</para>
1140
1141   </sect2>
1142   
1143   <!-- ===================== TRANSFORM LIST COMPREHENSIONS ===================  -->
1144
1145   <sect2 id="generalised-list-comprehensions">
1146     <title>Generalised (SQL-Like) List Comprehensions</title>
1147     <indexterm><primary>list comprehensions</primary><secondary>generalised</secondary>
1148     </indexterm>
1149     <indexterm><primary>extended list comprehensions</primary>
1150     </indexterm>
1151     <indexterm><primary>group</primary></indexterm>
1152     <indexterm><primary>sql</primary></indexterm>
1153
1154
1155     <para>Generalised list comprehensions are a further enhancement to the
1156     list comprehension syntatic sugar to allow operations such as sorting
1157     and grouping which are familiar from SQL.   They are fully described in the
1158         paper <ulink url="http://research.microsoft.com/~simonpj/papers/list-comp">
1159           Comprehensive comprehensions: comprehensions with "order by" and "group by"</ulink>,
1160     except that the syntax we use differs slightly from the paper.</para>
1161 <para>Here is an example: 
1162 <programlisting>
1163 employees = [ ("Simon", "MS", 80)
1164 , ("Erik", "MS", 100)
1165 , ("Phil", "Ed", 40)
1166 , ("Gordon", "Ed", 45)
1167 , ("Paul", "Yale", 60)]
1168
1169 output = [ (the dept, sum salary)
1170 | (name, dept, salary) &lt;- employees
1171 , then group by dept
1172 , then sortWith by (sum salary)
1173 , then take 5 ]
1174 </programlisting>
1175 In this example, the list <literal>output</literal> would take on 
1176     the value:
1177     
1178 <programlisting>
1179 [("Yale", 60), ("Ed", 85), ("MS", 180)]
1180 </programlisting>
1181 </para>
1182 <para>There are three new keywords: <literal>group</literal>, <literal>by</literal>, and <literal>using</literal>.
1183 (The function <literal>sortWith</literal> is not a keyword; it is an ordinary
1184 function that is exported by <literal>GHC.Exts</literal>.)</para>
1185
1186 <para>There are five new forms of comprehension qualifier,
1187 all introduced by the (existing) keyword <literal>then</literal>:
1188     <itemizedlist>
1189     <listitem>
1190     
1191 <programlisting>
1192 then f
1193 </programlisting>
1194
1195     This statement requires that <literal>f</literal> have the type <literal>
1196     forall a. [a] -> [a]</literal>. You can see an example of it's use in the
1197     motivating example, as this form is used to apply <literal>take 5</literal>.
1198     
1199     </listitem>
1200     
1201     
1202     <listitem>
1203 <para>
1204 <programlisting>
1205 then f by e
1206 </programlisting>
1207
1208     This form is similar to the previous one, but allows you to create a function
1209     which will be passed as the first argument to f. As a consequence f must have 
1210     the type <literal>forall a. (a -> t) -> [a] -> [a]</literal>. As you can see
1211     from the type, this function lets f &quot;project out&quot; some information 
1212     from the elements of the list it is transforming.</para>
1213
1214     <para>An example is shown in the opening example, where <literal>sortWith</literal> 
1215     is supplied with a function that lets it find out the <literal>sum salary</literal> 
1216     for any item in the list comprehension it transforms.</para>
1217
1218     </listitem>
1219
1220
1221     <listitem>
1222
1223 <programlisting>
1224 then group by e using f
1225 </programlisting>
1226
1227     <para>This is the most general of the grouping-type statements. In this form,
1228     f is required to have type <literal>forall a. (a -> t) -> [a] -> [[a]]</literal>.
1229     As with the <literal>then f by e</literal> case above, the first argument
1230     is a function supplied to f by the compiler which lets it compute e on every
1231     element of the list being transformed. However, unlike the non-grouping case,
1232     f additionally partitions the list into a number of sublists: this means that
1233     at every point after this statement, binders occurring before it in the comprehension
1234     refer to <emphasis>lists</emphasis> of possible values, not single values. To help understand
1235     this, let's look at an example:</para>
1236     
1237 <programlisting>
1238 -- This works similarly to groupWith in GHC.Exts, but doesn't sort its input first
1239 groupRuns :: Eq b => (a -> b) -> [a] -> [[a]]
1240 groupRuns f = groupBy (\x y -> f x == f y)
1241
1242 output = [ (the x, y)
1243 | x &lt;- ([1..3] ++ [1..2])
1244 , y &lt;- [4..6]
1245 , then group by x using groupRuns ]
1246 </programlisting>
1247
1248     <para>This results in the variable <literal>output</literal> taking on the value below:</para>
1249
1250 <programlisting>
1251 [(1, [4, 5, 6]), (2, [4, 5, 6]), (3, [4, 5, 6]), (1, [4, 5, 6]), (2, [4, 5, 6])]
1252 </programlisting>
1253
1254     <para>Note that we have used the <literal>the</literal> function to change the type 
1255     of x from a list to its original numeric type. The variable y, in contrast, is left 
1256     unchanged from the list form introduced by the grouping.</para>
1257
1258     </listitem>
1259
1260     <listitem>
1261
1262 <programlisting>
1263 then group by e
1264 </programlisting>
1265
1266     <para>This form of grouping is essentially the same as the one described above. However,
1267     since no function to use for the grouping has been supplied it will fall back on the
1268     <literal>groupWith</literal> function defined in 
1269     <ulink url="../libraries/base/GHC-Exts.html"><literal>GHC.Exts</literal></ulink>. This
1270     is the form of the group statement that we made use of in the opening example.</para>
1271
1272     </listitem>
1273     
1274     
1275     <listitem>
1276
1277 <programlisting>
1278 then group using f
1279 </programlisting>
1280
1281     <para>With this form of the group statement, f is required to simply have the type
1282     <literal>forall a. [a] -> [[a]]</literal>, which will be used to group up the
1283     comprehension so far directly. An example of this form is as follows:</para>
1284     
1285 <programlisting>
1286 output = [ x
1287 | y &lt;- [1..5]
1288 , x &lt;- "hello"
1289 , then group using inits]
1290 </programlisting>
1291
1292     <para>This will yield a list containing every prefix of the word "hello" written out 5 times:</para>
1293
1294 <programlisting>
1295 ["","h","he","hel","hell","hello","helloh","hellohe","hellohel","hellohell","hellohello","hellohelloh",...]
1296 </programlisting>
1297
1298     </listitem>
1299 </itemizedlist>
1300 </para>
1301   </sect2>
1302
1303    <!-- ===================== REBINDABLE SYNTAX ===================  -->
1304
1305 <sect2 id="rebindable-syntax">
1306 <title>Rebindable syntax</title>
1307
1308       <para>GHC allows most kinds of built-in syntax to be rebound by
1309       the user, to facilitate replacing the <literal>Prelude</literal>
1310       with a home-grown version, for example.</para>
1311
1312             <para>You may want to define your own numeric class
1313             hierarchy.  It completely defeats that purpose if the
1314             literal "1" means "<literal>Prelude.fromInteger
1315             1</literal>", which is what the Haskell Report specifies.
1316             So the <option>-XNoImplicitPrelude</option> flag causes
1317             the following pieces of built-in syntax to refer to
1318             <emphasis>whatever is in scope</emphasis>, not the Prelude
1319             versions:
1320
1321             <itemizedlist>
1322               <listitem>
1323                 <para>An integer literal <literal>368</literal> means
1324                 "<literal>fromInteger (368::Integer)</literal>", rather than
1325                 "<literal>Prelude.fromInteger (368::Integer)</literal>".
1326 </para> </listitem>         
1327
1328       <listitem><para>Fractional literals are handed in just the same way,
1329           except that the translation is 
1330               <literal>fromRational (3.68::Rational)</literal>.
1331 </para> </listitem>         
1332
1333           <listitem><para>The equality test in an overloaded numeric pattern
1334               uses whatever <literal>(==)</literal> is in scope.
1335 </para> </listitem>         
1336
1337           <listitem><para>The subtraction operation, and the
1338           greater-than-or-equal test, in <literal>n+k</literal> patterns
1339               use whatever <literal>(-)</literal> and <literal>(>=)</literal> are in scope.
1340               </para></listitem>
1341
1342               <listitem>
1343                 <para>Negation (e.g. "<literal>- (f x)</literal>")
1344                 means "<literal>negate (f x)</literal>", both in numeric
1345                 patterns, and expressions.
1346               </para></listitem>
1347
1348               <listitem>
1349           <para>"Do" notation is translated using whatever
1350               functions <literal>(>>=)</literal>,
1351               <literal>(>>)</literal>, and <literal>fail</literal>,
1352               are in scope (not the Prelude
1353               versions).  List comprehensions, mdo (<xref linkend="mdo-notation"/>), and parallel array
1354               comprehensions, are unaffected.  </para></listitem>
1355
1356               <listitem>
1357                 <para>Arrow
1358                 notation (see <xref linkend="arrow-notation"/>)
1359                 uses whatever <literal>arr</literal>,
1360                 <literal>(>>>)</literal>, <literal>first</literal>,
1361                 <literal>app</literal>, <literal>(|||)</literal> and
1362                 <literal>loop</literal> functions are in scope. But unlike the
1363                 other constructs, the types of these functions must match the
1364                 Prelude types very closely.  Details are in flux; if you want
1365                 to use this, ask!
1366               </para></listitem>
1367             </itemizedlist>
1368 In all cases (apart from arrow notation), the static semantics should be that of the desugared form,
1369 even if that is a little unexpected. For example, the 
1370 static semantics of the literal <literal>368</literal>
1371 is exactly that of <literal>fromInteger (368::Integer)</literal>; it's fine for
1372 <literal>fromInteger</literal> to have any of the types:
1373 <programlisting>
1374 fromInteger :: Integer -> Integer
1375 fromInteger :: forall a. Foo a => Integer -> a
1376 fromInteger :: Num a => a -> Integer
1377 fromInteger :: Integer -> Bool -> Bool
1378 </programlisting>
1379 </para>
1380                 
1381              <para>Be warned: this is an experimental facility, with
1382              fewer checks than usual.  Use <literal>-dcore-lint</literal>
1383              to typecheck the desugared program.  If Core Lint is happy
1384              you should be all right.</para>
1385
1386 </sect2>
1387
1388 <sect2 id="postfix-operators">
1389 <title>Postfix operators</title>
1390
1391 <para>
1392 GHC allows a small extension to the syntax of left operator sections, which
1393 allows you to define postfix operators.  The extension is this:  the left section
1394 <programlisting>
1395   (e !)
1396 </programlisting>
1397 is equivalent (from the point of view of both type checking and execution) to the expression
1398 <programlisting>
1399   ((!) e)
1400 </programlisting>
1401 (for any expression <literal>e</literal> and operator <literal>(!)</literal>.
1402 The strict Haskell 98 interpretation is that the section is equivalent to
1403 <programlisting>
1404   (\y -> (!) e y)
1405 </programlisting>
1406 That is, the operator must be a function of two arguments.  GHC allows it to
1407 take only one argument, and that in turn allows you to write the function
1408 postfix.
1409 </para>
1410 <para>Since this extension goes beyond Haskell 98, it should really be enabled
1411 by a flag; but in fact it is enabled all the time.  (No Haskell 98 programs
1412 change their behaviour, of course.)
1413 </para>
1414 <para>The extension does not extend to the left-hand side of function
1415 definitions; you must define such a function in prefix form.</para>
1416
1417 </sect2>
1418
1419 <sect2 id="disambiguate-fields">
1420 <title>Record field disambiguation</title>
1421 <para>
1422 In record construction and record pattern matching
1423 it is entirely unambiguous which field is referred to, even if there are two different
1424 data types in scope with a common field name.  For example:
1425 <programlisting>
1426 module M where
1427   data S = MkS { x :: Int, y :: Bool }
1428
1429 module Foo where
1430   import M
1431
1432   data T = MkT { x :: Int }
1433   
1434   ok1 (MkS { x = n }) = n+1   -- Unambiguous
1435
1436   ok2 n = MkT { x = n+1 }     -- Unambiguous
1437
1438   bad1 k = k { x = 3 }  -- Ambiguous
1439   bad2 k = x k          -- Ambiguous
1440 </programlisting>
1441 Even though there are two <literal>x</literal>'s in scope,
1442 it is clear that the <literal>x</literal> in the pattern in the
1443 definition of <literal>ok1</literal> can only mean the field
1444 <literal>x</literal> from type <literal>S</literal>. Similarly for
1445 the function <literal>ok2</literal>.  However, in the record update
1446 in <literal>bad1</literal> and the record selection in <literal>bad2</literal>
1447 it is not clear which of the two types is intended.
1448 </para>
1449 <para>
1450 Haskell 98 regards all four as ambiguous, but with the
1451 <option>-fdisambiguate-record-fields</option> flag, GHC will accept
1452 the former two.  The rules are precisely the same as those for instance
1453 declarations in Haskell 98, where the method names on the left-hand side 
1454 of the method bindings in an instance declaration refer unambiguously
1455 to the method of that class (provided they are in scope at all), even
1456 if there are other variables in scope with the same name.
1457 This reduces the clutter of qualified names when you import two
1458 records from different modules that use the same field name.
1459 </para>
1460 </sect2>
1461
1462     <!-- ===================== Record puns ===================  -->
1463
1464 <sect2 id="record-puns">
1465 <title>Record puns
1466 </title>
1467
1468 <para>
1469 Record puns are enabled by the flag <literal>-XNamedFieldPuns</literal>.
1470 </para>
1471
1472 <para>
1473 When using records, it is common to write a pattern that binds a
1474 variable with the same name as a record field, such as:
1475
1476 <programlisting>
1477 data C = C {a :: Int}
1478 f (C {a = a}) = a
1479 </programlisting>
1480 </para>
1481
1482 <para>
1483 Record punning permits the variable name to be elided, so one can simply
1484 write
1485
1486 <programlisting>
1487 f (C {a}) = a
1488 </programlisting>
1489
1490 to mean the same pattern as above.  That is, in a record pattern, the
1491 pattern <literal>a</literal> expands into the pattern <literal>a =
1492 a</literal> for the same name <literal>a</literal>.  
1493 </para>
1494
1495 <para>
1496 Note that puns and other patterns can be mixed in the same record:
1497 <programlisting>
1498 data C = C {a :: Int, b :: Int}
1499 f (C {a, b = 4}) = a
1500 </programlisting>
1501 and that puns can be used wherever record patterns occur (e.g. in
1502 <literal>let</literal> bindings or at the top-level).  
1503 </para>
1504
1505 <para>
1506 Record punning can also be used in an expression, writing, for example,
1507 <programlisting>
1508 let a = 1 in C {a}
1509 </programlisting>
1510 instead of 
1511 <programlisting>
1512 let a = 1 in C {a = a}
1513 </programlisting>
1514
1515 Note that this expansion is purely syntactic, so the record pun
1516 expression refers to the nearest enclosing variable that is spelled the
1517 same as the field name.
1518 </para>
1519
1520 </sect2>
1521
1522     <!-- ===================== Record wildcards ===================  -->
1523
1524 <sect2 id="record-wildcards">
1525 <title>Record wildcards
1526 </title>
1527
1528 <para>
1529 Record wildcards are enabled by the flag <literal>-XRecordWildCards</literal>.
1530 </para>
1531
1532 <para>
1533 For records with many fields, it can be tiresome to write out each field
1534 individually in a record pattern, as in
1535 <programlisting>
1536 data C = C {a :: Int, b :: Int, c :: Int, d :: Int}
1537 f (C {a = 1, b = b, c = c, d = d}) = b + c + d
1538 </programlisting>
1539 </para>
1540
1541 <para>
1542 Record wildcard syntax permits a (<literal>..</literal>) in a record
1543 pattern, where each elided field <literal>f</literal> is replaced by the
1544 pattern <literal>f = f</literal>.  For example, the above pattern can be
1545 written as
1546 <programlisting>
1547 f (C {a = 1, ..}) = b + c + d
1548 </programlisting>
1549 </para>
1550
1551 <para>
1552 Note that wildcards can be mixed with other patterns, including puns
1553 (<xref linkend="record-puns"/>); for example, in a pattern <literal>C {a
1554 = 1, b, ..})</literal>.  Additionally, record wildcards can be used
1555 wherever record patterns occur, including in <literal>let</literal>
1556 bindings and at the top-level.  For example, the top-level binding
1557 <programlisting>
1558 C {a = 1, ..} = e
1559 </programlisting>
1560 defines <literal>b</literal>, <literal>c</literal>, and
1561 <literal>d</literal>.
1562 </para>
1563
1564 <para>
1565 Record wildcards can also be used in expressions, writing, for example,
1566
1567 <programlisting>
1568 let {a = 1; b = 2; c = 3; d = 4} in C {..}
1569 </programlisting>
1570
1571 in place of
1572
1573 <programlisting>
1574 let {a = 1; b = 2; c = 3; d = 4} in C {a=a, b=b, c=c, d=d}
1575 </programlisting>
1576
1577 Note that this expansion is purely syntactic, so the record wildcard
1578 expression refers to the nearest enclosing variables that are spelled
1579 the same as the omitted field names.
1580 </para>
1581
1582 </sect2>
1583
1584     <!-- ===================== Local fixity declarations ===================  -->
1585
1586 <sect2 id="local-fixity-declarations">
1587 <title>Local Fixity Declarations
1588 </title>
1589
1590 <para>A careful reading of the Haskell 98 Report reveals that fixity
1591 declarations (<literal>infix</literal>, <literal>infixl</literal>, and
1592 <literal>infixr</literal>) are permitted to appear inside local bindings
1593 such those introduced by <literal>let</literal> and
1594 <literal>where</literal>.  However, the Haskell Report does not specify
1595 the semantics of such bindings very precisely.
1596 </para>
1597
1598 <para>In GHC, a fixity declaration may accompany a local binding:
1599 <programlisting>
1600 let f = ...
1601     infixr 3 `f`
1602 in 
1603     ...
1604 </programlisting>
1605 and the fixity declaration applies wherever the binding is in scope.
1606 For example, in a <literal>let</literal>, it applies in the right-hand
1607 sides of other <literal>let</literal>-bindings and the body of the
1608 <literal>let</literal>C. Or, in recursive <literal>do</literal>
1609 expressions (<xref linkend="mdo-notation"/>), the local fixity
1610 declarations of a <literal>let</literal> statement scope over other
1611 statements in the group, just as the bound name does.
1612 </para>
1613
1614 <para>
1615 Moreover, a local fixity declaration *must* accompany a local binding of
1616 that name: it is not possible to revise the fixity of name bound
1617 elsewhere, as in
1618 <programlisting>
1619 let infixr 9 $ in ...
1620 </programlisting>
1621
1622 Because local fixity declarations are technically Haskell 98, no flag is
1623 necessary to enable them.
1624 </para>
1625 </sect2>
1626
1627 <sect2 id="package-imports">
1628   <title>Package-qualified imports</title>
1629
1630   <para>With the <option>-XPackageImports</option> flag, GHC allows
1631   import declarations to be qualified by the package name that the
1632     module is intended to be imported from.  For example:</para>
1633
1634 <programlisting>
1635 import "network" Network.Socket
1636 </programlisting>
1637   
1638   <para>would import the module <literal>Network.Socket</literal> from
1639     the package <literal>network</literal> (any version).  This may
1640     be used to disambiguate an import when the same module is
1641     available from multiple packages, or is present in both the
1642     current package being built and an external package.</para>
1643
1644   <para>Note: you probably don't need to use this feature, it was
1645     added mainly so that we can build backwards-compatible versions of
1646     packages when APIs change.  It can lead to fragile dependencies in
1647     the common case: modules occasionally move from one package to
1648     another, rendering any package-qualified imports broken.</para>
1649 </sect2>
1650 </sect1>
1651
1652
1653 <!-- TYPE SYSTEM EXTENSIONS -->
1654 <sect1 id="data-type-extensions">
1655 <title>Extensions to data types and type synonyms</title>
1656
1657 <sect2 id="nullary-types">
1658 <title>Data types with no constructors</title>
1659
1660 <para>With the <option>-fglasgow-exts</option> flag, GHC lets you declare
1661 a data type with no constructors.  For example:</para>
1662
1663 <programlisting>
1664   data S      -- S :: *
1665   data T a    -- T :: * -> *
1666 </programlisting>
1667
1668 <para>Syntactically, the declaration lacks the "= constrs" part.  The 
1669 type can be parameterised over types of any kind, but if the kind is
1670 not <literal>*</literal> then an explicit kind annotation must be used
1671 (see <xref linkend="kinding"/>).</para>
1672
1673 <para>Such data types have only one value, namely bottom.
1674 Nevertheless, they can be useful when defining "phantom types".</para>
1675 </sect2>
1676
1677 <sect2 id="infix-tycons">
1678 <title>Infix type constructors, classes, and type variables</title>
1679
1680 <para>
1681 GHC allows type constructors, classes, and type variables to be operators, and
1682 to be written infix, very much like expressions.  More specifically:
1683 <itemizedlist>
1684 <listitem><para>
1685   A type constructor or class can be an operator, beginning with a colon; e.g. <literal>:*:</literal>.
1686   The lexical syntax is the same as that for data constructors.
1687   </para></listitem>
1688 <listitem><para>
1689   Data type and type-synonym declarations can be written infix, parenthesised
1690   if you want further arguments.  E.g.
1691 <screen>
1692   data a :*: b = Foo a b
1693   type a :+: b = Either a b
1694   class a :=: b where ...
1695
1696   data (a :**: b) x = Baz a b x
1697   type (a :++: b) y = Either (a,b) y
1698 </screen>
1699   </para></listitem>
1700 <listitem><para>
1701   Types, and class constraints, can be written infix.  For example
1702   <screen>
1703         x :: Int :*: Bool
1704         f :: (a :=: b) => a -> b
1705   </screen>
1706   </para></listitem>
1707 <listitem><para>
1708   A type variable can be an (unqualified) operator e.g. <literal>+</literal>.
1709   The lexical syntax is the same as that for variable operators, excluding "(.)",
1710   "(!)", and "(*)".  In a binding position, the operator must be
1711   parenthesised.  For example:
1712 <programlisting>
1713    type T (+) = Int + Int
1714    f :: T Either
1715    f = Left 3
1716  
1717    liftA2 :: Arrow (~>)
1718           => (a -> b -> c) -> (e ~> a) -> (e ~> b) -> (e ~> c)
1719    liftA2 = ...
1720 </programlisting>
1721   </para></listitem>
1722 <listitem><para>
1723   Back-quotes work
1724   as for expressions, both for type constructors and type variables;  e.g. <literal>Int `Either` Bool</literal>, or
1725   <literal>Int `a` Bool</literal>.  Similarly, parentheses work the same; e.g.  <literal>(:*:) Int Bool</literal>.
1726   </para></listitem>
1727 <listitem><para>
1728   Fixities may be declared for type constructors, or classes, just as for data constructors.  However,
1729   one cannot distinguish between the two in a fixity declaration; a fixity declaration
1730   sets the fixity for a data constructor and the corresponding type constructor.  For example:
1731 <screen>
1732   infixl 7 T, :*:
1733 </screen>
1734   sets the fixity for both type constructor <literal>T</literal> and data constructor <literal>T</literal>,
1735   and similarly for <literal>:*:</literal>.
1736   <literal>Int `a` Bool</literal>.
1737   </para></listitem>
1738 <listitem><para>
1739   Function arrow is <literal>infixr</literal> with fixity 0.  (This might change; I'm not sure what it should be.)
1740   </para></listitem>
1741
1742 </itemizedlist>
1743 </para>
1744 </sect2>
1745
1746 <sect2 id="type-synonyms">
1747 <title>Liberalised type synonyms</title>
1748
1749 <para>
1750 Type synonyms are like macros at the type level, but Haskell 98 imposes many rules
1751 on individual synonym declarations.
1752 With the <option>-XLiberalTypeSynonyms</option> extension,
1753 GHC does validity checking on types <emphasis>only after expanding type synonyms</emphasis>.
1754 That means that GHC can be very much more liberal about type synonyms than Haskell 98. 
1755
1756 <itemizedlist>
1757 <listitem> <para>You can write a <literal>forall</literal> (including overloading)
1758 in a type synonym, thus:
1759 <programlisting>
1760   type Discard a = forall b. Show b => a -> b -> (a, String)
1761
1762   f :: Discard a
1763   f x y = (x, show y)
1764
1765   g :: Discard Int -> (Int,String)    -- A rank-2 type
1766   g f = f 3 True
1767 </programlisting>
1768 </para>
1769 </listitem>
1770
1771 <listitem><para>
1772 If you also use <option>-XUnboxedTuples</option>, 
1773 you can write an unboxed tuple in a type synonym:
1774 <programlisting>
1775   type Pr = (# Int, Int #)
1776
1777   h :: Int -> Pr
1778   h x = (# x, x #)
1779 </programlisting>
1780 </para></listitem>
1781
1782 <listitem><para>
1783 You can apply a type synonym to a forall type:
1784 <programlisting>
1785   type Foo a = a -> a -> Bool
1786  
1787   f :: Foo (forall b. b->b)
1788 </programlisting>
1789 After expanding the synonym, <literal>f</literal> has the legal (in GHC) type:
1790 <programlisting>
1791   f :: (forall b. b->b) -> (forall b. b->b) -> Bool
1792 </programlisting>
1793 </para></listitem>
1794
1795 <listitem><para>
1796 You can apply a type synonym to a partially applied type synonym:
1797 <programlisting>
1798   type Generic i o = forall x. i x -> o x
1799   type Id x = x
1800   
1801   foo :: Generic Id []
1802 </programlisting>
1803 After expanding the synonym, <literal>foo</literal> has the legal (in GHC) type:
1804 <programlisting>
1805   foo :: forall x. x -> [x]
1806 </programlisting>
1807 </para></listitem>
1808
1809 </itemizedlist>
1810 </para>
1811
1812 <para>
1813 GHC currently does kind checking before expanding synonyms (though even that
1814 could be changed.)
1815 </para>
1816 <para>
1817 After expanding type synonyms, GHC does validity checking on types, looking for
1818 the following mal-formedness which isn't detected simply by kind checking:
1819 <itemizedlist>
1820 <listitem><para>
1821 Type constructor applied to a type involving for-alls.
1822 </para></listitem>
1823 <listitem><para>
1824 Unboxed tuple on left of an arrow.
1825 </para></listitem>
1826 <listitem><para>
1827 Partially-applied type synonym.
1828 </para></listitem>
1829 </itemizedlist>
1830 So, for example,
1831 this will be rejected:
1832 <programlisting>
1833   type Pr = (# Int, Int #)
1834
1835   h :: Pr -> Int
1836   h x = ...
1837 </programlisting>
1838 because GHC does not allow  unboxed tuples on the left of a function arrow.
1839 </para>
1840 </sect2>
1841
1842
1843 <sect2 id="existential-quantification">
1844 <title>Existentially quantified data constructors
1845 </title>
1846
1847 <para>
1848 The idea of using existential quantification in data type declarations
1849 was suggested by Perry, and implemented in Hope+ (Nigel Perry, <emphasis>The Implementation
1850 of Practical Functional Programming Languages</emphasis>, PhD Thesis, University of
1851 London, 1991). It was later formalised by Laufer and Odersky
1852 (<emphasis>Polymorphic type inference and abstract data types</emphasis>,
1853 TOPLAS, 16(5), pp1411-1430, 1994).
1854 It's been in Lennart
1855 Augustsson's <command>hbc</command> Haskell compiler for several years, and
1856 proved very useful.  Here's the idea.  Consider the declaration:
1857 </para>
1858
1859 <para>
1860
1861 <programlisting>
1862   data Foo = forall a. MkFoo a (a -> Bool)
1863            | Nil
1864 </programlisting>
1865
1866 </para>
1867
1868 <para>
1869 The data type <literal>Foo</literal> has two constructors with types:
1870 </para>
1871
1872 <para>
1873
1874 <programlisting>
1875   MkFoo :: forall a. a -> (a -> Bool) -> Foo
1876   Nil   :: Foo
1877 </programlisting>
1878
1879 </para>
1880
1881 <para>
1882 Notice that the type variable <literal>a</literal> in the type of <function>MkFoo</function>
1883 does not appear in the data type itself, which is plain <literal>Foo</literal>.
1884 For example, the following expression is fine:
1885 </para>
1886
1887 <para>
1888
1889 <programlisting>
1890   [MkFoo 3 even, MkFoo 'c' isUpper] :: [Foo]
1891 </programlisting>
1892
1893 </para>
1894
1895 <para>
1896 Here, <literal>(MkFoo 3 even)</literal> packages an integer with a function
1897 <function>even</function> that maps an integer to <literal>Bool</literal>; and <function>MkFoo 'c'
1898 isUpper</function> packages a character with a compatible function.  These
1899 two things are each of type <literal>Foo</literal> and can be put in a list.
1900 </para>
1901
1902 <para>
1903 What can we do with a value of type <literal>Foo</literal>?.  In particular,
1904 what happens when we pattern-match on <function>MkFoo</function>?
1905 </para>
1906
1907 <para>
1908
1909 <programlisting>
1910   f (MkFoo val fn) = ???
1911 </programlisting>
1912
1913 </para>
1914
1915 <para>
1916 Since all we know about <literal>val</literal> and <function>fn</function> is that they
1917 are compatible, the only (useful) thing we can do with them is to
1918 apply <function>fn</function> to <literal>val</literal> to get a boolean.  For example:
1919 </para>
1920
1921 <para>
1922
1923 <programlisting>
1924   f :: Foo -> Bool
1925   f (MkFoo val fn) = fn val
1926 </programlisting>
1927
1928 </para>
1929
1930 <para>
1931 What this allows us to do is to package heterogeneous values
1932 together with a bunch of functions that manipulate them, and then treat
1933 that collection of packages in a uniform manner.  You can express
1934 quite a bit of object-oriented-like programming this way.
1935 </para>
1936
1937 <sect3 id="existential">
1938 <title>Why existential?
1939 </title>
1940
1941 <para>
1942 What has this to do with <emphasis>existential</emphasis> quantification?
1943 Simply that <function>MkFoo</function> has the (nearly) isomorphic type
1944 </para>
1945
1946 <para>
1947
1948 <programlisting>
1949   MkFoo :: (exists a . (a, a -> Bool)) -> Foo
1950 </programlisting>
1951
1952 </para>
1953
1954 <para>
1955 But Haskell programmers can safely think of the ordinary
1956 <emphasis>universally</emphasis> quantified type given above, thereby avoiding
1957 adding a new existential quantification construct.
1958 </para>
1959
1960 </sect3>
1961
1962 <sect3 id="existential-with-context">
1963 <title>Existentials and type classes</title>
1964
1965 <para>
1966 An easy extension is to allow
1967 arbitrary contexts before the constructor.  For example:
1968 </para>
1969
1970 <para>
1971
1972 <programlisting>
1973 data Baz = forall a. Eq a => Baz1 a a
1974          | forall b. Show b => Baz2 b (b -> b)
1975 </programlisting>
1976
1977 </para>
1978
1979 <para>
1980 The two constructors have the types you'd expect:
1981 </para>
1982
1983 <para>
1984
1985 <programlisting>
1986 Baz1 :: forall a. Eq a => a -> a -> Baz
1987 Baz2 :: forall b. Show b => b -> (b -> b) -> Baz
1988 </programlisting>
1989
1990 </para>
1991
1992 <para>
1993 But when pattern matching on <function>Baz1</function> the matched values can be compared
1994 for equality, and when pattern matching on <function>Baz2</function> the first matched
1995 value can be converted to a string (as well as applying the function to it).
1996 So this program is legal:
1997 </para>
1998
1999 <para>
2000
2001 <programlisting>
2002   f :: Baz -> String
2003   f (Baz1 p q) | p == q    = "Yes"
2004                | otherwise = "No"
2005   f (Baz2 v fn)            = show (fn v)
2006 </programlisting>
2007
2008 </para>
2009
2010 <para>
2011 Operationally, in a dictionary-passing implementation, the
2012 constructors <function>Baz1</function> and <function>Baz2</function> must store the
2013 dictionaries for <literal>Eq</literal> and <literal>Show</literal> respectively, and
2014 extract it on pattern matching.
2015 </para>
2016
2017 </sect3>
2018
2019 <sect3 id="existential-records">
2020 <title>Record Constructors</title>
2021
2022 <para>
2023 GHC allows existentials to be used with records syntax as well.  For example:
2024
2025 <programlisting>
2026 data Counter a = forall self. NewCounter
2027     { _this    :: self
2028     , _inc     :: self -> self
2029     , _display :: self -> IO ()
2030     , tag      :: a
2031     }
2032 </programlisting>
2033 Here <literal>tag</literal> is a public field, with a well-typed selector
2034 function <literal>tag :: Counter a -> a</literal>.  The <literal>self</literal>
2035 type is hidden from the outside; any attempt to apply <literal>_this</literal>,
2036 <literal>_inc</literal> or <literal>_display</literal> as functions will raise a
2037 compile-time error.  In other words, <emphasis>GHC defines a record selector function
2038 only for fields whose type does not mention the existentially-quantified variables</emphasis>.
2039 (This example used an underscore in the fields for which record selectors
2040 will not be defined, but that is only programming style; GHC ignores them.)
2041 </para>
2042
2043 <para>
2044 To make use of these hidden fields, we need to create some helper functions:
2045
2046 <programlisting>
2047 inc :: Counter a -> Counter a
2048 inc (NewCounter x i d t) = NewCounter
2049     { _this = i x, _inc = i, _display = d, tag = t } 
2050
2051 display :: Counter a -> IO ()
2052 display NewCounter{ _this = x, _display = d } = d x
2053 </programlisting>
2054
2055 Now we can define counters with different underlying implementations:
2056
2057 <programlisting>
2058 counterA :: Counter String 
2059 counterA = NewCounter
2060     { _this = 0, _inc = (1+), _display = print, tag = "A" }
2061
2062 counterB :: Counter String 
2063 counterB = NewCounter
2064     { _this = "", _inc = ('#':), _display = putStrLn, tag = "B" }
2065
2066 main = do
2067     display (inc counterA)         -- prints "1"
2068     display (inc (inc counterB))   -- prints "##"
2069 </programlisting>
2070
2071 At the moment, record update syntax is only supported for Haskell 98 data types,
2072 so the following function does <emphasis>not</emphasis> work:
2073
2074 <programlisting>
2075 -- This is invalid; use explicit NewCounter instead for now
2076 setTag :: Counter a -> a -> Counter a
2077 setTag obj t = obj{ tag = t }
2078 </programlisting>
2079
2080 </para>
2081
2082 </sect3>
2083
2084
2085 <sect3>
2086 <title>Restrictions</title>
2087
2088 <para>
2089 There are several restrictions on the ways in which existentially-quantified
2090 constructors can be use.
2091 </para>
2092
2093 <para>
2094
2095 <itemizedlist>
2096 <listitem>
2097
2098 <para>
2099  When pattern matching, each pattern match introduces a new,
2100 distinct, type for each existential type variable.  These types cannot
2101 be unified with any other type, nor can they escape from the scope of
2102 the pattern match.  For example, these fragments are incorrect:
2103
2104
2105 <programlisting>
2106 f1 (MkFoo a f) = a
2107 </programlisting>
2108
2109
2110 Here, the type bound by <function>MkFoo</function> "escapes", because <literal>a</literal>
2111 is the result of <function>f1</function>.  One way to see why this is wrong is to
2112 ask what type <function>f1</function> has:
2113
2114
2115 <programlisting>
2116   f1 :: Foo -> a             -- Weird!
2117 </programlisting>
2118
2119
2120 What is this "<literal>a</literal>" in the result type? Clearly we don't mean
2121 this:
2122
2123
2124 <programlisting>
2125   f1 :: forall a. Foo -> a   -- Wrong!
2126 </programlisting>
2127
2128
2129 The original program is just plain wrong.  Here's another sort of error
2130
2131
2132 <programlisting>
2133   f2 (Baz1 a b) (Baz1 p q) = a==q
2134 </programlisting>
2135
2136
2137 It's ok to say <literal>a==b</literal> or <literal>p==q</literal>, but
2138 <literal>a==q</literal> is wrong because it equates the two distinct types arising
2139 from the two <function>Baz1</function> constructors.
2140
2141
2142 </para>
2143 </listitem>
2144 <listitem>
2145
2146 <para>
2147 You can't pattern-match on an existentially quantified
2148 constructor in a <literal>let</literal> or <literal>where</literal> group of
2149 bindings. So this is illegal:
2150
2151
2152 <programlisting>
2153   f3 x = a==b where { Baz1 a b = x }
2154 </programlisting>
2155
2156 Instead, use a <literal>case</literal> expression:
2157
2158 <programlisting>
2159   f3 x = case x of Baz1 a b -> a==b
2160 </programlisting>
2161
2162 In general, you can only pattern-match
2163 on an existentially-quantified constructor in a <literal>case</literal> expression or
2164 in the patterns of a function definition.
2165
2166 The reason for this restriction is really an implementation one.
2167 Type-checking binding groups is already a nightmare without
2168 existentials complicating the picture.  Also an existential pattern
2169 binding at the top level of a module doesn't make sense, because it's
2170 not clear how to prevent the existentially-quantified type "escaping".
2171 So for now, there's a simple-to-state restriction.  We'll see how
2172 annoying it is.
2173
2174 </para>
2175 </listitem>
2176 <listitem>
2177
2178 <para>
2179 You can't use existential quantification for <literal>newtype</literal>
2180 declarations.  So this is illegal:
2181
2182
2183 <programlisting>
2184   newtype T = forall a. Ord a => MkT a
2185 </programlisting>
2186
2187
2188 Reason: a value of type <literal>T</literal> must be represented as a
2189 pair of a dictionary for <literal>Ord t</literal> and a value of type
2190 <literal>t</literal>.  That contradicts the idea that
2191 <literal>newtype</literal> should have no concrete representation.
2192 You can get just the same efficiency and effect by using
2193 <literal>data</literal> instead of <literal>newtype</literal>.  If
2194 there is no overloading involved, then there is more of a case for
2195 allowing an existentially-quantified <literal>newtype</literal>,
2196 because the <literal>data</literal> version does carry an
2197 implementation cost, but single-field existentially quantified
2198 constructors aren't much use.  So the simple restriction (no
2199 existential stuff on <literal>newtype</literal>) stands, unless there
2200 are convincing reasons to change it.
2201
2202
2203 </para>
2204 </listitem>
2205 <listitem>
2206
2207 <para>
2208  You can't use <literal>deriving</literal> to define instances of a
2209 data type with existentially quantified data constructors.
2210
2211 Reason: in most cases it would not make sense. For example:;
2212
2213 <programlisting>
2214 data T = forall a. MkT [a] deriving( Eq )
2215 </programlisting>
2216
2217 To derive <literal>Eq</literal> in the standard way we would need to have equality
2218 between the single component of two <function>MkT</function> constructors:
2219
2220 <programlisting>
2221 instance Eq T where
2222   (MkT a) == (MkT b) = ???
2223 </programlisting>
2224
2225 But <varname>a</varname> and <varname>b</varname> have distinct types, and so can't be compared.
2226 It's just about possible to imagine examples in which the derived instance
2227 would make sense, but it seems altogether simpler simply to prohibit such
2228 declarations.  Define your own instances!
2229 </para>
2230 </listitem>
2231
2232 </itemizedlist>
2233
2234 </para>
2235
2236 </sect3>
2237 </sect2>
2238
2239 <!-- ====================== Generalised algebraic data types =======================  -->
2240
2241 <sect2 id="gadt-style">
2242 <title>Declaring data types with explicit constructor signatures</title>
2243
2244 <para>GHC allows you to declare an algebraic data type by 
2245 giving the type signatures of constructors explicitly.  For example:
2246 <programlisting>
2247   data Maybe a where
2248       Nothing :: Maybe a
2249       Just    :: a -> Maybe a
2250 </programlisting>
2251 The form is called a "GADT-style declaration"
2252 because Generalised Algebraic Data Types, described in <xref linkend="gadt"/>, 
2253 can only be declared using this form.</para>
2254 <para>Notice that GADT-style syntax generalises existential types (<xref linkend="existential-quantification"/>).  
2255 For example, these two declarations are equivalent:
2256 <programlisting>
2257   data Foo = forall a. MkFoo a (a -> Bool)
2258   data Foo' where { MKFoo :: a -> (a->Bool) -> Foo' }
2259 </programlisting>
2260 </para>
2261 <para>Any data type that can be declared in standard Haskell-98 syntax 
2262 can also be declared using GADT-style syntax.
2263 The choice is largely stylistic, but GADT-style declarations differ in one important respect:
2264 they treat class constraints on the data constructors differently.
2265 Specifically, if the constructor is given a type-class context, that
2266 context is made available by pattern matching.  For example:
2267 <programlisting>
2268   data Set a where
2269     MkSet :: Eq a => [a] -> Set a
2270
2271   makeSet :: Eq a => [a] -> Set a
2272   makeSet xs = MkSet (nub xs)
2273
2274   insert :: a -> Set a -> Set a
2275   insert a (MkSet as) | a `elem` as = MkSet as
2276                       | otherwise   = MkSet (a:as)
2277 </programlisting>
2278 A use of <literal>MkSet</literal> as a constructor (e.g. in the definition of <literal>makeSet</literal>) 
2279 gives rise to a <literal>(Eq a)</literal>
2280 constraint, as you would expect.  The new feature is that pattern-matching on <literal>MkSet</literal>
2281 (as in the definition of <literal>insert</literal>) makes <emphasis>available</emphasis> an <literal>(Eq a)</literal>
2282 context.  In implementation terms, the <literal>MkSet</literal> constructor has a hidden field that stores
2283 the <literal>(Eq a)</literal> dictionary that is passed to <literal>MkSet</literal>; so
2284 when pattern-matching that dictionary becomes available for the right-hand side of the match.
2285 In the example, the equality dictionary is used to satisfy the equality constraint 
2286 generated by the call to <literal>elem</literal>, so that the type of
2287 <literal>insert</literal> itself has no <literal>Eq</literal> constraint.
2288 </para>
2289 <para>
2290 For example, one possible application is to reify dictionaries:
2291 <programlisting>
2292    data NumInst a where
2293      MkNumInst :: Num a => NumInst a
2294
2295    intInst :: NumInst Int
2296    intInst = MkNumInst
2297
2298    plus :: NumInst a -> a -> a -> a
2299    plus MkNumInst p q = p + q
2300 </programlisting>
2301 Here, a value of type <literal>NumInst a</literal> is equivalent 
2302 to an explicit <literal>(Num a)</literal> dictionary.
2303 </para>
2304 <para>
2305 All this applies to constructors declared using the syntax of <xref linkend="existential-with-context"/>.
2306 For example, the <literal>NumInst</literal> data type above could equivalently be declared 
2307 like this:
2308 <programlisting>
2309    data NumInst a 
2310       = Num a => MkNumInst (NumInst a)
2311 </programlisting>
2312 Notice that, unlike the situation when declaring an existential, there is 
2313 no <literal>forall</literal>, because the <literal>Num</literal> constrains the
2314 data type's universally quantified type variable <literal>a</literal>.  
2315 A constructor may have both universal and existential type variables: for example,
2316 the following two declarations are equivalent:
2317 <programlisting>
2318    data T1 a 
2319         = forall b. (Num a, Eq b) => MkT1 a b
2320    data T2 a where
2321         MkT2 :: (Num a, Eq b) => a -> b -> T2 a
2322 </programlisting>
2323 </para>
2324 <para>All this behaviour contrasts with Haskell 98's peculiar treatment of 
2325 contexts on a data type declaration (Section 4.2.1 of the Haskell 98 Report).
2326 In Haskell 98 the definition
2327 <programlisting>
2328   data Eq a => Set' a = MkSet' [a]
2329 </programlisting>
2330 gives <literal>MkSet'</literal> the same type as <literal>MkSet</literal> above.  But instead of 
2331 <emphasis>making available</emphasis> an <literal>(Eq a)</literal> constraint, pattern-matching
2332 on <literal>MkSet'</literal> <emphasis>requires</emphasis> an <literal>(Eq a)</literal> constraint!
2333 GHC faithfully implements this behaviour, odd though it is.  But for GADT-style declarations,
2334 GHC's behaviour is much more useful, as well as much more intuitive.
2335 </para>
2336
2337 <para>
2338 The rest of this section gives further details about GADT-style data
2339 type declarations.
2340
2341 <itemizedlist>
2342 <listitem><para>
2343 The result type of each data constructor must begin with the type constructor being defined.
2344 If the result type of all constructors 
2345 has the form <literal>T a1 ... an</literal>, where <literal>a1 ... an</literal>
2346 are distinct type variables, then the data type is <emphasis>ordinary</emphasis>;
2347 otherwise is a <emphasis>generalised</emphasis> data type (<xref linkend="gadt"/>).
2348 </para></listitem>
2349
2350 <listitem><para>
2351 The type signature of
2352 each constructor is independent, and is implicitly universally quantified as usual. 
2353 Different constructors may have different universally-quantified type variables
2354 and different type-class constraints.  
2355 For example, this is fine:
2356 <programlisting>
2357   data T a where
2358     T1 :: Eq b => b -> T b
2359     T2 :: (Show c, Ix c) => c -> [c] -> T c
2360 </programlisting>
2361 </para></listitem>
2362
2363 <listitem><para>
2364 Unlike a Haskell-98-style 
2365 data type declaration, the type variable(s) in the "<literal>data Set a where</literal>" header 
2366 have no scope.  Indeed, one can write a kind signature instead:
2367 <programlisting>
2368   data Set :: * -> * where ...
2369 </programlisting>
2370 or even a mixture of the two:
2371 <programlisting>
2372   data Foo a :: (* -> *) -> * where ...
2373 </programlisting>
2374 The type variables (if given) may be explicitly kinded, so we could also write the header for <literal>Foo</literal>
2375 like this:
2376 <programlisting>
2377   data Foo a (b :: * -> *) where ...
2378 </programlisting>
2379 </para></listitem>
2380
2381
2382 <listitem><para>
2383 You can use strictness annotations, in the obvious places
2384 in the constructor type:
2385 <programlisting>
2386   data Term a where
2387       Lit    :: !Int -> Term Int
2388       If     :: Term Bool -> !(Term a) -> !(Term a) -> Term a
2389       Pair   :: Term a -> Term b -> Term (a,b)
2390 </programlisting>
2391 </para></listitem>
2392
2393 <listitem><para>
2394 You can use a <literal>deriving</literal> clause on a GADT-style data type
2395 declaration.   For example, these two declarations are equivalent
2396 <programlisting>
2397   data Maybe1 a where {
2398       Nothing1 :: Maybe1 a ;
2399       Just1    :: a -> Maybe1 a
2400     } deriving( Eq, Ord )
2401
2402   data Maybe2 a = Nothing2 | Just2 a 
2403        deriving( Eq, Ord )
2404 </programlisting>
2405 </para></listitem>
2406
2407 <listitem><para>
2408 You can use record syntax on a GADT-style data type declaration:
2409
2410 <programlisting>
2411   data Person where
2412       Adult { name :: String, children :: [Person] } :: Person
2413       Child { name :: String } :: Person
2414 </programlisting>
2415 As usual, for every constructor that has a field <literal>f</literal>, the type of
2416 field <literal>f</literal> must be the same (modulo alpha conversion).
2417 </para>
2418 <para>
2419 At the moment, record updates are not yet possible with GADT-style declarations, 
2420 so support is limited to record construction, selection and pattern matching.
2421 For example
2422 <programlisting>
2423   aPerson = Adult { name = "Fred", children = [] }
2424
2425   shortName :: Person -> Bool
2426   hasChildren (Adult { children = kids }) = not (null kids)
2427   hasChildren (Child {})                  = False
2428 </programlisting>
2429 </para></listitem>
2430
2431 <listitem><para> 
2432 As in the case of existentials declared using the Haskell-98-like record syntax 
2433 (<xref linkend="existential-records"/>),
2434 record-selector functions are generated only for those fields that have well-typed
2435 selectors.  
2436 Here is the example of that section, in GADT-style syntax:
2437 <programlisting>
2438 data Counter a where
2439     NewCounter { _this    :: self
2440                , _inc     :: self -> self
2441                , _display :: self -> IO ()
2442                , tag      :: a
2443                }
2444         :: Counter a
2445 </programlisting>
2446 As before, only one selector function is generated here, that for <literal>tag</literal>.
2447 Nevertheless, you can still use all the field names in pattern matching and record construction.
2448 </para></listitem>
2449 </itemizedlist></para>
2450 </sect2>
2451
2452 <sect2 id="gadt">
2453 <title>Generalised Algebraic Data Types (GADTs)</title>
2454
2455 <para>Generalised Algebraic Data Types generalise ordinary algebraic data types 
2456 by allowing constructors to have richer return types.  Here is an example:
2457 <programlisting>
2458   data Term a where
2459       Lit    :: Int -> Term Int
2460       Succ   :: Term Int -> Term Int
2461       IsZero :: Term Int -> Term Bool   
2462       If     :: Term Bool -> Term a -> Term a -> Term a
2463       Pair   :: Term a -> Term b -> Term (a,b)
2464 </programlisting>
2465 Notice that the return type of the constructors is not always <literal>Term a</literal>, as is the
2466 case with ordinary data types.  This generality allows us to 
2467 write a well-typed <literal>eval</literal> function
2468 for these <literal>Terms</literal>:
2469 <programlisting>
2470   eval :: Term a -> a
2471   eval (Lit i)      = i
2472   eval (Succ t)     = 1 + eval t
2473   eval (IsZero t)   = eval t == 0
2474   eval (If b e1 e2) = if eval b then eval e1 else eval e2
2475   eval (Pair e1 e2) = (eval e1, eval e2)
2476 </programlisting>
2477 The key point about GADTs is that <emphasis>pattern matching causes type refinement</emphasis>.  
2478 For example, in the right hand side of the equation
2479 <programlisting>
2480   eval :: Term a -> a
2481   eval (Lit i) =  ...
2482 </programlisting>
2483 the type <literal>a</literal> is refined to <literal>Int</literal>.  That's the whole point!
2484 A precise specification of the type rules is beyond what this user manual aspires to, 
2485 but the design closely follows that described in
2486 the paper <ulink
2487 url="http://research.microsoft.com/%7Esimonpj/papers/gadt/">Simple
2488 unification-based type inference for GADTs</ulink>,
2489 (ICFP 2006).
2490 The general principle is this: <emphasis>type refinement is only carried out 
2491 based on user-supplied type annotations</emphasis>.
2492 So if no type signature is supplied for <literal>eval</literal>, no type refinement happens, 
2493 and lots of obscure error messages will
2494 occur.  However, the refinement is quite general.  For example, if we had:
2495 <programlisting>
2496   eval :: Term a -> a -> a
2497   eval (Lit i) j =  i+j
2498 </programlisting>
2499 the pattern match causes the type <literal>a</literal> to be refined to <literal>Int</literal> (because of the type
2500 of the constructor <literal>Lit</literal>), and that refinement also applies to the type of <literal>j</literal>, and
2501 the result type of the <literal>case</literal> expression.  Hence the addition <literal>i+j</literal> is legal.
2502 </para>
2503 <para>
2504 These and many other examples are given in papers by Hongwei Xi, and
2505 Tim Sheard. There is a longer introduction
2506 <ulink url="http://www.haskell.org/haskellwiki/GADT">on the wiki</ulink>,
2507 and Ralf Hinze's
2508 <ulink url="http://www.informatik.uni-bonn.de/~ralf/publications/With.pdf">Fun with phantom types</ulink> also has a number of examples. Note that papers
2509 may use different notation to that implemented in GHC.
2510 </para>
2511 <para>
2512 The rest of this section outlines the extensions to GHC that support GADTs.   The extension is enabled with 
2513 <option>-XGADTs</option>.  The <option>-XGADTs</option> flag also sets <option>-XRelaxedPolyRec</option>.
2514 <itemizedlist>
2515 <listitem><para>
2516 A GADT can only be declared using GADT-style syntax (<xref linkend="gadt-style"/>); 
2517 the old Haskell-98 syntax for data declarations always declares an ordinary data type.
2518 The result type of each constructor must begin with the type constructor being defined,
2519 but for a GADT the arguments to the type constructor can be arbitrary monotypes.  
2520 For example, in the <literal>Term</literal> data
2521 type above, the type of each constructor must end with <literal>Term ty</literal>, but
2522 the <literal>ty</literal> need not be a type variable (e.g. the <literal>Lit</literal>
2523 constructor).
2524 </para></listitem>
2525
2526 <listitem><para>
2527 It's is permitted to declare an ordinary algebraic data type using GADT-style syntax.
2528 What makes a GADT into a GADT is not the syntax, but rather the presence of data constructors
2529 whose result type is not just <literal>T a b</literal>.
2530 </para></listitem>
2531
2532 <listitem><para>
2533 You cannot use a <literal>deriving</literal> clause for a GADT; only for
2534 an ordinary data type.
2535 </para></listitem>
2536
2537 <listitem><para>
2538 As mentioned in <xref linkend="gadt-style"/>, record syntax is supported.
2539 For example:
2540 <programlisting>
2541   data Term a where
2542       Lit    { val  :: Int }      :: Term Int
2543       Succ   { num  :: Term Int } :: Term Int
2544       Pred   { num  :: Term Int } :: Term Int
2545       IsZero { arg  :: Term Int } :: Term Bool  
2546       Pair   { arg1 :: Term a
2547              , arg2 :: Term b
2548              }                    :: Term (a,b)
2549       If     { cnd  :: Term Bool
2550              , tru  :: Term a
2551              , fls  :: Term a
2552              }                    :: Term a
2553 </programlisting>
2554 However, for GADTs there is the following additional constraint: 
2555 every constructor that has a field <literal>f</literal> must have
2556 the same result type (modulo alpha conversion)
2557 Hence, in the above example, we cannot merge the <literal>num</literal> 
2558 and <literal>arg</literal> fields above into a 
2559 single name.  Although their field types are both <literal>Term Int</literal>,
2560 their selector functions actually have different types:
2561
2562 <programlisting>
2563   num :: Term Int -> Term Int
2564   arg :: Term Bool -> Term Int
2565 </programlisting>
2566 </para></listitem>
2567
2568 <listitem><para>
2569 When pattern-matching against data constructors drawn from a GADT, 
2570 for example in a <literal>case</literal> expression, the following rules apply:
2571 <itemizedlist>
2572 <listitem><para>The type of the scrutinee must be rigid.</para></listitem>
2573 <listitem><para>The type of the result of the <literal>case</literal> expression must be rigid.</para></listitem>
2574 <listitem><para>The type of any free variable mentioned in any of
2575 the <literal>case</literal> alternatives must be rigid.</para></listitem>
2576 </itemizedlist>
2577 A type is "rigid" if it is completely known to the compiler at its binding site.  The easiest
2578 way to ensure that a variable a rigid type is to give it a type signature.
2579 </para></listitem>
2580
2581 </itemizedlist>
2582 </para>
2583
2584 </sect2>
2585 </sect1>
2586
2587 <!-- ====================== End of Generalised algebraic data types =======================  -->
2588
2589 <sect1 id="deriving">
2590 <title>Extensions to the "deriving" mechanism</title>
2591
2592 <sect2 id="deriving-inferred">
2593 <title>Inferred context for deriving clauses</title>
2594
2595 <para>
2596 The Haskell Report is vague about exactly when a <literal>deriving</literal> clause is
2597 legal.  For example:
2598 <programlisting>
2599   data T0 f a = MkT0 a         deriving( Eq )
2600   data T1 f a = MkT1 (f a)     deriving( Eq )
2601   data T2 f a = MkT2 (f (f a)) deriving( Eq )
2602 </programlisting>
2603 The natural generated <literal>Eq</literal> code would result in these instance declarations:
2604 <programlisting>
2605   instance Eq a         => Eq (T0 f a) where ...
2606   instance Eq (f a)     => Eq (T1 f a) where ...
2607   instance Eq (f (f a)) => Eq (T2 f a) where ...
2608 </programlisting>
2609 The first of these is obviously fine. The second is still fine, although less obviously. 
2610 The third is not Haskell 98, and risks losing termination of instances.
2611 </para>
2612 <para>
2613 GHC takes a conservative position: it accepts the first two, but not the third.  The  rule is this:
2614 each constraint in the inferred instance context must consist only of type variables, 
2615 with no repetitions.
2616 </para>
2617 <para>
2618 This rule is applied regardless of flags.  If you want a more exotic context, you can write
2619 it yourself, using the <link linkend="stand-alone-deriving">standalone deriving mechanism</link>.
2620 </para>
2621 </sect2>
2622
2623 <sect2 id="stand-alone-deriving">
2624 <title>Stand-alone deriving declarations</title>
2625
2626 <para>
2627 GHC now allows stand-alone <literal>deriving</literal> declarations, enabled by <literal>-XStandaloneDeriving</literal>:
2628 <programlisting>
2629   data Foo a = Bar a | Baz String
2630
2631   deriving instance Eq a => Eq (Foo a)
2632 </programlisting>
2633 The syntax is identical to that of an ordinary instance declaration apart from (a) the keyword
2634 <literal>deriving</literal>, and (b) the absence of the <literal>where</literal> part.
2635 You must supply a context (in the example the context is <literal>(Eq a)</literal>), 
2636 exactly as you would in an ordinary instance declaration.
2637 (In contrast the context is inferred in a <literal>deriving</literal> clause 
2638 attached to a data type declaration.) 
2639
2640 A <literal>deriving instance</literal> declaration
2641 must obey the same rules concerning form and termination as ordinary instance declarations,
2642 controlled by the same flags; see <xref linkend="instance-decls"/>.
2643 </para>
2644 <para>
2645 Unlike a <literal>deriving</literal>
2646 declaration attached to a <literal>data</literal> declaration, the instance can be more specific
2647 than the data type (assuming you also use 
2648 <literal>-XFlexibleInstances</literal>, <xref linkend="instance-rules"/>).  Consider
2649 for example
2650 <programlisting>
2651   data Foo a = Bar a | Baz String
2652
2653   deriving instance Eq a => Eq (Foo [a])
2654   deriving instance Eq a => Eq (Foo (Maybe a))
2655 </programlisting>
2656 This will generate a derived instance for <literal>(Foo [a])</literal> and <literal>(Foo (Maybe a))</literal>,
2657 but other types such as <literal>(Foo (Int,Bool))</literal> will not be an instance of <literal>Eq</literal>.
2658 </para>
2659
2660 <para>The stand-alone syntax is generalised for newtypes in exactly the same
2661 way that ordinary <literal>deriving</literal> clauses are generalised (<xref linkend="newtype-deriving"/>).
2662 For example:
2663 <programlisting>
2664   newtype Foo a = MkFoo (State Int a)
2665
2666   deriving instance MonadState Int Foo
2667 </programlisting>
2668 GHC always treats the <emphasis>last</emphasis> parameter of the instance
2669 (<literal>Foo</literal> in this example) as the type whose instance is being derived.
2670 </para>
2671
2672 </sect2>
2673
2674
2675 <sect2 id="deriving-typeable">
2676 <title>Deriving clause for classes <literal>Typeable</literal> and <literal>Data</literal></title>
2677
2678 <para>
2679 Haskell 98 allows the programmer to add "<literal>deriving( Eq, Ord )</literal>" to a data type 
2680 declaration, to generate a standard instance declaration for classes specified in the <literal>deriving</literal> clause.  
2681 In Haskell 98, the only classes that may appear in the <literal>deriving</literal> clause are the standard
2682 classes <literal>Eq</literal>, <literal>Ord</literal>, 
2683 <literal>Enum</literal>, <literal>Ix</literal>, <literal>Bounded</literal>, <literal>Read</literal>, and <literal>Show</literal>.
2684 </para>
2685 <para>
2686 GHC extends this list with two more classes that may be automatically derived 
2687 (provided the <option>-XDeriveDataTypeable</option> flag is specified):
2688 <literal>Typeable</literal>, and <literal>Data</literal>.  These classes are defined in the library
2689 modules <literal>Data.Typeable</literal> and <literal>Data.Generics</literal> respectively, and the
2690 appropriate class must be in scope before it can be mentioned in the <literal>deriving</literal> clause.
2691 </para>
2692 <para>An instance of <literal>Typeable</literal> can only be derived if the
2693 data type has seven or fewer type parameters, all of kind <literal>*</literal>.
2694 The reason for this is that the <literal>Typeable</literal> class is derived using the scheme
2695 described in
2696 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/hmap/gmap2.ps">
2697 Scrap More Boilerplate: Reflection, Zips, and Generalised Casts
2698 </ulink>.
2699 (Section 7.4 of the paper describes the multiple <literal>Typeable</literal> classes that
2700 are used, and only <literal>Typeable1</literal> up to
2701 <literal>Typeable7</literal> are provided in the library.)
2702 In other cases, there is nothing to stop the programmer writing a <literal>TypableX</literal>
2703 class, whose kind suits that of the data type constructor, and
2704 then writing the data type instance by hand.
2705 </para>
2706 </sect2>
2707
2708 <sect2 id="newtype-deriving">
2709 <title>Generalised derived instances for newtypes</title>
2710
2711 <para>
2712 When you define an abstract type using <literal>newtype</literal>, you may want
2713 the new type to inherit some instances from its representation. In
2714 Haskell 98, you can inherit instances of <literal>Eq</literal>, <literal>Ord</literal>,
2715 <literal>Enum</literal> and <literal>Bounded</literal> by deriving them, but for any
2716 other classes you have to write an explicit instance declaration. For
2717 example, if you define
2718
2719 <programlisting>
2720   newtype Dollars = Dollars Int 
2721 </programlisting>
2722
2723 and you want to use arithmetic on <literal>Dollars</literal>, you have to
2724 explicitly define an instance of <literal>Num</literal>:
2725
2726 <programlisting>
2727   instance Num Dollars where
2728     Dollars a + Dollars b = Dollars (a+b)
2729     ...
2730 </programlisting>
2731 All the instance does is apply and remove the <literal>newtype</literal>
2732 constructor. It is particularly galling that, since the constructor
2733 doesn't appear at run-time, this instance declaration defines a
2734 dictionary which is <emphasis>wholly equivalent</emphasis> to the <literal>Int</literal>
2735 dictionary, only slower!
2736 </para>
2737
2738
2739 <sect3> <title> Generalising the deriving clause </title>
2740 <para>
2741 GHC now permits such instances to be derived instead, 
2742 using the flag <option>-XGeneralizedNewtypeDeriving</option>,
2743 so one can write 
2744 <programlisting>
2745   newtype Dollars = Dollars Int deriving (Eq,Show,Num)
2746 </programlisting>
2747
2748 and the implementation uses the <emphasis>same</emphasis> <literal>Num</literal> dictionary
2749 for <literal>Dollars</literal> as for <literal>Int</literal>. Notionally, the compiler
2750 derives an instance declaration of the form
2751
2752 <programlisting>
2753   instance Num Int => Num Dollars
2754 </programlisting>
2755
2756 which just adds or removes the <literal>newtype</literal> constructor according to the type.
2757 </para>
2758 <para>
2759
2760 We can also derive instances of constructor classes in a similar
2761 way. For example, suppose we have implemented state and failure monad
2762 transformers, such that
2763
2764 <programlisting>
2765   instance Monad m => Monad (State s m) 
2766   instance Monad m => Monad (Failure m)
2767 </programlisting>
2768 In Haskell 98, we can define a parsing monad by 
2769 <programlisting>
2770   type Parser tok m a = State [tok] (Failure m) a
2771 </programlisting>
2772
2773 which is automatically a monad thanks to the instance declarations
2774 above. With the extension, we can make the parser type abstract,
2775 without needing to write an instance of class <literal>Monad</literal>, via
2776
2777 <programlisting>
2778   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2779                          deriving Monad
2780 </programlisting>
2781 In this case the derived instance declaration is of the form 
2782 <programlisting>
2783   instance Monad (State [tok] (Failure m)) => Monad (Parser tok m) 
2784 </programlisting>
2785
2786 Notice that, since <literal>Monad</literal> is a constructor class, the
2787 instance is a <emphasis>partial application</emphasis> of the new type, not the
2788 entire left hand side. We can imagine that the type declaration is
2789 "eta-converted" to generate the context of the instance
2790 declaration.
2791 </para>
2792 <para>
2793
2794 We can even derive instances of multi-parameter classes, provided the
2795 newtype is the last class parameter. In this case, a ``partial
2796 application'' of the class appears in the <literal>deriving</literal>
2797 clause. For example, given the class
2798
2799 <programlisting>
2800   class StateMonad s m | m -> s where ... 
2801   instance Monad m => StateMonad s (State s m) where ... 
2802 </programlisting>
2803 then we can derive an instance of <literal>StateMonad</literal> for <literal>Parser</literal>s by 
2804 <programlisting>
2805   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2806                          deriving (Monad, StateMonad [tok])
2807 </programlisting>
2808
2809 The derived instance is obtained by completing the application of the
2810 class to the new type:
2811
2812 <programlisting>
2813   instance StateMonad [tok] (State [tok] (Failure m)) =>
2814            StateMonad [tok] (Parser tok m)
2815 </programlisting>
2816 </para>
2817 <para>
2818
2819 As a result of this extension, all derived instances in newtype
2820  declarations are treated uniformly (and implemented just by reusing
2821 the dictionary for the representation type), <emphasis>except</emphasis>
2822 <literal>Show</literal> and <literal>Read</literal>, which really behave differently for
2823 the newtype and its representation.
2824 </para>
2825 </sect3>
2826
2827 <sect3> <title> A more precise specification </title>
2828 <para>
2829 Derived instance declarations are constructed as follows. Consider the
2830 declaration (after expansion of any type synonyms)
2831
2832 <programlisting>
2833   newtype T v1...vn = T' (t vk+1...vn) deriving (c1...cm) 
2834 </programlisting>
2835
2836 where 
2837  <itemizedlist>
2838 <listitem><para>
2839   The <literal>ci</literal> are partial applications of
2840   classes of the form <literal>C t1'...tj'</literal>, where the arity of <literal>C</literal>
2841   is exactly <literal>j+1</literal>.  That is, <literal>C</literal> lacks exactly one type argument.
2842 </para></listitem>
2843 <listitem><para>
2844   The <literal>k</literal> is chosen so that <literal>ci (T v1...vk)</literal> is well-kinded.
2845 </para></listitem>
2846 <listitem><para>
2847   The type <literal>t</literal> is an arbitrary type.
2848 </para></listitem>
2849 <listitem><para>
2850   The type variables <literal>vk+1...vn</literal> do not occur in <literal>t</literal>, 
2851   nor in the <literal>ci</literal>, and
2852 </para></listitem>
2853 <listitem><para>
2854   None of the <literal>ci</literal> is <literal>Read</literal>, <literal>Show</literal>, 
2855                 <literal>Typeable</literal>, or <literal>Data</literal>.  These classes
2856                 should not "look through" the type or its constructor.  You can still
2857                 derive these classes for a newtype, but it happens in the usual way, not 
2858                 via this new mechanism.  
2859 </para></listitem>
2860 </itemizedlist>
2861 Then, for each <literal>ci</literal>, the derived instance
2862 declaration is:
2863 <programlisting>
2864   instance ci t => ci (T v1...vk)
2865 </programlisting>
2866 As an example which does <emphasis>not</emphasis> work, consider 
2867 <programlisting>
2868   newtype NonMonad m s = NonMonad (State s m s) deriving Monad 
2869 </programlisting>
2870 Here we cannot derive the instance 
2871 <programlisting>
2872   instance Monad (State s m) => Monad (NonMonad m) 
2873 </programlisting>
2874
2875 because the type variable <literal>s</literal> occurs in <literal>State s m</literal>,
2876 and so cannot be "eta-converted" away. It is a good thing that this
2877 <literal>deriving</literal> clause is rejected, because <literal>NonMonad m</literal> is
2878 not, in fact, a monad --- for the same reason. Try defining
2879 <literal>>>=</literal> with the correct type: you won't be able to.
2880 </para>
2881 <para>
2882
2883 Notice also that the <emphasis>order</emphasis> of class parameters becomes
2884 important, since we can only derive instances for the last one. If the
2885 <literal>StateMonad</literal> class above were instead defined as
2886
2887 <programlisting>
2888   class StateMonad m s | m -> s where ... 
2889 </programlisting>
2890
2891 then we would not have been able to derive an instance for the
2892 <literal>Parser</literal> type above. We hypothesise that multi-parameter
2893 classes usually have one "main" parameter for which deriving new
2894 instances is most interesting.
2895 </para>
2896 <para>Lastly, all of this applies only for classes other than
2897 <literal>Read</literal>, <literal>Show</literal>, <literal>Typeable</literal>, 
2898 and <literal>Data</literal>, for which the built-in derivation applies (section
2899 4.3.3. of the Haskell Report).
2900 (For the standard classes <literal>Eq</literal>, <literal>Ord</literal>,
2901 <literal>Ix</literal>, and <literal>Bounded</literal> it is immaterial whether
2902 the standard method is used or the one described here.)
2903 </para>
2904 </sect3>
2905 </sect2>
2906 </sect1>
2907
2908
2909 <!-- TYPE SYSTEM EXTENSIONS -->
2910 <sect1 id="type-class-extensions">
2911 <title>Class and instances declarations</title>
2912
2913 <sect2 id="multi-param-type-classes">
2914 <title>Class declarations</title>
2915
2916 <para>
2917 This section, and the next one, documents GHC's type-class extensions.
2918 There's lots of background in the paper <ulink
2919 url="http://research.microsoft.com/~simonpj/Papers/type-class-design-space/">Type
2920 classes: exploring the design space</ulink> (Simon Peyton Jones, Mark
2921 Jones, Erik Meijer).
2922 </para>
2923 <para>
2924 All the extensions are enabled by the <option>-fglasgow-exts</option> flag.
2925 </para>
2926
2927 <sect3>
2928 <title>Multi-parameter type classes</title>
2929 <para>
2930 Multi-parameter type classes are permitted. For example:
2931
2932
2933 <programlisting>
2934   class Collection c a where
2935     union :: c a -> c a -> c a
2936     ...etc.
2937 </programlisting>
2938
2939 </para>
2940 </sect3>
2941
2942 <sect3>
2943 <title>The superclasses of a class declaration</title>
2944
2945 <para>
2946 There are no restrictions on the context in a class declaration
2947 (which introduces superclasses), except that the class hierarchy must
2948 be acyclic.  So these class declarations are OK:
2949
2950
2951 <programlisting>
2952   class Functor (m k) => FiniteMap m k where
2953     ...
2954
2955   class (Monad m, Monad (t m)) => Transform t m where
2956     lift :: m a -> (t m) a
2957 </programlisting>
2958
2959
2960 </para>
2961 <para>
2962 As in Haskell 98, The class hierarchy must be acyclic.  However, the definition
2963 of "acyclic" involves only the superclass relationships.  For example,
2964 this is OK:
2965
2966
2967 <programlisting>
2968   class C a where {
2969     op :: D b => a -> b -> b
2970   }
2971
2972   class C a => D a where { ... }
2973 </programlisting>
2974
2975
2976 Here, <literal>C</literal> is a superclass of <literal>D</literal>, but it's OK for a
2977 class operation <literal>op</literal> of <literal>C</literal> to mention <literal>D</literal>.  (It
2978 would not be OK for <literal>D</literal> to be a superclass of <literal>C</literal>.)
2979 </para>
2980 </sect3>
2981
2982
2983
2984
2985 <sect3 id="class-method-types">
2986 <title>Class method types</title>
2987
2988 <para>
2989 Haskell 98 prohibits class method types to mention constraints on the
2990 class type variable, thus:
2991 <programlisting>
2992   class Seq s a where
2993     fromList :: [a] -> s a
2994     elem     :: Eq a => a -> s a -> Bool
2995 </programlisting>
2996 The type of <literal>elem</literal> is illegal in Haskell 98, because it
2997 contains the constraint <literal>Eq a</literal>, constrains only the 
2998 class type variable (in this case <literal>a</literal>).
2999 GHC lifts this restriction (flag <option>-XConstrainedClassMethods</option>).
3000 </para>
3001
3002
3003 </sect3>
3004 </sect2>
3005
3006 <sect2 id="functional-dependencies">
3007 <title>Functional dependencies
3008 </title>
3009
3010 <para> Functional dependencies are implemented as described by Mark Jones
3011 in &ldquo;<ulink url="http://citeseer.ist.psu.edu/jones00type.html">Type Classes with Functional Dependencies</ulink>&rdquo;, Mark P. Jones, 
3012 In Proceedings of the 9th European Symposium on Programming, 
3013 ESOP 2000, Berlin, Germany, March 2000, Springer-Verlag LNCS 1782,
3014 .
3015 </para>
3016 <para>
3017 Functional dependencies are introduced by a vertical bar in the syntax of a 
3018 class declaration;  e.g. 
3019 <programlisting>
3020   class (Monad m) => MonadState s m | m -> s where ...
3021
3022   class Foo a b c | a b -> c where ...
3023 </programlisting>
3024 There should be more documentation, but there isn't (yet).  Yell if you need it.
3025 </para>
3026
3027 <sect3><title>Rules for functional dependencies </title>
3028 <para>
3029 In a class declaration, all of the class type variables must be reachable (in the sense 
3030 mentioned in <xref linkend="type-restrictions"/>)
3031 from the free variables of each method type.
3032 For example:
3033
3034 <programlisting>
3035   class Coll s a where
3036     empty  :: s
3037     insert :: s -> a -> s
3038 </programlisting>
3039
3040 is not OK, because the type of <literal>empty</literal> doesn't mention
3041 <literal>a</literal>.  Functional dependencies can make the type variable
3042 reachable:
3043 <programlisting>
3044   class Coll s a | s -> a where
3045     empty  :: s
3046     insert :: s -> a -> s
3047 </programlisting>
3048
3049 Alternatively <literal>Coll</literal> might be rewritten
3050
3051 <programlisting>
3052   class Coll s a where
3053     empty  :: s a
3054     insert :: s a -> a -> s a
3055 </programlisting>
3056
3057
3058 which makes the connection between the type of a collection of
3059 <literal>a</literal>'s (namely <literal>(s a)</literal>) and the element type <literal>a</literal>.
3060 Occasionally this really doesn't work, in which case you can split the
3061 class like this:
3062
3063
3064 <programlisting>
3065   class CollE s where
3066     empty  :: s
3067
3068   class CollE s => Coll s a where
3069     insert :: s -> a -> s
3070 </programlisting>
3071 </para>
3072 </sect3>
3073
3074
3075 <sect3>
3076 <title>Background on functional dependencies</title>
3077
3078 <para>The following description of the motivation and use of functional dependencies is taken
3079 from the Hugs user manual, reproduced here (with minor changes) by kind
3080 permission of Mark Jones.
3081 </para>
3082 <para> 
3083 Consider the following class, intended as part of a
3084 library for collection types:
3085 <programlisting>
3086    class Collects e ce where
3087        empty  :: ce
3088        insert :: e -> ce -> ce
3089        member :: e -> ce -> Bool
3090 </programlisting>
3091 The type variable e used here represents the element type, while ce is the type
3092 of the container itself. Within this framework, we might want to define
3093 instances of this class for lists or characteristic functions (both of which
3094 can be used to represent collections of any equality type), bit sets (which can
3095 be used to represent collections of characters), or hash tables (which can be
3096 used to represent any collection whose elements have a hash function). Omitting
3097 standard implementation details, this would lead to the following declarations: 
3098 <programlisting>
3099    instance Eq e => Collects e [e] where ...
3100    instance Eq e => Collects e (e -> Bool) where ...
3101    instance Collects Char BitSet where ...
3102    instance (Hashable e, Collects a ce)
3103               => Collects e (Array Int ce) where ...
3104 </programlisting>
3105 All this looks quite promising; we have a class and a range of interesting
3106 implementations. Unfortunately, there are some serious problems with the class
3107 declaration. First, the empty function has an ambiguous type: 
3108 <programlisting>
3109    empty :: Collects e ce => ce
3110 </programlisting>
3111 By "ambiguous" we mean that there is a type variable e that appears on the left
3112 of the <literal>=&gt;</literal> symbol, but not on the right. The problem with
3113 this is that, according to the theoretical foundations of Haskell overloading,
3114 we cannot guarantee a well-defined semantics for any term with an ambiguous
3115 type.
3116 </para>
3117 <para>
3118 We can sidestep this specific problem by removing the empty member from the
3119 class declaration. However, although the remaining members, insert and member,
3120 do not have ambiguous types, we still run into problems when we try to use
3121 them. For example, consider the following two functions: 
3122 <programlisting>
3123    f x y = insert x . insert y
3124    g     = f True 'a'
3125 </programlisting>
3126 for which GHC infers the following types: 
3127 <programlisting>
3128    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3129    g :: (Collects Bool c, Collects Char c) => c -> c
3130 </programlisting>
3131 Notice that the type for f allows the two parameters x and y to be assigned
3132 different types, even though it attempts to insert each of the two values, one
3133 after the other, into the same collection. If we're trying to model collections
3134 that contain only one type of value, then this is clearly an inaccurate
3135 type. Worse still, the definition for g is accepted, without causing a type
3136 error. As a result, the error in this code will not be flagged at the point
3137 where it appears. Instead, it will show up only when we try to use g, which
3138 might even be in a different module.
3139 </para>
3140
3141 <sect4><title>An attempt to use constructor classes</title>
3142
3143 <para>
3144 Faced with the problems described above, some Haskell programmers might be
3145 tempted to use something like the following version of the class declaration: 
3146 <programlisting>
3147    class Collects e c where
3148       empty  :: c e
3149       insert :: e -> c e -> c e
3150       member :: e -> c e -> Bool
3151 </programlisting>
3152 The key difference here is that we abstract over the type constructor c that is
3153 used to form the collection type c e, and not over that collection type itself,
3154 represented by ce in the original class declaration. This avoids the immediate
3155 problems that we mentioned above: empty has type <literal>Collects e c => c
3156 e</literal>, which is not ambiguous. 
3157 </para>
3158 <para>
3159 The function f from the previous section has a more accurate type: 
3160 <programlisting>
3161    f :: (Collects e c) => e -> e -> c e -> c e
3162 </programlisting>
3163 The function g from the previous section is now rejected with a type error as
3164 we would hope because the type of f does not allow the two arguments to have
3165 different types. 
3166 This, then, is an example of a multiple parameter class that does actually work
3167 quite well in practice, without ambiguity problems.
3168 There is, however, a catch. This version of the Collects class is nowhere near
3169 as general as the original class seemed to be: only one of the four instances
3170 for <literal>Collects</literal>
3171 given above can be used with this version of Collects because only one of
3172 them---the instance for lists---has a collection type that can be written in
3173 the form c e, for some type constructor c, and element type e.
3174 </para>
3175 </sect4>
3176
3177 <sect4><title>Adding functional dependencies</title>
3178
3179 <para>
3180 To get a more useful version of the Collects class, Hugs provides a mechanism
3181 that allows programmers to specify dependencies between the parameters of a
3182 multiple parameter class (For readers with an interest in theoretical
3183 foundations and previous work: The use of dependency information can be seen
3184 both as a generalization of the proposal for `parametric type classes' that was
3185 put forward by Chen, Hudak, and Odersky, or as a special case of Mark Jones's
3186 later framework for "improvement" of qualified types. The
3187 underlying ideas are also discussed in a more theoretical and abstract setting
3188 in a manuscript [implparam], where they are identified as one point in a
3189 general design space for systems of implicit parameterization.).
3190
3191 To start with an abstract example, consider a declaration such as: 
3192 <programlisting>
3193    class C a b where ...
3194 </programlisting>
3195 which tells us simply that C can be thought of as a binary relation on types
3196 (or type constructors, depending on the kinds of a and b). Extra clauses can be
3197 included in the definition of classes to add information about dependencies
3198 between parameters, as in the following examples: 
3199 <programlisting>
3200    class D a b | a -> b where ...
3201    class E a b | a -> b, b -> a where ...
3202 </programlisting>
3203 The notation <literal>a -&gt; b</literal> used here between the | and where
3204 symbols --- not to be
3205 confused with a function type --- indicates that the a parameter uniquely
3206 determines the b parameter, and might be read as "a determines b." Thus D is
3207 not just a relation, but actually a (partial) function. Similarly, from the two
3208 dependencies that are included in the definition of E, we can see that E
3209 represents a (partial) one-one mapping between types.
3210 </para>
3211 <para>
3212 More generally, dependencies take the form <literal>x1 ... xn -&gt; y1 ... ym</literal>,
3213 where x1, ..., xn, and y1, ..., yn are type variables with n&gt;0 and
3214 m&gt;=0, meaning that the y parameters are uniquely determined by the x
3215 parameters. Spaces can be used as separators if more than one variable appears
3216 on any single side of a dependency, as in <literal>t -&gt; a b</literal>. Note that a class may be
3217 annotated with multiple dependencies using commas as separators, as in the
3218 definition of E above. Some dependencies that we can write in this notation are
3219 redundant, and will be rejected because they don't serve any useful
3220 purpose, and may instead indicate an error in the program. Examples of
3221 dependencies like this include  <literal>a -&gt; a </literal>,  
3222 <literal>a -&gt; a a </literal>,  
3223 <literal>a -&gt; </literal>, etc. There can also be
3224 some redundancy if multiple dependencies are given, as in  
3225 <literal>a-&gt;b</literal>, 
3226  <literal>b-&gt;c </literal>,  <literal>a-&gt;c </literal>, and
3227 in which some subset implies the remaining dependencies. Examples like this are
3228 not treated as errors. Note that dependencies appear only in class
3229 declarations, and not in any other part of the language. In particular, the
3230 syntax for instance declarations, class constraints, and types is completely
3231 unchanged.
3232 </para>
3233 <para>
3234 By including dependencies in a class declaration, we provide a mechanism for
3235 the programmer to specify each multiple parameter class more precisely. The
3236 compiler, on the other hand, is responsible for ensuring that the set of
3237 instances that are in scope at any given point in the program is consistent
3238 with any declared dependencies. For example, the following pair of instance
3239 declarations cannot appear together in the same scope because they violate the
3240 dependency for D, even though either one on its own would be acceptable: 
3241 <programlisting>
3242    instance D Bool Int where ...
3243    instance D Bool Char where ...
3244 </programlisting>
3245 Note also that the following declaration is not allowed, even by itself: 
3246 <programlisting>
3247    instance D [a] b where ...
3248 </programlisting>
3249 The problem here is that this instance would allow one particular choice of [a]
3250 to be associated with more than one choice for b, which contradicts the
3251 dependency specified in the definition of D. More generally, this means that,
3252 in any instance of the form: 
3253 <programlisting>
3254    instance D t s where ...
3255 </programlisting>
3256 for some particular types t and s, the only variables that can appear in s are
3257 the ones that appear in t, and hence, if the type t is known, then s will be
3258 uniquely determined.
3259 </para>
3260 <para>
3261 The benefit of including dependency information is that it allows us to define
3262 more general multiple parameter classes, without ambiguity problems, and with
3263 the benefit of more accurate types. To illustrate this, we return to the
3264 collection class example, and annotate the original definition of <literal>Collects</literal>
3265 with a simple dependency: 
3266 <programlisting>
3267    class Collects e ce | ce -> e where
3268       empty  :: ce
3269       insert :: e -> ce -> ce
3270       member :: e -> ce -> Bool
3271 </programlisting>
3272 The dependency <literal>ce -&gt; e</literal> here specifies that the type e of elements is uniquely
3273 determined by the type of the collection ce. Note that both parameters of
3274 Collects are of kind *; there are no constructor classes here. Note too that
3275 all of the instances of Collects that we gave earlier can be used
3276 together with this new definition.
3277 </para>
3278 <para>
3279 What about the ambiguity problems that we encountered with the original
3280 definition? The empty function still has type Collects e ce => ce, but it is no
3281 longer necessary to regard that as an ambiguous type: Although the variable e
3282 does not appear on the right of the => symbol, the dependency for class
3283 Collects tells us that it is uniquely determined by ce, which does appear on
3284 the right of the => symbol. Hence the context in which empty is used can still
3285 give enough information to determine types for both ce and e, without
3286 ambiguity. More generally, we need only regard a type as ambiguous if it
3287 contains a variable on the left of the => that is not uniquely determined
3288 (either directly or indirectly) by the variables on the right.
3289 </para>
3290 <para>
3291 Dependencies also help to produce more accurate types for user defined
3292 functions, and hence to provide earlier detection of errors, and less cluttered
3293 types for programmers to work with. Recall the previous definition for a
3294 function f: 
3295 <programlisting>
3296    f x y = insert x y = insert x . insert y
3297 </programlisting>
3298 for which we originally obtained a type: 
3299 <programlisting>
3300    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3301 </programlisting>
3302 Given the dependency information that we have for Collects, however, we can
3303 deduce that a and b must be equal because they both appear as the second
3304 parameter in a Collects constraint with the same first parameter c. Hence we
3305 can infer a shorter and more accurate type for f: 
3306 <programlisting>
3307    f :: (Collects a c) => a -> a -> c -> c
3308 </programlisting>
3309 In a similar way, the earlier definition of g will now be flagged as a type error.
3310 </para>
3311 <para>
3312 Although we have given only a few examples here, it should be clear that the
3313 addition of dependency information can help to make multiple parameter classes
3314 more useful in practice, avoiding ambiguity problems, and allowing more general
3315 sets of instance declarations.
3316 </para>
3317 </sect4>
3318 </sect3>
3319 </sect2>
3320
3321 <sect2 id="instance-decls">
3322 <title>Instance declarations</title>
3323
3324 <sect3 id="instance-rules">
3325 <title>Relaxed rules for instance declarations</title>
3326
3327 <para>An instance declaration has the form
3328 <screen>
3329   instance ( <replaceable>assertion</replaceable><subscript>1</subscript>, ..., <replaceable>assertion</replaceable><subscript>n</subscript>) =&gt; <replaceable>class</replaceable> <replaceable>type</replaceable><subscript>1</subscript> ... <replaceable>type</replaceable><subscript>m</subscript> where ...
3330 </screen>
3331 The part before the "<literal>=&gt;</literal>" is the
3332 <emphasis>context</emphasis>, while the part after the
3333 "<literal>=&gt;</literal>" is the <emphasis>head</emphasis> of the instance declaration.
3334 </para>
3335
3336 <para>
3337 In Haskell 98 the head of an instance declaration
3338 must be of the form <literal>C (T a1 ... an)</literal>, where
3339 <literal>C</literal> is the class, <literal>T</literal> is a type constructor,
3340 and the <literal>a1 ... an</literal> are distinct type variables.
3341 Furthermore, the assertions in the context of the instance declaration
3342 must be of the form <literal>C a</literal> where <literal>a</literal>
3343 is a type variable that occurs in the head.
3344 </para>
3345 <para>
3346 The <option>-XFlexibleInstances</option> flag loosens these restrictions
3347 considerably.  Firstly, multi-parameter type classes are permitted.  Secondly,
3348 the context and head of the instance declaration can each consist of arbitrary
3349 (well-kinded) assertions <literal>(C t1 ... tn)</literal> subject only to the
3350 following rules:
3351 <orderedlist>
3352 <listitem><para>
3353 The Paterson Conditions: for each assertion in the context
3354 <orderedlist>
3355 <listitem><para>No type variable has more occurrences in the assertion than in the head</para></listitem>
3356 <listitem><para>The assertion has fewer constructors and variables (taken together
3357       and counting repetitions) than the head</para></listitem>
3358 </orderedlist>
3359 </para></listitem>
3360
3361 <listitem><para>The Coverage Condition.  For each functional dependency,
3362 <replaceable>tvs</replaceable><subscript>left</subscript> <literal>-&gt;</literal>
3363 <replaceable>tvs</replaceable><subscript>right</subscript>,  of the class,
3364 every type variable in
3365 S(<replaceable>tvs</replaceable><subscript>right</subscript>) must appear in 
3366 S(<replaceable>tvs</replaceable><subscript>left</subscript>), where S is the
3367 substitution mapping each type variable in the class declaration to the
3368 corresponding type in the instance declaration.
3369 </para></listitem>
3370 </orderedlist>
3371 These restrictions ensure that context reduction terminates: each reduction
3372 step makes the problem smaller by at least one
3373 constructor.  Both the Paterson Conditions and the Coverage Condition are lifted 
3374 if you give the <option>-XUndecidableInstances</option> 
3375 flag (<xref linkend="undecidable-instances"/>).
3376 You can find lots of background material about the reason for these
3377 restrictions in the paper <ulink
3378 url="http://research.microsoft.com/%7Esimonpj/papers/fd%2Dchr/">
3379 Understanding functional dependencies via Constraint Handling Rules</ulink>.
3380 </para>
3381 <para>
3382 For example, these are OK:
3383 <programlisting>
3384   instance C Int [a]          -- Multiple parameters
3385   instance Eq (S [a])         -- Structured type in head
3386
3387       -- Repeated type variable in head
3388   instance C4 a a => C4 [a] [a] 
3389   instance Stateful (ST s) (MutVar s)
3390
3391       -- Head can consist of type variables only
3392   instance C a
3393   instance (Eq a, Show b) => C2 a b
3394
3395       -- Non-type variables in context
3396   instance Show (s a) => Show (Sized s a)
3397   instance C2 Int a => C3 Bool [a]
3398   instance C2 Int a => C3 [a] b
3399 </programlisting>
3400 But these are not:
3401 <programlisting>
3402       -- Context assertion no smaller than head
3403   instance C a => C a where ...
3404       -- (C b b) has more more occurrences of b than the head
3405   instance C b b => Foo [b] where ...
3406 </programlisting>
3407 </para>
3408
3409 <para>
3410 The same restrictions apply to instances generated by
3411 <literal>deriving</literal> clauses.  Thus the following is accepted:
3412 <programlisting>
3413   data MinHeap h a = H a (h a)
3414     deriving (Show)
3415 </programlisting>
3416 because the derived instance
3417 <programlisting>
3418   instance (Show a, Show (h a)) => Show (MinHeap h a)
3419 </programlisting>
3420 conforms to the above rules.
3421 </para>
3422
3423 <para>
3424 A useful idiom permitted by the above rules is as follows.
3425 If one allows overlapping instance declarations then it's quite
3426 convenient to have a "default instance" declaration that applies if
3427 something more specific does not:
3428 <programlisting>
3429   instance C a where
3430     op = ... -- Default
3431 </programlisting>
3432 </para>
3433 </sect3>
3434
3435 <sect3 id="undecidable-instances">
3436 <title>Undecidable instances</title>
3437
3438 <para>
3439 Sometimes even the rules of <xref linkend="instance-rules"/> are too onerous.
3440 For example, sometimes you might want to use the following to get the
3441 effect of a "class synonym":
3442 <programlisting>
3443   class (C1 a, C2 a, C3 a) => C a where { }
3444
3445   instance (C1 a, C2 a, C3 a) => C a where { }
3446 </programlisting>
3447 This allows you to write shorter signatures:
3448 <programlisting>
3449   f :: C a => ...
3450 </programlisting>
3451 instead of
3452 <programlisting>
3453   f :: (C1 a, C2 a, C3 a) => ...
3454 </programlisting>
3455 The restrictions on functional dependencies (<xref
3456 linkend="functional-dependencies"/>) are particularly troublesome.
3457 It is tempting to introduce type variables in the context that do not appear in
3458 the head, something that is excluded by the normal rules. For example:
3459 <programlisting>
3460   class HasConverter a b | a -> b where
3461      convert :: a -> b
3462    
3463   data Foo a = MkFoo a
3464
3465   instance (HasConverter a b,Show b) => Show (Foo a) where
3466      show (MkFoo value) = show (convert value)
3467 </programlisting>
3468 This is dangerous territory, however. Here, for example, is a program that would make the
3469 typechecker loop:
3470 <programlisting>
3471   class D a
3472   class F a b | a->b
3473   instance F [a] [[a]]
3474   instance (D c, F a c) => D [a]   -- 'c' is not mentioned in the head
3475 </programlisting>
3476 Similarly, it can be tempting to lift the coverage condition:
3477 <programlisting>
3478   class Mul a b c | a b -> c where
3479         (.*.) :: a -> b -> c
3480
3481   instance Mul Int Int Int where (.*.) = (*)
3482   instance Mul Int Float Float where x .*. y = fromIntegral x * y
3483   instance Mul a b c => Mul a [b] [c] where x .*. v = map (x.*.) v
3484 </programlisting>
3485 The third instance declaration does not obey the coverage condition;
3486 and indeed the (somewhat strange) definition:
3487 <programlisting>
3488   f = \ b x y -> if b then x .*. [y] else y
3489 </programlisting>
3490 makes instance inference go into a loop, because it requires the constraint
3491 <literal>(Mul a [b] b)</literal>.
3492 </para>
3493 <para>
3494 Nevertheless, GHC allows you to experiment with more liberal rules.  If you use
3495 the experimental flag <option>-XUndecidableInstances</option>
3496 <indexterm><primary>-XUndecidableInstances</primary></indexterm>, 
3497 both the Paterson Conditions and the Coverage Condition
3498 (described in <xref linkend="instance-rules"/>) are lifted.  Termination is ensured by having a
3499 fixed-depth recursion stack.  If you exceed the stack depth you get a
3500 sort of backtrace, and the opportunity to increase the stack depth
3501 with <option>-fcontext-stack=</option><emphasis>N</emphasis>.
3502 </para>
3503
3504 </sect3>
3505
3506
3507 <sect3 id="instance-overlap">
3508 <title>Overlapping instances</title>
3509 <para>
3510 In general, <emphasis>GHC requires that that it be unambiguous which instance
3511 declaration
3512 should be used to resolve a type-class constraint</emphasis>. This behaviour
3513 can be modified by two flags: <option>-XOverlappingInstances</option>
3514 <indexterm><primary>-XOverlappingInstances
3515 </primary></indexterm> 
3516 and <option>-XIncoherentInstances</option>
3517 <indexterm><primary>-XIncoherentInstances
3518 </primary></indexterm>, as this section discusses.  Both these
3519 flags are dynamic flags, and can be set on a per-module basis, using 
3520 an <literal>OPTIONS_GHC</literal> pragma if desired (<xref linkend="source-file-options"/>).</para>
3521 <para>
3522 When GHC tries to resolve, say, the constraint <literal>C Int Bool</literal>,
3523 it tries to match every instance declaration against the
3524 constraint,
3525 by instantiating the head of the instance declaration.  For example, consider
3526 these declarations:
3527 <programlisting>
3528   instance context1 => C Int a     where ...  -- (A)
3529   instance context2 => C a   Bool  where ...  -- (B)
3530   instance context3 => C Int [a]   where ...  -- (C)
3531   instance context4 => C Int [Int] where ...  -- (D)
3532 </programlisting>
3533 The instances (A) and (B) match the constraint <literal>C Int Bool</literal>, 
3534 but (C) and (D) do not.  When matching, GHC takes
3535 no account of the context of the instance declaration
3536 (<literal>context1</literal> etc).
3537 GHC's default behaviour is that <emphasis>exactly one instance must match the
3538 constraint it is trying to resolve</emphasis>.  
3539 It is fine for there to be a <emphasis>potential</emphasis> of overlap (by
3540 including both declarations (A) and (B), say); an error is only reported if a 
3541 particular constraint matches more than one.
3542 </para>
3543
3544 <para>
3545 The <option>-XOverlappingInstances</option> flag instructs GHC to allow
3546 more than one instance to match, provided there is a most specific one.  For
3547 example, the constraint <literal>C Int [Int]</literal> matches instances (A),
3548 (C) and (D), but the last is more specific, and hence is chosen.  If there is no
3549 most-specific match, the program is rejected.
3550 </para>
3551 <para>
3552 However, GHC is conservative about committing to an overlapping instance.  For example:
3553 <programlisting>
3554   f :: [b] -> [b]
3555   f x = ...
3556 </programlisting>
3557 Suppose that from the RHS of <literal>f</literal> we get the constraint
3558 <literal>C Int [b]</literal>.  But
3559 GHC does not commit to instance (C), because in a particular
3560 call of <literal>f</literal>, <literal>b</literal> might be instantiate 
3561 to <literal>Int</literal>, in which case instance (D) would be more specific still.
3562 So GHC rejects the program.  
3563 (If you add the flag <option>-XIncoherentInstances</option>,
3564 GHC will instead pick (C), without complaining about 
3565 the problem of subsequent instantiations.)
3566 </para>
3567 <para>
3568 Notice that we gave a type signature to <literal>f</literal>, so GHC had to
3569 <emphasis>check</emphasis> that <literal>f</literal> has the specified type.  
3570 Suppose instead we do not give a type signature, asking GHC to <emphasis>infer</emphasis>
3571 it instead.  In this case, GHC will refrain from
3572 simplifying the constraint <literal>C Int [Int]</literal> (for the same reason
3573 as before) but, rather than rejecting the program, it will infer the type
3574 <programlisting>
3575   f :: C Int b => [b] -> [b]
3576 </programlisting>
3577 That postpones the question of which instance to pick to the 
3578 call site for <literal>f</literal>
3579 by which time more is known about the type <literal>b</literal>.
3580 </para>
3581 <para>
3582 The willingness to be overlapped or incoherent is a property of 
3583 the <emphasis>instance declaration</emphasis> itself, controlled by the
3584 presence or otherwise of the <option>-XOverlappingInstances</option> 
3585 and <option>-XIncoherentInstances</option> flags when that module is
3586 being defined.  Neither flag is required in a module that imports and uses the
3587 instance declaration.  Specifically, during the lookup process:
3588 <itemizedlist>
3589 <listitem><para>
3590 An instance declaration is ignored during the lookup process if (a) a more specific
3591 match is found, and (b) the instance declaration was compiled with 
3592 <option>-XOverlappingInstances</option>.  The flag setting for the
3593 more-specific instance does not matter.
3594 </para></listitem>
3595 <listitem><para>
3596 Suppose an instance declaration does not match the constraint being looked up, but
3597 does unify with it, so that it might match when the constraint is further 
3598 instantiated.  Usually GHC will regard this as a reason for not committing to
3599 some other constraint.  But if the instance declaration was compiled with
3600 <option>-XIncoherentInstances</option>, GHC will skip the "does-it-unify?" 
3601 check for that declaration.
3602 </para></listitem>
3603 </itemizedlist>
3604 These rules make it possible for a library author to design a library that relies on 
3605 overlapping instances without the library client having to know.  
3606 </para>
3607 <para>
3608 If an instance declaration is compiled without
3609 <option>-XOverlappingInstances</option>,
3610 then that instance can never be overlapped.  This could perhaps be
3611 inconvenient.  Perhaps the rule should instead say that the
3612 <emphasis>overlapping</emphasis> instance declaration should be compiled in
3613 this way, rather than the <emphasis>overlapped</emphasis> one.  Perhaps overlap
3614 at a usage site should be permitted regardless of how the instance declarations
3615 are compiled, if the <option>-XOverlappingInstances</option> flag is
3616 used at the usage site.  (Mind you, the exact usage site can occasionally be
3617 hard to pin down.)  We are interested to receive feedback on these points.
3618 </para>
3619 <para>The <option>-XIncoherentInstances</option> flag implies the
3620 <option>-XOverlappingInstances</option> flag, but not vice versa.
3621 </para>
3622 </sect3>
3623
3624 <sect3>
3625 <title>Type synonyms in the instance head</title>
3626
3627 <para>
3628 <emphasis>Unlike Haskell 98, instance heads may use type
3629 synonyms</emphasis>.  (The instance "head" is the bit after the "=>" in an instance decl.)
3630 As always, using a type synonym is just shorthand for
3631 writing the RHS of the type synonym definition.  For example:
3632
3633
3634 <programlisting>
3635   type Point = (Int,Int)
3636   instance C Point   where ...
3637   instance C [Point] where ...
3638 </programlisting>
3639
3640
3641 is legal.  However, if you added
3642
3643
3644 <programlisting>
3645   instance C (Int,Int) where ...
3646 </programlisting>
3647
3648
3649 as well, then the compiler will complain about the overlapping
3650 (actually, identical) instance declarations.  As always, type synonyms
3651 must be fully applied.  You cannot, for example, write:
3652
3653
3654 <programlisting>
3655   type P a = [[a]]
3656   instance Monad P where ...
3657 </programlisting>
3658
3659
3660 This design decision is independent of all the others, and easily
3661 reversed, but it makes sense to me.
3662
3663 </para>
3664 </sect3>
3665
3666
3667 </sect2>
3668
3669 <sect2 id="overloaded-strings">
3670 <title>Overloaded string literals
3671 </title>
3672
3673 <para>
3674 GHC supports <emphasis>overloaded string literals</emphasis>.  Normally a
3675 string literal has type <literal>String</literal>, but with overloaded string
3676 literals enabled (with <literal>-XOverloadedStrings</literal>)
3677  a string literal has type <literal>(IsString a) => a</literal>.
3678 </para>
3679 <para>
3680 This means that the usual string syntax can be used, e.g., for packed strings
3681 and other variations of string like types.  String literals behave very much
3682 like integer literals, i.e., they can be used in both expressions and patterns.
3683 If used in a pattern the literal with be replaced by an equality test, in the same
3684 way as an integer literal is.
3685 </para>
3686 <para>
3687 The class <literal>IsString</literal> is defined as:
3688 <programlisting>
3689 class IsString a where
3690     fromString :: String -> a
3691 </programlisting>
3692 The only predefined instance is the obvious one to make strings work as usual:
3693 <programlisting>
3694 instance IsString [Char] where
3695     fromString cs = cs
3696 </programlisting>
3697 The class <literal>IsString</literal> is not in scope by default.  If you want to mention
3698 it explicitly (for example, to give an instance declaration for it), you can import it
3699 from module <literal>GHC.Exts</literal>.
3700 </para>
3701 <para>
3702 Haskell's defaulting mechanism is extended to cover string literals, when <option>-XOverloadedStrings</option> is specified.
3703 Specifically:
3704 <itemizedlist>
3705 <listitem><para>
3706 Each type in a default declaration must be an 
3707 instance of <literal>Num</literal> <emphasis>or</emphasis> of <literal>IsString</literal>.
3708 </para></listitem>
3709
3710 <listitem><para>
3711 The standard defaulting rule (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.3.4">Haskell Report, Section 4.3.4</ulink>)
3712 is extended thus: defaulting applies when all the unresolved constraints involve standard classes
3713 <emphasis>or</emphasis> <literal>IsString</literal>; and at least one is a numeric class
3714 <emphasis>or</emphasis> <literal>IsString</literal>.
3715 </para></listitem>
3716 </itemizedlist>
3717 </para>
3718 <para>
3719 A small example:
3720 <programlisting>
3721 module Main where
3722
3723 import GHC.Exts( IsString(..) )
3724
3725 newtype MyString = MyString String deriving (Eq, Show)
3726 instance IsString MyString where
3727     fromString = MyString
3728
3729 greet :: MyString -> MyString
3730 greet "hello" = "world"
3731 greet other = other
3732
3733 main = do
3734     print $ greet "hello"
3735     print $ greet "fool"
3736 </programlisting>
3737 </para>
3738 <para>
3739 Note that deriving <literal>Eq</literal> is necessary for the pattern matching
3740 to work since it gets translated into an equality comparison.
3741 </para>
3742 </sect2>
3743
3744 </sect1>
3745
3746 <sect1 id="other-type-extensions">
3747 <title>Other type system extensions</title>
3748
3749 <sect2 id="type-restrictions">
3750 <title>Type signatures</title>
3751
3752 <sect3 id="flexible-contexts"><title>The context of a type signature</title>
3753 <para>
3754 Unlike Haskell 98, constraints in types do <emphasis>not</emphasis> have to be of
3755 the form <emphasis>(class type-variable)</emphasis> or
3756 <emphasis>(class (type-variable type-variable ...))</emphasis>.  Thus,
3757 these type signatures are perfectly OK
3758 <programlisting>
3759   g :: Eq [a] => ...
3760   g :: Ord (T a ()) => ...
3761 </programlisting>
3762 </para>
3763 <para>
3764 GHC imposes the following restrictions on the constraints in a type signature.
3765 Consider the type:
3766
3767 <programlisting>
3768   forall tv1..tvn (c1, ...,cn) => type
3769 </programlisting>
3770
3771 (Here, we write the "foralls" explicitly, although the Haskell source
3772 language omits them; in Haskell 98, all the free type variables of an
3773 explicit source-language type signature are universally quantified,
3774 except for the class type variables in a class declaration.  However,
3775 in GHC, you can give the foralls if you want.  See <xref linkend="universal-quantification"/>).
3776 </para>
3777
3778 <para>
3779
3780 <orderedlist>
3781 <listitem>
3782
3783 <para>
3784  <emphasis>Each universally quantified type variable
3785 <literal>tvi</literal> must be reachable from <literal>type</literal></emphasis>.
3786
3787 A type variable <literal>a</literal> is "reachable" if it appears
3788 in the same constraint as either a type variable free in
3789 <literal>type</literal>, or another reachable type variable.  
3790 A value with a type that does not obey 
3791 this reachability restriction cannot be used without introducing
3792 ambiguity; that is why the type is rejected.
3793 Here, for example, is an illegal type:
3794
3795
3796 <programlisting>
3797   forall a. Eq a => Int
3798 </programlisting>
3799
3800
3801 When a value with this type was used, the constraint <literal>Eq tv</literal>
3802 would be introduced where <literal>tv</literal> is a fresh type variable, and
3803 (in the dictionary-translation implementation) the value would be
3804 applied to a dictionary for <literal>Eq tv</literal>.  The difficulty is that we
3805 can never know which instance of <literal>Eq</literal> to use because we never
3806 get any more information about <literal>tv</literal>.
3807 </para>
3808 <para>
3809 Note
3810 that the reachability condition is weaker than saying that <literal>a</literal> is
3811 functionally dependent on a type variable free in
3812 <literal>type</literal> (see <xref
3813 linkend="functional-dependencies"/>).  The reason for this is there
3814 might be a "hidden" dependency, in a superclass perhaps.  So
3815 "reachable" is a conservative approximation to "functionally dependent".
3816 For example, consider:
3817 <programlisting>
3818   class C a b | a -> b where ...
3819   class C a b => D a b where ...
3820   f :: forall a b. D a b => a -> a
3821 </programlisting>
3822 This is fine, because in fact <literal>a</literal> does functionally determine <literal>b</literal>
3823 but that is not immediately apparent from <literal>f</literal>'s type.
3824 </para>
3825 </listitem>
3826 <listitem>
3827
3828 <para>
3829  <emphasis>Every constraint <literal>ci</literal> must mention at least one of the
3830 universally quantified type variables <literal>tvi</literal></emphasis>.
3831
3832 For example, this type is OK because <literal>C a b</literal> mentions the
3833 universally quantified type variable <literal>b</literal>:
3834
3835
3836 <programlisting>
3837   forall a. C a b => burble
3838 </programlisting>
3839
3840
3841 The next type is illegal because the constraint <literal>Eq b</literal> does not
3842 mention <literal>a</literal>:
3843
3844
3845 <programlisting>
3846   forall a. Eq b => burble
3847 </programlisting>
3848
3849
3850 The reason for this restriction is milder than the other one.  The
3851 excluded types are never useful or necessary (because the offending
3852 context doesn't need to be witnessed at this point; it can be floated
3853 out).  Furthermore, floating them out increases sharing. Lastly,
3854 excluding them is a conservative choice; it leaves a patch of
3855 territory free in case we need it later.
3856
3857 </para>
3858 </listitem>
3859
3860 </orderedlist>
3861
3862 </para>
3863 </sect3>
3864
3865
3866
3867 </sect2>
3868
3869 <sect2 id="implicit-parameters">
3870 <title>Implicit parameters</title>
3871
3872 <para> Implicit parameters are implemented as described in 
3873 "Implicit parameters: dynamic scoping with static types", 
3874 J Lewis, MB Shields, E Meijer, J Launchbury,
3875 27th ACM Symposium on Principles of Programming Languages (POPL'00),
3876 Boston, Jan 2000.
3877 </para>
3878
3879 <para>(Most of the following, still rather incomplete, documentation is
3880 due to Jeff Lewis.)</para>
3881
3882 <para>Implicit parameter support is enabled with the option
3883 <option>-XImplicitParams</option>.</para>
3884
3885 <para>
3886 A variable is called <emphasis>dynamically bound</emphasis> when it is bound by the calling
3887 context of a function and <emphasis>statically bound</emphasis> when bound by the callee's
3888 context. In Haskell, all variables are statically bound. Dynamic
3889 binding of variables is a notion that goes back to Lisp, but was later
3890 discarded in more modern incarnations, such as Scheme. Dynamic binding
3891 can be very confusing in an untyped language, and unfortunately, typed
3892 languages, in particular Hindley-Milner typed languages like Haskell,
3893 only support static scoping of variables.
3894 </para>
3895 <para>
3896 However, by a simple extension to the type class system of Haskell, we
3897 can support dynamic binding. Basically, we express the use of a
3898 dynamically bound variable as a constraint on the type. These
3899 constraints lead to types of the form <literal>(?x::t') => t</literal>, which says "this
3900 function uses a dynamically-bound variable <literal>?x</literal> 
3901 of type <literal>t'</literal>". For
3902 example, the following expresses the type of a sort function,
3903 implicitly parameterized by a comparison function named <literal>cmp</literal>.
3904 <programlisting>
3905   sort :: (?cmp :: a -> a -> Bool) => [a] -> [a]
3906 </programlisting>
3907 The dynamic binding constraints are just a new form of predicate in the type class system.
3908 </para>
3909 <para>
3910 An implicit parameter occurs in an expression using the special form <literal>?x</literal>, 
3911 where <literal>x</literal> is
3912 any valid identifier (e.g. <literal>ord ?x</literal> is a valid expression). 
3913 Use of this construct also introduces a new
3914 dynamic-binding constraint in the type of the expression. 
3915 For example, the following definition
3916 shows how we can define an implicitly parameterized sort function in
3917 terms of an explicitly parameterized <literal>sortBy</literal> function:
3918 <programlisting>
3919   sortBy :: (a -> a -> Bool) -> [a] -> [a]
3920
3921   sort   :: (?cmp :: a -> a -> Bool) => [a] -> [a]
3922   sort    = sortBy ?cmp
3923 </programlisting>
3924 </para>
3925
3926 <sect3>
3927 <title>Implicit-parameter type constraints</title>
3928 <para>
3929 Dynamic binding constraints behave just like other type class
3930 constraints in that they are automatically propagated. Thus, when a
3931 function is used, its implicit parameters are inherited by the
3932 function that called it. For example, our <literal>sort</literal> function might be used
3933 to pick out the least value in a list:
3934 <programlisting>
3935   least   :: (?cmp :: a -> a -> Bool) => [a] -> a
3936   least xs = head (sort xs)
3937 </programlisting>
3938 Without lifting a finger, the <literal>?cmp</literal> parameter is
3939 propagated to become a parameter of <literal>least</literal> as well. With explicit
3940 parameters, the default is that parameters must always be explicit
3941 propagated. With implicit parameters, the default is to always
3942 propagate them.
3943 </para>
3944 <para>
3945 An implicit-parameter type constraint differs from other type class constraints in the
3946 following way: All uses of a particular implicit parameter must have
3947 the same type. This means that the type of <literal>(?x, ?x)</literal> 
3948 is <literal>(?x::a) => (a,a)</literal>, and not 
3949 <literal>(?x::a, ?x::b) => (a, b)</literal>, as would be the case for type
3950 class constraints.
3951 </para>
3952
3953 <para> You can't have an implicit parameter in the context of a class or instance
3954 declaration.  For example, both these declarations are illegal:
3955 <programlisting>
3956   class (?x::Int) => C a where ...
3957   instance (?x::a) => Foo [a] where ...
3958 </programlisting>
3959 Reason: exactly which implicit parameter you pick up depends on exactly where
3960 you invoke a function. But the ``invocation'' of instance declarations is done
3961 behind the scenes by the compiler, so it's hard to figure out exactly where it is done.
3962 Easiest thing is to outlaw the offending types.</para>
3963 <para>
3964 Implicit-parameter constraints do not cause ambiguity.  For example, consider:
3965 <programlisting>
3966    f :: (?x :: [a]) => Int -> Int
3967    f n = n + length ?x
3968
3969    g :: (Read a, Show a) => String -> String
3970    g s = show (read s)
3971 </programlisting>
3972 Here, <literal>g</literal> has an ambiguous type, and is rejected, but <literal>f</literal>
3973 is fine.  The binding for <literal>?x</literal> at <literal>f</literal>'s call site is 
3974 quite unambiguous, and fixes the type <literal>a</literal>.
3975 </para>
3976 </sect3>
3977
3978 <sect3>
3979 <title>Implicit-parameter bindings</title>
3980
3981 <para>
3982 An implicit parameter is <emphasis>bound</emphasis> using the standard
3983 <literal>let</literal> or <literal>where</literal> binding forms.
3984 For example, we define the <literal>min</literal> function by binding
3985 <literal>cmp</literal>.
3986 <programlisting>
3987   min :: [a] -> a
3988   min  = let ?cmp = (&lt;=) in least
3989 </programlisting>
3990 </para>
3991 <para>
3992 A group of implicit-parameter bindings may occur anywhere a normal group of Haskell
3993 bindings can occur, except at top level.  That is, they can occur in a <literal>let</literal> 
3994 (including in a list comprehension, or do-notation, or pattern guards), 
3995 or a <literal>where</literal> clause.
3996 Note the following points:
3997 <itemizedlist>
3998 <listitem><para>
3999 An implicit-parameter binding group must be a
4000 collection of simple bindings to implicit-style variables (no
4001 function-style bindings, and no type signatures); these bindings are
4002 neither polymorphic or recursive.  
4003 </para></listitem>
4004 <listitem><para>
4005 You may not mix implicit-parameter bindings with ordinary bindings in a 
4006 single <literal>let</literal>
4007 expression; use two nested <literal>let</literal>s instead.
4008 (In the case of <literal>where</literal> you are stuck, since you can't nest <literal>where</literal> clauses.)
4009 </para></listitem>
4010
4011 <listitem><para>
4012 You may put multiple implicit-parameter bindings in a
4013 single binding group; but they are <emphasis>not</emphasis> treated
4014 as a mutually recursive group (as ordinary <literal>let</literal> bindings are).
4015 Instead they are treated as a non-recursive group, simultaneously binding all the implicit
4016 parameter.  The bindings are not nested, and may be re-ordered without changing
4017 the meaning of the program.
4018 For example, consider:
4019 <programlisting>
4020   f t = let { ?x = t; ?y = ?x+(1::Int) } in ?x + ?y
4021 </programlisting>
4022 The use of <literal>?x</literal> in the binding for <literal>?y</literal> does not "see"
4023 the binding for <literal>?x</literal>, so the type of <literal>f</literal> is
4024 <programlisting>
4025   f :: (?x::Int) => Int -> Int
4026 </programlisting>
4027 </para></listitem>
4028 </itemizedlist>
4029 </para>
4030
4031 </sect3>
4032
4033 <sect3><title>Implicit parameters and polymorphic recursion</title>
4034
4035 <para>
4036 Consider these two definitions:
4037 <programlisting>
4038   len1 :: [a] -> Int
4039   len1 xs = let ?acc = 0 in len_acc1 xs
4040
4041   len_acc1 [] = ?acc
4042   len_acc1 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc1 xs
4043
4044   ------------
4045
4046   len2 :: [a] -> Int
4047   len2 xs = let ?acc = 0 in len_acc2 xs
4048
4049   len_acc2 :: (?acc :: Int) => [a] -> Int
4050   len_acc2 [] = ?acc
4051   len_acc2 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc2 xs
4052 </programlisting>
4053 The only difference between the two groups is that in the second group
4054 <literal>len_acc</literal> is given a type signature.
4055 In the former case, <literal>len_acc1</literal> is monomorphic in its own
4056 right-hand side, so the implicit parameter <literal>?acc</literal> is not
4057 passed to the recursive call.  In the latter case, because <literal>len_acc2</literal>
4058 has a type signature, the recursive call is made to the
4059 <emphasis>polymorphic</emphasis> version, which takes <literal>?acc</literal>
4060 as an implicit parameter.  So we get the following results in GHCi:
4061 <programlisting>
4062   Prog> len1 "hello"
4063   0
4064   Prog> len2 "hello"
4065   5
4066 </programlisting>
4067 Adding a type signature dramatically changes the result!  This is a rather
4068 counter-intuitive phenomenon, worth watching out for.
4069 </para>
4070 </sect3>
4071
4072 <sect3><title>Implicit parameters and monomorphism</title>
4073
4074 <para>GHC applies the dreaded Monomorphism Restriction (section 4.5.5 of the
4075 Haskell Report) to implicit parameters.  For example, consider:
4076 <programlisting>
4077  f :: Int -> Int
4078   f v = let ?x = 0     in
4079         let y = ?x + v in
4080         let ?x = 5     in
4081         y
4082 </programlisting>
4083 Since the binding for <literal>y</literal> falls under the Monomorphism
4084 Restriction it is not generalised, so the type of <literal>y</literal> is
4085 simply <literal>Int</literal>, not <literal>(?x::Int) => Int</literal>.
4086 Hence, <literal>(f 9)</literal> returns result <literal>9</literal>.
4087 If you add a type signature for <literal>y</literal>, then <literal>y</literal>
4088 will get type <literal>(?x::Int) => Int</literal>, so the occurrence of
4089 <literal>y</literal> in the body of the <literal>let</literal> will see the
4090 inner binding of <literal>?x</literal>, so <literal>(f 9)</literal> will return
4091 <literal>14</literal>.
4092 </para>
4093 </sect3>
4094 </sect2>
4095
4096     <!--   ======================= COMMENTED OUT ========================
4097
4098     We intend to remove linear implicit parameters, so I'm at least removing
4099     them from the 6.6 user manual
4100
4101 <sect2 id="linear-implicit-parameters">
4102 <title>Linear implicit parameters</title>
4103 <para>
4104 Linear implicit parameters are an idea developed by Koen Claessen,
4105 Mark Shields, and Simon PJ.  They address the long-standing
4106 problem that monads seem over-kill for certain sorts of problem, notably:
4107 </para>
4108 <itemizedlist>
4109 <listitem> <para> distributing a supply of unique names </para> </listitem>
4110 <listitem> <para> distributing a supply of random numbers </para> </listitem>
4111 <listitem> <para> distributing an oracle (as in QuickCheck) </para> </listitem>
4112 </itemizedlist>
4113
4114 <para>
4115 Linear implicit parameters are just like ordinary implicit parameters,
4116 except that they are "linear"; that is, they cannot be copied, and
4117 must be explicitly "split" instead.  Linear implicit parameters are
4118 written '<literal>%x</literal>' instead of '<literal>?x</literal>'.  
4119 (The '/' in the '%' suggests the split!)
4120 </para>
4121 <para>
4122 For example:
4123 <programlisting>
4124     import GHC.Exts( Splittable )
4125
4126     data NameSupply = ...
4127     
4128     splitNS :: NameSupply -> (NameSupply, NameSupply)
4129     newName :: NameSupply -> Name
4130
4131     instance Splittable NameSupply where
4132         split = splitNS
4133
4134
4135     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4136     f env (Lam x e) = Lam x' (f env e)
4137                     where
4138                       x'   = newName %ns
4139                       env' = extend env x x'
4140     ...more equations for f...
4141 </programlisting>
4142 Notice that the implicit parameter %ns is consumed 
4143 <itemizedlist>
4144 <listitem> <para> once by the call to <literal>newName</literal> </para> </listitem>
4145 <listitem> <para> once by the recursive call to <literal>f</literal> </para></listitem>
4146 </itemizedlist>
4147 </para>
4148 <para>
4149 So the translation done by the type checker makes
4150 the parameter explicit:
4151 <programlisting>
4152     f :: NameSupply -> Env -> Expr -> Expr
4153     f ns env (Lam x e) = Lam x' (f ns1 env e)
4154                        where
4155                          (ns1,ns2) = splitNS ns
4156                          x' = newName ns2
4157                          env = extend env x x'
4158 </programlisting>
4159 Notice the call to 'split' introduced by the type checker.
4160 How did it know to use 'splitNS'?  Because what it really did
4161 was to introduce a call to the overloaded function 'split',
4162 defined by the class <literal>Splittable</literal>:
4163 <programlisting>
4164         class Splittable a where
4165           split :: a -> (a,a)
4166 </programlisting>
4167 The instance for <literal>Splittable NameSupply</literal> tells GHC how to implement
4168 split for name supplies.  But we can simply write
4169 <programlisting>
4170         g x = (x, %ns, %ns)
4171 </programlisting>
4172 and GHC will infer
4173 <programlisting>
4174         g :: (Splittable a, %ns :: a) => b -> (b,a,a)
4175 </programlisting>
4176 The <literal>Splittable</literal> class is built into GHC.  It's exported by module 
4177 <literal>GHC.Exts</literal>.
4178 </para>
4179 <para>
4180 Other points:
4181 <itemizedlist>
4182 <listitem> <para> '<literal>?x</literal>' and '<literal>%x</literal>' 
4183 are entirely distinct implicit parameters: you 
4184   can use them together and they won't interfere with each other. </para>
4185 </listitem>
4186
4187 <listitem> <para> You can bind linear implicit parameters in 'with' clauses. </para> </listitem>
4188
4189 <listitem> <para>You cannot have implicit parameters (whether linear or not)
4190   in the context of a class or instance declaration. </para></listitem>
4191 </itemizedlist>
4192 </para>
4193
4194 <sect3><title>Warnings</title>
4195
4196 <para>
4197 The monomorphism restriction is even more important than usual.
4198 Consider the example above:
4199 <programlisting>
4200     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4201     f env (Lam x e) = Lam x' (f env e)
4202                     where
4203                       x'   = newName %ns
4204                       env' = extend env x x'
4205 </programlisting>
4206 If we replaced the two occurrences of x' by (newName %ns), which is
4207 usually a harmless thing to do, we get:
4208 <programlisting>
4209     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4210     f env (Lam x e) = Lam (newName %ns) (f env e)
4211                     where
4212                       env' = extend env x (newName %ns)
4213 </programlisting>
4214 But now the name supply is consumed in <emphasis>three</emphasis> places
4215 (the two calls to newName,and the recursive call to f), so
4216 the result is utterly different.  Urk!  We don't even have 
4217 the beta rule.
4218 </para>
4219 <para>
4220 Well, this is an experimental change.  With implicit
4221 parameters we have already lost beta reduction anyway, and
4222 (as John Launchbury puts it) we can't sensibly reason about
4223 Haskell programs without knowing their typing.
4224 </para>
4225
4226 </sect3>
4227
4228 <sect3><title>Recursive functions</title>
4229 <para>Linear implicit parameters can be particularly tricky when you have a recursive function
4230 Consider
4231 <programlisting>
4232         foo :: %x::T => Int -> [Int]
4233         foo 0 = []
4234         foo n = %x : foo (n-1)
4235 </programlisting>
4236 where T is some type in class Splittable.</para>
4237 <para>
4238 Do you get a list of all the same T's or all different T's
4239 (assuming that split gives two distinct T's back)?
4240 </para><para>
4241 If you supply the type signature, taking advantage of polymorphic
4242 recursion, you get what you'd probably expect.  Here's the
4243 translated term, where the implicit param is made explicit:
4244 <programlisting>
4245         foo x 0 = []
4246         foo x n = let (x1,x2) = split x
4247                   in x1 : foo x2 (n-1)
4248 </programlisting>
4249 But if you don't supply a type signature, GHC uses the Hindley
4250 Milner trick of using a single monomorphic instance of the function
4251 for the recursive calls. That is what makes Hindley Milner type inference
4252 work.  So the translation becomes
4253 <programlisting>
4254         foo x = let
4255                   foom 0 = []
4256                   foom n = x : foom (n-1)
4257                 in
4258                 foom
4259 </programlisting>
4260 Result: 'x' is not split, and you get a list of identical T's.  So the
4261 semantics of the program depends on whether or not foo has a type signature.
4262 Yikes!
4263 </para><para>
4264 You may say that this is a good reason to dislike linear implicit parameters
4265 and you'd be right.  That is why they are an experimental feature. 
4266 </para>
4267 </sect3>
4268
4269 </sect2>
4270
4271 ================ END OF Linear Implicit Parameters commented out -->
4272
4273 <sect2 id="kinding">
4274 <title>Explicitly-kinded quantification</title>
4275
4276 <para>
4277 Haskell infers the kind of each type variable.  Sometimes it is nice to be able
4278 to give the kind explicitly as (machine-checked) documentation, 
4279 just as it is nice to give a type signature for a function.  On some occasions,
4280 it is essential to do so.  For example, in his paper "Restricted Data Types in Haskell" (Haskell Workshop 1999)
4281 John Hughes had to define the data type:
4282 <screen>
4283      data Set cxt a = Set [a]
4284                     | Unused (cxt a -> ())
4285 </screen>
4286 The only use for the <literal>Unused</literal> constructor was to force the correct
4287 kind for the type variable <literal>cxt</literal>.
4288 </para>
4289 <para>
4290 GHC now instead allows you to specify the kind of a type variable directly, wherever
4291 a type variable is explicitly bound, with the flag <option>-XKindSignatures</option>.
4292 </para>
4293 <para>
4294 This flag enables kind signatures in the following places:
4295 <itemizedlist>
4296 <listitem><para><literal>data</literal> declarations:
4297 <screen>
4298   data Set (cxt :: * -> *) a = Set [a]
4299 </screen></para></listitem>
4300 <listitem><para><literal>type</literal> declarations:
4301 <screen>
4302   type T (f :: * -> *) = f Int
4303 </screen></para></listitem>
4304 <listitem><para><literal>class</literal> declarations:
4305 <screen>
4306   class (Eq a) => C (f :: * -> *) a where ...
4307 </screen></para></listitem>
4308 <listitem><para><literal>forall</literal>'s in type signatures:
4309 <screen>
4310   f :: forall (cxt :: * -> *). Set cxt Int
4311 </screen></para></listitem>
4312 </itemizedlist>
4313 </para>
4314
4315 <para>
4316 The parentheses are required.  Some of the spaces are required too, to
4317 separate the lexemes.  If you write <literal>(f::*->*)</literal> you
4318 will get a parse error, because "<literal>::*->*</literal>" is a
4319 single lexeme in Haskell.
4320 </para>
4321
4322 <para>
4323 As part of the same extension, you can put kind annotations in types
4324 as well.  Thus:
4325 <screen>
4326    f :: (Int :: *) -> Int
4327    g :: forall a. a -> (a :: *)
4328 </screen>
4329 The syntax is
4330 <screen>
4331    atype ::= '(' ctype '::' kind ')
4332 </screen>
4333 The parentheses are required.
4334 </para>
4335 </sect2>
4336
4337
4338 <sect2 id="universal-quantification">
4339 <title>Arbitrary-rank polymorphism
4340 </title>
4341
4342 <para>
4343 Haskell type signatures are implicitly quantified.  The new keyword <literal>forall</literal>
4344 allows us to say exactly what this means.  For example:
4345 </para>
4346 <para>
4347 <programlisting>
4348         g :: b -> b
4349 </programlisting>
4350 means this:
4351 <programlisting>
4352         g :: forall b. (b -> b)
4353 </programlisting>
4354 The two are treated identically.
4355 </para>
4356
4357 <para>
4358 However, GHC's type system supports <emphasis>arbitrary-rank</emphasis> 
4359 explicit universal quantification in
4360 types. 
4361 For example, all the following types are legal:
4362 <programlisting>
4363     f1 :: forall a b. a -> b -> a
4364     g1 :: forall a b. (Ord a, Eq  b) => a -> b -> a
4365
4366     f2 :: (forall a. a->a) -> Int -> Int
4367     g2 :: (forall a. Eq a => [a] -> a -> Bool) -> Int -> Int
4368
4369     f3 :: ((forall a. a->a) -> Int) -> Bool -> Bool
4370
4371     f4 :: Int -> (forall a. a -> a)
4372 </programlisting>
4373 Here, <literal>f1</literal> and <literal>g1</literal> are rank-1 types, and
4374 can be written in standard Haskell (e.g. <literal>f1 :: a->b->a</literal>).
4375 The <literal>forall</literal> makes explicit the universal quantification that
4376 is implicitly added by Haskell.
4377 </para>
4378 <para>
4379 The functions <literal>f2</literal> and <literal>g2</literal> have rank-2 types;
4380 the <literal>forall</literal> is on the left of a function arrow.  As <literal>g2</literal>
4381 shows, the polymorphic type on the left of the function arrow can be overloaded.
4382 </para>
4383 <para>
4384 The function <literal>f3</literal> has a rank-3 type;
4385 it has rank-2 types on the left of a function arrow.
4386 </para>
4387 <para>
4388 GHC has three flags to control higher-rank types:
4389 <itemizedlist>
4390 <listitem><para>
4391  <option>-XPolymorphicComponents</option>: data constructors (only) can have polymorphic argument types.
4392 </para></listitem>
4393 <listitem><para>
4394  <option>-XRank2Types</option>: any function (including data constructors) can have a rank-2 type.
4395 </para></listitem>
4396 <listitem><para>
4397  <option>-XRankNTypes</option>: any function (including data constructors) can have an arbitrary-rank type.
4398 That is,  you can nest <literal>forall</literal>s
4399 arbitrarily deep in function arrows.
4400 In particular, a forall-type (also called a "type scheme"),
4401 including an operational type class context, is legal:
4402 <itemizedlist>
4403 <listitem> <para> On the left or right (see <literal>f4</literal>, for example)
4404 of a function arrow </para> </listitem>
4405 <listitem> <para> As the argument of a constructor, or type of a field, in a data type declaration. For
4406 example, any of the <literal>f1,f2,f3,g1,g2</literal> above would be valid
4407 field type signatures.</para> </listitem>
4408 <listitem> <para> As the type of an implicit parameter </para> </listitem>
4409 <listitem> <para> In a pattern type signature (see <xref linkend="scoped-type-variables"/>) </para> </listitem>
4410 </itemizedlist>
4411 </para></listitem>
4412 </itemizedlist>
4413 Of course <literal>forall</literal> becomes a keyword; you can't use <literal>forall</literal> as
4414 a type variable any more!
4415 </para>
4416
4417
4418 <sect3 id="univ">
4419 <title>Examples
4420 </title>
4421
4422 <para>
4423 In a <literal>data</literal> or <literal>newtype</literal> declaration one can quantify
4424 the types of the constructor arguments.  Here are several examples:
4425 </para>
4426
4427 <para>
4428
4429 <programlisting>
4430 data T a = T1 (forall b. b -> b -> b) a
4431
4432 data MonadT m = MkMonad { return :: forall a. a -> m a,
4433                           bind   :: forall a b. m a -> (a -> m b) -> m b
4434                         }
4435
4436 newtype Swizzle = MkSwizzle (Ord a => [a] -> [a])
4437 </programlisting>
4438
4439 </para>
4440
4441 <para>
4442 The constructors have rank-2 types:
4443 </para>
4444
4445 <para>
4446
4447 <programlisting>
4448 T1 :: forall a. (forall b. b -> b -> b) -> a -> T a
4449 MkMonad :: forall m. (forall a. a -> m a)
4450                   -> (forall a b. m a -> (a -> m b) -> m b)
4451                   -> MonadT m
4452 MkSwizzle :: (Ord a => [a] -> [a]) -> Swizzle
4453 </programlisting>
4454
4455 </para>
4456
4457 <para>
4458 Notice that you don't need to use a <literal>forall</literal> if there's an
4459 explicit context.  For example in the first argument of the
4460 constructor <function>MkSwizzle</function>, an implicit "<literal>forall a.</literal>" is
4461 prefixed to the argument type.  The implicit <literal>forall</literal>
4462 quantifies all type variables that are not already in scope, and are
4463 mentioned in the type quantified over.
4464 </para>
4465
4466 <para>
4467 As for type signatures, implicit quantification happens for non-overloaded
4468 types too.  So if you write this:
4469
4470 <programlisting>
4471   data T a = MkT (Either a b) (b -> b)
4472 </programlisting>
4473
4474 it's just as if you had written this:
4475
4476 <programlisting>
4477   data T a = MkT (forall b. Either a b) (forall b. b -> b)
4478 </programlisting>
4479
4480 That is, since the type variable <literal>b</literal> isn't in scope, it's
4481 implicitly universally quantified.  (Arguably, it would be better
4482 to <emphasis>require</emphasis> explicit quantification on constructor arguments
4483 where that is what is wanted.  Feedback welcomed.)
4484 </para>
4485
4486 <para>
4487 You construct values of types <literal>T1, MonadT, Swizzle</literal> by applying
4488 the constructor to suitable values, just as usual.  For example,
4489 </para>
4490
4491 <para>
4492
4493 <programlisting>
4494     a1 :: T Int
4495     a1 = T1 (\xy->x) 3
4496     
4497     a2, a3 :: Swizzle
4498     a2 = MkSwizzle sort
4499     a3 = MkSwizzle reverse
4500     
4501     a4 :: MonadT Maybe
4502     a4 = let r x = Just x
4503              b m k = case m of
4504                        Just y -> k y
4505                        Nothing -> Nothing
4506          in
4507          MkMonad r b
4508
4509     mkTs :: (forall b. b -> b -> b) -> a -> [T a]
4510     mkTs f x y = [T1 f x, T1 f y]
4511 </programlisting>
4512
4513 </para>
4514
4515 <para>
4516 The type of the argument can, as usual, be more general than the type
4517 required, as <literal>(MkSwizzle reverse)</literal> shows.  (<function>reverse</function>
4518 does not need the <literal>Ord</literal> constraint.)
4519 </para>
4520
4521 <para>
4522 When you use pattern matching, the bound variables may now have
4523 polymorphic types.  For example:
4524 </para>
4525
4526 <para>
4527
4528 <programlisting>
4529     f :: T a -> a -> (a, Char)
4530     f (T1 w k) x = (w k x, w 'c' 'd')
4531
4532     g :: (Ord a, Ord b) => Swizzle -> [a] -> (a -> b) -> [b]
4533     g (MkSwizzle s) xs f = s (map f (s xs))
4534
4535     h :: MonadT m -> [m a] -> m [a]
4536     h m [] = return m []
4537     h m (x:xs) = bind m x          $ \y ->
4538                  bind m (h m xs)   $ \ys ->
4539                  return m (y:ys)
4540 </programlisting>
4541
4542 </para>
4543
4544 <para>
4545 In the function <function>h</function> we use the record selectors <literal>return</literal>
4546 and <literal>bind</literal> to extract the polymorphic bind and return functions
4547 from the <literal>MonadT</literal> data structure, rather than using pattern
4548 matching.
4549 </para>
4550 </sect3>
4551
4552 <sect3>
4553 <title>Type inference</title>
4554
4555 <para>
4556 In general, type inference for arbitrary-rank types is undecidable.
4557 GHC uses an algorithm proposed by Odersky and Laufer ("Putting type annotations to work", POPL'96)
4558 to get a decidable algorithm by requiring some help from the programmer.
4559 We do not yet have a formal specification of "some help" but the rule is this:
4560 </para>
4561 <para>
4562 <emphasis>For a lambda-bound or case-bound variable, x, either the programmer
4563 provides an explicit polymorphic type for x, or GHC's type inference will assume
4564 that x's type has no foralls in it</emphasis>.
4565 </para>
4566 <para>
4567 What does it mean to "provide" an explicit type for x?  You can do that by 
4568 giving a type signature for x directly, using a pattern type signature
4569 (<xref linkend="scoped-type-variables"/>), thus:
4570 <programlisting>
4571      \ f :: (forall a. a->a) -> (f True, f 'c')
4572 </programlisting>
4573 Alternatively, you can give a type signature to the enclosing
4574 context, which GHC can "push down" to find the type for the variable:
4575 <programlisting>
4576      (\ f -> (f True, f 'c')) :: (forall a. a->a) -> (Bool,Char)
4577 </programlisting>
4578 Here the type signature on the expression can be pushed inwards
4579 to give a type signature for f.  Similarly, and more commonly,
4580 one can give a type signature for the function itself:
4581 <programlisting>
4582      h :: (forall a. a->a) -> (Bool,Char)
4583      h f = (f True, f 'c')
4584 </programlisting>
4585 You don't need to give a type signature if the lambda bound variable
4586 is a constructor argument.  Here is an example we saw earlier:
4587 <programlisting>
4588     f :: T a -> a -> (a, Char)
4589     f (T1 w k) x = (w k x, w 'c' 'd')
4590 </programlisting>
4591 Here we do not need to give a type signature to <literal>w</literal>, because
4592 it is an argument of constructor <literal>T1</literal> and that tells GHC all
4593 it needs to know.
4594 </para>
4595
4596 </sect3>
4597
4598
4599 <sect3 id="implicit-quant">
4600 <title>Implicit quantification</title>
4601
4602 <para>
4603 GHC performs implicit quantification as follows.  <emphasis>At the top level (only) of 
4604 user-written types, if and only if there is no explicit <literal>forall</literal>,
4605 GHC finds all the type variables mentioned in the type that are not already
4606 in scope, and universally quantifies them.</emphasis>  For example, the following pairs are 
4607 equivalent:
4608 <programlisting>
4609   f :: a -> a
4610   f :: forall a. a -> a
4611
4612   g (x::a) = let
4613                 h :: a -> b -> b
4614                 h x y = y
4615              in ...
4616   g (x::a) = let
4617                 h :: forall b. a -> b -> b
4618                 h x y = y
4619              in ...
4620 </programlisting>
4621 </para>
4622 <para>
4623 Notice that GHC does <emphasis>not</emphasis> find the innermost possible quantification
4624 point.  For example:
4625 <programlisting>
4626   f :: (a -> a) -> Int
4627            -- MEANS
4628   f :: forall a. (a -> a) -> Int
4629            -- NOT
4630   f :: (forall a. a -> a) -> Int
4631
4632
4633   g :: (Ord a => a -> a) -> Int
4634            -- MEANS the illegal type
4635   g :: forall a. (Ord a => a -> a) -> Int
4636            -- NOT
4637   g :: (forall a. Ord a => a -> a) -> Int
4638 </programlisting>
4639 The latter produces an illegal type, which you might think is silly,
4640 but at least the rule is simple.  If you want the latter type, you
4641 can write your for-alls explicitly.  Indeed, doing so is strongly advised
4642 for rank-2 types.
4643 </para>
4644 </sect3>
4645 </sect2>
4646
4647
4648 <sect2 id="impredicative-polymorphism">
4649 <title>Impredicative polymorphism
4650 </title>
4651 <para>GHC supports <emphasis>impredicative polymorphism</emphasis>, 
4652 enabled with <option>-XImpredicativeTypes</option>.  
4653 This means
4654 that you can call a polymorphic function at a polymorphic type, and
4655 parameterise data structures over polymorphic types.  For example:
4656 <programlisting>
4657   f :: Maybe (forall a. [a] -> [a]) -> Maybe ([Int], [Char])
4658   f (Just g) = Just (g [3], g "hello")
4659   f Nothing  = Nothing
4660 </programlisting>
4661 Notice here that the <literal>Maybe</literal> type is parameterised by the
4662 <emphasis>polymorphic</emphasis> type <literal>(forall a. [a] ->
4663 [a])</literal>.
4664 </para>
4665 <para>The technical details of this extension are described in the paper
4666 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/boxy/">Boxy types:
4667 type inference for higher-rank types and impredicativity</ulink>,
4668 which appeared at ICFP 2006.  
4669 </para>
4670 </sect2>
4671
4672 <sect2 id="scoped-type-variables">
4673 <title>Lexically scoped type variables
4674 </title>
4675
4676 <para>
4677 GHC supports <emphasis>lexically scoped type variables</emphasis>, without
4678 which some type signatures are simply impossible to write. For example:
4679 <programlisting>
4680 f :: forall a. [a] -> [a]
4681 f xs = ys ++ ys
4682      where
4683        ys :: [a]
4684        ys = reverse xs
4685 </programlisting>
4686 The type signature for <literal>f</literal> brings the type variable <literal>a</literal> into scope; it scopes over
4687 the entire definition of <literal>f</literal>.
4688 In particular, it is in scope at the type signature for <varname>ys</varname>. 
4689 In Haskell 98 it is not possible to declare
4690 a type for <varname>ys</varname>; a major benefit of scoped type variables is that
4691 it becomes possible to do so.
4692 </para>
4693 <para>Lexically-scoped type variables are enabled by
4694 <option>-XScopedTypeVariables</option>.  This flag implies <option>-XRelaxedPolyRec</option>.
4695 </para>
4696 <para>Note: GHC 6.6 contains substantial changes to the way that scoped type
4697 variables work, compared to earlier releases.  Read this section
4698 carefully!</para>
4699
4700 <sect3>
4701 <title>Overview</title>
4702
4703 <para>The design follows the following principles
4704 <itemizedlist>
4705 <listitem><para>A scoped type variable stands for a type <emphasis>variable</emphasis>, and not for
4706 a <emphasis>type</emphasis>. (This is a change from GHC's earlier
4707 design.)</para></listitem>
4708 <listitem><para>Furthermore, distinct lexical type variables stand for distinct
4709 type variables.  This means that every programmer-written type signature
4710 (including one that contains free scoped type variables) denotes a
4711 <emphasis>rigid</emphasis> type; that is, the type is fully known to the type
4712 checker, and no inference is involved.</para></listitem>
4713 <listitem><para>Lexical type variables may be alpha-renamed freely, without
4714 changing the program.</para></listitem>
4715 </itemizedlist>
4716 </para>
4717 <para>
4718 A <emphasis>lexically scoped type variable</emphasis> can be bound by:
4719 <itemizedlist>
4720 <listitem><para>A declaration type signature (<xref linkend="decl-type-sigs"/>)</para></listitem>
4721 <listitem><para>An expression type signature (<xref linkend="exp-type-sigs"/>)</para></listitem>
4722 <listitem><para>A pattern type signature (<xref linkend="pattern-type-sigs"/>)</para></listitem>
4723 <listitem><para>Class and instance declarations (<xref linkend="cls-inst-scoped-tyvars"/>)</para></listitem>
4724 </itemizedlist>
4725 </para>
4726 <para>
4727 In Haskell, a programmer-written type signature is implicitly quantified over
4728 its free type variables (<ulink
4729 url="http://www.haskell.org/onlinereport/decls.html#sect4.1.2">Section
4730 4.1.2</ulink> 
4731 of the Haskell Report).
4732 Lexically scoped type variables affect this implicit quantification rules
4733 as follows: any type variable that is in scope is <emphasis>not</emphasis> universally
4734 quantified. For example, if type variable <literal>a</literal> is in scope,
4735 then
4736 <programlisting>
4737   (e :: a -> a)     means     (e :: a -> a)
4738   (e :: b -> b)     means     (e :: forall b. b->b)
4739   (e :: a -> b)     means     (e :: forall b. a->b)
4740 </programlisting>
4741 </para>
4742
4743
4744 </sect3>
4745
4746
4747 <sect3 id="decl-type-sigs">
4748 <title>Declaration type signatures</title>
4749 <para>A declaration type signature that has <emphasis>explicit</emphasis>
4750 quantification (using <literal>forall</literal>) brings into scope the
4751 explicitly-quantified
4752 type variables, in the definition of the named function.  For example:
4753 <programlisting>
4754   f :: forall a. [a] -> [a]
4755   f (x:xs) = xs ++ [ x :: a ]
4756 </programlisting>
4757 The "<literal>forall a</literal>" brings "<literal>a</literal>" into scope in
4758 the definition of "<literal>f</literal>".
4759 </para>
4760 <para>This only happens if:
4761 <itemizedlist>
4762 <listitem><para> The quantification in <literal>f</literal>'s type
4763 signature is explicit.  For example:
4764 <programlisting>
4765   g :: [a] -> [a]
4766   g (x:xs) = xs ++ [ x :: a ]
4767 </programlisting>
4768 This program will be rejected, because "<literal>a</literal>" does not scope
4769 over the definition of "<literal>f</literal>", so "<literal>x::a</literal>"
4770 means "<literal>x::forall a. a</literal>" by Haskell's usual implicit
4771 quantification rules.
4772 </para></listitem>
4773 <listitem><para> The signature gives a type for a function binding or a bare variable binding, 
4774 not a pattern binding.
4775 For example:
4776 <programlisting>
4777   f1 :: forall a. [a] -> [a]
4778   f1 (x:xs) = xs ++ [ x :: a ]   -- OK
4779
4780   f2 :: forall a. [a] -> [a]
4781   f2 = \(x:xs) -> xs ++ [ x :: a ]   -- OK
4782
4783   f3 :: forall a. [a] -> [a] 
4784   Just f3 = Just (\(x:xs) -> xs ++ [ x :: a ])   -- Not OK!
4785 </programlisting>
4786 The binding for <literal>f3</literal> is a pattern binding, and so its type signature
4787 does not bring <literal>a</literal> into scope.   However <literal>f1</literal> is a
4788 function binding, and <literal>f2</literal> binds a bare variable; in both cases
4789 the type signature brings <literal>a</literal> into scope.
4790 </para></listitem>
4791 </itemizedlist>
4792 </para>
4793 </sect3>
4794
4795 <sect3 id="exp-type-sigs">
4796 <title>Expression type signatures</title>
4797
4798 <para>An expression type signature that has <emphasis>explicit</emphasis>
4799 quantification (using <literal>forall</literal>) brings into scope the
4800 explicitly-quantified
4801 type variables, in the annotated expression.  For example:
4802 <programlisting>
4803   f = runST ( (op >>= \(x :: STRef s Int) -> g x) :: forall s. ST s Bool )
4804 </programlisting>
4805 Here, the type signature <literal>forall a. ST s Bool</literal> brings the 
4806 type variable <literal>s</literal> into scope, in the annotated expression 
4807 <literal>(op >>= \(x :: STRef s Int) -> g x)</literal>.
4808 </para>
4809
4810 </sect3>
4811
4812 <sect3 id="pattern-type-sigs">
4813 <title>Pattern type signatures</title>
4814 <para>
4815 A type signature may occur in any pattern; this is a <emphasis>pattern type
4816 signature</emphasis>. 
4817 For example:
4818 <programlisting>
4819   -- f and g assume that 'a' is already in scope
4820   f = \(x::Int, y::a) -> x
4821   g (x::a) = x
4822   h ((x,y) :: (Int,Bool)) = (y,x)
4823 </programlisting>
4824 In the case where all the type variables in the pattern type signature are
4825 already in scope (i.e. bound by the enclosing context), matters are simple: the
4826 signature simply constrains the type of the pattern in the obvious way.
4827 </para>
4828 <para>
4829 Unlike expression and declaration type signatures, pattern type signatures are not implicitly generalised.
4830 The pattern in a <emphasis>pattern binding</emphasis> may only mention type variables
4831 that are already in scope.  For example:
4832 <programlisting>
4833   f :: forall a. [a] -> (Int, [a])
4834   f xs = (n, zs)
4835     where
4836       (ys::[a], n) = (reverse xs, length xs) -- OK
4837       zs::[a] = xs ++ ys                     -- OK
4838
4839       Just (v::b) = ...  -- Not OK; b is not in scope
4840 </programlisting>
4841 Here, the pattern signatures for <literal>ys</literal> and <literal>zs</literal>
4842 are fine, but the one for <literal>v</literal> is not because <literal>b</literal> is
4843 not in scope. 
4844 </para>
4845 <para>
4846 However, in all patterns <emphasis>other</emphasis> than pattern bindings, a pattern
4847 type signature may mention a type variable that is not in scope; in this case,
4848 <emphasis>the signature brings that type variable into scope</emphasis>.
4849 This is particularly important for existential data constructors.  For example:
4850 <programlisting>
4851   data T = forall a. MkT [a]
4852
4853   k :: T -> T
4854   k (MkT [t::a]) = MkT t3
4855                  where
4856                    t3::[a] = [t,t,t]
4857 </programlisting>
4858 Here, the pattern type signature <literal>(t::a)</literal> mentions a lexical type
4859 variable that is not already in scope.  Indeed, it <emphasis>cannot</emphasis> already be in scope,
4860 because it is bound by the pattern match.  GHC's rule is that in this situation
4861 (and only then), a pattern type signature can mention a type variable that is
4862 not already in scope; the effect is to bring it into scope, standing for the
4863 existentially-bound type variable.
4864 </para>
4865 <para>
4866 When a pattern type signature binds a type variable in this way, GHC insists that the 
4867 type variable is bound to a <emphasis>rigid</emphasis>, or fully-known, type variable.
4868 This means that any user-written type signature always stands for a completely known type.
4869 </para>
4870 <para>
4871 If all this seems a little odd, we think so too.  But we must have
4872 <emphasis>some</emphasis> way to bring such type variables into scope, else we
4873 could not name existentially-bound type variables in subsequent type signatures.
4874 </para>
4875 <para>
4876 This is (now) the <emphasis>only</emphasis> situation in which a pattern type 
4877 signature is allowed to mention a lexical variable that is not already in
4878 scope.
4879 For example, both <literal>f</literal> and <literal>g</literal> would be
4880 illegal if <literal>a</literal> was not already in scope.
4881 </para>
4882
4883
4884 </sect3>
4885
4886 <!-- ==================== Commented out part about result type signatures 
4887
4888 <sect3 id="result-type-sigs">
4889 <title>Result type signatures</title>
4890
4891 <para>
4892 The result type of a function, lambda, or case expression alternative can be given a signature, thus:
4893
4894 <programlisting>
4895   {- f assumes that 'a' is already in scope -}
4896   f x y :: [a] = [x,y,x]
4897
4898   g = \ x :: [Int] -> [3,4]
4899
4900   h :: forall a. [a] -> a
4901   h xs = case xs of
4902             (y:ys) :: a -> y
4903 </programlisting>
4904 The final <literal>:: [a]</literal> after the patterns of <literal>f</literal> gives the type of 
4905 the result of the function.  Similarly, the body of the lambda in the RHS of
4906 <literal>g</literal> is <literal>[Int]</literal>, and the RHS of the case
4907 alternative in <literal>h</literal> is <literal>a</literal>.
4908 </para>
4909 <para> A result type signature never brings new type variables into scope.</para>
4910 <para>
4911 There are a couple of syntactic wrinkles.  First, notice that all three
4912 examples would parse quite differently with parentheses:
4913 <programlisting>
4914   {- f assumes that 'a' is already in scope -}
4915   f x (y :: [a]) = [x,y,x]
4916
4917   g = \ (x :: [Int]) -> [3,4]
4918
4919   h :: forall a. [a] -> a
4920   h xs = case xs of
4921             ((y:ys) :: a) -> y
4922 </programlisting>
4923 Now the signature is on the <emphasis>pattern</emphasis>; and
4924 <literal>h</literal> would certainly be ill-typed (since the pattern
4925 <literal>(y:ys)</literal> cannot have the type <literal>a</literal>.
4926
4927 Second, to avoid ambiguity, the type after the &ldquo;<literal>::</literal>&rdquo; in a result
4928 pattern signature on a lambda or <literal>case</literal> must be atomic (i.e. a single
4929 token or a parenthesised type of some sort).  To see why,
4930 consider how one would parse this:
4931 <programlisting>
4932   \ x :: a -> b -> x
4933 </programlisting>
4934 </para>
4935 </sect3>
4936
4937  -->
4938
4939 <sect3 id="cls-inst-scoped-tyvars">
4940 <title>Class and instance declarations</title>
4941 <para>
4942
4943 The type variables in the head of a <literal>class</literal> or <literal>instance</literal> declaration
4944 scope over the methods defined in the <literal>where</literal> part.  For example:
4945
4946
4947 <programlisting>
4948   class C a where
4949     op :: [a] -> a
4950
4951     op xs = let ys::[a]
4952                 ys = reverse xs
4953             in
4954             head ys
4955 </programlisting>
4956 </para>
4957 </sect3>
4958
4959 </sect2>
4960
4961
4962 <sect2 id="typing-binds">
4963 <title>Generalised typing of mutually recursive bindings</title>
4964
4965 <para>
4966 The Haskell Report specifies that a group of bindings (at top level, or in a
4967 <literal>let</literal> or <literal>where</literal>) should be sorted into
4968 strongly-connected components, and then type-checked in dependency order
4969 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.1">Haskell
4970 Report, Section 4.5.1</ulink>).  
4971 As each group is type-checked, any binders of the group that
4972 have
4973 an explicit type signature are put in the type environment with the specified
4974 polymorphic type,
4975 and all others are monomorphic until the group is generalised 
4976 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.2">Haskell Report, Section 4.5.2</ulink>).
4977 </para>
4978
4979 <para>Following a suggestion of Mark Jones, in his paper
4980 <ulink url="http://citeseer.ist.psu.edu/424440.html">Typing Haskell in
4981 Haskell</ulink>,
4982 GHC implements a more general scheme.  If <option>-XRelaxedPolyRec</option> is
4983 specified:
4984 <emphasis>the dependency analysis ignores references to variables that have an explicit
4985 type signature</emphasis>.
4986 As a result of this refined dependency analysis, the dependency groups are smaller, and more bindings will
4987 typecheck.  For example, consider:
4988 <programlisting>
4989   f :: Eq a =&gt; a -> Bool
4990   f x = (x == x) || g True || g "Yes"
4991   
4992   g y = (y &lt;= y) || f True
4993 </programlisting>
4994 This is rejected by Haskell 98, but under Jones's scheme the definition for
4995 <literal>g</literal> is typechecked first, separately from that for
4996 <literal>f</literal>,
4997 because the reference to <literal>f</literal> in <literal>g</literal>'s right
4998 hand side is ignored by the dependency analysis.  Then <literal>g</literal>'s
4999 type is generalised, to get
5000 <programlisting>
5001   g :: Ord a =&gt; a -> Bool
5002 </programlisting>
5003 Now, the definition for <literal>f</literal> is typechecked, with this type for
5004 <literal>g</literal> in the type environment.
5005 </para>
5006
5007 <para>
5008 The same refined dependency analysis also allows the type signatures of 
5009 mutually-recursive functions to have different contexts, something that is illegal in
5010 Haskell 98 (Section 4.5.2, last sentence).  With
5011 <option>-XRelaxedPolyRec</option>
5012 GHC only insists that the type signatures of a <emphasis>refined</emphasis> group have identical
5013 type signatures; in practice this means that only variables bound by the same
5014 pattern binding must have the same context.  For example, this is fine:
5015 <programlisting>
5016   f :: Eq a =&gt; a -> Bool
5017   f x = (x == x) || g True
5018   
5019   g :: Ord a =&gt; a -> Bool
5020   g y = (y &lt;= y) || f True
5021 </programlisting>
5022 </para>
5023 </sect2>
5024
5025 <sect2 id="type-families">
5026 <title>Type families
5027 </title>
5028
5029 <para>
5030 GHC supports the definition of type families indexed by types.  They may be
5031 seen as an extension of Haskell 98's class-based overloading of values to
5032 types.  When type families are declared in classes, they are also known as
5033 associated types.
5034 </para>
5035 <para>
5036 There are two forms of type families: data families and type synonym families.
5037 Currently, only the former are fully implemented, while we are still working
5038 on the latter.  As a result, the specification of the language extension is
5039 also still to some degree in flux.  Hence, a more detailed description of
5040 the language extension and its use is currently available
5041 from <ulink url="http://www.haskell.org/haskellwiki/GHC/Indexed_types">the Haskell
5042 wiki page on type families</ulink>.  The material will be moved to this user's
5043 guide when it has stabilised.
5044 </para>
5045 <para>
5046 Type families are enabled by the flag <option>-XTypeFamilies</option>.
5047 </para>
5048
5049
5050 </sect2>
5051
5052 </sect1>
5053 <!-- ==================== End of type system extensions =================  -->
5054   
5055 <!-- ====================== TEMPLATE HASKELL =======================  -->
5056
5057 <sect1 id="template-haskell">
5058 <title>Template Haskell</title>
5059
5060 <para>Template Haskell allows you to do compile-time meta-programming in
5061 Haskell.  
5062 The background to
5063 the main technical innovations is discussed in "<ulink
5064 url="http://research.microsoft.com/~simonpj/papers/meta-haskell/">
5065 Template Meta-programming for Haskell</ulink>" (Proc Haskell Workshop 2002).
5066 </para>
5067 <para>
5068 There is a Wiki page about
5069 Template Haskell at <ulink url="http://www.haskell.org/haskellwiki/Template_Haskell">
5070 http://www.haskell.org/haskellwiki/Template_Haskell</ulink>, and that is the best place to look for
5071 further details.
5072 You may also 
5073 consult the <ulink
5074 url="http://www.haskell.org/ghc/docs/latest/html/libraries/index.html">online
5075 Haskell library reference material</ulink> 
5076 (look for module <literal>Language.Haskell.TH</literal>).
5077 Many changes to the original design are described in 
5078       <ulink url="http://research.microsoft.com/~simonpj/papers/meta-haskell/notes2.ps">
5079 Notes on Template Haskell version 2</ulink>.
5080 Not all of these changes are in GHC, however.
5081 </para>
5082
5083 <para> The first example from that paper is set out below (<xref linkend="th-example"/>) 
5084 as a worked example to help get you started. 
5085 </para>
5086
5087 <para>
5088 The documentation here describes the realisation of Template Haskell in GHC.  It is not detailed enough to 
5089 understand Template Haskell; see the <ulink url="http://haskell.org/haskellwiki/Template_Haskell">
5090 Wiki page</ulink>.
5091 </para>
5092
5093     <sect2>
5094       <title>Syntax</title>
5095
5096       <para> Template Haskell has the following new syntactic
5097       constructions.  You need to use the flag
5098       <option>-XTemplateHaskell</option>
5099         <indexterm><primary><option>-XTemplateHaskell</option></primary>
5100       </indexterm>to switch these syntactic extensions on
5101       (<option>-XTemplateHaskell</option> is no longer implied by
5102       <option>-fglasgow-exts</option>).</para>
5103
5104         <itemizedlist>
5105               <listitem><para>
5106                   A splice is written <literal>$x</literal>, where <literal>x</literal> is an
5107                   identifier, or <literal>$(...)</literal>, where the "..." is an arbitrary expression.
5108                   There must be no space between the "$" and the identifier or parenthesis.  This use
5109                   of "$" overrides its meaning as an infix operator, just as "M.x" overrides the meaning
5110                   of "." as an infix operator.  If you want the infix operator, put spaces around it.
5111                   </para>
5112               <para> A splice can occur in place of 
5113                   <itemizedlist>
5114                     <listitem><para> an expression; the spliced expression must
5115                     have type <literal>Q Exp</literal></para></listitem>
5116                     <listitem><para> a list of top-level declarations; the spliced expression must have type <literal>Q [Dec]</literal></para></listitem>
5117                     </itemizedlist>
5118                 </para>
5119             Inside a splice you can can only call functions defined in imported modules,
5120         not functions defined elsewhere in the same module.</listitem>
5121
5122
5123               <listitem><para>
5124                   A expression quotation is written in Oxford brackets, thus:
5125                   <itemizedlist>
5126                     <listitem><para> <literal>[| ... |]</literal>, where the "..." is an expression; 
5127                              the quotation has type <literal>Q Exp</literal>.</para></listitem>
5128                     <listitem><para> <literal>[d| ... |]</literal>, where the "..." is a list of top-level declarations;
5129                              the quotation has type <literal>Q [Dec]</literal>.</para></listitem>
5130                     <listitem><para> <literal>[t| ... |]</literal>, where the "..." is a type;
5131                              the quotation has type <literal>Q Typ</literal>.</para></listitem>
5132                   </itemizedlist></para></listitem>
5133
5134               <listitem><para>
5135                   A quasi-quotation can appear in either a pattern context or an
5136                   expression context and is also written in Oxford brackets:
5137                   <itemizedlist>
5138                     <listitem><para> <literal>[:<replaceable>varid</replaceable>| ... |]</literal>,
5139                         where the "..." is an arbitrary string; a full description of the
5140                         quasi-quotation facility is given in <xref linkend="th-quasiquotation"/>.</para></listitem>
5141                   </itemizedlist></para></listitem>
5142
5143               <listitem><para>
5144                   A name can be quoted with either one or two prefix single quotes:
5145                   <itemizedlist>
5146                     <listitem><para> <literal>'f</literal> has type <literal>Name</literal>, and names the function <literal>f</literal>.
5147                   Similarly <literal>'C</literal> has type <literal>Name</literal> and names the data constructor <literal>C</literal>.
5148                   In general <literal>'</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in an expression context.
5149                      </para></listitem> 
5150                     <listitem><para> <literal>''T</literal> has type <literal>Name</literal>, and names the type constructor  <literal>T</literal>.
5151                   That is, <literal>''</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in a type context.
5152                      </para></listitem> 
5153                   </itemizedlist>
5154                   These <literal>Names</literal> can be used to construct Template Haskell expressions, patterns, declarations etc.  They
5155                   may also be given as an argument to the <literal>reify</literal> function.
5156                  </para>
5157                 </listitem>
5158
5159                   
5160         </itemizedlist>
5161 (Compared to the original paper, there are many differences of detail.
5162 The syntax for a declaration splice uses "<literal>$</literal>" not "<literal>splice</literal>".
5163 The type of the enclosed expression must be  <literal>Q [Dec]</literal>, not  <literal>[Q Dec]</literal>.
5164 Type splices are not implemented, and neither are pattern splices or quotations.
5165
5166 </sect2>
5167
5168 <sect2>  <title> Using Template Haskell </title>
5169 <para>
5170 <itemizedlist>
5171     <listitem><para>
5172     The data types and monadic constructor functions for Template Haskell are in the library
5173     <literal>Language.Haskell.THSyntax</literal>.
5174     </para></listitem>
5175
5176     <listitem><para>
5177     You can only run a function at compile time if it is imported from another module.  That is,
5178             you can't define a function in a module, and call it from within a splice in the same module.
5179             (It would make sense to do so, but it's hard to implement.)
5180    </para></listitem>
5181
5182    <listitem><para>
5183    You can only run a function at compile time if it is imported
5184    from another module <emphasis>that is not part of a mutually-recursive group of modules
5185    that includes the module currently being compiled</emphasis>.  Furthermore, all of the modules of 
5186    the mutually-recursive group must be reachable by non-SOURCE imports from the module where the
5187    splice is to be run.</para>
5188    <para>
5189    For example, when compiling module A,
5190    you can only run Template Haskell functions imported from B if B does not import A (directly or indirectly).
5191    The reason should be clear: to run B we must compile and run A, but we are currently type-checking A.
5192    </para></listitem>
5193
5194     <listitem><para>
5195             The flag <literal>-ddump-splices</literal> shows the expansion of all top-level splices as they happen.
5196    </para></listitem>
5197     <listitem><para>
5198             If you are building GHC from source, you need at least a stage-2 bootstrap compiler to
5199               run Template Haskell.  A stage-1 compiler will reject the TH constructs.  Reason: TH
5200               compiles and runs a program, and then looks at the result.  So it's important that
5201               the program it compiles produces results whose representations are identical to
5202               those of the compiler itself.
5203    </para></listitem>
5204 </itemizedlist>
5205 </para>
5206 <para> Template Haskell works in any mode (<literal>--make</literal>, <literal>--interactive</literal>,
5207         or file-at-a-time).  There used to be a restriction to the former two, but that restriction 
5208         has been lifted.
5209 </para>
5210 </sect2>
5211  
5212 <sect2 id="th-example">  <title> A Template Haskell Worked Example </title>
5213 <para>To help you get over the confidence barrier, try out this skeletal worked example.
5214   First cut and paste the two modules below into "Main.hs" and "Printf.hs":</para>
5215
5216 <programlisting>
5217
5218 {- Main.hs -}
5219 module Main where
5220
5221 -- Import our template "pr"
5222 import Printf ( pr )
5223
5224 -- The splice operator $ takes the Haskell source code
5225 -- generated at compile time by "pr" and splices it into
5226 -- the argument of "putStrLn".
5227 main = putStrLn ( $(pr "Hello") )
5228
5229
5230 {- Printf.hs -}
5231 module Printf where
5232
5233 -- Skeletal printf from the paper.
5234 -- It needs to be in a separate module to the one where
5235 -- you intend to use it.
5236
5237 -- Import some Template Haskell syntax
5238 import Language.Haskell.TH
5239
5240 -- Describe a format string
5241 data Format = D | S | L String
5242
5243 -- Parse a format string.  This is left largely to you
5244 -- as we are here interested in building our first ever
5245 -- Template Haskell program and not in building printf.
5246 parse :: String -> [Format]
5247 parse s   = [ L s ]
5248
5249 -- Generate Haskell source code from a parsed representation
5250 -- of the format string.  This code will be spliced into
5251 -- the module which calls "pr", at compile time.
5252 gen :: [Format] -> Q Exp
5253 gen [D]   = [| \n -> show n |]
5254 gen [S]   = [| \s -> s |]
5255 gen [L s] = stringE s
5256
5257 -- Here we generate the Haskell code for the splice
5258 -- from an input format string.
5259 pr :: String -> Q Exp
5260 pr s = gen (parse s)
5261 </programlisting>
5262
5263 <para>Now run the compiler (here we are a Cygwin prompt on Windows):
5264 </para>
5265 <programlisting>
5266 $ ghc --make -XTemplateHaskell main.hs -o main.exe
5267 </programlisting>
5268
5269 <para>Run "main.exe" and here is your output:</para>
5270
5271 <programlisting>
5272 $ ./main
5273 Hello
5274 </programlisting>
5275
5276 </sect2>
5277
5278 <sect2>
5279 <title>Using Template Haskell with Profiling</title>
5280 <indexterm><primary>profiling</primary><secondary>with Template Haskell</secondary></indexterm>
5281  
5282 <para>Template Haskell relies on GHC's built-in bytecode compiler and
5283 interpreter to run the splice expressions.  The bytecode interpreter
5284 runs the compiled expression on top of the same runtime on which GHC
5285 itself is running; this means that the compiled code referred to by
5286 the interpreted expression must be compatible with this runtime, and
5287 in particular this means that object code that is compiled for
5288 profiling <emphasis>cannot</emphasis> be loaded and used by a splice
5289 expression, because profiled object code is only compatible with the
5290 profiling version of the runtime.</para>
5291
5292 <para>This causes difficulties if you have a multi-module program
5293 containing Template Haskell code and you need to compile it for
5294 profiling, because GHC cannot load the profiled object code and use it
5295 when executing the splices.  Fortunately GHC provides a workaround.
5296 The basic idea is to compile the program twice:</para>
5297
5298 <orderedlist>
5299 <listitem>
5300   <para>Compile the program or library first the normal way, without
5301   <option>-prof</option><indexterm><primary><option>-prof</option></primary></indexterm>.</para>
5302 </listitem>
5303 <listitem>
5304   <para>Then compile it again with <option>-prof</option>, and
5305   additionally use <option>-osuf
5306   p_o</option><indexterm><primary><option>-osuf</option></primary></indexterm>
5307   to name the object files differently (you can choose any suffix
5308   that isn't the normal object suffix here).  GHC will automatically
5309   load the object files built in the first step when executing splice
5310   expressions.  If you omit the <option>-osuf</option> flag when
5311   building with <option>-prof</option> and Template Haskell is used,
5312   GHC will emit an error message. </para>
5313 </listitem>
5314 </orderedlist>
5315 </sect2>
5316
5317 <sect2 id="th-quasiquotation">  <title> Template Haskell Quasi-quotation </title>
5318 <para>Quasi-quotation allows patterns and expressions to be written using
5319 programmer-defined concrete syntax; the motivation behind the extension and
5320 several examples are documented in
5321 "<ulink url="http://www.eecs.harvard.edu/~mainland/ghc-quasiquoting/">Why It's
5322 Nice to be Quoted: Quasiquoting for Haskell</ulink>" (Proc Haskell Workshop
5323 2007). The example below shows how to write a quasiquoter for a simple
5324 expression language.</para>
5325
5326 <para>
5327 In the example, the quasiquoter <literal>expr</literal> is bound to a value of
5328 type <literal>Language.Haskell.TH.Quote.QuasiQuoter</literal> which contains two
5329 functions for quoting expressions and patterns, respectively. The first argument
5330 to each quoter is the (arbitrary) string enclosed in the Oxford brackets. The
5331 context of the quasi-quotation statement determines which of the two parsers is
5332 called: if the quasi-quotation occurs in an expression context, the expression
5333 parser is called, and if it occurs in a pattern context, the pattern parser is
5334 called.</para>
5335
5336 <para>
5337 Note that in the example we make use of an antiquoted
5338 variable <literal>n</literal>, indicated by the syntax <literal>'int:n</literal>
5339 (this syntax for anti-quotation was defined by the parser's
5340 author, <emphasis>not</emphasis> by GHC). This binds <literal>n</literal> to the
5341 integer value argument of the constructor <literal>IntExpr</literal> when
5342 pattern matching. Please see the referenced paper for further details regarding
5343 anti-quotation as well as the description of a technique that uses SYB to
5344 leverage a single parser of type <literal>String -> a</literal> to generate both
5345 an expression parser that returns a value of type <literal>Q Exp</literal> and a
5346 pattern parser that returns a value of type <literal>Q Pat</literal>.
5347 </para>
5348
5349 <para>In general, a quasi-quote has the form
5350 <literal>[$<replaceable>quoter</replaceable>| <replaceable>string</replaceable> |]</literal>.
5351 The <replaceable>quoter</replaceable> must be the name of an imported quoter; it
5352 cannot be an arbitrary expression.  The quoted <replaceable>string</replaceable> 
5353 can be arbitrary, and may contain newlines.
5354 </para>
5355 <para>
5356 Quasiquoters must obey the same stage restrictions as Template Haskell, e.g., in
5357 the example, <literal>expr</literal> cannot be defined
5358 in <literal>Main.hs</literal> where it is used, but must be imported.
5359 </para>
5360
5361 <programlisting>
5362
5363 {- Main.hs -}
5364 module Main where
5365
5366 import Expr
5367
5368 main :: IO ()
5369 main = do { print $ eval [$expr|1 + 2|]
5370           ; case IntExpr 1 of
5371               { [$expr|'int:n|] -> print n
5372               ;  _              -> return ()
5373               }
5374           }
5375
5376
5377 {- Expr.hs -}
5378 module Expr where
5379
5380 import qualified Language.Haskell.TH as TH
5381 import Language.Haskell.TH.Quasi
5382
5383 data Expr  =  IntExpr Integer
5384            |  AntiIntExpr String
5385            |  BinopExpr BinOp Expr Expr
5386            |  AntiExpr String
5387     deriving(Show, Typeable, Data)
5388
5389 data BinOp  =  AddOp
5390             |  SubOp
5391             |  MulOp
5392             |  DivOp
5393     deriving(Show, Typeable, Data)
5394
5395 eval :: Expr -> Integer
5396 eval (IntExpr n)        = n
5397 eval (BinopExpr op x y) = (opToFun op) (eval x) (eval y)
5398   where
5399     opToFun AddOp = (+)
5400     opToFun SubOp = (-)
5401     opToFun MulOp = (*)
5402     opToFun DivOp = div
5403
5404 expr = QuasiQuoter parseExprExp parseExprPat
5405
5406 -- Parse an Expr, returning its representation as
5407 -- either a Q Exp or a Q Pat. See the referenced paper
5408 -- for how to use SYB to do this by writing a single
5409 -- parser of type String -> Expr instead of two
5410 -- separate parsers.
5411
5412 parseExprExp :: String -> Q Exp
5413 parseExprExp ...
5414
5415 parseExprPat :: String -> Q Pat
5416 parseExprPat ...
5417 </programlisting>
5418
5419 <para>Now run the compiler:
5420 </para>
5421 <programlisting>
5422 $ ghc --make -XQuasiQuotes Main.hs -o main
5423 </programlisting>
5424
5425 <para>Run "main" and here is your output:</para>
5426
5427 <programlisting>
5428 $ ./main
5429 3
5430 1
5431 </programlisting>
5432
5433 </sect2>
5434
5435 </sect1>
5436
5437 <!-- ===================== Arrow notation ===================  -->
5438
5439 <sect1 id="arrow-notation">
5440 <title>Arrow notation
5441 </title>
5442
5443 <para>Arrows are a generalization of monads introduced by John Hughes.
5444 For more details, see
5445 <itemizedlist>
5446
5447 <listitem>
5448 <para>
5449 &ldquo;Generalising Monads to Arrows&rdquo;,
5450 John Hughes, in <citetitle>Science of Computer Programming</citetitle> 37,
5451 pp67&ndash;111, May 2000.
5452 </para>
5453 </listitem>
5454
5455 <listitem>
5456 <para>
5457 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/notation.html">A New Notation for Arrows</ulink>&rdquo;,
5458 Ross Paterson, in <citetitle>ICFP</citetitle>, Sep 2001.
5459 </para>
5460 </listitem>
5461
5462 <listitem>
5463 <para>
5464 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/fop.html">Arrows and Computation</ulink>&rdquo;,
5465 Ross Paterson, in <citetitle>The Fun of Programming</citetitle>,
5466 Palgrave, 2003.
5467 </para>
5468 </listitem>
5469
5470 </itemizedlist>
5471 and the arrows web page at
5472 <ulink url="http://www.haskell.org/arrows/"><literal>http://www.haskell.org/arrows/</literal></ulink>.
5473 With the <option>-XArrows</option> flag, GHC supports the arrow
5474 notation described in the second of these papers.
5475 What follows is a brief introduction to the notation;
5476 it won't make much sense unless you've read Hughes's paper.
5477 This notation is translated to ordinary Haskell,
5478 using combinators from the
5479 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
5480 module.
5481 </para>
5482
5483 <para>The extension adds a new kind of expression for defining arrows:
5484 <screen>
5485 <replaceable>exp</replaceable><superscript>10</superscript> ::= ...
5486        |  proc <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
5487 </screen>
5488 where <literal>proc</literal> is a new keyword.
5489 The variables of the pattern are bound in the body of the 
5490 <literal>proc</literal>-expression,
5491 which is a new sort of thing called a <firstterm>command</firstterm>.
5492 The syntax of commands is as follows:
5493 <screen>
5494 <replaceable>cmd</replaceable>   ::= <replaceable>exp</replaceable><superscript>10</superscript> -&lt;  <replaceable>exp</replaceable>
5495        |  <replaceable>exp</replaceable><superscript>10</superscript> -&lt;&lt; <replaceable>exp</replaceable>
5496        |  <replaceable>cmd</replaceable><superscript>0</superscript>
5497 </screen>
5498 with <replaceable>cmd</replaceable><superscript>0</superscript> up to
5499 <replaceable>cmd</replaceable><superscript>9</superscript> defined using
5500 infix operators as for expressions, and
5501 <screen>
5502 <replaceable>cmd</replaceable><superscript>10</superscript> ::= \ <replaceable>apat</replaceable> ... <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
5503        |  let <replaceable>decls</replaceable> in <replaceable>cmd</replaceable>
5504        |  if <replaceable>exp</replaceable> then <replaceable>cmd</replaceable> else <replaceable>cmd</replaceable>
5505        |  case <replaceable>exp</replaceable> of { <replaceable>calts</replaceable> }
5506        |  do { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> ; <replaceable>cmd</replaceable> }
5507        |  <replaceable>fcmd</replaceable>
5508
5509 <replaceable>fcmd</replaceable>  ::= <replaceable>fcmd</replaceable> <replaceable>aexp</replaceable>
5510        |  ( <replaceable>cmd</replaceable> )
5511        |  (| <replaceable>aexp</replaceable> <replaceable>cmd</replaceable> ... <replaceable>cmd</replaceable> |)
5512
5513 <replaceable>cstmt</replaceable> ::= let <replaceable>decls</replaceable>
5514        |  <replaceable>pat</replaceable> &lt;- <replaceable>cmd</replaceable>
5515        |  rec { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> [;] }
5516        |  <replaceable>cmd</replaceable>
5517 </screen>
5518 where <replaceable>calts</replaceable> are like <replaceable>alts</replaceable>
5519 except that the bodies are commands instead of expressions.
5520 </para>
5521
5522 <para>
5523 Commands produce values, but (like monadic computations)
5524 may yield more than one value,
5525 or none, and may do other things as well.
5526 For the most part, familiarity with monadic notation is a good guide to
5527 using commands.
5528 However the values of expressions, even monadic ones,
5529 are determined by the values of the variables they contain;
5530 this is not necessarily the case for commands.
5531 </para>
5532
5533 <para>
5534 A simple example of the new notation is the expression
5535 <screen>
5536 proc x -> f -&lt; x+1
5537 </screen>
5538 We call this a <firstterm>procedure</firstterm> or
5539 <firstterm>arrow abstraction</firstterm>.
5540 As with a lambda expression, the variable <literal>x</literal>
5541 is a new variable bound within the <literal>proc</literal>-expression.
5542 It refers to the input to the arrow.
5543 In the above example, <literal>-&lt;</literal> is not an identifier but an
5544 new reserved symbol used for building commands from an expression of arrow
5545 type and an expression to be fed as input to that arrow.
5546 (The weird look will make more sense later.)
5547 It may be read as analogue of application for arrows.
5548 The above example is equivalent to the Haskell expression
5549 <screen>
5550 arr (\ x -> x+1) >>> f
5551 </screen>
5552 That would make no sense if the expression to the left of
5553 <literal>-&lt;</literal> involves the bound variable <literal>x</literal>.
5554 More generally, the expression to the left of <literal>-&lt;</literal>
5555 may not involve any <firstterm>local variable</firstterm>,
5556 i.e. a variable bound in the current arrow abstraction.
5557 For such a situation there is a variant <literal>-&lt;&lt;</literal>, as in
5558 <screen>
5559 proc x -> f x -&lt;&lt; x+1
5560 </screen>
5561 which is equivalent to
5562 <screen>
5563 arr (\ x -> (f x, x+1)) >>> app
5564 </screen>
5565 so in this case the arrow must belong to the <literal>ArrowApply</literal>
5566 class.
5567 Such an arrow is equivalent to a monad, so if you're using this form
5568 you may find a monadic formulation more convenient.
5569 </para>
5570
5571 <sect2>
5572 <title>do-notation for commands</title>
5573
5574 <para>
5575 Another form of command is a form of <literal>do</literal>-notation.
5576 For example, you can write
5577 <screen>
5578 proc x -> do
5579         y &lt;- f -&lt; x+1
5580         g -&lt; 2*y
5581         let z = x+y
5582         t &lt;- h -&lt; x*z
5583         returnA -&lt; t+z
5584 </screen>
5585 You can read this much like ordinary <literal>do</literal>-notation,
5586 but with commands in place of monadic expressions.
5587 The first line sends the value of <literal>x+1</literal> as an input to
5588 the arrow <literal>f</literal>, and matches its output against
5589 <literal>y</literal>.
5590 In the next line, the output is discarded.
5591 The arrow <function>returnA</function> is defined in the
5592 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
5593 module as <literal>arr id</literal>.
5594 The above example is treated as an abbreviation for
5595 <screen>
5596 arr (\ x -> (x, x)) >>>
5597         first (arr (\ x -> x+1) >>> f) >>>
5598         arr (\ (y, x) -> (y, (x, y))) >>>
5599         first (arr (\ y -> 2*y) >>> g) >>>
5600         arr snd >>>
5601         arr (\ (x, y) -> let z = x+y in ((x, z), z)) >>>
5602         first (arr (\ (x, z) -> x*z) >>> h) >>>
5603         arr (\ (t, z) -> t+z) >>>
5604         returnA
5605 </screen>
5606 Note that variables not used later in the composition are projected out.
5607 After simplification using rewrite rules (see <xref linkend="rewrite-rules"/>)
5608 defined in the
5609 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
5610 module, this reduces to
5611 <screen>
5612 arr (\ x -> (x+1, x)) >>>
5613         first f >>>
5614         arr (\ (y, x) -> (2*y, (x, y))) >>>
5615         first g >>>
5616         arr (\ (_, (x, y)) -> let z = x+y in (x*z, z)) >>>
5617         first h >>>
5618         arr (\ (t, z) -> t+z)
5619 </screen>
5620 which is what you might have written by hand.
5621 With arrow notation, GHC keeps track of all those tuples of variables for you.
5622 </para>
5623
5624 <para>
5625 Note that although the above translation suggests that
5626 <literal>let</literal>-bound variables like <literal>z</literal> must be
5627 monomorphic, the actual translation produces Core,
5628 so polymorphic variables are allowed.
5629 </para>
5630
5631 <para>
5632 It's also possible to have mutually recursive bindings,
5633 using the new <literal>rec</literal> keyword, as in the following example:
5634 <programlisting>
5635 counter :: ArrowCircuit a => a Bool Int
5636 counter = proc reset -> do
5637         rec     output &lt;- returnA -&lt; if reset then 0 else next
5638                 next &lt;- delay 0 -&lt; output+1
5639         returnA -&lt; output
5640 </programlisting>
5641 The translation of such forms uses the <function>loop</function> combinator,
5642 so the arrow concerned must belong to the <literal>ArrowLoop</literal> class.
5643 </para>
5644
5645 </sect2>
5646
5647 <sect2>
5648 <title>Conditional commands</title>
5649
5650 <para>
5651 In the previous example, we used a conditional expression to construct the
5652 input for an arrow.
5653 Sometimes we want to conditionally execute different commands, as in
5654 <screen>
5655 proc (x,y) ->
5656         if f x y
5657         then g -&lt; x+1
5658         else h -&lt; y+2
5659 </screen>
5660 which is translated to
5661 <screen>
5662 arr (\ (x,y) -> if f x y then Left x else Right y) >>>
5663         (arr (\x -> x+1) >>> f) ||| (arr (\y -> y+2) >>> g)
5664 </screen>
5665 Since the translation uses <function>|||</function>,
5666 the arrow concerned must belong to the <literal>ArrowChoice</literal> class.
5667 </para>
5668
5669 <para>
5670 There are also <literal>case</literal> commands, like
5671 <screen>
5672 case input of
5673     [] -> f -&lt; ()
5674     [x] -> g -&lt; x+1
5675     x1:x2:xs -> do
5676         y &lt;- h -&lt; (x1, x2)
5677         ys &lt;- k -&lt; xs
5678         returnA -&lt; y:ys
5679 </screen>
5680 The syntax is the same as for <literal>case</literal> expressions,
5681 except that the bodies of the alternatives are commands rather than expressions.
5682 The translation is similar to that of <literal>if</literal> commands.
5683 </para>
5684
5685 </sect2>
5686
5687 <sect2>
5688 <title>Defining your own control structures</title>
5689
5690 <para>
5691 As we're seen, arrow notation provides constructs,
5692 modelled on those for expressions,
5693 for sequencing, value recursion and conditionals.
5694 But suitable combinators,
5695 which you can define in ordinary Haskell,
5696 may also be used to build new commands out of existing ones.
5697 The basic idea is that a command defines an arrow from environments to values.
5698 These environments assign values to the free local variables of the command.
5699 Thus combinators that produce arrows from arrows
5700 may also be used to build commands from commands.
5701 For example, the <literal>ArrowChoice</literal> class includes a combinator
5702 <programlisting>
5703 ArrowChoice a => (&lt;+>) :: a e c -> a e c -> a e c
5704 </programlisting>
5705 so we can use it to build commands:
5706 <programlisting>
5707 expr' = proc x -> do
5708                 returnA -&lt; x
5709         &lt;+> do
5710                 symbol Plus -&lt; ()
5711                 y &lt;- term -&lt; ()
5712                 expr' -&lt; x + y
5713         &lt;+> do
5714                 symbol Minus -&lt; ()
5715                 y &lt;- term -&lt; ()
5716                 expr' -&lt; x - y
5717 </programlisting>
5718 (The <literal>do</literal> on the first line is needed to prevent the first
5719 <literal>&lt;+> ...</literal> from being interpreted as part of the
5720 expression on the previous line.)
5721 This is equivalent to
5722 <programlisting>
5723 expr' = (proc x -> returnA -&lt; x)
5724         &lt;+> (proc x -> do
5725                 symbol Plus -&lt; ()
5726                 y &lt;- term -&lt; ()
5727                 expr' -&lt; x + y)
5728         &lt;+> (proc x -> do
5729                 symbol Minus -&lt; ()
5730                 y &lt;- term -&lt; ()
5731                 expr' -&lt; x - y)
5732 </programlisting>
5733 It is essential that this operator be polymorphic in <literal>e</literal>
5734 (representing the environment input to the command
5735 and thence to its subcommands)
5736 and satisfy the corresponding naturality property
5737 <screen>
5738 arr k >>> (f &lt;+> g) = (arr k >>> f) &lt;+> (arr k >>> g)
5739 </screen>
5740 at least for strict <literal>k</literal>.
5741 (This should be automatic if you're not using <function>seq</function>.)
5742 This ensures that environments seen by the subcommands are environments
5743 of the whole command,
5744 and also allows the translation to safely trim these environments.
5745 The operator must also not use any variable defined within the current
5746 arrow abstraction.
5747 </para>
5748
5749 <para>
5750 We could define our own operator
5751 <programlisting>
5752 untilA :: ArrowChoice a => a e () -> a e Bool -> a e ()
5753 untilA body cond = proc x ->
5754         if cond x then returnA -&lt; ()
5755         else do
5756                 body -&lt; x
5757                 untilA body cond -&lt; x
5758 </programlisting>
5759 and use it in the same way.
5760 Of course this infix syntax only makes sense for binary operators;
5761 there is also a more general syntax involving special brackets:
5762 <screen>
5763 proc x -> do
5764         y &lt;- f -&lt; x+1
5765         (|untilA (increment -&lt; x+y) (within 0.5 -&lt; x)|)
5766 </screen>
5767 </para>
5768
5769 </sect2>
5770
5771 <sect2>
5772 <title>Primitive constructs</title>
5773
5774 <para>
5775 Some operators will need to pass additional inputs to their subcommands.
5776 For example, in an arrow type supporting exceptions,
5777 the operator that attaches an exception handler will wish to pass the
5778 exception that occurred to the handler.
5779 Such an operator might have a type
5780 <screen>
5781 handleA :: ... => a e c -> a (e,Ex) c -> a e c
5782 </screen>
5783 where <literal>Ex</literal> is the type of exceptions handled.
5784 You could then use this with arrow notation by writing a command
5785 <screen>
5786 body `handleA` \ ex -> handler
5787 </screen>
5788 so that if an exception is raised in the command <literal>body</literal>,
5789 the variable <literal>ex</literal> is bound to the value of the exception
5790 and the command <literal>handler</literal>,
5791 which typically refers to <literal>ex</literal>, is entered.
5792 Though the syntax here looks like a functional lambda,
5793 we are talking about commands, and something different is going on.
5794 The input to the arrow represented by a command consists of values for
5795 the free local variables in the command, plus a stack of anonymous values.
5796 In all the prior examples, this stack was empty.
5797 In the second argument to <function>handleA</function>,
5798 this stack consists of one value, the value of the exception.
5799 The command form of lambda merely gives this value a name.
5800 </para>
5801
5802 <para>
5803 More concretely,
5804 the values on the stack are paired to the right of the environment.
5805 So operators like <function>handleA</function> that pass
5806 extra inputs to their subcommands can be designed for use with the notation
5807 by pairing the values with the environment in this way.
5808 More precisely, the type of each argument of the operator (and its result)
5809 should have the form
5810 <screen>
5811 a (...(e,t1), ... tn) t
5812 </screen>
5813 where <replaceable>e</replaceable> is a polymorphic variable
5814 (representing the environment)
5815 and <replaceable>ti</replaceable> are the types of the values on the stack,
5816 with <replaceable>t1</replaceable> being the <quote>top</quote>.
5817 The polymorphic variable <replaceable>e</replaceable> must not occur in
5818 <replaceable>a</replaceable>, <replaceable>ti</replaceable> or
5819 <replaceable>t</replaceable>.
5820 However the arrows involved need not be the same.
5821 Here are some more examples of suitable operators:
5822 <screen>
5823 bracketA :: ... => a e b -> a (e,b) c -> a (e,c) d -> a e d
5824 runReader :: ... => a e c -> a' (e,State) c
5825 runState :: ... => a e c -> a' (e,State) (c,State)
5826 </screen>
5827 We can supply the extra input required by commands built with the last two
5828 by applying them to ordinary expressions, as in
5829 <screen>
5830 proc x -> do
5831         s &lt;- ...
5832         (|runReader (do { ... })|) s
5833 </screen>
5834 which adds <literal>s</literal> to the stack of inputs to the command
5835 built using <function>runReader</function>.
5836 </para>
5837
5838 <para>
5839 The command versions of lambda abstraction and application are analogous to
5840 the expression versions.
5841 In particular, the beta and eta rules describe equivalences of commands.
5842 These three features (operators, lambda abstraction and application)
5843 are the core of the notation; everything else can be built using them,
5844 though the results would be somewhat clumsy.
5845 For example, we could simulate <literal>do</literal>-notation by defining
5846 <programlisting>
5847 bind :: Arrow a => a e b -> a (e,b) c -> a e c
5848 u `bind` f = returnA &amp;&amp;&amp; u >>> f
5849
5850 bind_ :: Arrow a => a e b -> a e c -> a e c
5851 u `bind_` f = u `bind` (arr fst >>> f)
5852 </programlisting>
5853 We could simulate <literal>if</literal> by defining
5854 <programlisting>
5855 cond :: ArrowChoice a => a e b -> a e b -> a (e,Bool) b
5856 cond f g = arr (\ (e,b) -> if b then Left e else Right e) >>> f ||| g
5857 </programlisting>
5858 </para>
5859
5860 </sect2>
5861
5862 <sect2>
5863 <title>Differences with the paper</title>
5864
5865 <itemizedlist>
5866
5867 <listitem>
5868 <para>Instead of a single form of arrow application (arrow tail) with two
5869 translations, the implementation provides two forms
5870 <quote><literal>-&lt;</literal></quote> (first-order)
5871 and <quote><literal>-&lt;&lt;</literal></quote> (higher-order).
5872 </para>
5873 </listitem>
5874
5875 <listitem>
5876 <para>User-defined operators are flagged with banana brackets instead of
5877 a new <literal>form</literal> keyword.
5878 </para>
5879 </listitem>
5880
5881 </itemizedlist>
5882
5883 </sect2>
5884
5885 <sect2>
5886 <title>Portability</title>
5887
5888 <para>
5889 Although only GHC implements arrow notation directly,
5890 there is also a preprocessor
5891 (available from the 
5892 <ulink url="http://www.haskell.org/arrows/">arrows web page</ulink>)
5893 that translates arrow notation into Haskell 98
5894 for use with other Haskell systems.
5895 You would still want to check arrow programs with GHC;
5896 tracing type errors in the preprocessor output is not easy.
5897 Modules intended for both GHC and the preprocessor must observe some
5898 additional restrictions:
5899 <itemizedlist>
5900
5901 <listitem>
5902 <para>
5903 The module must import
5904 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>.
5905 </para>
5906 </listitem>
5907
5908 <listitem>
5909 <para>
5910 The preprocessor cannot cope with other Haskell extensions.
5911 These would have to go in separate modules.
5912 </para>
5913 </listitem>
5914
5915 <listitem>
5916 <para>
5917 Because the preprocessor targets Haskell (rather than Core),
5918 <literal>let</literal>-bound variables are monomorphic.
5919 </para>
5920 </listitem>
5921
5922 </itemizedlist>
5923 </para>
5924
5925 </sect2>
5926
5927 </sect1>
5928
5929 <!-- ==================== BANG PATTERNS =================  -->
5930
5931 <sect1 id="bang-patterns">
5932 <title>Bang patterns
5933 <indexterm><primary>Bang patterns</primary></indexterm>
5934 </title>
5935 <para>GHC supports an extension of pattern matching called <emphasis>bang
5936 patterns</emphasis>.   Bang patterns are under consideration for Haskell Prime.
5937 The <ulink
5938 url="http://hackage.haskell.org/trac/haskell-prime/wiki/BangPatterns">Haskell
5939 prime feature description</ulink> contains more discussion and examples
5940 than the material below.
5941 </para>
5942 <para>
5943 Bang patterns are enabled by the flag <option>-XBangPatterns</option>.
5944 </para>
5945
5946 <sect2 id="bang-patterns-informal">
5947 <title>Informal description of bang patterns
5948 </title>
5949 <para>
5950 The main idea is to add a single new production to the syntax of patterns:
5951 <programlisting>
5952   pat ::= !pat
5953 </programlisting>
5954 Matching an expression <literal>e</literal> against a pattern <literal>!p</literal> is done by first
5955 evaluating <literal>e</literal> (to WHNF) and then matching the result against <literal>p</literal>.
5956 Example:
5957 <programlisting>
5958 f1 !x = True
5959 </programlisting>
5960 This definition makes <literal>f1</literal> is strict in <literal>x</literal>,
5961 whereas without the bang it would be lazy.
5962 Bang patterns can be nested of course:
5963 <programlisting>
5964 f2 (!x, y) = [x,y]
5965 </programlisting>
5966 Here, <literal>f2</literal> is strict in <literal>x</literal> but not in
5967 <literal>y</literal>.  
5968 A bang only really has an effect if it precedes a variable or wild-card pattern:
5969 <programlisting>
5970 f3 !(x,y) = [x,y]
5971 f4 (x,y)  = [x,y]
5972 </programlisting>
5973 Here, <literal>f3</literal> and <literal>f4</literal> are identical; putting a bang before a pattern that
5974 forces evaluation anyway does nothing.
5975 </para><para>
5976 Bang patterns work in <literal>case</literal> expressions too, of course:
5977 <programlisting>
5978 g5 x = let y = f x in body
5979 g6 x = case f x of { y -&gt; body }
5980 g7 x = case f x of { !y -&gt; body }
5981 </programlisting>
5982 The functions <literal>g5</literal> and <literal>g6</literal> mean exactly the same thing.  
5983 But <literal>g7</literal> evaluates <literal>(f x)</literal>, binds <literal>y</literal> to the
5984 result, and then evaluates <literal>body</literal>.
5985 </para><para>
5986 Bang patterns work in <literal>let</literal> and <literal>where</literal>
5987 definitions too. For example:
5988 <programlisting>
5989 let ![x,y] = e in b
5990 </programlisting>
5991 is a strict pattern: operationally, it evaluates <literal>e</literal>, matches
5992 it against the pattern <literal>[x,y]</literal>, and then evaluates <literal>b</literal>
5993 The "<literal>!</literal>" should not be regarded as part of the pattern; after all,
5994 in a function argument <literal>![x,y]</literal> means the 
5995 same as <literal>[x,y]</literal>.  Rather, the "<literal>!</literal>" 
5996 is part of the syntax of <literal>let</literal> bindings.
5997 </para>
5998 </sect2>
5999
6000
6001 <sect2 id="bang-patterns-sem">
6002 <title>Syntax and semantics
6003 </title>
6004 <para>
6005
6006 We add a single new production to the syntax of patterns:
6007 <programlisting>
6008   pat ::= !pat
6009 </programlisting>
6010 There is one problem with syntactic ambiguity.  Consider:
6011 <programlisting>
6012 f !x = 3
6013 </programlisting>
6014 Is this a definition of the infix function "<literal>(!)</literal>",
6015 or of the "<literal>f</literal>" with a bang pattern? GHC resolves this
6016 ambiguity in favour of the latter.  If you want to define
6017 <literal>(!)</literal> with bang-patterns enabled, you have to do so using
6018 prefix notation:
6019 <programlisting>
6020 (!) f x = 3
6021 </programlisting>
6022 The semantics of Haskell pattern matching is described in <ulink
6023 url="http://www.haskell.org/onlinereport/exps.html#sect3.17.2">
6024 Section 3.17.2</ulink> of the Haskell Report.  To this description add 
6025 one extra item 10, saying:
6026 <itemizedlist><listitem><para>Matching
6027 the pattern <literal>!pat</literal> against a value <literal>v</literal> behaves as follows:
6028 <itemizedlist><listitem><para>if <literal>v</literal> is bottom, the match diverges</para></listitem>
6029                 <listitem><para>otherwise, <literal>pat</literal> is matched against
6030                 <literal>v</literal></para></listitem>
6031 </itemizedlist>
6032 </para></listitem></itemizedlist>
6033 Similarly, in Figure 4 of  <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.17.3">
6034 Section 3.17.3</ulink>, add a new case (t):
6035 <programlisting>
6036 case v of { !pat -> e; _ -> e' }
6037    = v `seq` case v of { pat -> e; _ -> e' }
6038 </programlisting>
6039 </para><para>
6040 That leaves let expressions, whose translation is given in 
6041 <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.12">Section
6042 3.12</ulink>
6043 of the Haskell Report.
6044 In the translation box, first apply 
6045 the following transformation:  for each pattern <literal>pi</literal> that is of 
6046 form <literal>!qi = ei</literal>, transform it to <literal>(xi,!qi) = ((),ei)</literal>, and and replace <literal>e0</literal> 
6047 by <literal>(xi `seq` e0)</literal>.  Then, when none of the left-hand-side patterns
6048 have a bang at the top, apply the rules in the existing box.
6049 </para>
6050 <para>The effect of the let rule is to force complete matching of the pattern
6051 <literal>qi</literal> before evaluation of the body is begun.  The bang is
6052 retained in the translated form in case <literal>qi</literal> is a variable,
6053 thus:
6054 <programlisting>
6055   let !y = f x in b
6056 </programlisting>
6057
6058 </para>
6059 <para>
6060 The let-binding can be recursive.  However, it is much more common for
6061 the let-binding to be non-recursive, in which case the following law holds:
6062 <literal>(let !p = rhs in body)</literal>
6063      is equivalent to
6064 <literal>(case rhs of !p -> body)</literal>
6065 </para>
6066 <para>
6067 A pattern with a bang at the outermost level is not allowed at the top level of
6068 a module.
6069 </para>
6070 </sect2>
6071 </sect1>
6072
6073 <!-- ==================== ASSERTIONS =================  -->
6074
6075 <sect1 id="assertions">
6076 <title>Assertions
6077 <indexterm><primary>Assertions</primary></indexterm>
6078 </title>
6079
6080 <para>
6081 If you want to make use of assertions in your standard Haskell code, you
6082 could define a function like the following:
6083 </para>
6084
6085 <para>
6086
6087 <programlisting>
6088 assert :: Bool -> a -> a
6089 assert False x = error "assertion failed!"
6090 assert _     x = x
6091 </programlisting>
6092
6093 </para>
6094
6095 <para>
6096 which works, but gives you back a less than useful error message --
6097 an assertion failed, but which and where?
6098 </para>
6099
6100 <para>
6101 One way out is to define an extended <function>assert</function> function which also
6102 takes a descriptive string to include in the error message and
6103 perhaps combine this with the use of a pre-processor which inserts
6104 the source location where <function>assert</function> was used.
6105 </para>
6106
6107 <para>
6108 Ghc offers a helping hand here, doing all of this for you. For every
6109 use of <function>assert</function> in the user's source:
6110 </para>
6111
6112 <para>
6113
6114 <programlisting>
6115 kelvinToC :: Double -> Double
6116 kelvinToC k = assert (k &gt;= 0.0) (k+273.15)
6117 </programlisting>
6118
6119 </para>
6120
6121 <para>
6122 Ghc will rewrite this to also include the source location where the
6123 assertion was made,
6124 </para>
6125
6126 <para>
6127
6128 <programlisting>
6129 assert pred val ==> assertError "Main.hs|15" pred val
6130 </programlisting>
6131
6132 </para>
6133
6134 <para>
6135 The rewrite is only performed by the compiler when it spots
6136 applications of <function>Control.Exception.assert</function>, so you
6137 can still define and use your own versions of
6138 <function>assert</function>, should you so wish. If not, import
6139 <literal>Control.Exception</literal> to make use
6140 <function>assert</function> in your code.
6141 </para>
6142
6143 <para>
6144 GHC ignores assertions when optimisation is turned on with the
6145       <option>-O</option><indexterm><primary><option>-O</option></primary></indexterm> flag.  That is, expressions of the form
6146 <literal>assert pred e</literal> will be rewritten to
6147 <literal>e</literal>.  You can also disable assertions using the
6148       <option>-fignore-asserts</option>
6149       option<indexterm><primary><option>-fignore-asserts</option></primary>
6150       </indexterm>.</para>
6151
6152 <para>
6153 Assertion failures can be caught, see the documentation for the
6154 <literal>Control.Exception</literal> library for the details.
6155 </para>
6156
6157 </sect1>
6158
6159
6160 <!-- =============================== PRAGMAS ===========================  -->
6161
6162   <sect1 id="pragmas">
6163     <title>Pragmas</title>
6164
6165     <indexterm><primary>pragma</primary></indexterm>
6166
6167     <para>GHC supports several pragmas, or instructions to the
6168     compiler placed in the source code.  Pragmas don't normally affect
6169     the meaning of the program, but they might affect the efficiency
6170     of the generated code.</para>
6171
6172     <para>Pragmas all take the form
6173
6174 <literal>{-# <replaceable>word</replaceable> ... #-}</literal>  
6175
6176     where <replaceable>word</replaceable> indicates the type of
6177     pragma, and is followed optionally by information specific to that
6178     type of pragma.  Case is ignored in
6179     <replaceable>word</replaceable>.  The various values for
6180     <replaceable>word</replaceable> that GHC understands are described
6181     in the following sections; any pragma encountered with an
6182     unrecognised <replaceable>word</replaceable> is (silently)
6183     ignored. The layout rule applies in pragmas, so the closing <literal>#-}</literal>
6184     should start in a column to the right of the opening <literal>{-#</literal>. </para> 
6185
6186     <para>Certain pragmas are <emphasis>file-header pragmas</emphasis>.  A file-header
6187       pragma must precede the <literal>module</literal> keyword in the file.  
6188       There can be as many file-header pragmas as you please, and they can be
6189       preceded or followed by comments.</para>
6190
6191     <sect2 id="language-pragma">
6192       <title>LANGUAGE pragma</title>
6193
6194       <indexterm><primary>LANGUAGE</primary><secondary>pragma</secondary></indexterm>
6195       <indexterm><primary>pragma</primary><secondary>LANGUAGE</secondary></indexterm>
6196
6197       <para>The <literal>LANGUAGE</literal> pragma allows language extensions to be enabled 
6198         in a portable way.
6199         It is the intention that all Haskell compilers support the
6200         <literal>LANGUAGE</literal> pragma with the same syntax, although not
6201         all extensions are supported by all compilers, of
6202         course.  The <literal>LANGUAGE</literal> pragma should be used instead
6203         of <literal>OPTIONS_GHC</literal>, if possible.</para>
6204
6205       <para>For example, to enable the FFI and preprocessing with CPP:</para>
6206
6207 <programlisting>{-# LANGUAGE ForeignFunctionInterface, CPP #-}</programlisting>
6208
6209         <para><literal>LANGUAGE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6210
6211       <para>Every language extension can also be turned into a command-line flag
6212         by prefixing it with "<literal>-X</literal>"; for example <option>-XForeignFunctionInterface</option>.
6213         (Similarly, all "<literal>-X</literal>" flags can be written as <literal>LANGUAGE</literal> pragmas.
6214       </para>
6215
6216       <para>A list of all supported language extensions can be obtained by invoking
6217         <literal>ghc --supported-languages</literal> (see <xref linkend="modes"/>).</para>
6218
6219       <para>Any extension from the <literal>Extension</literal> type defined in
6220         <ulink
6221           url="../libraries/Cabal/Language-Haskell-Extension.html"><literal>Language.Haskell.Extension</literal></ulink>
6222         may be used.  GHC will report an error if any of the requested extensions are not supported.</para>
6223     </sect2>
6224
6225
6226     <sect2 id="options-pragma">
6227       <title>OPTIONS_GHC pragma</title>
6228       <indexterm><primary>OPTIONS_GHC</primary>
6229       </indexterm>
6230       <indexterm><primary>pragma</primary><secondary>OPTIONS_GHC</secondary>
6231       </indexterm>
6232
6233       <para>The <literal>OPTIONS_GHC</literal> pragma is used to specify
6234       additional options that are given to the compiler when compiling
6235       this source file.  See <xref linkend="source-file-options"/> for
6236       details.</para>
6237
6238       <para>Previous versions of GHC accepted <literal>OPTIONS</literal> rather
6239         than <literal>OPTIONS_GHC</literal>, but that is now deprecated.</para>
6240     </sect2>
6241
6242         <para><literal>OPTIONS_GHC</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6243
6244     <sect2 id="include-pragma">
6245       <title>INCLUDE pragma</title>
6246
6247       <para>The <literal>INCLUDE</literal> pragma is for specifying the names
6248         of C header files that should be <literal>#include</literal>'d into
6249         the C source code generated by the compiler for the current module (if
6250         compiling via C).  For example:</para>
6251
6252 <programlisting>
6253 {-# INCLUDE "foo.h" #-}
6254 {-# INCLUDE &lt;stdio.h&gt; #-}</programlisting>
6255
6256         <para><literal>INCLUDE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6257
6258       <para>An <literal>INCLUDE</literal> pragma is  the preferred alternative
6259         to the <option>-#include</option> option (<xref
6260           linkend="options-C-compiler" />), because the
6261         <literal>INCLUDE</literal> pragma is understood by other
6262         compilers.  Yet another alternative is to add the include file to each
6263         <literal>foreign import</literal> declaration in your code, but we
6264         don't recommend using this approach with GHC.</para>
6265     </sect2>
6266
6267     <sect2 id="warning-deprecated-pragma">
6268       <title>WARNING and DEPRECATED pragmas</title>
6269       <indexterm><primary>WARNING</primary></indexterm>
6270       <indexterm><primary>DEPRECATED</primary></indexterm>
6271
6272       <para>The WARNING pragma allows you to attach an arbitrary warning
6273       to a particular function, class, or type.
6274       A DEPRECATED pragma lets you specify that
6275       a particular function, class, or type is deprecated.
6276       There are two ways of using these pragmas.
6277
6278       <itemizedlist>
6279         <listitem>
6280           <para>You can work on an entire module thus:</para>
6281 <programlisting>
6282    module Wibble {-# DEPRECATED "Use Wobble instead" #-} where
6283      ...
6284 </programlisting>
6285       <para>Or:</para>
6286 <programlisting>
6287    module Wibble {-# WARNING "This is an unstable interface." #-} where
6288      ...
6289 </programlisting>
6290           <para>When you compile any module that import
6291           <literal>Wibble</literal>, GHC will print the specified
6292           message.</para>
6293         </listitem>
6294
6295         <listitem>
6296           <para>You can attach a warning to a function, class, type, or data constructor, with the
6297           following top-level declarations:</para>
6298 <programlisting>
6299    {-# DEPRECATED f, C, T "Don't use these" #-}
6300    {-# WARNING unsafePerformIO "This is unsafe; I hope you know what you're doing" #-}
6301 </programlisting>
6302           <para>When you compile any module that imports and uses any
6303           of the specified entities, GHC will print the specified
6304           message.</para>
6305           <para> You can only attach to entities declared at top level in the module
6306           being compiled, and you can only use unqualified names in the list of
6307           entities. A capitalised name, such as <literal>T</literal>
6308           refers to <emphasis>either</emphasis> the type constructor <literal>T</literal>
6309           <emphasis>or</emphasis> the data constructor <literal>T</literal>, or both if
6310           both are in scope.  If both are in scope, there is currently no way to
6311       specify one without the other (c.f. fixities
6312       <xref linkend="infix-tycons"/>).</para>
6313         </listitem>
6314       </itemizedlist>
6315       Warnings and deprecations are not reported for
6316       (a) uses within the defining module, and
6317       (b) uses in an export list.
6318       The latter reduces spurious complaints within a library
6319       in which one module gathers together and re-exports 
6320       the exports of several others.
6321       </para>
6322       <para>You can suppress the warnings with the flag
6323       <option>-fno-warn-warnings-deprecations</option>.</para>
6324     </sect2>
6325
6326     <sect2 id="inline-noinline-pragma">
6327       <title>INLINE and NOINLINE pragmas</title>
6328
6329       <para>These pragmas control the inlining of function
6330       definitions.</para>
6331
6332       <sect3 id="inline-pragma">
6333         <title>INLINE pragma</title>
6334         <indexterm><primary>INLINE</primary></indexterm>
6335
6336         <para>GHC (with <option>-O</option>, as always) tries to
6337         inline (or &ldquo;unfold&rdquo;) functions/values that are
6338         &ldquo;small enough,&rdquo; thus avoiding the call overhead
6339         and possibly exposing other more-wonderful optimisations.
6340         Normally, if GHC decides a function is &ldquo;too
6341         expensive&rdquo; to inline, it will not do so, nor will it
6342         export that unfolding for other modules to use.</para>
6343
6344         <para>The sledgehammer you can bring to bear is the
6345         <literal>INLINE</literal><indexterm><primary>INLINE
6346         pragma</primary></indexterm> pragma, used thusly:</para>
6347
6348 <programlisting>
6349 key_function :: Int -> String -> (Bool, Double)
6350 {-# INLINE key_function #-}
6351 </programlisting>
6352
6353         <para>The major effect of an <literal>INLINE</literal> pragma
6354         is to declare a function's &ldquo;cost&rdquo; to be very low.
6355         The normal unfolding machinery will then be very keen to
6356         inline it.  However, an <literal>INLINE</literal> pragma for a 
6357         function "<literal>f</literal>" has a number of other effects:
6358 <itemizedlist>
6359 <listitem><para>
6360 No functions are inlined into <literal>f</literal>.  Otherwise
6361 GHC might inline a big function into <literal>f</literal>'s right hand side, 
6362 making <literal>f</literal> big; and then inline <literal>f</literal> blindly.
6363 </para></listitem>
6364 <listitem><para>
6365 The float-in, float-out, and common-sub-expression transformations are not 
6366 applied to the body of <literal>f</literal>.  
6367 </para></listitem>
6368 <listitem><para>
6369 An INLINE function is not worker/wrappered by strictness analysis.
6370 It's going to be inlined wholesale instead.
6371 </para></listitem>
6372 </itemizedlist>
6373 All of these effects are aimed at ensuring that what gets inlined is
6374 exactly what you asked for, no more and no less.
6375 </para>
6376 <para>GHC ensures that inlining cannot go on forever: every mutually-recursive
6377 group is cut by one or more <emphasis>loop breakers</emphasis> that is never inlined
6378 (see <ulink url="http://research.microsoft.com/%7Esimonpj/Papers/inlining/index.htm">
6379 Secrets of the GHC inliner, JFP 12(4) July 2002</ulink>).
6380 GHC tries not to select a function with an INLINE pragma as a loop breaker, but
6381 when there is no choice even an INLINE function can be selected, in which case
6382 the INLINE pragma is ignored.
6383 For example, for a self-recursive function, the loop breaker can only be the function
6384 itself, so an INLINE pragma is always ignored.</para>
6385
6386         <para>Syntactically, an <literal>INLINE</literal> pragma for a
6387         function can be put anywhere its type signature could be
6388         put.</para>
6389
6390         <para><literal>INLINE</literal> pragmas are a particularly
6391         good idea for the
6392         <literal>then</literal>/<literal>return</literal> (or
6393         <literal>bind</literal>/<literal>unit</literal>) functions in
6394         a monad.  For example, in GHC's own
6395         <literal>UniqueSupply</literal> monad code, we have:</para>
6396
6397 <programlisting>
6398 {-# INLINE thenUs #-}
6399 {-# INLINE returnUs #-}
6400 </programlisting>
6401
6402         <para>See also the <literal>NOINLINE</literal> pragma (<xref
6403         linkend="noinline-pragma"/>).</para>
6404
6405         <para>Note: the HBC compiler doesn't like <literal>INLINE</literal> pragmas,
6406           so if you want your code to be HBC-compatible you'll have to surround
6407           the pragma with C pre-processor directives 
6408           <literal>#ifdef __GLASGOW_HASKELL__</literal>...<literal>#endif</literal>.</para>
6409
6410       </sect3>
6411
6412       <sect3 id="noinline-pragma">
6413         <title>NOINLINE pragma</title>
6414         
6415         <indexterm><primary>NOINLINE</primary></indexterm>
6416         <indexterm><primary>NOTINLINE</primary></indexterm>
6417
6418         <para>The <literal>NOINLINE</literal> pragma does exactly what
6419         you'd expect: it stops the named function from being inlined
6420         by the compiler.  You shouldn't ever need to do this, unless
6421         you're very cautious about code size.</para>
6422
6423         <para><literal>NOTINLINE</literal> is a synonym for
6424         <literal>NOINLINE</literal> (<literal>NOINLINE</literal> is
6425         specified by Haskell 98 as the standard way to disable
6426         inlining, so it should be used if you want your code to be
6427         portable).</para>
6428       </sect3>
6429
6430       <sect3 id="phase-control">
6431         <title>Phase control</title>
6432
6433         <para> Sometimes you want to control exactly when in GHC's
6434         pipeline the INLINE pragma is switched on.  Inlining happens
6435         only during runs of the <emphasis>simplifier</emphasis>.  Each
6436         run of the simplifier has a different <emphasis>phase
6437         number</emphasis>; the phase number decreases towards zero.
6438         If you use <option>-dverbose-core2core</option> you'll see the
6439         sequence of phase numbers for successive runs of the
6440         simplifier.  In an INLINE pragma you can optionally specify a
6441         phase number, thus:
6442         <itemizedlist>
6443           <listitem>
6444             <para>"<literal>INLINE[k] f</literal>" means: do not inline
6445             <literal>f</literal>
6446               until phase <literal>k</literal>, but from phase
6447               <literal>k</literal> onwards be very keen to inline it.
6448             </para></listitem>
6449           <listitem>
6450             <para>"<literal>INLINE[~k] f</literal>" means: be very keen to inline
6451             <literal>f</literal>
6452               until phase <literal>k</literal>, but from phase
6453               <literal>k</literal> onwards do not inline it.
6454             </para></listitem>
6455           <listitem>
6456             <para>"<literal>NOINLINE[k] f</literal>" means: do not inline
6457             <literal>f</literal>
6458               until phase <literal>k</literal>, but from phase
6459               <literal>k</literal> onwards be willing to inline it (as if
6460               there was no pragma).
6461             </para></listitem>
6462             <listitem>
6463             <para>"<literal>NOINLINE[~k] f</literal>" means: be willing to inline
6464             <literal>f</literal>
6465               until phase <literal>k</literal>, but from phase
6466               <literal>k</literal> onwards do not inline it.
6467             </para></listitem>
6468         </itemizedlist>
6469 The same information is summarised here:
6470 <programlisting>
6471                            -- Before phase 2     Phase 2 and later
6472   {-# INLINE   [2]  f #-}  --      No                 Yes
6473   {-# INLINE   [~2] f #-}  --      Yes                No
6474   {-# NOINLINE [2]  f #-}  --      No                 Maybe
6475   {-# NOINLINE [~2] f #-}  --      Maybe              No
6476
6477   {-# INLINE   f #-}       --      Yes                Yes
6478   {-# NOINLINE f #-}       --      No                 No
6479 </programlisting>
6480 By "Maybe" we mean that the usual heuristic inlining rules apply (if the
6481 function body is small, or it is applied to interesting-looking arguments etc).
6482 Another way to understand the semantics is this:
6483 <itemizedlist>
6484 <listitem><para>For both INLINE and NOINLINE, the phase number says
6485 when inlining is allowed at all.</para></listitem>
6486 <listitem><para>The INLINE pragma has the additional effect of making the
6487 function body look small, so that when inlining is allowed it is very likely to
6488 happen.
6489 </para></listitem>
6490 </itemizedlist>
6491 </para>
6492 <para>The same phase-numbering control is available for RULES
6493         (<xref linkend="rewrite-rules"/>).</para>
6494       </sect3>
6495     </sect2>
6496
6497     <sect2 id="line-pragma">
6498       <title>LINE pragma</title>
6499
6500       <indexterm><primary>LINE</primary><secondary>pragma</secondary></indexterm>
6501       <indexterm><primary>pragma</primary><secondary>LINE</secondary></indexterm>
6502       <para>This pragma is similar to C's <literal>&num;line</literal>
6503       pragma, and is mainly for use in automatically generated Haskell
6504       code.  It lets you specify the line number and filename of the
6505       original code; for example</para>
6506
6507 <programlisting>{-# LINE 42 "Foo.vhs" #-}</programlisting>
6508
6509       <para>if you'd generated the current file from something called
6510       <filename>Foo.vhs</filename> and this line corresponds to line
6511       42 in the original.  GHC will adjust its error messages to refer
6512       to the line/file named in the <literal>LINE</literal>
6513       pragma.</para>
6514     </sect2>
6515
6516     <sect2 id="rules">
6517       <title>RULES pragma</title>
6518
6519       <para>The RULES pragma lets you specify rewrite rules.  It is
6520       described in <xref linkend="rewrite-rules"/>.</para>
6521     </sect2>
6522
6523     <sect2 id="specialize-pragma">
6524       <title>SPECIALIZE pragma</title>
6525
6526       <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
6527       <indexterm><primary>pragma, SPECIALIZE</primary></indexterm>
6528       <indexterm><primary>overloading, death to</primary></indexterm>
6529
6530       <para>(UK spelling also accepted.)  For key overloaded
6531       functions, you can create extra versions (NB: more code space)
6532       specialised to particular types.  Thus, if you have an
6533       overloaded function:</para>
6534
6535 <programlisting>
6536   hammeredLookup :: Ord key => [(key, value)] -> key -> value
6537 </programlisting>
6538
6539       <para>If it is heavily used on lists with
6540       <literal>Widget</literal> keys, you could specialise it as
6541       follows:</para>
6542
6543 <programlisting>
6544   {-# SPECIALIZE hammeredLookup :: [(Widget, value)] -> Widget -> value #-}
6545 </programlisting>
6546
6547       <para>A <literal>SPECIALIZE</literal> pragma for a function can
6548       be put anywhere its type signature could be put.</para>
6549
6550       <para>A <literal>SPECIALIZE</literal> has the effect of generating
6551       (a) a specialised version of the function and (b) a rewrite rule
6552       (see <xref linkend="rewrite-rules"/>) that rewrites a call to the
6553       un-specialised function into a call to the specialised one.</para>
6554
6555       <para>The type in a SPECIALIZE pragma can be any type that is less
6556         polymorphic than the type of the original function.  In concrete terms,
6557         if the original function is <literal>f</literal> then the pragma
6558 <programlisting>
6559   {-# SPECIALIZE f :: &lt;type&gt; #-}
6560 </programlisting>
6561       is valid if and only if the definition
6562 <programlisting>
6563   f_spec :: &lt;type&gt;
6564   f_spec = f
6565 </programlisting>
6566       is valid.  Here are some examples (where we only give the type signature
6567       for the original function, not its code):
6568 <programlisting>
6569   f :: Eq a => a -> b -> b
6570   {-# SPECIALISE f :: Int -> b -> b #-}
6571
6572   g :: (Eq a, Ix b) => a -> b -> b
6573   {-# SPECIALISE g :: (Eq a) => a -> Int -> Int #-}
6574
6575   h :: Eq a => a -> a -> a
6576   {-# SPECIALISE h :: (Eq a) => [a] -> [a] -> [a] #-}
6577 </programlisting>
6578 The last of these examples will generate a 
6579 RULE with a somewhat-complex left-hand side (try it yourself), so it might not fire very
6580 well.  If you use this kind of specialisation, let us know how well it works.
6581 </para>
6582
6583 <para>A <literal>SPECIALIZE</literal> pragma can optionally be followed with a
6584 <literal>INLINE</literal> or <literal>NOINLINE</literal> pragma, optionally 
6585 followed by a phase, as described in <xref linkend="inline-noinline-pragma"/>.
6586 The <literal>INLINE</literal> pragma affects the specialised version of the
6587 function (only), and applies even if the function is recursive.  The motivating
6588 example is this:
6589 <programlisting>
6590 -- A GADT for arrays with type-indexed representation
6591 data Arr e where
6592   ArrInt :: !Int -> ByteArray# -> Arr Int
6593   ArrPair :: !Int -> Arr e1 -> Arr e2 -> Arr (e1, e2)
6594
6595 (!:) :: Arr e -> Int -> e
6596 {-# SPECIALISE INLINE (!:) :: Arr Int -> Int -> Int #-}
6597 {-# SPECIALISE INLINE (!:) :: Arr (a, b) -> Int -> (a, b) #-}
6598 (ArrInt _ ba)     !: (I# i) = I# (indexIntArray# ba i)
6599 (ArrPair _ a1 a2) !: i      = (a1 !: i, a2 !: i)
6600 </programlisting>
6601 Here, <literal>(!:)</literal> is a recursive function that indexes arrays
6602 of type <literal>Arr e</literal>.  Consider a call to  <literal>(!:)</literal>
6603 at type <literal>(Int,Int)</literal>.  The second specialisation will fire, and
6604 the specialised function will be inlined.  It has two calls to
6605 <literal>(!:)</literal>,
6606 both at type <literal>Int</literal>.  Both these calls fire the first
6607 specialisation, whose body is also inlined.  The result is a type-based
6608 unrolling of the indexing function.</para>
6609 <para>Warning: you can make GHC diverge by using <literal>SPECIALISE INLINE</literal>
6610 on an ordinarily-recursive function.</para>
6611
6612       <para>Note: In earlier versions of GHC, it was possible to provide your own
6613       specialised function for a given type:
6614
6615 <programlisting>
6616 {-# SPECIALIZE hammeredLookup :: [(Int, value)] -> Int -> value = intLookup #-}
6617 </programlisting>
6618
6619       This feature has been removed, as it is now subsumed by the
6620       <literal>RULES</literal> pragma (see <xref linkend="rule-spec"/>).</para>
6621
6622     </sect2>
6623
6624 <sect2 id="specialize-instance-pragma">
6625 <title>SPECIALIZE instance pragma
6626 </title>
6627
6628 <para>
6629 <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
6630 <indexterm><primary>overloading, death to</primary></indexterm>
6631 Same idea, except for instance declarations.  For example:
6632
6633 <programlisting>
6634 instance (Eq a) => Eq (Foo a) where { 
6635    {-# SPECIALIZE instance Eq (Foo [(Int, Bar)]) #-}
6636    ... usual stuff ...
6637  }
6638 </programlisting>
6639 The pragma must occur inside the <literal>where</literal> part
6640 of the instance declaration.
6641 </para>
6642 <para>
6643 Compatible with HBC, by the way, except perhaps in the placement
6644 of the pragma.
6645 </para>
6646
6647 </sect2>
6648
6649     <sect2 id="unpack-pragma">
6650       <title>UNPACK pragma</title>
6651
6652       <indexterm><primary>UNPACK</primary></indexterm>
6653       
6654       <para>The <literal>UNPACK</literal> indicates to the compiler
6655       that it should unpack the contents of a constructor field into
6656       the constructor itself, removing a level of indirection.  For
6657       example:</para>
6658
6659 <programlisting>
6660 data T = T {-# UNPACK #-} !Float
6661            {-# UNPACK #-} !Float
6662 </programlisting>
6663
6664       <para>will create a constructor <literal>T</literal> containing
6665       two unboxed floats.  This may not always be an optimisation: if
6666       the <function>T</function> constructor is scrutinised and the
6667       floats passed to a non-strict function for example, they will
6668       have to be reboxed (this is done automatically by the
6669       compiler).</para>
6670
6671       <para>Unpacking constructor fields should only be used in
6672       conjunction with <option>-O</option>, in order to expose
6673       unfoldings to the compiler so the reboxing can be removed as
6674       often as possible.  For example:</para>
6675
6676 <programlisting>
6677 f :: T -&#62; Float
6678 f (T f1 f2) = f1 + f2
6679 </programlisting>
6680
6681       <para>The compiler will avoid reboxing <function>f1</function>
6682       and <function>f2</function> by inlining <function>+</function>
6683       on floats, but only when <option>-O</option> is on.</para>
6684
6685       <para>Any single-constructor data is eligible for unpacking; for
6686       example</para>
6687
6688 <programlisting>
6689 data T = T {-# UNPACK #-} !(Int,Int)
6690 </programlisting>
6691
6692       <para>will store the two <literal>Int</literal>s directly in the
6693       <function>T</function> constructor, by flattening the pair.
6694       Multi-level unpacking is also supported:
6695
6696 <programlisting>
6697 data T = T {-# UNPACK #-} !S
6698 data S = S {-# UNPACK #-} !Int {-# UNPACK #-} !Int
6699 </programlisting>
6700
6701       will store two unboxed <literal>Int&num;</literal>s
6702       directly in the <function>T</function> constructor.  The
6703       unpacker can see through newtypes, too.</para>
6704
6705       <para>If a field cannot be unpacked, you will not get a warning,
6706       so it might be an idea to check the generated code with
6707       <option>-ddump-simpl</option>.</para>
6708
6709       <para>See also the <option>-funbox-strict-fields</option> flag,
6710       which essentially has the effect of adding
6711       <literal>{-#&nbsp;UNPACK&nbsp;#-}</literal> to every strict
6712       constructor field.</para>
6713     </sect2>
6714
6715     <sect2 id="source-pragma">
6716       <title>SOURCE pragma</title>
6717
6718       <indexterm><primary>SOURCE</primary></indexterm>
6719      <para>The <literal>{-# SOURCE #-}</literal> pragma is used only in <literal>import</literal> declarations,
6720      to break a module loop.  It is described in detail in <xref linkend="mutual-recursion"/>.
6721      </para>
6722 </sect2>
6723
6724 </sect1>
6725
6726 <!--  ======================= REWRITE RULES ======================== -->
6727
6728 <sect1 id="rewrite-rules">
6729 <title>Rewrite rules
6730
6731 <indexterm><primary>RULES pragma</primary></indexterm>
6732 <indexterm><primary>pragma, RULES</primary></indexterm>
6733 <indexterm><primary>rewrite rules</primary></indexterm></title>
6734
6735 <para>
6736 The programmer can specify rewrite rules as part of the source program
6737 (in a pragma).  
6738 Here is an example:
6739
6740 <programlisting>
6741   {-# RULES
6742   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
6743     #-}
6744 </programlisting>
6745 </para>
6746 <para>
6747 Use the debug flag <option>-ddump-simpl-stats</option> to see what rules fired.
6748 If you need more information, then <option>-ddump-rule-firings</option> shows you
6749 each individual rule firing in detail.
6750 </para>
6751
6752 <sect2>
6753 <title>Syntax</title>
6754
6755 <para>
6756 From a syntactic point of view:
6757
6758 <itemizedlist>
6759
6760 <listitem>
6761 <para>
6762  There may be zero or more rules in a <literal>RULES</literal> pragma, separated by semicolons (which
6763  may be generated by the layout rule).
6764 </para>
6765 </listitem>
6766
6767 <listitem>
6768 <para>
6769 The layout rule applies in a pragma.
6770 Currently no new indentation level
6771 is set, so if you put several rules in single RULES pragma and wish to use layout to separate them,
6772 you must lay out the starting in the same column as the enclosing definitions.
6773 <programlisting>
6774   {-# RULES
6775   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
6776   "map/append" forall f xs ys. map f (xs ++ ys) = map f xs ++ map f ys
6777     #-}
6778 </programlisting>
6779 Furthermore, the closing <literal>#-}</literal>
6780 should start in a column to the right of the opening <literal>{-#</literal>.
6781 </para>
6782 </listitem>
6783
6784 <listitem>
6785 <para>
6786  Each rule has a name, enclosed in double quotes.  The name itself has
6787 no significance at all.  It is only used when reporting how many times the rule fired.
6788 </para>
6789 </listitem>
6790
6791 <listitem>
6792 <para>
6793 A rule may optionally have a phase-control number (see <xref linkend="phase-control"/>),
6794 immediately after the name of the rule.  Thus:
6795 <programlisting>
6796   {-# RULES
6797         "map/map" [2]  forall f g xs. map f (map g xs) = map (f.g) xs
6798     #-}
6799 </programlisting>
6800 The "[2]" means that the rule is active in Phase 2 and subsequent phases.  The inverse
6801 notation "[~2]" is also accepted, meaning that the rule is active up to, but not including,
6802 Phase 2.
6803 </para>
6804 </listitem>
6805
6806
6807
6808 <listitem>
6809 <para>
6810  Each variable mentioned in a rule must either be in scope (e.g. <function>map</function>),
6811 or bound by the <literal>forall</literal> (e.g. <function>f</function>, <function>g</function>, <function>xs</function>).  The variables bound by
6812 the <literal>forall</literal> are called the <emphasis>pattern</emphasis> variables.  They are separated
6813 by spaces, just like in a type <literal>forall</literal>.
6814 </para>
6815 </listitem>
6816 <listitem>
6817
6818 <para>
6819  A pattern variable may optionally have a type signature.
6820 If the type of the pattern variable is polymorphic, it <emphasis>must</emphasis> have a type signature.
6821 For example, here is the <literal>foldr/build</literal> rule:
6822
6823 <programlisting>
6824 "fold/build"  forall k z (g::forall b. (a->b->b) -> b -> b) .
6825               foldr k z (build g) = g k z
6826 </programlisting>
6827
6828 Since <function>g</function> has a polymorphic type, it must have a type signature.
6829
6830 </para>
6831 </listitem>
6832 <listitem>
6833
6834 <para>
6835 The left hand side of a rule must consist of a top-level variable applied
6836 to arbitrary expressions.  For example, this is <emphasis>not</emphasis> OK:
6837
6838 <programlisting>
6839 "wrong1"   forall e1 e2.  case True of { True -> e1; False -> e2 } = e1
6840 "wrong2"   forall f.      f True = True
6841 </programlisting>
6842
6843 In <literal>"wrong1"</literal>, the LHS is not an application; in <literal>"wrong2"</literal>, the LHS has a pattern variable
6844 in the head.
6845 </para>
6846 </listitem>
6847 <listitem>
6848
6849 <para>
6850  A rule does not need to be in the same module as (any of) the
6851 variables it mentions, though of course they need to be in scope.
6852 </para>
6853 </listitem>
6854 <listitem>
6855
6856 <para>
6857  All rules are implicitly exported from the module, and are therefore
6858 in force in any module that imports the module that defined the rule, directly
6859 or indirectly.  (That is, if A imports B, which imports C, then C's rules are
6860 in force when compiling A.)  The situation is very similar to that for instance
6861 declarations.
6862 </para>
6863 </listitem>
6864
6865 <listitem>
6866
6867 <para>
6868 Inside a RULE "<literal>forall</literal>" is treated as a keyword, regardless of
6869 any other flag settings.  Furthermore, inside a RULE, the language extension
6870 <option>-XScopedTypeVariables</option> is automatically enabled; see 
6871 <xref linkend="scoped-type-variables"/>.
6872 </para>
6873 </listitem>
6874 <listitem>
6875
6876 <para>
6877 Like other pragmas, RULE pragmas are always checked for scope errors, and
6878 are typechecked. Typechecking means that the LHS and RHS of a rule are typechecked, 
6879 and must have the same type.  However, rules are only <emphasis>enabled</emphasis>
6880 if the <option>-fenable-rewrite-rules</option> flag is 
6881 on (see <xref linkend="rule-semantics"/>).
6882 </para>
6883 </listitem>
6884 </itemizedlist>
6885
6886 </para>
6887
6888 </sect2>
6889
6890 <sect2 id="rule-semantics">
6891 <title>Semantics</title>
6892
6893 <para>
6894 From a semantic point of view:
6895
6896 <itemizedlist>
6897 <listitem>
6898 <para>
6899 Rules are enabled (that is, used during optimisation)
6900 by the <option>-fenable-rewrite-rules</option> flag.
6901 This flag is implied by <option>-O</option>, and may be switched
6902 off (as usual) by <option>-fno-enable-rewrite-rules</option>.
6903 (NB: enabling <option>-fenable-rewrite-rules</option> without <option>-O</option> 
6904 may not do what you expect, though, because without <option>-O</option> GHC 
6905 ignores all optimisation information in interface files;
6906 see <option>-fignore-interface-pragmas</option>, <xref linkend="options-f"/>.)
6907 Note that <option>-fenable-rewrite-rules</option> is an <emphasis>optimisation</emphasis> flag, and
6908 has no effect on parsing or typechecking.
6909 </para>
6910 </listitem>
6911
6912 <listitem>
6913 <para>
6914  Rules are regarded as left-to-right rewrite rules.
6915 When GHC finds an expression that is a substitution instance of the LHS
6916 of a rule, it replaces the expression by the (appropriately-substituted) RHS.
6917 By "a substitution instance" we mean that the LHS can be made equal to the
6918 expression by substituting for the pattern variables.
6919
6920 </para>
6921 </listitem>
6922 <listitem>
6923
6924 <para>
6925  GHC makes absolutely no attempt to verify that the LHS and RHS
6926 of a rule have the same meaning.  That is undecidable in general, and
6927 infeasible in most interesting cases.  The responsibility is entirely the programmer's!
6928
6929 </para>
6930 </listitem>
6931 <listitem>
6932
6933 <para>
6934  GHC makes no attempt to make sure that the rules are confluent or
6935 terminating.  For example:
6936
6937 <programlisting>
6938   "loop"        forall x y.  f x y = f y x
6939 </programlisting>
6940
6941 This rule will cause the compiler to go into an infinite loop.
6942
6943 </para>
6944 </listitem>
6945 <listitem>
6946
6947 <para>
6948  If more than one rule matches a call, GHC will choose one arbitrarily to apply.
6949
6950 </para>
6951 </listitem>
6952 <listitem>
6953 <para>
6954  GHC currently uses a very simple, syntactic, matching algorithm
6955 for matching a rule LHS with an expression.  It seeks a substitution
6956 which makes the LHS and expression syntactically equal modulo alpha
6957 conversion.  The pattern (rule), but not the expression, is eta-expanded if
6958 necessary.  (Eta-expanding the expression can lead to laziness bugs.)
6959 But not beta conversion (that's called higher-order matching).
6960 </para>
6961
6962 <para>
6963 Matching is carried out on GHC's intermediate language, which includes
6964 type abstractions and applications.  So a rule only matches if the
6965 types match too.  See <xref linkend="rule-spec"/> below.
6966 </para>
6967 </listitem>
6968 <listitem>
6969
6970 <para>
6971  GHC keeps trying to apply the rules as it optimises the program.
6972 For example, consider:
6973
6974 <programlisting>
6975   let s = map f
6976       t = map g
6977   in
6978   s (t xs)
6979 </programlisting>
6980
6981 The expression <literal>s (t xs)</literal> does not match the rule <literal>"map/map"</literal>, but GHC
6982 will substitute for <varname>s</varname> and <varname>t</varname>, giving an expression which does match.
6983 If <varname>s</varname> or <varname>t</varname> was (a) used more than once, and (b) large or a redex, then it would
6984 not be substituted, and the rule would not fire.
6985
6986 </para>
6987 </listitem>
6988 <listitem>
6989
6990 <para>
6991 Ordinary inlining happens at the same time as rule rewriting, which may lead to unexpected
6992 results.  Consider this (artificial) example
6993 <programlisting>
6994 f x = x
6995 {-# RULES "f" f True = False #-}
6996
6997 g y = f y
6998
6999 h z = g True
7000 </programlisting>
7001 Since <literal>f</literal>'s right-hand side is small, it is inlined into <literal>g</literal>,
7002 to give
7003 <programlisting>
7004 g y = y
7005 </programlisting>
7006 Now <literal>g</literal> is inlined into <literal>h</literal>, but <literal>f</literal>'s RULE has
7007 no chance to fire.  
7008 If instead GHC had first inlined <literal>g</literal> into <literal>h</literal> then there
7009 would have been a better chance that <literal>f</literal>'s RULE might fire.  
7010 </para>
7011 <para>
7012 The way to get predictable behaviour is to use a NOINLINE 
7013 pragma on <literal>f</literal>, to ensure
7014 that it is not inlined until its RULEs have had a chance to fire.
7015 </para>
7016 </listitem>
7017 </itemizedlist>
7018
7019 </para>
7020
7021 </sect2>
7022
7023 <sect2>
7024 <title>List fusion</title>
7025
7026 <para>
7027 The RULES mechanism is used to implement fusion (deforestation) of common list functions.
7028 If a "good consumer" consumes an intermediate list constructed by a "good producer", the
7029 intermediate list should be eliminated entirely.
7030 </para>
7031
7032 <para>
7033 The following are good producers:
7034
7035 <itemizedlist>
7036 <listitem>
7037
7038 <para>
7039  List comprehensions
7040 </para>
7041 </listitem>
7042 <listitem>
7043
7044 <para>
7045  Enumerations of <literal>Int</literal> and <literal>Char</literal> (e.g. <literal>['a'..'z']</literal>).
7046 </para>
7047 </listitem>
7048 <listitem>
7049
7050 <para>
7051  Explicit lists (e.g. <literal>[True, False]</literal>)
7052 </para>
7053 </listitem>
7054 <listitem>
7055
7056 <para>
7057  The cons constructor (e.g <literal>3:4:[]</literal>)
7058 </para>
7059 </listitem>
7060 <listitem>
7061
7062 <para>
7063  <function>++</function>
7064 </para>
7065 </listitem>
7066
7067 <listitem>
7068 <para>
7069  <function>map</function>
7070 </para>
7071 </listitem>
7072
7073 <listitem>
7074 <para>
7075 <function>take</function>, <function>filter</function>
7076 </para>
7077 </listitem>
7078 <listitem>
7079
7080 <para>
7081  <function>iterate</function>, <function>repeat</function>
7082 </para>
7083 </listitem>
7084 <listitem>
7085
7086 <para>
7087  <function>zip</function>, <function>zipWith</function>
7088 </para>
7089 </listitem>
7090
7091 </itemizedlist>
7092
7093 </para>
7094
7095 <para>
7096 The following are good consumers:
7097
7098 <itemizedlist>
7099 <listitem>
7100
7101 <para>
7102  List comprehensions
7103 </para>
7104 </listitem>
7105 <listitem>
7106
7107 <para>
7108  <function>array</function> (on its second argument)
7109 </para>
7110 </listitem>
7111 <listitem>
7112
7113 <para>
7114  <function>++</function> (on its first argument)
7115 </para>
7116 </listitem>
7117
7118 <listitem>
7119 <para>
7120  <function>foldr</function>
7121 </para>
7122 </listitem>
7123
7124 <listitem>
7125 <para>
7126  <function>map</function>
7127 </para>
7128 </listitem>
7129 <listitem>
7130
7131 <para>
7132 <function>take</function>, <function>filter</function>
7133 </para>
7134 </listitem>
7135 <listitem>
7136
7137 <para>
7138  <function>concat</function>
7139 </para>
7140 </listitem>
7141 <listitem>
7142
7143 <para>
7144  <function>unzip</function>, <function>unzip2</function>, <function>unzip3</function>, <function>unzip4</function>
7145 </para>
7146 </listitem>
7147 <listitem>
7148
7149 <para>
7150  <function>zip</function>, <function>zipWith</function> (but on one argument only; if both are good producers, <function>zip</function>
7151 will fuse with one but not the other)
7152 </para>
7153 </listitem>
7154 <listitem>
7155
7156 <para>
7157  <function>partition</function>
7158 </para>
7159 </listitem>
7160 <listitem>
7161
7162 <para>
7163  <function>head</function>
7164 </para>
7165 </listitem>
7166 <listitem>
7167
7168 <para>
7169  <function>and</function>, <function>or</function>, <function>any</function>, <function>all</function>
7170 </para>
7171 </listitem>
7172 <listitem>
7173
7174 <para>
7175  <function>sequence&lowbar;</function>
7176 </para>
7177 </listitem>
7178 <listitem>
7179
7180 <para>
7181  <function>msum</function>
7182 </para>
7183 </listitem>
7184 <listitem>
7185
7186 <para>
7187  <function>sortBy</function>
7188 </para>
7189 </listitem>
7190
7191 </itemizedlist>
7192
7193 </para>
7194
7195  <para>
7196 So, for example, the following should generate no intermediate lists:
7197
7198 <programlisting>
7199 array (1,10) [(i,i*i) | i &#60;- map (+ 1) [0..9]]
7200 </programlisting>
7201
7202 </para>
7203
7204 <para>
7205 This list could readily be extended; if there are Prelude functions that you use
7206 a lot which are not included, please tell us.
7207 </para>
7208
7209 <para>
7210 If you want to write your own good consumers or producers, look at the
7211 Prelude definitions of the above functions to see how to do so.
7212 </para>
7213
7214 </sect2>
7215
7216 <sect2 id="rule-spec">
7217 <title>Specialisation
7218 </title>
7219
7220 <para>
7221 Rewrite rules can be used to get the same effect as a feature
7222 present in earlier versions of GHC.
7223 For example, suppose that:
7224
7225 <programlisting>
7226 genericLookup :: Ord a => Table a b   -> a   -> b
7227 intLookup     ::          Table Int b -> Int -> b
7228 </programlisting>
7229
7230 where <function>intLookup</function> is an implementation of
7231 <function>genericLookup</function> that works very fast for
7232 keys of type <literal>Int</literal>.  You might wish
7233 to tell GHC to use <function>intLookup</function> instead of
7234 <function>genericLookup</function> whenever the latter was called with
7235 type <literal>Table Int b -&gt; Int -&gt; b</literal>.
7236 It used to be possible to write
7237
7238 <programlisting>
7239 {-# SPECIALIZE genericLookup :: Table Int b -> Int -> b = intLookup #-}
7240 </programlisting>
7241
7242 This feature is no longer in GHC, but rewrite rules let you do the same thing:
7243
7244 <programlisting>
7245 {-# RULES "genericLookup/Int" genericLookup = intLookup #-}
7246 </programlisting>
7247
7248 This slightly odd-looking rule instructs GHC to replace
7249 <function>genericLookup</function> by <function>intLookup</function>
7250 <emphasis>whenever the types match</emphasis>.
7251 What is more, this rule does not need to be in the same
7252 file as <function>genericLookup</function>, unlike the
7253 <literal>SPECIALIZE</literal> pragmas which currently do (so that they
7254 have an original definition available to specialise).
7255 </para>
7256
7257 <para>It is <emphasis>Your Responsibility</emphasis> to make sure that
7258 <function>intLookup</function> really behaves as a specialised version
7259 of <function>genericLookup</function>!!!</para>
7260
7261 <para>An example in which using <literal>RULES</literal> for
7262 specialisation will Win Big:
7263
7264 <programlisting>
7265 toDouble :: Real a => a -> Double
7266 toDouble = fromRational . toRational
7267
7268 {-# RULES "toDouble/Int" toDouble = i2d #-}
7269 i2d (I# i) = D# (int2Double# i) -- uses Glasgow prim-op directly
7270 </programlisting>
7271
7272 The <function>i2d</function> function is virtually one machine
7273 instruction; the default conversion&mdash;via an intermediate
7274 <literal>Rational</literal>&mdash;is obscenely expensive by
7275 comparison.
7276 </para>
7277
7278 </sect2>
7279
7280 <sect2>
7281 <title>Controlling what's going on</title>
7282
7283 <para>
7284
7285 <itemizedlist>
7286 <listitem>
7287
7288 <para>
7289  Use <option>-ddump-rules</option> to see what transformation rules GHC is using.
7290 </para>
7291 </listitem>
7292 <listitem>
7293
7294 <para>
7295  Use <option>-ddump-simpl-stats</option> to see what rules are being fired.
7296 If you add <option>-dppr-debug</option> you get a more detailed listing.
7297 </para>
7298 </listitem>
7299 <listitem>
7300
7301 <para>
7302  The definition of (say) <function>build</function> in <filename>GHC/Base.lhs</filename> looks like this:
7303
7304 <programlisting>
7305         build   :: forall a. (forall b. (a -> b -> b) -> b -> b) -> [a]
7306         {-# INLINE build #-}
7307         build g = g (:) []
7308 </programlisting>
7309
7310 Notice the <literal>INLINE</literal>!  That prevents <literal>(:)</literal> from being inlined when compiling
7311 <literal>PrelBase</literal>, so that an importing module will &ldquo;see&rdquo; the <literal>(:)</literal>, and can
7312 match it on the LHS of a rule.  <literal>INLINE</literal> prevents any inlining happening
7313 in the RHS of the <literal>INLINE</literal> thing.  I regret the delicacy of this.
7314
7315 </para>
7316 </listitem>
7317 <listitem>
7318
7319 <para>
7320  In <filename>libraries/base/GHC/Base.lhs</filename> look at the rules for <function>map</function> to
7321 see how to write rules that will do fusion and yet give an efficient
7322 program even if fusion doesn't happen.  More rules in <filename>GHC/List.lhs</filename>.
7323 </para>
7324 </listitem>
7325
7326 </itemizedlist>
7327
7328 </para>
7329
7330 </sect2>
7331
7332 <sect2 id="core-pragma">
7333   <title>CORE pragma</title>
7334
7335   <indexterm><primary>CORE pragma</primary></indexterm>
7336   <indexterm><primary>pragma, CORE</primary></indexterm>
7337   <indexterm><primary>core, annotation</primary></indexterm>
7338
7339 <para>
7340   The external core format supports <quote>Note</quote> annotations;
7341   the <literal>CORE</literal> pragma gives a way to specify what these
7342   should be in your Haskell source code.  Syntactically, core
7343   annotations are attached to expressions and take a Haskell string
7344   literal as an argument.  The following function definition shows an
7345   example:
7346
7347 <programlisting>
7348 f x = ({-# CORE "foo" #-} show) ({-# CORE "bar" #-} x)
7349 </programlisting>
7350
7351   Semantically, this is equivalent to:
7352
7353 <programlisting>
7354 g x = show x
7355 </programlisting>
7356 </para>
7357
7358 <para>
7359   However, when external core is generated (via
7360   <option>-fext-core</option>), there will be Notes attached to the
7361   expressions <function>show</function> and <varname>x</varname>.
7362   The core function declaration for <function>f</function> is:
7363 </para>
7364
7365 <programlisting>
7366   f :: %forall a . GHCziShow.ZCTShow a ->
7367                    a -> GHCziBase.ZMZN GHCziBase.Char =
7368     \ @ a (zddShow::GHCziShow.ZCTShow a) (eta::a) ->
7369         (%note "foo"
7370          %case zddShow %of (tpl::GHCziShow.ZCTShow a)
7371            {GHCziShow.ZCDShow
7372             (tpl1::GHCziBase.Int ->
7373                    a ->
7374                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
7375 r)
7376             (tpl2::a -> GHCziBase.ZMZN GHCziBase.Char)
7377             (tpl3::GHCziBase.ZMZN a ->
7378                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
7379 r) ->
7380               tpl2})
7381         (%note "bar"
7382          eta);
7383 </programlisting>
7384
7385 <para>
7386   Here, we can see that the function <function>show</function> (which
7387   has been expanded out to a case expression over the Show dictionary)
7388   has a <literal>%note</literal> attached to it, as does the
7389   expression <varname>eta</varname> (which used to be called
7390   <varname>x</varname>).
7391 </para>
7392
7393 </sect2>
7394
7395 </sect1>
7396
7397 <sect1 id="special-ids">
7398 <title>Special built-in functions</title>
7399 <para>GHC has a few built-in functions with special behaviour.  These
7400 are now described in the module <ulink
7401 url="../libraries/base/GHC-Prim.html"><literal>GHC.Prim</literal></ulink>
7402 in the library documentation.</para>
7403 </sect1>
7404
7405
7406 <sect1 id="generic-classes">
7407 <title>Generic classes</title>
7408
7409 <para>
7410 The ideas behind this extension are described in detail in "Derivable type classes",
7411 Ralf Hinze and Simon Peyton Jones, Haskell Workshop, Montreal Sept 2000, pp94-105.
7412 An example will give the idea:
7413 </para>
7414
7415 <programlisting>
7416   import Generics
7417
7418   class Bin a where
7419     toBin   :: a -> [Int]
7420     fromBin :: [Int] -> (a, [Int])
7421   
7422     toBin {| Unit |}    Unit      = []
7423     toBin {| a :+: b |} (Inl x)   = 0 : toBin x
7424     toBin {| a :+: b |} (Inr y)   = 1 : toBin y
7425     toBin {| a :*: b |} (x :*: y) = toBin x ++ toBin y
7426   
7427     fromBin {| Unit |}    bs      = (Unit, bs)
7428     fromBin {| a :+: b |} (0:bs)  = (Inl x, bs')    where (x,bs') = fromBin bs
7429     fromBin {| a :+: b |} (1:bs)  = (Inr y, bs')    where (y,bs') = fromBin bs
7430     fromBin {| a :*: b |} bs      = (x :*: y, bs'') where (x,bs' ) = fromBin bs
7431                                                           (y,bs'') = fromBin bs'
7432 </programlisting>
7433 <para>
7434 This class declaration explains how <literal>toBin</literal> and <literal>fromBin</literal>
7435 work for arbitrary data types.  They do so by giving cases for unit, product, and sum,
7436 which are defined thus in the library module <literal>Generics</literal>:
7437 </para>
7438 <programlisting>
7439   data Unit    = Unit
7440   data a :+: b = Inl a | Inr b
7441   data a :*: b = a :*: b
7442 </programlisting>
7443 <para>
7444 Now you can make a data type into an instance of Bin like this:
7445 <programlisting>
7446   instance (Bin a, Bin b) => Bin (a,b)
7447   instance Bin a => Bin [a]
7448 </programlisting>
7449 That is, just leave off the "where" clause.  Of course, you can put in the
7450 where clause and over-ride whichever methods you please.
7451 </para>
7452
7453     <sect2>
7454       <title> Using generics </title>
7455       <para>To use generics you need to</para>
7456       <itemizedlist>
7457         <listitem>
7458           <para>Use the flags <option>-fglasgow-exts</option> (to enable the extra syntax), 
7459                 <option>-XGenerics</option> (to generate extra per-data-type code),
7460                 and <option>-package lang</option> (to make the <literal>Generics</literal> library
7461                 available.  </para>
7462         </listitem>
7463         <listitem>
7464           <para>Import the module <literal>Generics</literal> from the
7465           <literal>lang</literal> package.  This import brings into
7466           scope the data types <literal>Unit</literal>,
7467           <literal>:*:</literal>, and <literal>:+:</literal>.  (You
7468           don't need this import if you don't mention these types
7469           explicitly; for example, if you are simply giving instance
7470           declarations.)</para>
7471         </listitem>
7472       </itemizedlist>
7473     </sect2>
7474
7475 <sect2> <title> Changes wrt the paper </title>
7476 <para>
7477 Note that the type constructors <literal>:+:</literal> and <literal>:*:</literal> 
7478 can be written infix (indeed, you can now use
7479 any operator starting in a colon as an infix type constructor).  Also note that
7480 the type constructors are not exactly as in the paper (Unit instead of 1, etc).
7481 Finally, note that the syntax of the type patterns in the class declaration
7482 uses "<literal>{|</literal>" and "<literal>|}</literal>" brackets; curly braces
7483 alone would ambiguous when they appear on right hand sides (an extension we 
7484 anticipate wanting).
7485 </para>
7486 </sect2>
7487
7488 <sect2> <title>Terminology and restrictions</title>
7489 <para>
7490 Terminology.  A "generic default method" in a class declaration
7491 is one that is defined using type patterns as above.
7492 A "polymorphic default method" is a default method defined as in Haskell 98.
7493 A "generic class declaration" is a class declaration with at least one
7494 generic default method.
7495 </para>
7496
7497 <para>
7498 Restrictions:
7499 <itemizedlist>
7500 <listitem>
7501 <para>
7502 Alas, we do not yet implement the stuff about constructor names and 
7503 field labels.
7504 </para>
7505 </listitem>
7506
7507 <listitem>
7508 <para>
7509 A generic class can have only one parameter; you can't have a generic
7510 multi-parameter class.
7511 </para>
7512 </listitem>
7513
7514 <listitem>
7515 <para>
7516 A default method must be defined entirely using type patterns, or entirely
7517 without.  So this is illegal:
7518 <programlisting>
7519   class Foo a where
7520     op :: a -> (a, Bool)
7521     op {| Unit |} Unit = (Unit, True)
7522     op x               = (x,    False)
7523 </programlisting>
7524 However it is perfectly OK for some methods of a generic class to have 
7525 generic default methods and others to have polymorphic default methods.
7526 </para>
7527 </listitem>
7528
7529 <listitem>
7530 <para>
7531 The type variable(s) in the type pattern for a generic method declaration
7532 scope over the right hand side.  So this is legal (note the use of the type variable ``p'' in a type signature on the right hand side:
7533 <programlisting>
7534   class Foo a where
7535     op :: a -> Bool
7536     op {| p :*: q |} (x :*: y) = op (x :: p)
7537     ...
7538 </programlisting>
7539 </para>
7540 </listitem>
7541
7542 <listitem>
7543 <para>
7544 The type patterns in a generic default method must take one of the forms:
7545 <programlisting>
7546        a :+: b
7547        a :*: b
7548        Unit
7549 </programlisting>
7550 where "a" and "b" are type variables.  Furthermore, all the type patterns for
7551 a single type constructor (<literal>:*:</literal>, say) must be identical; they
7552 must use the same type variables.  So this is illegal:
7553 <programlisting>
7554   class Foo a where
7555     op :: a -> Bool
7556     op {| a :+: b |} (Inl x) = True
7557     op {| p :+: q |} (Inr y) = False
7558 </programlisting>
7559 The type patterns must be identical, even in equations for different methods of the class.
7560 So this too is illegal:
7561 <programlisting>
7562   class Foo a where
7563     op1 :: a -> Bool
7564     op1 {| a :*: b |} (x :*: y) = True
7565
7566     op2 :: a -> Bool
7567     op2 {| p :*: q |} (x :*: y) = False
7568 </programlisting>
7569 (The reason for this restriction is that we gather all the equations for a particular type constructor
7570 into a single generic instance declaration.)
7571 </para>
7572 </listitem>
7573
7574 <listitem>
7575 <para>
7576 A generic method declaration must give a case for each of the three type constructors.
7577 </para>
7578 </listitem>
7579
7580 <listitem>
7581 <para>
7582 The type for a generic method can be built only from:
7583   <itemizedlist>
7584   <listitem> <para> Function arrows </para> </listitem>
7585   <listitem> <para> Type variables </para> </listitem>
7586   <listitem> <para> Tuples </para> </listitem>
7587   <listitem> <para> Arbitrary types not involving type variables </para> </listitem>
7588   </itemizedlist>
7589 Here are some example type signatures for generic methods:
7590 <programlisting>
7591     op1 :: a -> Bool
7592     op2 :: Bool -> (a,Bool)
7593     op3 :: [Int] -> a -> a
7594     op4 :: [a] -> Bool
7595 </programlisting>
7596 Here, op1, op2, op3 are OK, but op4 is rejected, because it has a type variable
7597 inside a list.  
7598 </para>
7599 <para>
7600 This restriction is an implementation restriction: we just haven't got around to
7601 implementing the necessary bidirectional maps over arbitrary type constructors.
7602 It would be relatively easy to add specific type constructors, such as Maybe and list,
7603 to the ones that are allowed.</para>
7604 </listitem>
7605
7606 <listitem>
7607 <para>
7608 In an instance declaration for a generic class, the idea is that the compiler
7609 will fill in the methods for you, based on the generic templates.  However it can only
7610 do so if
7611   <itemizedlist>
7612   <listitem>
7613   <para>
7614   The instance type is simple (a type constructor applied to type variables, as in Haskell 98).
7615   </para>
7616   </listitem>
7617   <listitem>
7618   <para>
7619   No constructor of the instance type has unboxed fields.
7620   </para>
7621   </listitem>
7622   </itemizedlist>
7623 (Of course, these things can only arise if you are already using GHC extensions.)
7624 However, you can still give an instance declarations for types which break these rules,
7625 provided you give explicit code to override any generic default methods.
7626 </para>
7627 </listitem>
7628
7629 </itemizedlist>
7630 </para>
7631
7632 <para>
7633 The option <option>-ddump-deriv</option> dumps incomprehensible stuff giving details of 
7634 what the compiler does with generic declarations.
7635 </para>
7636
7637 </sect2>
7638
7639 <sect2> <title> Another example </title>
7640 <para>
7641 Just to finish with, here's another example I rather like:
7642 <programlisting>
7643   class Tag a where
7644     nCons :: a -> Int
7645     nCons {| Unit |}    _ = 1
7646     nCons {| a :*: b |} _ = 1
7647     nCons {| a :+: b |} _ = nCons (bot::a) + nCons (bot::b)
7648   
7649     tag :: a -> Int
7650     tag {| Unit |}    _       = 1
7651     tag {| a :*: b |} _       = 1   
7652     tag {| a :+: b |} (Inl x) = tag x
7653     tag {| a :+: b |} (Inr y) = nCons (bot::a) + tag y
7654 </programlisting>
7655 </para>
7656 </sect2>
7657 </sect1>
7658
7659 <sect1 id="monomorphism">
7660 <title>Control over monomorphism</title>
7661
7662 <para>GHC supports two flags that control the way in which generalisation is
7663 carried out at let and where bindings.
7664 </para>
7665
7666 <sect2>
7667 <title>Switching off the dreaded Monomorphism Restriction</title>
7668           <indexterm><primary><option>-XNoMonomorphismRestriction</option></primary></indexterm>
7669
7670 <para>Haskell's monomorphism restriction (see 
7671 <ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.5">Section
7672 4.5.5</ulink>
7673 of the Haskell Report)
7674 can be completely switched off by
7675 <option>-XNoMonomorphismRestriction</option>.
7676 </para>
7677 </sect2>
7678
7679 <sect2>
7680 <title>Monomorphic pattern bindings</title>
7681           <indexterm><primary><option>-XNoMonoPatBinds</option></primary></indexterm>
7682           <indexterm><primary><option>-XMonoPatBinds</option></primary></indexterm>
7683
7684           <para> As an experimental change, we are exploring the possibility of
7685           making pattern bindings monomorphic; that is, not generalised at all.  
7686             A pattern binding is a binding whose LHS has no function arguments,
7687             and is not a simple variable.  For example:
7688 <programlisting>
7689   f x = x                    -- Not a pattern binding
7690   f = \x -> x                -- Not a pattern binding
7691   f :: Int -> Int = \x -> x  -- Not a pattern binding
7692
7693   (g,h) = e                  -- A pattern binding
7694   (f) = e                    -- A pattern binding
7695   [x] = e                    -- A pattern binding
7696 </programlisting>
7697 Experimentally, GHC now makes pattern bindings monomorphic <emphasis>by
7698 default</emphasis>.  Use <option>-XNoMonoPatBinds</option> to recover the
7699 standard behaviour.
7700 </para>
7701 </sect2>
7702 </sect1>
7703
7704
7705
7706 <!-- Emacs stuff:
7707      ;;; Local Variables: ***
7708      ;;; mode: xml ***
7709      ;;; sgml-parent-document: ("users_guide.xml" "book" "chapter" "sect1") ***
7710      ;;; ispell-local-dictionary: "british" ***
7711      ;;; End: ***
7712  -->
7713