797a509343704bae3ede80f7d9563fc0e511aaf2
[ghc-hetmet.git] / docs / users_guide / glasgow_exts.xml
1 <?xml version="1.0" encoding="iso-8859-1"?>
2 <para>
3 <indexterm><primary>language, GHC</primary></indexterm>
4 <indexterm><primary>extensions, GHC</primary></indexterm>
5 As with all known Haskell systems, GHC implements some extensions to
6 the language.  They are all enabled by options; by default GHC
7 understands only plain Haskell 98.
8 </para>
9
10 <para>
11 Some of the Glasgow extensions serve to give you access to the
12 underlying facilities with which we implement Haskell.  Thus, you can
13 get at the Raw Iron, if you are willing to write some non-portable
14 code at a more primitive level.  You need not be &ldquo;stuck&rdquo;
15 on performance because of the implementation costs of Haskell's
16 &ldquo;high-level&rdquo; features&mdash;you can always code
17 &ldquo;under&rdquo; them.  In an extreme case, you can write all your
18 time-critical code in C, and then just glue it together with Haskell!
19 </para>
20
21 <para>
22 Before you get too carried away working at the lowest level (e.g.,
23 sloshing <literal>MutableByteArray&num;</literal>s around your
24 program), you may wish to check if there are libraries that provide a
25 &ldquo;Haskellised veneer&rdquo; over the features you want.  The
26 separate <ulink url="../libraries/index.html">libraries
27 documentation</ulink> describes all the libraries that come with GHC.
28 </para>
29
30 <!-- LANGUAGE OPTIONS -->
31   <sect1 id="options-language">
32     <title>Language options</title>
33
34     <indexterm><primary>language</primary><secondary>option</secondary>
35     </indexterm>
36     <indexterm><primary>options</primary><secondary>language</secondary>
37     </indexterm>
38     <indexterm><primary>extensions</primary><secondary>options controlling</secondary>
39     </indexterm>
40
41     <para>The language option flag control what variation of the language are
42     permitted.  Leaving out all of them gives you standard Haskell
43     98.</para>
44
45     <para>Generally speaking, all the language options are introduced by "<option>-X</option>", 
46     e.g. <option>-XTemplateHaskell</option>.
47     </para>
48
49    <para> All the language options can be turned off by using the prefix "<option>No</option>"; 
50       e.g. "<option>-XNoTemplateHaskell</option>".</para>
51
52    <para> Language options recognised by Cabal can also be enabled using the <literal>LANGUAGE</literal> pragma,
53    thus <literal>{-# LANGUAGE TemplateHaskell #-}</literal> (see <xref linkend="language-pragma"/>>). </para>
54
55     <para>Turning on an option that enables special syntax
56     <emphasis>might</emphasis> cause working Haskell 98 code to fail
57     to compile, perhaps because it uses a variable name which has
58     become a reserved word.  So, together with each option below, we
59     list the special syntax which is enabled by this option.  We use
60     notation and nonterminal names from the Haskell 98 lexical syntax
61     (see the Haskell 98 Report).  There are two classes of special
62     syntax:</para>
63
64     <itemizedlist>
65       <listitem>
66         <para>New reserved words and symbols: character sequences
67         which are no longer available for use as identifiers in the
68         program.</para>
69       </listitem>
70       <listitem>
71         <para>Other special syntax: sequences of characters that have
72         a different meaning when this particular option is turned
73         on.</para>
74       </listitem>
75     </itemizedlist>
76
77     <para>We are only listing syntax changes here that might affect
78     existing working programs (i.e. "stolen" syntax).  Many of these
79     extensions will also enable new context-free syntax, but in all
80     cases programs written to use the new syntax would not be
81     compilable without the option enabled.</para>
82
83     <variablelist>
84
85       <varlistentry>
86         <term>
87           <option>-fglasgow-exts</option>:
88           <indexterm><primary><option>-fglasgow-exts</option></primary></indexterm>
89         </term>
90         <listitem>
91           <para>This simultaneously enables all of the extensions to
92           Haskell 98 described in <xref
93           linkend="ghc-language-features"/>, except where otherwise
94           noted. We are trying to move away from this portmanteau flag, 
95           and towards enabling features individaully.</para>
96
97           <para>New reserved words: <literal>forall</literal> (only in
98           types), <literal>mdo</literal>.</para>
99
100           <para>Other syntax stolen:
101               <replaceable>varid</replaceable>{<literal>&num;</literal>},
102               <replaceable>char</replaceable><literal>&num;</literal>,      
103               <replaceable>string</replaceable><literal>&num;</literal>,    
104               <replaceable>integer</replaceable><literal>&num;</literal>,    
105               <replaceable>float</replaceable><literal>&num;</literal>,    
106               <replaceable>float</replaceable><literal>&num;&num;</literal>,    
107               <literal>(&num;</literal>, <literal>&num;)</literal>,         
108               <literal>|)</literal>, <literal>{|</literal>.</para>
109
110           <para>Implies these specific language options: 
111             <option>-XForeignFunctionInterface</option>,
112             <option>-XImplicitParams</option>,
113             <option>-XScopedTypeVariables</option>,
114             <option>-XGADTs</option>, 
115             <option>-XTypeFamilies</option>. </para>
116         </listitem>
117       </varlistentry>
118
119       <varlistentry>
120         <term>
121           <option>-XForeignFunctionInterface</option>:
122           <indexterm><primary><option>-XForeignFunctionInterface</option></primary></indexterm>
123         </term>
124         <listitem>
125           <para>This option enables the language extension defined in the
126           Haskell 98 Foreign Function Interface Addendum.</para>
127
128           <para>New reserved words: <literal>foreign</literal>.</para>
129         </listitem>
130       </varlistentry>
131
132       <varlistentry>
133         <term>
134           <option>-XMonomorphismRestriction</option>,<option>-XMonoPatBinds</option>:
135         </term>
136         <listitem>
137           <para> These two flags control how generalisation is done.
138             See <xref linkend="monomorphism"/>.
139           </para>
140         </listitem>
141       </varlistentry>
142
143       <varlistentry>
144         <term>
145           <option>-XExtendedDefaultRules</option>:
146           <indexterm><primary><option>-XExtendedDefaultRules</option></primary></indexterm>
147         </term>
148         <listitem>
149           <para> Use GHCi's extended default rules in a regular module (<xref linkend="extended-default-rules"/>).
150           Independent of the <option>-fglasgow-exts</option>
151           flag. </para>
152         </listitem>
153       </varlistentry>
154
155       <varlistentry>
156         <term>
157           <option>-XOverlappingInstances</option>
158           <indexterm><primary><option>-XOverlappingInstances</option></primary></indexterm>
159         </term>
160         <term>
161           <option>-XUndecidableInstances</option>
162           <indexterm><primary><option>-XUndecidableInstances</option></primary></indexterm>
163         </term>
164         <term>
165           <option>-XIncoherentInstances</option>
166           <indexterm><primary><option>-XIncoherentInstances</option></primary></indexterm>
167         </term>
168         <term>
169           <option>-fcontext-stack=N</option>
170           <indexterm><primary><option>-fcontext-stack</option></primary></indexterm>
171         </term>
172         <listitem>
173           <para> See <xref linkend="instance-decls"/>.  Only relevant
174           if you also use <option>-fglasgow-exts</option>.</para>
175         </listitem>
176       </varlistentry>
177
178       <varlistentry>
179         <term>
180           <option>-finline-phase</option>
181           <indexterm><primary><option>-finline-phase</option></primary></indexterm>
182         </term>
183         <listitem>
184           <para>See <xref linkend="rewrite-rules"/>.  Only relevant if
185           you also use <option>-fglasgow-exts</option>.</para>
186         </listitem>
187       </varlistentry>
188
189       <varlistentry>
190         <term>
191           <option>-XArrows</option>
192           <indexterm><primary><option>-XArrows</option></primary></indexterm>
193         </term>
194         <listitem>
195           <para>See <xref linkend="arrow-notation"/>.  Independent of
196           <option>-fglasgow-exts</option>.</para>
197
198           <para>New reserved words/symbols: <literal>rec</literal>,
199           <literal>proc</literal>, <literal>-&lt;</literal>,
200           <literal>&gt;-</literal>, <literal>-&lt;&lt;</literal>,
201           <literal>&gt;&gt;-</literal>.</para>
202
203           <para>Other syntax stolen: <literal>(|</literal>,
204           <literal>|)</literal>.</para>
205         </listitem>
206       </varlistentry>
207
208       <varlistentry>
209         <term>
210           <option>-XGenerics</option>
211           <indexterm><primary><option>-XGenerics</option></primary></indexterm>
212         </term>
213         <listitem>
214           <para>See <xref linkend="generic-classes"/>.  Independent of
215           <option>-fglasgow-exts</option>.</para>
216         </listitem>
217       </varlistentry>
218
219       <varlistentry>
220         <term><option>-XNoImplicitPrelude</option></term>
221         <listitem>
222           <para><indexterm><primary>-XNoImplicitPrelude
223           option</primary></indexterm> GHC normally imports
224           <filename>Prelude.hi</filename> files for you.  If you'd
225           rather it didn't, then give it a
226           <option>-XNoImplicitPrelude</option> option.  The idea is
227           that you can then import a Prelude of your own.  (But don't
228           call it <literal>Prelude</literal>; the Haskell module
229           namespace is flat, and you must not conflict with any
230           Prelude module.)</para>
231
232           <para>Even though you have not imported the Prelude, most of
233           the built-in syntax still refers to the built-in Haskell
234           Prelude types and values, as specified by the Haskell
235           Report.  For example, the type <literal>[Int]</literal>
236           still means <literal>Prelude.[] Int</literal>; tuples
237           continue to refer to the standard Prelude tuples; the
238           translation for list comprehensions continues to use
239           <literal>Prelude.map</literal> etc.</para>
240
241           <para>However, <option>-XNoImplicitPrelude</option> does
242           change the handling of certain built-in syntax: see <xref
243           linkend="rebindable-syntax"/>.</para>
244         </listitem>
245       </varlistentry>
246
247       <varlistentry>
248         <term><option>-XImplicitParams</option></term>
249         <listitem>
250           <para>Enables implicit parameters (see <xref
251           linkend="implicit-parameters"/>).  Currently also implied by 
252           <option>-fglasgow-exts</option>.</para>
253
254           <para>Syntax stolen:
255           <literal>?<replaceable>varid</replaceable></literal>,
256           <literal>%<replaceable>varid</replaceable></literal>.</para>
257         </listitem>
258       </varlistentry>
259
260       <varlistentry>
261         <term><option>-XOverloadedStrings</option></term>
262         <listitem>
263           <para>Enables overloaded string literals (see <xref
264           linkend="overloaded-strings"/>).</para>
265         </listitem>
266       </varlistentry>
267
268       <varlistentry>
269         <term><option>-XScopedTypeVariables</option></term>
270         <listitem>
271           <para>Enables lexically-scoped type variables (see <xref
272           linkend="scoped-type-variables"/>).  Implied by
273           <option>-fglasgow-exts</option>.</para>
274         </listitem>
275       </varlistentry>
276
277       <varlistentry>
278         <term><option>-XTemplateHaskell</option></term>
279         <listitem>
280           <para>Enables Template Haskell (see <xref
281           linkend="template-haskell"/>).  This flag must
282           be given explicitly; it is no longer implied by
283           <option>-fglasgow-exts</option>.</para>
284
285           <para>Syntax stolen: <literal>[|</literal>,
286           <literal>[e|</literal>, <literal>[p|</literal>,
287           <literal>[d|</literal>, <literal>[t|</literal>,
288           <literal>$(</literal>,
289           <literal>$<replaceable>varid</replaceable></literal>.</para>
290         </listitem>
291       </varlistentry>
292
293     </variablelist>
294   </sect1>
295
296 <!-- UNBOXED TYPES AND PRIMITIVE OPERATIONS -->
297 <sect1 id="primitives">
298   <title>Unboxed types and primitive operations</title>
299
300 <para>GHC is built on a raft of primitive data types and operations.
301 While you really can use this stuff to write fast code,
302   we generally find it a lot less painful, and more satisfying in the
303   long run, to use higher-level language features and libraries.  With
304   any luck, the code you write will be optimised to the efficient
305   unboxed version in any case.  And if it isn't, we'd like to know
306   about it.</para>
307
308 <para>We do not currently have good, up-to-date documentation about the
309 primitives, perhaps because they are mainly intended for internal use.
310 There used to be a long section about them here in the User Guide, but it
311 became out of date, and wrong information is worse than none.</para>
312
313 <para>The Real Truth about what primitive types there are, and what operations
314 work over those types, is held in the file
315 <filename>fptools/ghc/compiler/prelude/primops.txt.pp</filename>.
316 This file is used directly to generate GHC's primitive-operation definitions, so
317 it is always correct!  It is also intended for processing into text.</para>
318
319 <para> Indeed,
320 the result of such processing is part of the description of the 
321  <ulink
322       url="http://haskell.cs.yale.edu/ghc/docs/papers/core.ps.gz">External
323          Core language</ulink>.
324 So that document is a good place to look for a type-set version.
325 We would be very happy if someone wanted to volunteer to produce an SGML
326 back end to the program that processes <filename>primops.txt</filename> so that
327 we could include the results here in the User Guide.</para>
328
329 <para>What follows here is a brief summary of some main points.</para>
330   
331 <sect2 id="glasgow-unboxed">
332 <title>Unboxed types
333 </title>
334
335 <para>
336 <indexterm><primary>Unboxed types (Glasgow extension)</primary></indexterm>
337 </para>
338
339 <para>Most types in GHC are <firstterm>boxed</firstterm>, which means
340 that values of that type are represented by a pointer to a heap
341 object.  The representation of a Haskell <literal>Int</literal>, for
342 example, is a two-word heap object.  An <firstterm>unboxed</firstterm>
343 type, however, is represented by the value itself, no pointers or heap
344 allocation are involved.
345 </para>
346
347 <para>
348 Unboxed types correspond to the &ldquo;raw machine&rdquo; types you
349 would use in C: <literal>Int&num;</literal> (long int),
350 <literal>Double&num;</literal> (double), <literal>Addr&num;</literal>
351 (void *), etc.  The <emphasis>primitive operations</emphasis>
352 (PrimOps) on these types are what you might expect; e.g.,
353 <literal>(+&num;)</literal> is addition on
354 <literal>Int&num;</literal>s, and is the machine-addition that we all
355 know and love&mdash;usually one instruction.
356 </para>
357
358 <para>
359 Primitive (unboxed) types cannot be defined in Haskell, and are
360 therefore built into the language and compiler.  Primitive types are
361 always unlifted; that is, a value of a primitive type cannot be
362 bottom.  We use the convention that primitive types, values, and
363 operations have a <literal>&num;</literal> suffix.
364 </para>
365
366 <para>
367 Primitive values are often represented by a simple bit-pattern, such
368 as <literal>Int&num;</literal>, <literal>Float&num;</literal>,
369 <literal>Double&num;</literal>.  But this is not necessarily the case:
370 a primitive value might be represented by a pointer to a
371 heap-allocated object.  Examples include
372 <literal>Array&num;</literal>, the type of primitive arrays.  A
373 primitive array is heap-allocated because it is too big a value to fit
374 in a register, and would be too expensive to copy around; in a sense,
375 it is accidental that it is represented by a pointer.  If a pointer
376 represents a primitive value, then it really does point to that value:
377 no unevaluated thunks, no indirections&hellip;nothing can be at the
378 other end of the pointer than the primitive value.
379 A numerically-intensive program using unboxed types can
380 go a <emphasis>lot</emphasis> faster than its &ldquo;standard&rdquo;
381 counterpart&mdash;we saw a threefold speedup on one example.
382 </para>
383
384 <para>
385 There are some restrictions on the use of primitive types:
386 <itemizedlist>
387 <listitem><para>The main restriction
388 is that you can't pass a primitive value to a polymorphic
389 function or store one in a polymorphic data type.  This rules out
390 things like <literal>[Int&num;]</literal> (i.e. lists of primitive
391 integers).  The reason for this restriction is that polymorphic
392 arguments and constructor fields are assumed to be pointers: if an
393 unboxed integer is stored in one of these, the garbage collector would
394 attempt to follow it, leading to unpredictable space leaks.  Or a
395 <function>seq</function> operation on the polymorphic component may
396 attempt to dereference the pointer, with disastrous results.  Even
397 worse, the unboxed value might be larger than a pointer
398 (<literal>Double&num;</literal> for instance).
399 </para>
400 </listitem>
401 <listitem><para> You cannot define a newtype whose representation type
402 (the argument type of the data constructor) is an unboxed type.  Thus,
403 this is illegal:
404 <programlisting>
405   newtype A = MkA Int#
406 </programlisting>
407 </para></listitem>
408 <listitem><para> You cannot bind a variable with an unboxed type
409 in a <emphasis>top-level</emphasis> binding.
410 </para></listitem>
411 <listitem><para> You cannot bind a variable with an unboxed type
412 in a <emphasis>recursive</emphasis> binding.
413 </para></listitem>
414 <listitem><para> You may bind unboxed variables in a (non-recursive,
415 non-top-level) pattern binding, but any such variable causes the entire
416 pattern-match
417 to become strict.  For example:
418 <programlisting>
419   data Foo = Foo Int Int#
420
421   f x = let (Foo a b, w) = ..rhs.. in ..body..
422 </programlisting>
423 Since <literal>b</literal> has type <literal>Int#</literal>, the entire pattern
424 match
425 is strict, and the program behaves as if you had written
426 <programlisting>
427   data Foo = Foo Int Int#
428
429   f x = case ..rhs.. of { (Foo a b, w) -> ..body.. }
430 </programlisting>
431 </para>
432 </listitem>
433 </itemizedlist>
434 </para>
435
436 </sect2>
437
438 <sect2 id="unboxed-tuples">
439 <title>Unboxed Tuples
440 </title>
441
442 <para>
443 Unboxed tuples aren't really exported by <literal>GHC.Exts</literal>,
444 they're available by default with <option>-fglasgow-exts</option>.  An
445 unboxed tuple looks like this:
446 </para>
447
448 <para>
449
450 <programlisting>
451 (# e_1, ..., e_n #)
452 </programlisting>
453
454 </para>
455
456 <para>
457 where <literal>e&lowbar;1..e&lowbar;n</literal> are expressions of any
458 type (primitive or non-primitive).  The type of an unboxed tuple looks
459 the same.
460 </para>
461
462 <para>
463 Unboxed tuples are used for functions that need to return multiple
464 values, but they avoid the heap allocation normally associated with
465 using fully-fledged tuples.  When an unboxed tuple is returned, the
466 components are put directly into registers or on the stack; the
467 unboxed tuple itself does not have a composite representation.  Many
468 of the primitive operations listed in <literal>primops.txt.pp</literal> return unboxed
469 tuples.
470 In particular, the <literal>IO</literal> and <literal>ST</literal> monads use unboxed
471 tuples to avoid unnecessary allocation during sequences of operations.
472 </para>
473
474 <para>
475 There are some pretty stringent restrictions on the use of unboxed tuples:
476 <itemizedlist>
477 <listitem>
478
479 <para>
480 Values of unboxed tuple types are subject to the same restrictions as
481 other unboxed types; i.e. they may not be stored in polymorphic data
482 structures or passed to polymorphic functions.
483
484 </para>
485 </listitem>
486 <listitem>
487
488 <para>
489 No variable can have an unboxed tuple type, nor may a constructor or function
490 argument have an unboxed tuple type.  The following are all illegal:
491
492
493 <programlisting>
494   data Foo = Foo (# Int, Int #)
495
496   f :: (# Int, Int #) -&#62; (# Int, Int #)
497   f x = x
498
499   g :: (# Int, Int #) -&#62; Int
500   g (# a,b #) = a
501
502   h x = let y = (# x,x #) in ...
503 </programlisting>
504 </para>
505 </listitem>
506 </itemizedlist>
507 </para>
508 <para>
509 The typical use of unboxed tuples is simply to return multiple values,
510 binding those multiple results with a <literal>case</literal> expression, thus:
511 <programlisting>
512   f x y = (# x+1, y-1 #)
513   g x = case f x x of { (# a, b #) -&#62; a + b }
514 </programlisting>
515 You can have an unboxed tuple in a pattern binding, thus
516 <programlisting>
517   f x = let (# p,q #) = h x in ..body..
518 </programlisting>
519 If the types of <literal>p</literal> and <literal>q</literal> are not unboxed,
520 the resulting binding is lazy like any other Haskell pattern binding.  The 
521 above example desugars like this:
522 <programlisting>
523   f x = let t = case h x o f{ (# p,q #) -> (p,q)
524             p = fst t
525             q = snd t
526         in ..body..
527 </programlisting>
528 Indeed, the bindings can even be recursive.
529 </para>
530
531 </sect2>
532 </sect1>
533
534
535 <!-- ====================== SYNTACTIC EXTENSIONS =======================  -->
536
537 <sect1 id="syntax-extns">
538 <title>Syntactic extensions</title>
539  
540     <!-- ====================== HIERARCHICAL MODULES =======================  -->
541
542     <sect2 id="hierarchical-modules">
543       <title>Hierarchical Modules</title>
544
545       <para>GHC supports a small extension to the syntax of module
546       names: a module name is allowed to contain a dot
547       <literal>&lsquo;.&rsquo;</literal>.  This is also known as the
548       &ldquo;hierarchical module namespace&rdquo; extension, because
549       it extends the normally flat Haskell module namespace into a
550       more flexible hierarchy of modules.</para>
551
552       <para>This extension has very little impact on the language
553       itself; modules names are <emphasis>always</emphasis> fully
554       qualified, so you can just think of the fully qualified module
555       name as <quote>the module name</quote>.  In particular, this
556       means that the full module name must be given after the
557       <literal>module</literal> keyword at the beginning of the
558       module; for example, the module <literal>A.B.C</literal> must
559       begin</para>
560
561 <programlisting>module A.B.C</programlisting>
562
563
564       <para>It is a common strategy to use the <literal>as</literal>
565       keyword to save some typing when using qualified names with
566       hierarchical modules.  For example:</para>
567
568 <programlisting>
569 import qualified Control.Monad.ST.Strict as ST
570 </programlisting>
571
572       <para>For details on how GHC searches for source and interface
573       files in the presence of hierarchical modules, see <xref
574       linkend="search-path"/>.</para>
575
576       <para>GHC comes with a large collection of libraries arranged
577       hierarchically; see the accompanying <ulink
578       url="../libraries/index.html">library
579       documentation</ulink>.  More libraries to install are available
580       from <ulink
581       url="http://hackage.haskell.org/packages/hackage.html">HackageDB</ulink>.</para>
582     </sect2>
583
584     <!-- ====================== PATTERN GUARDS =======================  -->
585
586 <sect2 id="pattern-guards">
587 <title>Pattern guards</title>
588
589 <para>
590 <indexterm><primary>Pattern guards (Glasgow extension)</primary></indexterm>
591 The discussion that follows is an abbreviated version of Simon Peyton Jones's original <ulink url="http://research.microsoft.com/~simonpj/Haskell/guards.html">proposal</ulink>. (Note that the proposal was written before pattern guards were implemented, so refers to them as unimplemented.)
592 </para>
593
594 <para>
595 Suppose we have an abstract data type of finite maps, with a
596 lookup operation:
597
598 <programlisting>
599 lookup :: FiniteMap -> Int -> Maybe Int
600 </programlisting>
601
602 The lookup returns <function>Nothing</function> if the supplied key is not in the domain of the mapping, and <function>(Just v)</function> otherwise,
603 where <varname>v</varname> is the value that the key maps to.  Now consider the following definition:
604 </para>
605
606 <programlisting>
607 clunky env var1 var2 | ok1 &amp;&amp; ok2 = val1 + val2
608 | otherwise  = var1 + var2
609 where
610   m1 = lookup env var1
611   m2 = lookup env var2
612   ok1 = maybeToBool m1
613   ok2 = maybeToBool m2
614   val1 = expectJust m1
615   val2 = expectJust m2
616 </programlisting>
617
618 <para>
619 The auxiliary functions are 
620 </para>
621
622 <programlisting>
623 maybeToBool :: Maybe a -&gt; Bool
624 maybeToBool (Just x) = True
625 maybeToBool Nothing  = False
626
627 expectJust :: Maybe a -&gt; a
628 expectJust (Just x) = x
629 expectJust Nothing  = error "Unexpected Nothing"
630 </programlisting>
631
632 <para>
633 What is <function>clunky</function> doing? The guard <literal>ok1 &amp;&amp;
634 ok2</literal> checks that both lookups succeed, using
635 <function>maybeToBool</function> to convert the <function>Maybe</function>
636 types to booleans. The (lazily evaluated) <function>expectJust</function>
637 calls extract the values from the results of the lookups, and binds the
638 returned values to <varname>val1</varname> and <varname>val2</varname>
639 respectively.  If either lookup fails, then clunky takes the
640 <literal>otherwise</literal> case and returns the sum of its arguments.
641 </para>
642
643 <para>
644 This is certainly legal Haskell, but it is a tremendously verbose and
645 un-obvious way to achieve the desired effect.  Arguably, a more direct way
646 to write clunky would be to use case expressions:
647 </para>
648
649 <programlisting>
650 clunky env var1 var2 = case lookup env var1 of
651   Nothing -&gt; fail
652   Just val1 -&gt; case lookup env var2 of
653     Nothing -&gt; fail
654     Just val2 -&gt; val1 + val2
655 where
656   fail = var1 + var2
657 </programlisting>
658
659 <para>
660 This is a bit shorter, but hardly better.  Of course, we can rewrite any set
661 of pattern-matching, guarded equations as case expressions; that is
662 precisely what the compiler does when compiling equations! The reason that
663 Haskell provides guarded equations is because they allow us to write down
664 the cases we want to consider, one at a time, independently of each other. 
665 This structure is hidden in the case version.  Two of the right-hand sides
666 are really the same (<function>fail</function>), and the whole expression
667 tends to become more and more indented. 
668 </para>
669
670 <para>
671 Here is how I would write clunky:
672 </para>
673
674 <programlisting>
675 clunky env var1 var2
676   | Just val1 &lt;- lookup env var1
677   , Just val2 &lt;- lookup env var2
678   = val1 + val2
679 ...other equations for clunky...
680 </programlisting>
681
682 <para>
683 The semantics should be clear enough.  The qualifiers are matched in order. 
684 For a <literal>&lt;-</literal> qualifier, which I call a pattern guard, the
685 right hand side is evaluated and matched against the pattern on the left. 
686 If the match fails then the whole guard fails and the next equation is
687 tried.  If it succeeds, then the appropriate binding takes place, and the
688 next qualifier is matched, in the augmented environment.  Unlike list
689 comprehensions, however, the type of the expression to the right of the
690 <literal>&lt;-</literal> is the same as the type of the pattern to its
691 left.  The bindings introduced by pattern guards scope over all the
692 remaining guard qualifiers, and over the right hand side of the equation.
693 </para>
694
695 <para>
696 Just as with list comprehensions, boolean expressions can be freely mixed
697 with among the pattern guards.  For example:
698 </para>
699
700 <programlisting>
701 f x | [y] &lt;- x
702     , y > 3
703     , Just z &lt;- h y
704     = ...
705 </programlisting>
706
707 <para>
708 Haskell's current guards therefore emerge as a special case, in which the
709 qualifier list has just one element, a boolean expression.
710 </para>
711 </sect2>
712
713     <!-- ===================== Recursive do-notation ===================  -->
714
715 <sect2 id="mdo-notation">
716 <title>The recursive do-notation
717 </title>
718
719 <para> The recursive do-notation (also known as mdo-notation) is implemented as described in
720 <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>,
721 by Levent Erkok, John Launchbury,
722 Haskell Workshop 2002, pages: 29-37. Pittsburgh, Pennsylvania. 
723 This paper is essential reading for anyone making non-trivial use of mdo-notation,
724 and we do not repeat it here.
725 </para>
726 <para>
727 The do-notation of Haskell does not allow <emphasis>recursive bindings</emphasis>,
728 that is, the variables bound in a do-expression are visible only in the textually following 
729 code block. Compare this to a let-expression, where bound variables are visible in the entire binding
730 group. It turns out that several applications can benefit from recursive bindings in
731 the do-notation, and this extension provides the necessary syntactic support.
732 </para>
733 <para>
734 Here is a simple (yet contrived) example:
735 </para>
736 <programlisting>
737 import Control.Monad.Fix
738
739 justOnes = mdo xs &lt;- Just (1:xs)
740                return xs
741 </programlisting>
742 <para>
743 As you can guess <literal>justOnes</literal> will evaluate to <literal>Just [1,1,1,...</literal>.
744 </para>
745
746 <para>
747 The Control.Monad.Fix library introduces the <literal>MonadFix</literal> class. It's definition is:
748 </para>
749 <programlisting>
750 class Monad m => MonadFix m where
751    mfix :: (a -> m a) -> m a
752 </programlisting>
753 <para>
754 The function <literal>mfix</literal>
755 dictates how the required recursion operation should be performed.  For example, 
756 <literal>justOnes</literal> desugars as follows:
757 <programlisting>
758 justOnes = mfix (\xs' -&gt; do { xs &lt;- Just (1:xs'); return xs }
759 </programlisting>
760 For full details of the way in which mdo is typechecked and desugared, see 
761 the paper <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>.
762 In particular, GHC implements the segmentation technique described in Section 3.2 of the paper.
763 </para>
764 <para>
765 If recursive bindings are required for a monad,
766 then that monad must be declared an instance of the <literal>MonadFix</literal> class.
767 The following instances of <literal>MonadFix</literal> are automatically provided: List, Maybe, IO. 
768 Furthermore, the Control.Monad.ST and Control.Monad.ST.Lazy modules provide the instances of the MonadFix class 
769 for Haskell's internal state monad (strict and lazy, respectively).
770 </para>
771 <para>
772 Here are some important points in using the recursive-do notation:
773 <itemizedlist>
774 <listitem><para>
775 The recursive version of the do-notation uses the keyword <literal>mdo</literal> (rather
776 than <literal>do</literal>).
777 </para></listitem>
778
779 <listitem><para>
780 It is enabled with the flag <literal>-XRecursiveDo</literal>, which is in turn implied by
781 <literal>-fglasgow-exts</literal>.
782 </para></listitem>
783
784 <listitem><para>
785 Unlike ordinary do-notation, but like <literal>let</literal> and <literal>where</literal> bindings,
786 name shadowing is not allowed; that is, all the names bound in a single <literal>mdo</literal> must
787 be distinct (Section 3.3 of the paper).
788 </para></listitem>
789
790 <listitem><para>
791 Variables bound by a <literal>let</literal> statement in an <literal>mdo</literal>
792 are monomorphic in the <literal>mdo</literal> (Section 3.1 of the paper).  However
793 GHC breaks the <literal>mdo</literal> into segments to enhance polymorphism,
794 and improve termination (Section 3.2 of the paper).
795 </para></listitem>
796 </itemizedlist>
797 </para>
798
799 <para>
800 The web page: <ulink url="http://www.cse.ogi.edu/PacSoft/projects/rmb">http://www.cse.ogi.edu/PacSoft/projects/rmb</ulink>
801 contains up to date information on recursive monadic bindings.
802 </para>
803
804 <para>
805 Historical note: The old implementation of the mdo-notation (and most
806 of the existing documents) used the name
807 <literal>MonadRec</literal> for the class and the corresponding library.
808 This name is not supported by GHC.
809 </para>
810
811 </sect2>
812
813
814    <!-- ===================== PARALLEL LIST COMPREHENSIONS ===================  -->
815
816   <sect2 id="parallel-list-comprehensions">
817     <title>Parallel List Comprehensions</title>
818     <indexterm><primary>list comprehensions</primary><secondary>parallel</secondary>
819     </indexterm>
820     <indexterm><primary>parallel list comprehensions</primary>
821     </indexterm>
822
823     <para>Parallel list comprehensions are a natural extension to list
824     comprehensions.  List comprehensions can be thought of as a nice
825     syntax for writing maps and filters.  Parallel comprehensions
826     extend this to include the zipWith family.</para>
827
828     <para>A parallel list comprehension has multiple independent
829     branches of qualifier lists, each separated by a `|' symbol.  For
830     example, the following zips together two lists:</para>
831
832 <programlisting>
833    [ (x, y) | x &lt;- xs | y &lt;- ys ] 
834 </programlisting>
835
836     <para>The behavior of parallel list comprehensions follows that of
837     zip, in that the resulting list will have the same length as the
838     shortest branch.</para>
839
840     <para>We can define parallel list comprehensions by translation to
841     regular comprehensions.  Here's the basic idea:</para>
842
843     <para>Given a parallel comprehension of the form: </para>
844
845 <programlisting>
846    [ e | p1 &lt;- e11, p2 &lt;- e12, ... 
847        | q1 &lt;- e21, q2 &lt;- e22, ... 
848        ... 
849    ] 
850 </programlisting>
851
852     <para>This will be translated to: </para>
853
854 <programlisting>
855    [ e | ((p1,p2), (q1,q2), ...) &lt;- zipN [(p1,p2) | p1 &lt;- e11, p2 &lt;- e12, ...] 
856                                          [(q1,q2) | q1 &lt;- e21, q2 &lt;- e22, ...] 
857                                          ... 
858    ] 
859 </programlisting>
860
861     <para>where `zipN' is the appropriate zip for the given number of
862     branches.</para>
863
864   </sect2>
865
866 <sect2 id="rebindable-syntax">
867 <title>Rebindable syntax</title>
868
869
870       <para>GHC allows most kinds of built-in syntax to be rebound by
871       the user, to facilitate replacing the <literal>Prelude</literal>
872       with a home-grown version, for example.</para>
873
874             <para>You may want to define your own numeric class
875             hierarchy.  It completely defeats that purpose if the
876             literal "1" means "<literal>Prelude.fromInteger
877             1</literal>", which is what the Haskell Report specifies.
878             So the <option>-XNoImplicitPrelude</option> flag causes
879             the following pieces of built-in syntax to refer to
880             <emphasis>whatever is in scope</emphasis>, not the Prelude
881             versions:
882
883             <itemizedlist>
884               <listitem>
885                 <para>An integer literal <literal>368</literal> means
886                 "<literal>fromInteger (368::Integer)</literal>", rather than
887                 "<literal>Prelude.fromInteger (368::Integer)</literal>".
888 </para> </listitem>         
889
890       <listitem><para>Fractional literals are handed in just the same way,
891           except that the translation is 
892               <literal>fromRational (3.68::Rational)</literal>.
893 </para> </listitem>         
894
895           <listitem><para>The equality test in an overloaded numeric pattern
896               uses whatever <literal>(==)</literal> is in scope.
897 </para> </listitem>         
898
899           <listitem><para>The subtraction operation, and the
900           greater-than-or-equal test, in <literal>n+k</literal> patterns
901               use whatever <literal>(-)</literal> and <literal>(>=)</literal> are in scope.
902               </para></listitem>
903
904               <listitem>
905                 <para>Negation (e.g. "<literal>- (f x)</literal>")
906                 means "<literal>negate (f x)</literal>", both in numeric
907                 patterns, and expressions.
908               </para></listitem>
909
910               <listitem>
911           <para>"Do" notation is translated using whatever
912               functions <literal>(>>=)</literal>,
913               <literal>(>>)</literal>, and <literal>fail</literal>,
914               are in scope (not the Prelude
915               versions).  List comprehensions, mdo (<xref linkend="mdo-notation"/>), and parallel array
916               comprehensions, are unaffected.  </para></listitem>
917
918               <listitem>
919                 <para>Arrow
920                 notation (see <xref linkend="arrow-notation"/>)
921                 uses whatever <literal>arr</literal>,
922                 <literal>(>>>)</literal>, <literal>first</literal>,
923                 <literal>app</literal>, <literal>(|||)</literal> and
924                 <literal>loop</literal> functions are in scope. But unlike the
925                 other constructs, the types of these functions must match the
926                 Prelude types very closely.  Details are in flux; if you want
927                 to use this, ask!
928               </para></listitem>
929             </itemizedlist>
930 In all cases (apart from arrow notation), the static semantics should be that of the desugared form,
931 even if that is a little unexpected. For emample, the 
932 static semantics of the literal <literal>368</literal>
933 is exactly that of <literal>fromInteger (368::Integer)</literal>; it's fine for
934 <literal>fromInteger</literal> to have any of the types:
935 <programlisting>
936 fromInteger :: Integer -> Integer
937 fromInteger :: forall a. Foo a => Integer -> a
938 fromInteger :: Num a => a -> Integer
939 fromInteger :: Integer -> Bool -> Bool
940 </programlisting>
941 </para>
942                 
943              <para>Be warned: this is an experimental facility, with
944              fewer checks than usual.  Use <literal>-dcore-lint</literal>
945              to typecheck the desugared program.  If Core Lint is happy
946              you should be all right.</para>
947
948 </sect2>
949
950 <sect2 id="postfix-operators">
951 <title>Postfix operators</title>
952
953 <para>
954 GHC allows a small extension to the syntax of left operator sections, which
955 allows you to define postfix operators.  The extension is this:  the left section
956 <programlisting>
957   (e !)
958 </programlisting> 
959 is equivalent (from the point of view of both type checking and execution) to the expression
960 <programlisting>
961   ((!) e)
962 </programlisting> 
963 (for any expression <literal>e</literal> and operator <literal>(!)</literal>.
964 The strict Haskell 98 interpretation is that the section is equivalent to
965 <programlisting>
966   (\y -> (!) e y)
967 </programlisting> 
968 That is, the operator must be a function of two arguments.  GHC allows it to
969 take only one argument, and that in turn allows you to write the function
970 postfix.
971 </para>
972 <para>Since this extension goes beyond Haskell 98, it should really be enabled
973 by a flag; but in fact it is enabled all the time.  (No Haskell 98 programs
974 change their behaviour, of course.)
975 </para>
976 <para>The extension does not extend to the left-hand side of function
977 definitions; you must define such a function in prefix form.</para>
978
979 </sect2>
980
981 <sect2 id="disambiguate-fields">
982 <title>Record field disambiguation</title>
983 <para>
984 In record construction and record pattern matching
985 it is entirely unambiguous which field is referred to, even if there are two different
986 data types in scope with a common field name.  For example:
987 <programlisting>
988 module M where
989   data S = MkS { x :: Int, y :: Bool }
990
991 module Foo where
992   import M
993
994   data T = MkT { x :: Int }
995   
996   ok1 (MkS { x = n }) = n+1   -- Unambiguous
997
998   ok2 n = MkT { x = n+1 }     -- Unambiguous
999
1000   bad1 k = k { x = 3 }  -- Ambiguous
1001   bad2 k = x k          -- Ambiguous
1002 </programlisting>
1003 Even though there are two <literal>x</literal>'s in scope,
1004 it is clear that the <literal>x</literal> in the pattern in the
1005 definition of <literal>ok1</literal> can only mean the field
1006 <literal>x</literal> from type <literal>S</literal>. Similarly for
1007 the function <literal>ok2</literal>.  However, in the record update
1008 in <literal>bad1</literal> and the record selection in <literal>bad2</literal>
1009 it is not clear which of the two types is intended.
1010 </para>
1011 <para>
1012 Haskell 98 regards all four as ambiguous, but with the
1013 <option>-fdisambiguate-record-fields</option> flag, GHC will accept
1014 the former two.  The rules are precisely the same as those for instance
1015 declarations in Haskell 98, where the method names on the left-hand side 
1016 of the method bindings in an instance declaration refer unambiguously
1017 to the method of that class (provided they are in scope at all), even
1018 if there are other variables in scope with the same name.
1019 This reduces the clutter of qualified names when you import two
1020 records from different modules that use the same field name.
1021 </para>
1022 </sect2>
1023 </sect1>
1024
1025
1026 <!-- TYPE SYSTEM EXTENSIONS -->
1027 <sect1 id="data-type-extensions">
1028 <title>Extensions to data types and type synonyms</title>
1029
1030 <sect2 id="nullary-types">
1031 <title>Data types with no constructors</title>
1032
1033 <para>With the <option>-fglasgow-exts</option> flag, GHC lets you declare
1034 a data type with no constructors.  For example:</para>
1035
1036 <programlisting>
1037   data S      -- S :: *
1038   data T a    -- T :: * -> *
1039 </programlisting>
1040
1041 <para>Syntactically, the declaration lacks the "= constrs" part.  The 
1042 type can be parameterised over types of any kind, but if the kind is
1043 not <literal>*</literal> then an explicit kind annotation must be used
1044 (see <xref linkend="kinding"/>).</para>
1045
1046 <para>Such data types have only one value, namely bottom.
1047 Nevertheless, they can be useful when defining "phantom types".</para>
1048 </sect2>
1049
1050 <sect2 id="infix-tycons">
1051 <title>Infix type constructors, classes, and type variables</title>
1052
1053 <para>
1054 GHC allows type constructors, classes, and type variables to be operators, and
1055 to be written infix, very much like expressions.  More specifically:
1056 <itemizedlist>
1057 <listitem><para>
1058   A type constructor or class can be an operator, beginning with a colon; e.g. <literal>:*:</literal>.
1059   The lexical syntax is the same as that for data constructors.
1060   </para></listitem>
1061 <listitem><para>
1062   Data type and type-synonym declarations can be written infix, parenthesised
1063   if you want further arguments.  E.g.
1064 <screen>
1065   data a :*: b = Foo a b
1066   type a :+: b = Either a b
1067   class a :=: b where ...
1068
1069   data (a :**: b) x = Baz a b x
1070   type (a :++: b) y = Either (a,b) y
1071 </screen>
1072   </para></listitem>
1073 <listitem><para>
1074   Types, and class constraints, can be written infix.  For example
1075   <screen>
1076         x :: Int :*: Bool
1077         f :: (a :=: b) => a -> b
1078   </screen>
1079   </para></listitem>
1080 <listitem><para>
1081   A type variable can be an (unqualified) operator e.g. <literal>+</literal>.
1082   The lexical syntax is the same as that for variable operators, excluding "(.)",
1083   "(!)", and "(*)".  In a binding position, the operator must be
1084   parenthesised.  For example:
1085 <programlisting>
1086    type T (+) = Int + Int
1087    f :: T Either
1088    f = Left 3
1089  
1090    liftA2 :: Arrow (~>)
1091           => (a -> b -> c) -> (e ~> a) -> (e ~> b) -> (e ~> c)
1092    liftA2 = ...
1093 </programlisting>
1094   </para></listitem>
1095 <listitem><para>
1096   Back-quotes work
1097   as for expressions, both for type constructors and type variables;  e.g. <literal>Int `Either` Bool</literal>, or
1098   <literal>Int `a` Bool</literal>.  Similarly, parentheses work the same; e.g.  <literal>(:*:) Int Bool</literal>.
1099   </para></listitem>
1100 <listitem><para>
1101   Fixities may be declared for type constructors, or classes, just as for data constructors.  However,
1102   one cannot distinguish between the two in a fixity declaration; a fixity declaration
1103   sets the fixity for a data constructor and the corresponding type constructor.  For example:
1104 <screen>
1105   infixl 7 T, :*:
1106 </screen>
1107   sets the fixity for both type constructor <literal>T</literal> and data constructor <literal>T</literal>,
1108   and similarly for <literal>:*:</literal>.
1109   <literal>Int `a` Bool</literal>.
1110   </para></listitem>
1111 <listitem><para>
1112   Function arrow is <literal>infixr</literal> with fixity 0.  (This might change; I'm not sure what it should be.)
1113   </para></listitem>
1114
1115 </itemizedlist>
1116 </para>
1117 </sect2>
1118
1119 <sect2 id="type-synonyms">
1120 <title>Liberalised type synonyms</title>
1121
1122 <para>
1123 Type synonyms are like macros at the type level, and
1124 GHC does validity checking on types <emphasis>only after expanding type synonyms</emphasis>.
1125 That means that GHC can be very much more liberal about type synonyms than Haskell 98:
1126 <itemizedlist>
1127 <listitem> <para>You can write a <literal>forall</literal> (including overloading)
1128 in a type synonym, thus:
1129 <programlisting>
1130   type Discard a = forall b. Show b => a -> b -> (a, String)
1131
1132   f :: Discard a
1133   f x y = (x, show y)
1134
1135   g :: Discard Int -> (Int,String)    -- A rank-2 type
1136   g f = f 3 True
1137 </programlisting>
1138 </para>
1139 </listitem>
1140
1141 <listitem><para>
1142 You can write an unboxed tuple in a type synonym:
1143 <programlisting>
1144   type Pr = (# Int, Int #)
1145
1146   h :: Int -> Pr
1147   h x = (# x, x #)
1148 </programlisting>
1149 </para></listitem>
1150
1151 <listitem><para>
1152 You can apply a type synonym to a forall type:
1153 <programlisting>
1154   type Foo a = a -> a -> Bool
1155  
1156   f :: Foo (forall b. b->b)
1157 </programlisting>
1158 After expanding the synonym, <literal>f</literal> has the legal (in GHC) type:
1159 <programlisting>
1160   f :: (forall b. b->b) -> (forall b. b->b) -> Bool
1161 </programlisting>
1162 </para></listitem>
1163
1164 <listitem><para>
1165 You can apply a type synonym to a partially applied type synonym:
1166 <programlisting>
1167   type Generic i o = forall x. i x -> o x
1168   type Id x = x
1169   
1170   foo :: Generic Id []
1171 </programlisting>
1172 After expanding the synonym, <literal>foo</literal> has the legal (in GHC) type:
1173 <programlisting>
1174   foo :: forall x. x -> [x]
1175 </programlisting>
1176 </para></listitem>
1177
1178 </itemizedlist>
1179 </para>
1180
1181 <para>
1182 GHC currently does kind checking before expanding synonyms (though even that
1183 could be changed.)
1184 </para>
1185 <para>
1186 After expanding type synonyms, GHC does validity checking on types, looking for
1187 the following mal-formedness which isn't detected simply by kind checking:
1188 <itemizedlist>
1189 <listitem><para>
1190 Type constructor applied to a type involving for-alls.
1191 </para></listitem>
1192 <listitem><para>
1193 Unboxed tuple on left of an arrow.
1194 </para></listitem>
1195 <listitem><para>
1196 Partially-applied type synonym.
1197 </para></listitem>
1198 </itemizedlist>
1199 So, for example,
1200 this will be rejected:
1201 <programlisting>
1202   type Pr = (# Int, Int #)
1203
1204   h :: Pr -> Int
1205   h x = ...
1206 </programlisting>
1207 because GHC does not allow  unboxed tuples on the left of a function arrow.
1208 </para>
1209 </sect2>
1210
1211
1212 <sect2 id="existential-quantification">
1213 <title>Existentially quantified data constructors
1214 </title>
1215
1216 <para>
1217 The idea of using existential quantification in data type declarations
1218 was suggested by Perry, and implemented in Hope+ (Nigel Perry, <emphasis>The Implementation
1219 of Practical Functional Programming Languages</emphasis>, PhD Thesis, University of
1220 London, 1991). It was later formalised by Laufer and Odersky
1221 (<emphasis>Polymorphic type inference and abstract data types</emphasis>,
1222 TOPLAS, 16(5), pp1411-1430, 1994).
1223 It's been in Lennart
1224 Augustsson's <command>hbc</command> Haskell compiler for several years, and
1225 proved very useful.  Here's the idea.  Consider the declaration:
1226 </para>
1227
1228 <para>
1229
1230 <programlisting>
1231   data Foo = forall a. MkFoo a (a -> Bool)
1232            | Nil
1233 </programlisting>
1234
1235 </para>
1236
1237 <para>
1238 The data type <literal>Foo</literal> has two constructors with types:
1239 </para>
1240
1241 <para>
1242
1243 <programlisting>
1244   MkFoo :: forall a. a -> (a -> Bool) -> Foo
1245   Nil   :: Foo
1246 </programlisting>
1247
1248 </para>
1249
1250 <para>
1251 Notice that the type variable <literal>a</literal> in the type of <function>MkFoo</function>
1252 does not appear in the data type itself, which is plain <literal>Foo</literal>.
1253 For example, the following expression is fine:
1254 </para>
1255
1256 <para>
1257
1258 <programlisting>
1259   [MkFoo 3 even, MkFoo 'c' isUpper] :: [Foo]
1260 </programlisting>
1261
1262 </para>
1263
1264 <para>
1265 Here, <literal>(MkFoo 3 even)</literal> packages an integer with a function
1266 <function>even</function> that maps an integer to <literal>Bool</literal>; and <function>MkFoo 'c'
1267 isUpper</function> packages a character with a compatible function.  These
1268 two things are each of type <literal>Foo</literal> and can be put in a list.
1269 </para>
1270
1271 <para>
1272 What can we do with a value of type <literal>Foo</literal>?.  In particular,
1273 what happens when we pattern-match on <function>MkFoo</function>?
1274 </para>
1275
1276 <para>
1277
1278 <programlisting>
1279   f (MkFoo val fn) = ???
1280 </programlisting>
1281
1282 </para>
1283
1284 <para>
1285 Since all we know about <literal>val</literal> and <function>fn</function> is that they
1286 are compatible, the only (useful) thing we can do with them is to
1287 apply <function>fn</function> to <literal>val</literal> to get a boolean.  For example:
1288 </para>
1289
1290 <para>
1291
1292 <programlisting>
1293   f :: Foo -> Bool
1294   f (MkFoo val fn) = fn val
1295 </programlisting>
1296
1297 </para>
1298
1299 <para>
1300 What this allows us to do is to package heterogenous values
1301 together with a bunch of functions that manipulate them, and then treat
1302 that collection of packages in a uniform manner.  You can express
1303 quite a bit of object-oriented-like programming this way.
1304 </para>
1305
1306 <sect3 id="existential">
1307 <title>Why existential?
1308 </title>
1309
1310 <para>
1311 What has this to do with <emphasis>existential</emphasis> quantification?
1312 Simply that <function>MkFoo</function> has the (nearly) isomorphic type
1313 </para>
1314
1315 <para>
1316
1317 <programlisting>
1318   MkFoo :: (exists a . (a, a -> Bool)) -> Foo
1319 </programlisting>
1320
1321 </para>
1322
1323 <para>
1324 But Haskell programmers can safely think of the ordinary
1325 <emphasis>universally</emphasis> quantified type given above, thereby avoiding
1326 adding a new existential quantification construct.
1327 </para>
1328
1329 </sect3>
1330
1331 <sect3>
1332 <title>Type classes</title>
1333
1334 <para>
1335 An easy extension is to allow
1336 arbitrary contexts before the constructor.  For example:
1337 </para>
1338
1339 <para>
1340
1341 <programlisting>
1342 data Baz = forall a. Eq a => Baz1 a a
1343          | forall b. Show b => Baz2 b (b -> b)
1344 </programlisting>
1345
1346 </para>
1347
1348 <para>
1349 The two constructors have the types you'd expect:
1350 </para>
1351
1352 <para>
1353
1354 <programlisting>
1355 Baz1 :: forall a. Eq a => a -> a -> Baz
1356 Baz2 :: forall b. Show b => b -> (b -> b) -> Baz
1357 </programlisting>
1358
1359 </para>
1360
1361 <para>
1362 But when pattern matching on <function>Baz1</function> the matched values can be compared
1363 for equality, and when pattern matching on <function>Baz2</function> the first matched
1364 value can be converted to a string (as well as applying the function to it).
1365 So this program is legal:
1366 </para>
1367
1368 <para>
1369
1370 <programlisting>
1371   f :: Baz -> String
1372   f (Baz1 p q) | p == q    = "Yes"
1373                | otherwise = "No"
1374   f (Baz2 v fn)            = show (fn v)
1375 </programlisting>
1376
1377 </para>
1378
1379 <para>
1380 Operationally, in a dictionary-passing implementation, the
1381 constructors <function>Baz1</function> and <function>Baz2</function> must store the
1382 dictionaries for <literal>Eq</literal> and <literal>Show</literal> respectively, and
1383 extract it on pattern matching.
1384 </para>
1385
1386 <para>
1387 Notice the way that the syntax fits smoothly with that used for
1388 universal quantification earlier.
1389 </para>
1390
1391 </sect3>
1392
1393 <sect3 id="existential-records">
1394 <title>Record Constructors</title>
1395
1396 <para>
1397 GHC allows existentials to be used with records syntax as well.  For example:
1398
1399 <programlisting>
1400 data Counter a = forall self. NewCounter
1401     { _this    :: self
1402     , _inc     :: self -> self
1403     , _display :: self -> IO ()
1404     , tag      :: a
1405     }
1406 </programlisting>
1407 Here <literal>tag</literal> is a public field, with a well-typed selector
1408 function <literal>tag :: Counter a -> a</literal>.  The <literal>self</literal>
1409 type is hidden from the outside; any attempt to apply <literal>_this</literal>,
1410 <literal>_inc</literal> or <literal>_display</literal> as functions will raise a
1411 compile-time error.  In other words, <emphasis>GHC defines a record selector function
1412 only for fields whose type does not mention the existentially-quantified variables</emphasis>.
1413 (This example used an underscore in the fields for which record selectors
1414 will not be defined, but that is only programming style; GHC ignores them.)
1415 </para>
1416
1417 <para>
1418 To make use of these hidden fields, we need to create some helper functions:
1419
1420 <programlisting>
1421 inc :: Counter a -> Counter a
1422 inc (NewCounter x i d t) = NewCounter
1423     { _this = i x, _inc = i, _display = d, tag = t } 
1424
1425 display :: Counter a -> IO ()
1426 display NewCounter{ _this = x, _display = d } = d x
1427 </programlisting>
1428
1429 Now we can define counters with different underlying implementations:
1430
1431 <programlisting>
1432 counterA :: Counter String 
1433 counterA = NewCounter
1434     { _this = 0, _inc = (1+), _display = print, tag = "A" }
1435
1436 counterB :: Counter String 
1437 counterB = NewCounter
1438     { _this = "", _inc = ('#':), _display = putStrLn, tag = "B" }
1439
1440 main = do
1441     display (inc counterA)         -- prints "1"
1442     display (inc (inc counterB))   -- prints "##"
1443 </programlisting>
1444
1445 At the moment, record update syntax is only supported for Haskell 98 data types,
1446 so the following function does <emphasis>not</emphasis> work:
1447
1448 <programlisting>
1449 -- This is invalid; use explicit NewCounter instead for now
1450 setTag :: Counter a -> a -> Counter a
1451 setTag obj t = obj{ tag = t }
1452 </programlisting>
1453
1454 </para>
1455
1456 </sect3>
1457
1458
1459 <sect3>
1460 <title>Restrictions</title>
1461
1462 <para>
1463 There are several restrictions on the ways in which existentially-quantified
1464 constructors can be use.
1465 </para>
1466
1467 <para>
1468
1469 <itemizedlist>
1470 <listitem>
1471
1472 <para>
1473  When pattern matching, each pattern match introduces a new,
1474 distinct, type for each existential type variable.  These types cannot
1475 be unified with any other type, nor can they escape from the scope of
1476 the pattern match.  For example, these fragments are incorrect:
1477
1478
1479 <programlisting>
1480 f1 (MkFoo a f) = a
1481 </programlisting>
1482
1483
1484 Here, the type bound by <function>MkFoo</function> "escapes", because <literal>a</literal>
1485 is the result of <function>f1</function>.  One way to see why this is wrong is to
1486 ask what type <function>f1</function> has:
1487
1488
1489 <programlisting>
1490   f1 :: Foo -> a             -- Weird!
1491 </programlisting>
1492
1493
1494 What is this "<literal>a</literal>" in the result type? Clearly we don't mean
1495 this:
1496
1497
1498 <programlisting>
1499   f1 :: forall a. Foo -> a   -- Wrong!
1500 </programlisting>
1501
1502
1503 The original program is just plain wrong.  Here's another sort of error
1504
1505
1506 <programlisting>
1507   f2 (Baz1 a b) (Baz1 p q) = a==q
1508 </programlisting>
1509
1510
1511 It's ok to say <literal>a==b</literal> or <literal>p==q</literal>, but
1512 <literal>a==q</literal> is wrong because it equates the two distinct types arising
1513 from the two <function>Baz1</function> constructors.
1514
1515
1516 </para>
1517 </listitem>
1518 <listitem>
1519
1520 <para>
1521 You can't pattern-match on an existentially quantified
1522 constructor in a <literal>let</literal> or <literal>where</literal> group of
1523 bindings. So this is illegal:
1524
1525
1526 <programlisting>
1527   f3 x = a==b where { Baz1 a b = x }
1528 </programlisting>
1529
1530 Instead, use a <literal>case</literal> expression:
1531
1532 <programlisting>
1533   f3 x = case x of Baz1 a b -> a==b
1534 </programlisting>
1535
1536 In general, you can only pattern-match
1537 on an existentially-quantified constructor in a <literal>case</literal> expression or
1538 in the patterns of a function definition.
1539
1540 The reason for this restriction is really an implementation one.
1541 Type-checking binding groups is already a nightmare without
1542 existentials complicating the picture.  Also an existential pattern
1543 binding at the top level of a module doesn't make sense, because it's
1544 not clear how to prevent the existentially-quantified type "escaping".
1545 So for now, there's a simple-to-state restriction.  We'll see how
1546 annoying it is.
1547
1548 </para>
1549 </listitem>
1550 <listitem>
1551
1552 <para>
1553 You can't use existential quantification for <literal>newtype</literal>
1554 declarations.  So this is illegal:
1555
1556
1557 <programlisting>
1558   newtype T = forall a. Ord a => MkT a
1559 </programlisting>
1560
1561
1562 Reason: a value of type <literal>T</literal> must be represented as a
1563 pair of a dictionary for <literal>Ord t</literal> and a value of type
1564 <literal>t</literal>.  That contradicts the idea that
1565 <literal>newtype</literal> should have no concrete representation.
1566 You can get just the same efficiency and effect by using
1567 <literal>data</literal> instead of <literal>newtype</literal>.  If
1568 there is no overloading involved, then there is more of a case for
1569 allowing an existentially-quantified <literal>newtype</literal>,
1570 because the <literal>data</literal> version does carry an
1571 implementation cost, but single-field existentially quantified
1572 constructors aren't much use.  So the simple restriction (no
1573 existential stuff on <literal>newtype</literal>) stands, unless there
1574 are convincing reasons to change it.
1575
1576
1577 </para>
1578 </listitem>
1579 <listitem>
1580
1581 <para>
1582  You can't use <literal>deriving</literal> to define instances of a
1583 data type with existentially quantified data constructors.
1584
1585 Reason: in most cases it would not make sense. For example:;
1586
1587 <programlisting>
1588 data T = forall a. MkT [a] deriving( Eq )
1589 </programlisting>
1590
1591 To derive <literal>Eq</literal> in the standard way we would need to have equality
1592 between the single component of two <function>MkT</function> constructors:
1593
1594 <programlisting>
1595 instance Eq T where
1596   (MkT a) == (MkT b) = ???
1597 </programlisting>
1598
1599 But <varname>a</varname> and <varname>b</varname> have distinct types, and so can't be compared.
1600 It's just about possible to imagine examples in which the derived instance
1601 would make sense, but it seems altogether simpler simply to prohibit such
1602 declarations.  Define your own instances!
1603 </para>
1604 </listitem>
1605
1606 </itemizedlist>
1607
1608 </para>
1609
1610 </sect3>
1611 </sect2>
1612
1613 <!-- ====================== Generalised algebraic data types =======================  -->
1614
1615 <sect2 id="gadt-style">
1616 <title>Declaring data types with explicit constructor signatures</title>
1617
1618 <para>GHC allows you to declare an algebraic data type by 
1619 giving the type signatures of constructors explicitly.  For example:
1620 <programlisting>
1621   data Maybe a where
1622       Nothing :: Maybe a
1623       Just    :: a -> Maybe a
1624 </programlisting>
1625 The form is called a "GADT-style declaration"
1626 because Generalised Algebraic Data Types, described in <xref linkend="gadt"/>, 
1627 can only be declared using this form.</para>
1628 <para>Notice that GADT-style syntax generalises existential types (<xref linkend="existential-quantification"/>).  
1629 For example, these two declarations are equivalent:
1630 <programlisting>
1631   data Foo = forall a. MkFoo a (a -> Bool)
1632   data Foo' where { MKFoo :: a -> (a->Bool) -> Foo' }
1633 </programlisting>
1634 </para>
1635 <para>Any data type that can be declared in standard Haskell-98 syntax 
1636 can also be declared using GADT-style syntax.
1637 The choice is largely stylistic, but GADT-style declarations differ in one important respect:
1638 they treat class constraints on the data constructors differently.
1639 Specifically, if the constructor is given a type-class context, that
1640 context is made available by pattern matching.  For example:
1641 <programlisting>
1642   data Set a where
1643     MkSet :: Eq a => [a] -> Set a
1644
1645   makeSet :: Eq a => [a] -> Set a
1646   makeSet xs = MkSet (nub xs)
1647
1648   insert :: a -> Set a -> Set a
1649   insert a (MkSet as) | a `elem` as = MkSet as
1650                       | otherwise   = MkSet (a:as)
1651 </programlisting>
1652 A use of <literal>MkSet</literal> as a constructor (e.g. in the definition of <literal>makeSet</literal>) 
1653 gives rise to a <literal>(Eq a)</literal>
1654 constraint, as you would expect.  The new feature is that pattern-matching on <literal>MkSet</literal>
1655 (as in the definition of <literal>insert</literal>) makes <emphasis>available</emphasis> an <literal>(Eq a)</literal>
1656 context.  In implementation terms, the <literal>MkSet</literal> constructor has a hidden field that stores
1657 the <literal>(Eq a)</literal> dictionary that is passed to <literal>MkSet</literal>; so
1658 when pattern-matching that dictionary becomes available for the right-hand side of the match.
1659 In the example, the equality dictionary is used to satisfy the equality constraint 
1660 generated by the call to <literal>elem</literal>, so that the type of
1661 <literal>insert</literal> itself has no <literal>Eq</literal> constraint.
1662 </para>
1663 <para>This behaviour contrasts with Haskell 98's peculiar treament of 
1664 contexts on a data type declaration (Section 4.2.1 of the Haskell 98 Report).
1665 In Haskell 98 the defintion
1666 <programlisting>
1667   data Eq a => Set' a = MkSet' [a]
1668 </programlisting>
1669 gives <literal>MkSet'</literal> the same type as <literal>MkSet</literal> above.  But instead of 
1670 <emphasis>making available</emphasis> an <literal>(Eq a)</literal> constraint, pattern-matching
1671 on <literal>MkSet'</literal> <emphasis>requires</emphasis> an <literal>(Eq a)</literal> constraint!
1672 GHC faithfully implements this behaviour, odd though it is.  But for GADT-style declarations,
1673 GHC's behaviour is much more useful, as well as much more intuitive.</para>
1674 <para>
1675 For example, a possible application of GHC's behaviour is to reify dictionaries:
1676 <programlisting>
1677    data NumInst a where
1678      MkNumInst :: Num a => NumInst a
1679
1680    intInst :: NumInst Int
1681    intInst = MkNumInst
1682
1683    plus :: NumInst a -> a -> a -> a
1684    plus MkNumInst p q = p + q
1685 </programlisting>
1686 Here, a value of type <literal>NumInst a</literal> is equivalent 
1687 to an explicit <literal>(Num a)</literal> dictionary.
1688 </para>
1689
1690 <para>
1691 The rest of this section gives further details about GADT-style data
1692 type declarations.
1693
1694 <itemizedlist>
1695 <listitem><para>
1696 The result type of each data constructor must begin with the type constructor being defined.
1697 If the result type of all constructors 
1698 has the form <literal>T a1 ... an</literal>, where <literal>a1 ... an</literal>
1699 are distinct type variables, then the data type is <emphasis>ordinary</emphasis>;
1700 otherwise is a <emphasis>generalised</emphasis> data type (<xref linkend="gadt"/>).
1701 </para></listitem>
1702
1703 <listitem><para>
1704 The type signature of
1705 each constructor is independent, and is implicitly universally quantified as usual. 
1706 Different constructors may have different universally-quantified type variables
1707 and different type-class constraints.  
1708 For example, this is fine:
1709 <programlisting>
1710   data T a where
1711     T1 :: Eq b => b -> T b
1712     T2 :: (Show c, Ix c) => c -> [c] -> T c
1713 </programlisting>
1714 </para></listitem>
1715
1716 <listitem><para>
1717 Unlike a Haskell-98-style 
1718 data type declaration, the type variable(s) in the "<literal>data Set a where</literal>" header 
1719 have no scope.  Indeed, one can write a kind signature instead:
1720 <programlisting>
1721   data Set :: * -> * where ...
1722 </programlisting>
1723 or even a mixture of the two:
1724 <programlisting>
1725   data Foo a :: (* -> *) -> * where ...
1726 </programlisting>
1727 The type variables (if given) may be explicitly kinded, so we could also write the header for <literal>Foo</literal>
1728 like this:
1729 <programlisting>
1730   data Foo a (b :: * -> *) where ...
1731 </programlisting>
1732 </para></listitem>
1733
1734
1735 <listitem><para>
1736 You can use strictness annotations, in the obvious places
1737 in the constructor type:
1738 <programlisting>
1739   data Term a where
1740       Lit    :: !Int -> Term Int
1741       If     :: Term Bool -> !(Term a) -> !(Term a) -> Term a
1742       Pair   :: Term a -> Term b -> Term (a,b)
1743 </programlisting>
1744 </para></listitem>
1745
1746 <listitem><para>
1747 You can use a <literal>deriving</literal> clause on a GADT-style data type
1748 declaration.   For example, these two declarations are equivalent
1749 <programlisting>
1750   data Maybe1 a where {
1751       Nothing1 :: Maybe1 a ;
1752       Just1    :: a -> Maybe1 a
1753     } deriving( Eq, Ord )
1754
1755   data Maybe2 a = Nothing2 | Just2 a 
1756        deriving( Eq, Ord )
1757 </programlisting>
1758 </para></listitem>
1759
1760 <listitem><para>
1761 You can use record syntax on a GADT-style data type declaration:
1762
1763 <programlisting>
1764   data Person where
1765       Adult { name :: String, children :: [Person] } :: Person
1766       Child { name :: String } :: Person
1767 </programlisting>
1768 As usual, for every constructor that has a field <literal>f</literal>, the type of
1769 field <literal>f</literal> must be the same (modulo alpha conversion).
1770 </para>
1771 <para>
1772 At the moment, record updates are not yet possible with GADT-style declarations, 
1773 so support is limited to record construction, selection and pattern matching.
1774 For exmaple
1775 <programlisting>
1776   aPerson = Adult { name = "Fred", children = [] }
1777
1778   shortName :: Person -> Bool
1779   hasChildren (Adult { children = kids }) = not (null kids)
1780   hasChildren (Child {})                  = False
1781 </programlisting>
1782 </para></listitem>
1783
1784 <listitem><para> 
1785 As in the case of existentials declared using the Haskell-98-like record syntax 
1786 (<xref linkend="existential-records"/>),
1787 record-selector functions are generated only for those fields that have well-typed
1788 selectors.  
1789 Here is the example of that section, in GADT-style syntax:
1790 <programlisting>
1791 data Counter a where
1792     NewCounter { _this    :: self
1793                , _inc     :: self -> self
1794                , _display :: self -> IO ()
1795                , tag      :: a
1796                }
1797         :: Counter a
1798 </programlisting>
1799 As before, only one selector function is generated here, that for <literal>tag</literal>.
1800 Nevertheless, you can still use all the field names in pattern matching and record construction.
1801 </para></listitem>
1802 </itemizedlist></para>
1803 </sect2>
1804
1805 <sect2 id="gadt">
1806 <title>Generalised Algebraic Data Types (GADTs)</title>
1807
1808 <para>Generalised Algebraic Data Types generalise ordinary algebraic data types 
1809 by allowing constructors to have richer return types.  Here is an example:
1810 <programlisting>
1811   data Term a where
1812       Lit    :: Int -> Term Int
1813       Succ   :: Term Int -> Term Int
1814       IsZero :: Term Int -> Term Bool   
1815       If     :: Term Bool -> Term a -> Term a -> Term a
1816       Pair   :: Term a -> Term b -> Term (a,b)
1817 </programlisting>
1818 Notice that the return type of the constructors is not always <literal>Term a</literal>, as is the
1819 case with ordinary data types.  This generality allows us to 
1820 write a well-typed <literal>eval</literal> function
1821 for these <literal>Terms</literal>:
1822 <programlisting>
1823   eval :: Term a -> a
1824   eval (Lit i)      = i
1825   eval (Succ t)     = 1 + eval t
1826   eval (IsZero t)   = eval t == 0
1827   eval (If b e1 e2) = if eval b then eval e1 else eval e2
1828   eval (Pair e1 e2) = (eval e1, eval e2)
1829 </programlisting>
1830 The key point about GADTs is that <emphasis>pattern matching causes type refinement</emphasis>.  
1831 For example, in the right hand side of the equation
1832 <programlisting>
1833   eval :: Term a -> a
1834   eval (Lit i) =  ...
1835 </programlisting>
1836 the type <literal>a</literal> is refined to <literal>Int</literal>.  That's the whole point!
1837 A precise specification of the type rules is beyond what this user manual aspires to, 
1838 but the design closely follows that described in
1839 the paper <ulink
1840 url="http://research.microsoft.com/%7Esimonpj/papers/gadt/index.htm">Simple
1841 unification-based type inference for GADTs</ulink>,
1842 (ICFP 2006).
1843 The general principle is this: <emphasis>type refinement is only carried out 
1844 based on user-supplied type annotations</emphasis>.
1845 So if no type signature is supplied for <literal>eval</literal>, no type refinement happens, 
1846 and lots of obscure error messages will
1847 occur.  However, the refinement is quite general.  For example, if we had:
1848 <programlisting>
1849   eval :: Term a -> a -> a
1850   eval (Lit i) j =  i+j
1851 </programlisting>
1852 the pattern match causes the type <literal>a</literal> to be refined to <literal>Int</literal> (because of the type
1853 of the constructor <literal>Lit</literal>), and that refinement also applies to the type of <literal>j</literal>, and
1854 the result type of the <literal>case</literal> expression.  Hence the addition <literal>i+j</literal> is legal.
1855 </para>
1856 <para>
1857 These and many other examples are given in papers by Hongwei Xi, and
1858 Tim Sheard. There is a longer introduction
1859 <ulink url="http://haskell.org/haskellwiki/GADT">on the wiki</ulink>,
1860 and Ralf Hinze's
1861 <ulink url="http://www.informatik.uni-bonn.de/~ralf/publications/With.pdf">Fun with phantom types</ulink> also has a number of examples. Note that papers
1862 may use different notation to that implemented in GHC.
1863 </para>
1864 <para>
1865 The rest of this section outlines the extensions to GHC that support GADTs.   The extension is enabled with 
1866 <option>-XGADTs</option>.
1867 <itemizedlist>
1868 <listitem><para>
1869 A GADT can only be declared using GADT-style syntax (<xref linkend="gadt-style"/>); 
1870 the old Haskell-98 syntax for data declarations always declares an ordinary data type.
1871 The result type of each constructor must begin with the type constructor being defined,
1872 but for a GADT the arguments to the type constructor can be arbitrary monotypes.  
1873 For example, in the <literal>Term</literal> data
1874 type above, the type of each constructor must end with <literal>Term ty</literal>, but
1875 the <literal>ty</literal> may not be a type variable (e.g. the <literal>Lit</literal>
1876 constructor).
1877 </para></listitem>
1878
1879 <listitem><para>
1880 You cannot use a <literal>deriving</literal> clause for a GADT; only for
1881 an ordianary data type.
1882 </para></listitem>
1883
1884 <listitem><para>
1885 As mentioned in <xref linkend="gadt-style"/>, record syntax is supported.
1886 For example:
1887 <programlisting>
1888   data Term a where
1889       Lit    { val  :: Int }      :: Term Int
1890       Succ   { num  :: Term Int } :: Term Int
1891       Pred   { num  :: Term Int } :: Term Int
1892       IsZero { arg  :: Term Int } :: Term Bool  
1893       Pair   { arg1 :: Term a
1894              , arg2 :: Term b
1895              }                    :: Term (a,b)
1896       If     { cnd  :: Term Bool
1897              , tru  :: Term a
1898              , fls  :: Term a
1899              }                    :: Term a
1900 </programlisting>
1901 However, for GADTs there is the following additional constraint: 
1902 every constructor that has a field <literal>f</literal> must have
1903 the same result type (modulo alpha conversion)
1904 Hence, in the above example, we cannot merge the <literal>num</literal> 
1905 and <literal>arg</literal> fields above into a 
1906 single name.  Although their field types are both <literal>Term Int</literal>,
1907 their selector functions actually have different types:
1908
1909 <programlisting>
1910   num :: Term Int -> Term Int
1911   arg :: Term Bool -> Term Int
1912 </programlisting>
1913 </para></listitem>
1914
1915 </itemizedlist>
1916 </para>
1917
1918 </sect2>
1919 </sect1>
1920
1921 <!-- ====================== End of Generalised algebraic data types =======================  -->
1922
1923 <sect1 id="deriving">
1924 <title>Extensions to the "deriving" mechanism</title>
1925
1926 <sect2 id="deriving-inferred">
1927 <title>Inferred context for deriving clauses</title>
1928
1929 <para>
1930 The Haskell Report is vague about exactly when a <literal>deriving</literal> clause is
1931 legal.  For example:
1932 <programlisting>
1933   data T0 f a = MkT0 a         deriving( Eq )
1934   data T1 f a = MkT1 (f a)     deriving( Eq )
1935   data T2 f a = MkT2 (f (f a)) deriving( Eq )
1936 </programlisting>
1937 The natural generated <literal>Eq</literal> code would result in these instance declarations:
1938 <programlisting>
1939   instance Eq a         => Eq (T0 f a) where ...
1940   instance Eq (f a)     => Eq (T1 f a) where ...
1941   instance Eq (f (f a)) => Eq (T2 f a) where ...
1942 </programlisting>
1943 The first of these is obviously fine. The second is still fine, although less obviously. 
1944 The third is not Haskell 98, and risks losing termination of instances.
1945 </para>
1946 <para>
1947 GHC takes a conservative position: it accepts the first two, but not the third.  The  rule is this:
1948 each constraint in the inferred instance context must consist only of type variables, 
1949 with no repititions.
1950 </para>
1951 <para>
1952 This rule is applied regardless of flags.  If you want a more exotic context, you can write
1953 it yourself, using the <link linkend="stand-alone-deriving">standalone deriving mechanism</link>.
1954 </para>
1955 </sect2>
1956
1957 <sect2 id="stand-alone-deriving">
1958 <title>Stand-alone deriving declarations</title>
1959
1960 <para>
1961 GHC now allows stand-alone <literal>deriving</literal> declarations, enabled by <literal>-XStandaloneDeriving</literal>:
1962 <programlisting>
1963   data Foo a = Bar a | Baz String
1964
1965   deriving instance Eq a => Eq (Foo a)
1966 </programlisting>
1967 The syntax is identical to that of an ordinary instance declaration apart from (a) the keyword
1968 <literal>deriving</literal>, and (b) the absence of the <literal>where</literal> part.
1969 You must supply a context (in the example the context is <literal>(Eq a)</literal>), 
1970 exactly as you would in an ordinary instance declaration.
1971 (In contrast the context is inferred in a <literal>deriving</literal> clause 
1972 attached to a data type declaration.) These <literal>deriving instance</literal>
1973 rules obey the same rules concerning form and termination as ordinary instance declarations,
1974 controlled by the same flags; see <xref linkend="instance-decls"/>. </para>
1975
1976 <para>The stand-alone syntax is generalised for newtypes in exactly the same
1977 way that ordinary <literal>deriving</literal> clauses are generalised (<xref linkend="newtype-deriving"/>).
1978 For example:
1979 <programlisting>
1980   newtype Foo a = MkFoo (State Int a)
1981
1982   deriving instance MonadState Int Foo
1983 </programlisting>
1984 GHC always treats the <emphasis>last</emphasis> parameter of the instance
1985 (<literal>Foo</literal> in this exmample) as the type whose instance is being derived.
1986 </para>
1987
1988 </sect2>
1989
1990
1991 <sect2 id="deriving-typeable">
1992 <title>Deriving clause for classes <literal>Typeable</literal> and <literal>Data</literal></title>
1993
1994 <para>
1995 Haskell 98 allows the programmer to add "<literal>deriving( Eq, Ord )</literal>" to a data type 
1996 declaration, to generate a standard instance declaration for classes specified in the <literal>deriving</literal> clause.  
1997 In Haskell 98, the only classes that may appear in the <literal>deriving</literal> clause are the standard
1998 classes <literal>Eq</literal>, <literal>Ord</literal>, 
1999 <literal>Enum</literal>, <literal>Ix</literal>, <literal>Bounded</literal>, <literal>Read</literal>, and <literal>Show</literal>.
2000 </para>
2001 <para>
2002 GHC extends this list with two more classes that may be automatically derived 
2003 (provided the <option>-XDeriveDataTypeable</option> flag is specified):
2004 <literal>Typeable</literal>, and <literal>Data</literal>.  These classes are defined in the library
2005 modules <literal>Data.Typeable</literal> and <literal>Data.Generics</literal> respectively, and the
2006 appropriate class must be in scope before it can be mentioned in the <literal>deriving</literal> clause.
2007 </para>
2008 <para>An instance of <literal>Typeable</literal> can only be derived if the
2009 data type has seven or fewer type parameters, all of kind <literal>*</literal>.
2010 The reason for this is that the <literal>Typeable</literal> class is derived using the scheme
2011 described in
2012 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/hmap/gmap2.ps">
2013 Scrap More Boilerplate: Reflection, Zips, and Generalised Casts
2014 </ulink>.
2015 (Section 7.4 of the paper describes the multiple <literal>Typeable</literal> classes that
2016 are used, and only <literal>Typeable1</literal> up to
2017 <literal>Typeable7</literal> are provided in the library.)
2018 In other cases, there is nothing to stop the programmer writing a <literal>TypableX</literal>
2019 class, whose kind suits that of the data type constructor, and
2020 then writing the data type instance by hand.
2021 </para>
2022 </sect2>
2023
2024 <sect2 id="newtype-deriving">
2025 <title>Generalised derived instances for newtypes</title>
2026
2027 <para>
2028 When you define an abstract type using <literal>newtype</literal>, you may want
2029 the new type to inherit some instances from its representation. In
2030 Haskell 98, you can inherit instances of <literal>Eq</literal>, <literal>Ord</literal>,
2031 <literal>Enum</literal> and <literal>Bounded</literal> by deriving them, but for any
2032 other classes you have to write an explicit instance declaration. For
2033 example, if you define
2034
2035 <programlisting> 
2036   newtype Dollars = Dollars Int 
2037 </programlisting> 
2038
2039 and you want to use arithmetic on <literal>Dollars</literal>, you have to
2040 explicitly define an instance of <literal>Num</literal>:
2041
2042 <programlisting> 
2043   instance Num Dollars where
2044     Dollars a + Dollars b = Dollars (a+b)
2045     ...
2046 </programlisting>
2047 All the instance does is apply and remove the <literal>newtype</literal>
2048 constructor. It is particularly galling that, since the constructor
2049 doesn't appear at run-time, this instance declaration defines a
2050 dictionary which is <emphasis>wholly equivalent</emphasis> to the <literal>Int</literal>
2051 dictionary, only slower!
2052 </para>
2053
2054
2055 <sect3> <title> Generalising the deriving clause </title>
2056 <para>
2057 GHC now permits such instances to be derived instead, 
2058 using the flag <option>-XGeneralizedNewtypeDeriving</option>,
2059 so one can write 
2060 <programlisting> 
2061   newtype Dollars = Dollars Int deriving (Eq,Show,Num)
2062 </programlisting> 
2063
2064 and the implementation uses the <emphasis>same</emphasis> <literal>Num</literal> dictionary
2065 for <literal>Dollars</literal> as for <literal>Int</literal>. Notionally, the compiler
2066 derives an instance declaration of the form
2067
2068 <programlisting> 
2069   instance Num Int => Num Dollars
2070 </programlisting> 
2071
2072 which just adds or removes the <literal>newtype</literal> constructor according to the type.
2073 </para>
2074 <para>
2075
2076 We can also derive instances of constructor classes in a similar
2077 way. For example, suppose we have implemented state and failure monad
2078 transformers, such that
2079
2080 <programlisting> 
2081   instance Monad m => Monad (State s m) 
2082   instance Monad m => Monad (Failure m)
2083 </programlisting> 
2084 In Haskell 98, we can define a parsing monad by 
2085 <programlisting> 
2086   type Parser tok m a = State [tok] (Failure m) a
2087 </programlisting> 
2088
2089 which is automatically a monad thanks to the instance declarations
2090 above. With the extension, we can make the parser type abstract,
2091 without needing to write an instance of class <literal>Monad</literal>, via
2092
2093 <programlisting> 
2094   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2095                          deriving Monad
2096 </programlisting>
2097 In this case the derived instance declaration is of the form 
2098 <programlisting> 
2099   instance Monad (State [tok] (Failure m)) => Monad (Parser tok m) 
2100 </programlisting> 
2101
2102 Notice that, since <literal>Monad</literal> is a constructor class, the
2103 instance is a <emphasis>partial application</emphasis> of the new type, not the
2104 entire left hand side. We can imagine that the type declaration is
2105 "eta-converted" to generate the context of the instance
2106 declaration.
2107 </para>
2108 <para>
2109
2110 We can even derive instances of multi-parameter classes, provided the
2111 newtype is the last class parameter. In this case, a ``partial
2112 application'' of the class appears in the <literal>deriving</literal>
2113 clause. For example, given the class
2114
2115 <programlisting> 
2116   class StateMonad s m | m -> s where ... 
2117   instance Monad m => StateMonad s (State s m) where ... 
2118 </programlisting> 
2119 then we can derive an instance of <literal>StateMonad</literal> for <literal>Parser</literal>s by 
2120 <programlisting> 
2121   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2122                          deriving (Monad, StateMonad [tok])
2123 </programlisting>
2124
2125 The derived instance is obtained by completing the application of the
2126 class to the new type:
2127
2128 <programlisting> 
2129   instance StateMonad [tok] (State [tok] (Failure m)) =>
2130            StateMonad [tok] (Parser tok m)
2131 </programlisting>
2132 </para>
2133 <para>
2134
2135 As a result of this extension, all derived instances in newtype
2136  declarations are treated uniformly (and implemented just by reusing
2137 the dictionary for the representation type), <emphasis>except</emphasis>
2138 <literal>Show</literal> and <literal>Read</literal>, which really behave differently for
2139 the newtype and its representation.
2140 </para>
2141 </sect3>
2142
2143 <sect3> <title> A more precise specification </title>
2144 <para>
2145 Derived instance declarations are constructed as follows. Consider the
2146 declaration (after expansion of any type synonyms)
2147
2148 <programlisting> 
2149   newtype T v1...vn = T' (t vk+1...vn) deriving (c1...cm) 
2150 </programlisting> 
2151
2152 where 
2153  <itemizedlist>
2154 <listitem><para>
2155   The <literal>ci</literal> are partial applications of
2156   classes of the form <literal>C t1'...tj'</literal>, where the arity of <literal>C</literal>
2157   is exactly <literal>j+1</literal>.  That is, <literal>C</literal> lacks exactly one type argument.
2158 </para></listitem>
2159 <listitem><para>
2160   The <literal>k</literal> is chosen so that <literal>ci (T v1...vk)</literal> is well-kinded.
2161 </para></listitem>
2162 <listitem><para>
2163   The type <literal>t</literal> is an arbitrary type.
2164 </para></listitem>
2165 <listitem><para>
2166   The type variables <literal>vk+1...vn</literal> do not occur in <literal>t</literal>, 
2167   nor in the <literal>ci</literal>, and
2168 </para></listitem>
2169 <listitem><para>
2170   None of the <literal>ci</literal> is <literal>Read</literal>, <literal>Show</literal>, 
2171                 <literal>Typeable</literal>, or <literal>Data</literal>.  These classes
2172                 should not "look through" the type or its constructor.  You can still
2173                 derive these classes for a newtype, but it happens in the usual way, not 
2174                 via this new mechanism.  
2175 </para></listitem>
2176 </itemizedlist>
2177 Then, for each <literal>ci</literal>, the derived instance
2178 declaration is:
2179 <programlisting> 
2180   instance ci t => ci (T v1...vk)
2181 </programlisting>
2182 As an example which does <emphasis>not</emphasis> work, consider 
2183 <programlisting> 
2184   newtype NonMonad m s = NonMonad (State s m s) deriving Monad 
2185 </programlisting> 
2186 Here we cannot derive the instance 
2187 <programlisting> 
2188   instance Monad (State s m) => Monad (NonMonad m) 
2189 </programlisting> 
2190
2191 because the type variable <literal>s</literal> occurs in <literal>State s m</literal>,
2192 and so cannot be "eta-converted" away. It is a good thing that this
2193 <literal>deriving</literal> clause is rejected, because <literal>NonMonad m</literal> is
2194 not, in fact, a monad --- for the same reason. Try defining
2195 <literal>>>=</literal> with the correct type: you won't be able to.
2196 </para>
2197 <para>
2198
2199 Notice also that the <emphasis>order</emphasis> of class parameters becomes
2200 important, since we can only derive instances for the last one. If the
2201 <literal>StateMonad</literal> class above were instead defined as
2202
2203 <programlisting> 
2204   class StateMonad m s | m -> s where ... 
2205 </programlisting>
2206
2207 then we would not have been able to derive an instance for the
2208 <literal>Parser</literal> type above. We hypothesise that multi-parameter
2209 classes usually have one "main" parameter for which deriving new
2210 instances is most interesting.
2211 </para>
2212 <para>Lastly, all of this applies only for classes other than
2213 <literal>Read</literal>, <literal>Show</literal>, <literal>Typeable</literal>, 
2214 and <literal>Data</literal>, for which the built-in derivation applies (section
2215 4.3.3. of the Haskell Report).
2216 (For the standard classes <literal>Eq</literal>, <literal>Ord</literal>,
2217 <literal>Ix</literal>, and <literal>Bounded</literal> it is immaterial whether
2218 the standard method is used or the one described here.)
2219 </para>
2220 </sect3>
2221 </sect2>
2222 </sect1>
2223
2224
2225 <!-- TYPE SYSTEM EXTENSIONS -->
2226 <sect1 id="type-class-extensions">
2227 <title>Class and instances declarations</title>
2228
2229 <sect2 id="multi-param-type-classes">
2230 <title>Class declarations</title>
2231
2232 <para>
2233 This section, and the next one, documents GHC's type-class extensions.
2234 There's lots of background in the paper <ulink
2235 url="http://research.microsoft.com/~simonpj/Papers/type-class-design-space" >Type
2236 classes: exploring the design space</ulink > (Simon Peyton Jones, Mark
2237 Jones, Erik Meijer).
2238 </para>
2239 <para>
2240 All the extensions are enabled by the <option>-fglasgow-exts</option> flag.
2241 </para>
2242
2243 <sect3>
2244 <title>Multi-parameter type classes</title>
2245 <para>
2246 Multi-parameter type classes are permitted. For example:
2247
2248
2249 <programlisting>
2250   class Collection c a where
2251     union :: c a -> c a -> c a
2252     ...etc.
2253 </programlisting>
2254
2255 </para>
2256 </sect3>
2257
2258 <sect3>
2259 <title>The superclasses of a class declaration</title>
2260
2261 <para>
2262 There are no restrictions on the context in a class declaration
2263 (which introduces superclasses), except that the class hierarchy must
2264 be acyclic.  So these class declarations are OK:
2265
2266
2267 <programlisting>
2268   class Functor (m k) => FiniteMap m k where
2269     ...
2270
2271   class (Monad m, Monad (t m)) => Transform t m where
2272     lift :: m a -> (t m) a
2273 </programlisting>
2274
2275
2276 </para>
2277 <para>
2278 As in Haskell 98, The class hierarchy must be acyclic.  However, the definition
2279 of "acyclic" involves only the superclass relationships.  For example,
2280 this is OK:
2281
2282
2283 <programlisting>
2284   class C a where {
2285     op :: D b => a -> b -> b
2286   }
2287
2288   class C a => D a where { ... }
2289 </programlisting>
2290
2291
2292 Here, <literal>C</literal> is a superclass of <literal>D</literal>, but it's OK for a
2293 class operation <literal>op</literal> of <literal>C</literal> to mention <literal>D</literal>.  (It
2294 would not be OK for <literal>D</literal> to be a superclass of <literal>C</literal>.)
2295 </para>
2296 </sect3>
2297
2298
2299
2300
2301 <sect3 id="class-method-types">
2302 <title>Class method types</title>
2303
2304 <para>
2305 Haskell 98 prohibits class method types to mention constraints on the
2306 class type variable, thus:
2307 <programlisting>
2308   class Seq s a where
2309     fromList :: [a] -> s a
2310     elem     :: Eq a => a -> s a -> Bool
2311 </programlisting>
2312 The type of <literal>elem</literal> is illegal in Haskell 98, because it
2313 contains the constraint <literal>Eq a</literal>, constrains only the 
2314 class type variable (in this case <literal>a</literal>).
2315 GHC lifts this restriction.
2316 </para>
2317
2318
2319 </sect3>
2320 </sect2>
2321
2322 <sect2 id="functional-dependencies">
2323 <title>Functional dependencies
2324 </title>
2325
2326 <para> Functional dependencies are implemented as described by Mark Jones
2327 in &ldquo;<ulink url="http://www.cse.ogi.edu/~mpj/pubs/fundeps.html">Type Classes with Functional Dependencies</ulink>&rdquo;, Mark P. Jones, 
2328 In Proceedings of the 9th European Symposium on Programming, 
2329 ESOP 2000, Berlin, Germany, March 2000, Springer-Verlag LNCS 1782,
2330 .
2331 </para>
2332 <para>
2333 Functional dependencies are introduced by a vertical bar in the syntax of a 
2334 class declaration;  e.g. 
2335 <programlisting>
2336   class (Monad m) => MonadState s m | m -> s where ...
2337
2338   class Foo a b c | a b -> c where ...
2339 </programlisting>
2340 There should be more documentation, but there isn't (yet).  Yell if you need it.
2341 </para>
2342
2343 <sect3><title>Rules for functional dependencies </title>
2344 <para>
2345 In a class declaration, all of the class type variables must be reachable (in the sense 
2346 mentioned in <xref linkend="type-restrictions"/>)
2347 from the free variables of each method type.
2348 For example:
2349
2350 <programlisting>
2351   class Coll s a where
2352     empty  :: s
2353     insert :: s -> a -> s
2354 </programlisting>
2355
2356 is not OK, because the type of <literal>empty</literal> doesn't mention
2357 <literal>a</literal>.  Functional dependencies can make the type variable
2358 reachable:
2359 <programlisting>
2360   class Coll s a | s -> a where
2361     empty  :: s
2362     insert :: s -> a -> s
2363 </programlisting>
2364
2365 Alternatively <literal>Coll</literal> might be rewritten
2366
2367 <programlisting>
2368   class Coll s a where
2369     empty  :: s a
2370     insert :: s a -> a -> s a
2371 </programlisting>
2372
2373
2374 which makes the connection between the type of a collection of
2375 <literal>a</literal>'s (namely <literal>(s a)</literal>) and the element type <literal>a</literal>.
2376 Occasionally this really doesn't work, in which case you can split the
2377 class like this:
2378
2379
2380 <programlisting>
2381   class CollE s where
2382     empty  :: s
2383
2384   class CollE s => Coll s a where
2385     insert :: s -> a -> s
2386 </programlisting>
2387 </para>
2388 </sect3>
2389
2390
2391 <sect3>
2392 <title>Background on functional dependencies</title>
2393
2394 <para>The following description of the motivation and use of functional dependencies is taken
2395 from the Hugs user manual, reproduced here (with minor changes) by kind
2396 permission of Mark Jones.
2397 </para>
2398 <para> 
2399 Consider the following class, intended as part of a
2400 library for collection types:
2401 <programlisting>
2402    class Collects e ce where
2403        empty  :: ce
2404        insert :: e -> ce -> ce
2405        member :: e -> ce -> Bool
2406 </programlisting>
2407 The type variable e used here represents the element type, while ce is the type
2408 of the container itself. Within this framework, we might want to define
2409 instances of this class for lists or characteristic functions (both of which
2410 can be used to represent collections of any equality type), bit sets (which can
2411 be used to represent collections of characters), or hash tables (which can be
2412 used to represent any collection whose elements have a hash function). Omitting
2413 standard implementation details, this would lead to the following declarations: 
2414 <programlisting>
2415    instance Eq e => Collects e [e] where ...
2416    instance Eq e => Collects e (e -> Bool) where ...
2417    instance Collects Char BitSet where ...
2418    instance (Hashable e, Collects a ce)
2419               => Collects e (Array Int ce) where ...
2420 </programlisting>
2421 All this looks quite promising; we have a class and a range of interesting
2422 implementations. Unfortunately, there are some serious problems with the class
2423 declaration. First, the empty function has an ambiguous type: 
2424 <programlisting>
2425    empty :: Collects e ce => ce
2426 </programlisting>
2427 By "ambiguous" we mean that there is a type variable e that appears on the left
2428 of the <literal>=&gt;</literal> symbol, but not on the right. The problem with
2429 this is that, according to the theoretical foundations of Haskell overloading,
2430 we cannot guarantee a well-defined semantics for any term with an ambiguous
2431 type.
2432 </para>
2433 <para>
2434 We can sidestep this specific problem by removing the empty member from the
2435 class declaration. However, although the remaining members, insert and member,
2436 do not have ambiguous types, we still run into problems when we try to use
2437 them. For example, consider the following two functions: 
2438 <programlisting>
2439    f x y = insert x . insert y
2440    g     = f True 'a'
2441 </programlisting>
2442 for which GHC infers the following types: 
2443 <programlisting>
2444    f :: (Collects a c, Collects b c) => a -> b -> c -> c
2445    g :: (Collects Bool c, Collects Char c) => c -> c
2446 </programlisting>
2447 Notice that the type for f allows the two parameters x and y to be assigned
2448 different types, even though it attempts to insert each of the two values, one
2449 after the other, into the same collection. If we're trying to model collections
2450 that contain only one type of value, then this is clearly an inaccurate
2451 type. Worse still, the definition for g is accepted, without causing a type
2452 error. As a result, the error in this code will not be flagged at the point
2453 where it appears. Instead, it will show up only when we try to use g, which
2454 might even be in a different module.
2455 </para>
2456
2457 <sect4><title>An attempt to use constructor classes</title>
2458
2459 <para>
2460 Faced with the problems described above, some Haskell programmers might be
2461 tempted to use something like the following version of the class declaration: 
2462 <programlisting>
2463    class Collects e c where
2464       empty  :: c e
2465       insert :: e -> c e -> c e
2466       member :: e -> c e -> Bool
2467 </programlisting>
2468 The key difference here is that we abstract over the type constructor c that is
2469 used to form the collection type c e, and not over that collection type itself,
2470 represented by ce in the original class declaration. This avoids the immediate
2471 problems that we mentioned above: empty has type <literal>Collects e c => c
2472 e</literal>, which is not ambiguous. 
2473 </para>
2474 <para>
2475 The function f from the previous section has a more accurate type: 
2476 <programlisting>
2477    f :: (Collects e c) => e -> e -> c e -> c e
2478 </programlisting>
2479 The function g from the previous section is now rejected with a type error as
2480 we would hope because the type of f does not allow the two arguments to have
2481 different types. 
2482 This, then, is an example of a multiple parameter class that does actually work
2483 quite well in practice, without ambiguity problems.
2484 There is, however, a catch. This version of the Collects class is nowhere near
2485 as general as the original class seemed to be: only one of the four instances
2486 for <literal>Collects</literal>
2487 given above can be used with this version of Collects because only one of
2488 them---the instance for lists---has a collection type that can be written in
2489 the form c e, for some type constructor c, and element type e.
2490 </para>
2491 </sect4>
2492
2493 <sect4><title>Adding functional dependencies</title>
2494
2495 <para>
2496 To get a more useful version of the Collects class, Hugs provides a mechanism
2497 that allows programmers to specify dependencies between the parameters of a
2498 multiple parameter class (For readers with an interest in theoretical
2499 foundations and previous work: The use of dependency information can be seen
2500 both as a generalization of the proposal for `parametric type classes' that was
2501 put forward by Chen, Hudak, and Odersky, or as a special case of Mark Jones's
2502 later framework for "improvement" of qualified types. The
2503 underlying ideas are also discussed in a more theoretical and abstract setting
2504 in a manuscript [implparam], where they are identified as one point in a
2505 general design space for systems of implicit parameterization.).
2506
2507 To start with an abstract example, consider a declaration such as: 
2508 <programlisting>
2509    class C a b where ...
2510 </programlisting>
2511 which tells us simply that C can be thought of as a binary relation on types
2512 (or type constructors, depending on the kinds of a and b). Extra clauses can be
2513 included in the definition of classes to add information about dependencies
2514 between parameters, as in the following examples: 
2515 <programlisting>
2516    class D a b | a -> b where ...
2517    class E a b | a -> b, b -> a where ...
2518 </programlisting>
2519 The notation <literal>a -&gt; b</literal> used here between the | and where
2520 symbols --- not to be
2521 confused with a function type --- indicates that the a parameter uniquely
2522 determines the b parameter, and might be read as "a determines b." Thus D is
2523 not just a relation, but actually a (partial) function. Similarly, from the two
2524 dependencies that are included in the definition of E, we can see that E
2525 represents a (partial) one-one mapping between types.
2526 </para>
2527 <para>
2528 More generally, dependencies take the form <literal>x1 ... xn -&gt; y1 ... ym</literal>,
2529 where x1, ..., xn, and y1, ..., yn are type variables with n&gt;0 and
2530 m&gt;=0, meaning that the y parameters are uniquely determined by the x
2531 parameters. Spaces can be used as separators if more than one variable appears
2532 on any single side of a dependency, as in <literal>t -&gt; a b</literal>. Note that a class may be
2533 annotated with multiple dependencies using commas as separators, as in the
2534 definition of E above. Some dependencies that we can write in this notation are
2535 redundant, and will be rejected because they don't serve any useful
2536 purpose, and may instead indicate an error in the program. Examples of
2537 dependencies like this include  <literal>a -&gt; a </literal>,  
2538 <literal>a -&gt; a a </literal>,  
2539 <literal>a -&gt; </literal>, etc. There can also be
2540 some redundancy if multiple dependencies are given, as in  
2541 <literal>a-&gt;b</literal>, 
2542  <literal>b-&gt;c </literal>,  <literal>a-&gt;c </literal>, and
2543 in which some subset implies the remaining dependencies. Examples like this are
2544 not treated as errors. Note that dependencies appear only in class
2545 declarations, and not in any other part of the language. In particular, the
2546 syntax for instance declarations, class constraints, and types is completely
2547 unchanged.
2548 </para>
2549 <para>
2550 By including dependencies in a class declaration, we provide a mechanism for
2551 the programmer to specify each multiple parameter class more precisely. The
2552 compiler, on the other hand, is responsible for ensuring that the set of
2553 instances that are in scope at any given point in the program is consistent
2554 with any declared dependencies. For example, the following pair of instance
2555 declarations cannot appear together in the same scope because they violate the
2556 dependency for D, even though either one on its own would be acceptable: 
2557 <programlisting>
2558    instance D Bool Int where ...
2559    instance D Bool Char where ...
2560 </programlisting>
2561 Note also that the following declaration is not allowed, even by itself: 
2562 <programlisting>
2563    instance D [a] b where ...
2564 </programlisting>
2565 The problem here is that this instance would allow one particular choice of [a]
2566 to be associated with more than one choice for b, which contradicts the
2567 dependency specified in the definition of D. More generally, this means that,
2568 in any instance of the form: 
2569 <programlisting>
2570    instance D t s where ...
2571 </programlisting>
2572 for some particular types t and s, the only variables that can appear in s are
2573 the ones that appear in t, and hence, if the type t is known, then s will be
2574 uniquely determined.
2575 </para>
2576 <para>
2577 The benefit of including dependency information is that it allows us to define
2578 more general multiple parameter classes, without ambiguity problems, and with
2579 the benefit of more accurate types. To illustrate this, we return to the
2580 collection class example, and annotate the original definition of <literal>Collects</literal>
2581 with a simple dependency: 
2582 <programlisting>
2583    class Collects e ce | ce -> e where
2584       empty  :: ce
2585       insert :: e -> ce -> ce
2586       member :: e -> ce -> Bool
2587 </programlisting>
2588 The dependency <literal>ce -&gt; e</literal> here specifies that the type e of elements is uniquely
2589 determined by the type of the collection ce. Note that both parameters of
2590 Collects are of kind *; there are no constructor classes here. Note too that
2591 all of the instances of Collects that we gave earlier can be used
2592 together with this new definition.
2593 </para>
2594 <para>
2595 What about the ambiguity problems that we encountered with the original
2596 definition? The empty function still has type Collects e ce => ce, but it is no
2597 longer necessary to regard that as an ambiguous type: Although the variable e
2598 does not appear on the right of the => symbol, the dependency for class
2599 Collects tells us that it is uniquely determined by ce, which does appear on
2600 the right of the => symbol. Hence the context in which empty is used can still
2601 give enough information to determine types for both ce and e, without
2602 ambiguity. More generally, we need only regard a type as ambiguous if it
2603 contains a variable on the left of the => that is not uniquely determined
2604 (either directly or indirectly) by the variables on the right.
2605 </para>
2606 <para>
2607 Dependencies also help to produce more accurate types for user defined
2608 functions, and hence to provide earlier detection of errors, and less cluttered
2609 types for programmers to work with. Recall the previous definition for a
2610 function f: 
2611 <programlisting>
2612    f x y = insert x y = insert x . insert y
2613 </programlisting>
2614 for which we originally obtained a type: 
2615 <programlisting>
2616    f :: (Collects a c, Collects b c) => a -> b -> c -> c
2617 </programlisting>
2618 Given the dependency information that we have for Collects, however, we can
2619 deduce that a and b must be equal because they both appear as the second
2620 parameter in a Collects constraint with the same first parameter c. Hence we
2621 can infer a shorter and more accurate type for f: 
2622 <programlisting>
2623    f :: (Collects a c) => a -> a -> c -> c
2624 </programlisting>
2625 In a similar way, the earlier definition of g will now be flagged as a type error.
2626 </para>
2627 <para>
2628 Although we have given only a few examples here, it should be clear that the
2629 addition of dependency information can help to make multiple parameter classes
2630 more useful in practice, avoiding ambiguity problems, and allowing more general
2631 sets of instance declarations.
2632 </para>
2633 </sect4>
2634 </sect3>
2635 </sect2>
2636
2637 <sect2 id="instance-decls">
2638 <title>Instance declarations</title>
2639
2640 <sect3 id="instance-rules">
2641 <title>Relaxed rules for instance declarations</title>
2642
2643 <para>An instance declaration has the form
2644 <screen>
2645   instance ( <replaceable>assertion</replaceable><subscript>1</subscript>, ..., <replaceable>assertion</replaceable><subscript>n</subscript>) =&gt; <replaceable>class</replaceable> <replaceable>type</replaceable><subscript>1</subscript> ... <replaceable>type</replaceable><subscript>m</subscript> where ...
2646 </screen>
2647 The part before the "<literal>=&gt;</literal>" is the
2648 <emphasis>context</emphasis>, while the part after the
2649 "<literal>=&gt;</literal>" is the <emphasis>head</emphasis> of the instance declaration.
2650 </para>
2651
2652 <para>
2653 In Haskell 98 the head of an instance declaration
2654 must be of the form <literal>C (T a1 ... an)</literal>, where
2655 <literal>C</literal> is the class, <literal>T</literal> is a type constructor,
2656 and the <literal>a1 ... an</literal> are distinct type variables.
2657 Furthermore, the assertions in the context of the instance declaration
2658 must be of the form <literal>C a</literal> where <literal>a</literal>
2659 is a type variable that occurs in the head.
2660 </para>
2661 <para>
2662 The <option>-fglasgow-exts</option> flag loosens these restrictions
2663 considerably.  Firstly, multi-parameter type classes are permitted.  Secondly,
2664 the context and head of the instance declaration can each consist of arbitrary
2665 (well-kinded) assertions <literal>(C t1 ... tn)</literal> subject only to the
2666 following rules:
2667 <orderedlist>
2668 <listitem><para>
2669 The Paterson Conditions: for each assertion in the context
2670 <orderedlist>
2671 <listitem><para>No type variable has more occurrences in the assertion than in the head</para></listitem>
2672 <listitem><para>The assertion has fewer constructors and variables (taken together
2673       and counting repetitions) than the head</para></listitem>
2674 </orderedlist>
2675 </para></listitem>
2676
2677 <listitem><para>The Coverage Condition.  For each functional dependency,
2678 <replaceable>tvs</replaceable><subscript>left</subscript> <literal>-&gt;</literal>
2679 <replaceable>tvs</replaceable><subscript>right</subscript>,  of the class,
2680 every type variable in
2681 S(<replaceable>tvs</replaceable><subscript>right</subscript>) must appear in 
2682 S(<replaceable>tvs</replaceable><subscript>left</subscript>), where S is the
2683 substitution mapping each type variable in the class declaration to the
2684 corresponding type in the instance declaration.
2685 </para></listitem>
2686 </orderedlist>
2687 These restrictions ensure that context reduction terminates: each reduction
2688 step makes the problem smaller by at least one
2689 constructor.  Both the Paterson Conditions and the Coverage Condition are lifted 
2690 if you give the <option>-fallow-undecidable-instances</option> 
2691 flag (<xref linkend="undecidable-instances"/>).
2692 You can find lots of background material about the reason for these
2693 restrictions in the paper <ulink
2694 url="http://research.microsoft.com/%7Esimonpj/papers/fd%2Dchr/">
2695 Understanding functional dependencies via Constraint Handling Rules</ulink>.
2696 </para>
2697 <para>
2698 For example, these are OK:
2699 <programlisting>
2700   instance C Int [a]          -- Multiple parameters
2701   instance Eq (S [a])         -- Structured type in head
2702
2703       -- Repeated type variable in head
2704   instance C4 a a => C4 [a] [a] 
2705   instance Stateful (ST s) (MutVar s)
2706
2707       -- Head can consist of type variables only
2708   instance C a
2709   instance (Eq a, Show b) => C2 a b
2710
2711       -- Non-type variables in context
2712   instance Show (s a) => Show (Sized s a)
2713   instance C2 Int a => C3 Bool [a]
2714   instance C2 Int a => C3 [a] b
2715 </programlisting>
2716 But these are not:
2717 <programlisting>
2718       -- Context assertion no smaller than head
2719   instance C a => C a where ...
2720       -- (C b b) has more more occurrences of b than the head
2721   instance C b b => Foo [b] where ...
2722 </programlisting>
2723 </para>
2724
2725 <para>
2726 The same restrictions apply to instances generated by
2727 <literal>deriving</literal> clauses.  Thus the following is accepted:
2728 <programlisting>
2729   data MinHeap h a = H a (h a)
2730     deriving (Show)
2731 </programlisting>
2732 because the derived instance
2733 <programlisting>
2734   instance (Show a, Show (h a)) => Show (MinHeap h a)
2735 </programlisting>
2736 conforms to the above rules.
2737 </para>
2738
2739 <para>
2740 A useful idiom permitted by the above rules is as follows.
2741 If one allows overlapping instance declarations then it's quite
2742 convenient to have a "default instance" declaration that applies if
2743 something more specific does not:
2744 <programlisting>
2745   instance C a where
2746     op = ... -- Default
2747 </programlisting>
2748 </para>
2749 </sect3>
2750
2751 <sect3 id="undecidable-instances">
2752 <title>Undecidable instances</title>
2753
2754 <para>
2755 Sometimes even the rules of <xref linkend="instance-rules"/> are too onerous.
2756 For example, sometimes you might want to use the following to get the
2757 effect of a "class synonym":
2758 <programlisting>
2759   class (C1 a, C2 a, C3 a) => C a where { }
2760
2761   instance (C1 a, C2 a, C3 a) => C a where { }
2762 </programlisting>
2763 This allows you to write shorter signatures:
2764 <programlisting>
2765   f :: C a => ...
2766 </programlisting>
2767 instead of
2768 <programlisting>
2769   f :: (C1 a, C2 a, C3 a) => ...
2770 </programlisting>
2771 The restrictions on functional dependencies (<xref
2772 linkend="functional-dependencies"/>) are particularly troublesome.
2773 It is tempting to introduce type variables in the context that do not appear in
2774 the head, something that is excluded by the normal rules. For example:
2775 <programlisting>
2776   class HasConverter a b | a -> b where
2777      convert :: a -> b
2778    
2779   data Foo a = MkFoo a
2780
2781   instance (HasConverter a b,Show b) => Show (Foo a) where
2782      show (MkFoo value) = show (convert value)
2783 </programlisting>
2784 This is dangerous territory, however. Here, for example, is a program that would make the
2785 typechecker loop:
2786 <programlisting>
2787   class D a
2788   class F a b | a->b
2789   instance F [a] [[a]]
2790   instance (D c, F a c) => D [a]   -- 'c' is not mentioned in the head
2791 </programlisting>  
2792 Similarly, it can be tempting to lift the coverage condition:
2793 <programlisting>
2794   class Mul a b c | a b -> c where
2795         (.*.) :: a -> b -> c
2796
2797   instance Mul Int Int Int where (.*.) = (*)
2798   instance Mul Int Float Float where x .*. y = fromIntegral x * y
2799   instance Mul a b c => Mul a [b] [c] where x .*. v = map (x.*.) v
2800 </programlisting>
2801 The third instance declaration does not obey the coverage condition;
2802 and indeed the (somewhat strange) definition:
2803 <programlisting>
2804   f = \ b x y -> if b then x .*. [y] else y
2805 </programlisting>
2806 makes instance inference go into a loop, because it requires the constraint
2807 <literal>(Mul a [b] b)</literal>.
2808 </para>
2809 <para>
2810 Nevertheless, GHC allows you to experiment with more liberal rules.  If you use
2811 the experimental flag <option>-XUndecidableInstances</option>
2812 <indexterm><primary>-XUndecidableInstances</primary></indexterm>, 
2813 both the Paterson Conditions and the Coverage Condition
2814 (described in <xref linkend="instance-rules"/>) are lifted.  Termination is ensured by having a
2815 fixed-depth recursion stack.  If you exceed the stack depth you get a
2816 sort of backtrace, and the opportunity to increase the stack depth
2817 with <option>-fcontext-stack=</option><emphasis>N</emphasis>.
2818 </para>
2819
2820 </sect3>
2821
2822
2823 <sect3 id="instance-overlap">
2824 <title>Overlapping instances</title>
2825 <para>
2826 In general, <emphasis>GHC requires that that it be unambiguous which instance
2827 declaration
2828 should be used to resolve a type-class constraint</emphasis>. This behaviour
2829 can be modified by two flags: <option>-XOverlappingInstances</option>
2830 <indexterm><primary>-XOverlappingInstances
2831 </primary></indexterm> 
2832 and <option>-XIncoherentInstances</option>
2833 <indexterm><primary>-XIncoherentInstances
2834 </primary></indexterm>, as this section discusses.  Both these
2835 flags are dynamic flags, and can be set on a per-module basis, using 
2836 an <literal>OPTIONS_GHC</literal> pragma if desired (<xref linkend="source-file-options"/>).</para>
2837 <para>
2838 When GHC tries to resolve, say, the constraint <literal>C Int Bool</literal>,
2839 it tries to match every instance declaration against the
2840 constraint,
2841 by instantiating the head of the instance declaration.  For example, consider
2842 these declarations:
2843 <programlisting>
2844   instance context1 => C Int a     where ...  -- (A)
2845   instance context2 => C a   Bool  where ...  -- (B)
2846   instance context3 => C Int [a]   where ...  -- (C)
2847   instance context4 => C Int [Int] where ...  -- (D)
2848 </programlisting>
2849 The instances (A) and (B) match the constraint <literal>C Int Bool</literal>, 
2850 but (C) and (D) do not.  When matching, GHC takes
2851 no account of the context of the instance declaration
2852 (<literal>context1</literal> etc).
2853 GHC's default behaviour is that <emphasis>exactly one instance must match the
2854 constraint it is trying to resolve</emphasis>.  
2855 It is fine for there to be a <emphasis>potential</emphasis> of overlap (by
2856 including both declarations (A) and (B), say); an error is only reported if a 
2857 particular constraint matches more than one.
2858 </para>
2859
2860 <para>
2861 The <option>-XOverlappingInstances</option> flag instructs GHC to allow
2862 more than one instance to match, provided there is a most specific one.  For
2863 example, the constraint <literal>C Int [Int]</literal> matches instances (A),
2864 (C) and (D), but the last is more specific, and hence is chosen.  If there is no
2865 most-specific match, the program is rejected.
2866 </para>
2867 <para>
2868 However, GHC is conservative about committing to an overlapping instance.  For example:
2869 <programlisting>
2870   f :: [b] -> [b]
2871   f x = ...
2872 </programlisting>
2873 Suppose that from the RHS of <literal>f</literal> we get the constraint
2874 <literal>C Int [b]</literal>.  But
2875 GHC does not commit to instance (C), because in a particular
2876 call of <literal>f</literal>, <literal>b</literal> might be instantiate 
2877 to <literal>Int</literal>, in which case instance (D) would be more specific still.
2878 So GHC rejects the program.  
2879 (If you add the flag <option>-XIncoherentInstances</option>,
2880 GHC will instead pick (C), without complaining about 
2881 the problem of subsequent instantiations.)
2882 </para>
2883 <para>
2884 Notice that we gave a type signature to <literal>f</literal>, so GHC had to
2885 <emphasis>check</emphasis> that <literal>f</literal> has the specified type.  
2886 Suppose instead we do not give a type signature, asking GHC to <emphasis>infer</emphasis>
2887 it instead.  In this case, GHC will refrain from
2888 simplifying the constraint <literal>C Int [Int]</literal> (for the same reason
2889 as before) but, rather than rejecting the program, it will infer the type
2890 <programlisting>
2891   f :: C Int b => [b] -> [b]
2892 </programlisting>
2893 That postpones the question of which instance to pick to the 
2894 call site for <literal>f</literal>
2895 by which time more is known about the type <literal>b</literal>.
2896 </para>
2897 <para>
2898 The willingness to be overlapped or incoherent is a property of 
2899 the <emphasis>instance declaration</emphasis> itself, controlled by the
2900 presence or otherwise of the <option>-XOverlappingInstances</option> 
2901 and <option>-XIncoherentInstances</option> flags when that mdodule is
2902 being defined.  Neither flag is required in a module that imports and uses the
2903 instance declaration.  Specifically, during the lookup process:
2904 <itemizedlist>
2905 <listitem><para>
2906 An instance declaration is ignored during the lookup process if (a) a more specific
2907 match is found, and (b) the instance declaration was compiled with 
2908 <option>-XOverlappingInstances</option>.  The flag setting for the
2909 more-specific instance does not matter.
2910 </para></listitem>
2911 <listitem><para>
2912 Suppose an instance declaration does not match the constraint being looked up, but
2913 does unify with it, so that it might match when the constraint is further 
2914 instantiated.  Usually GHC will regard this as a reason for not committing to
2915 some other constraint.  But if the instance declaration was compiled with
2916 <option>-XIncoherentInstances</option>, GHC will skip the "does-it-unify?" 
2917 check for that declaration.
2918 </para></listitem>
2919 </itemizedlist>
2920 These rules make it possible for a library author to design a library that relies on 
2921 overlapping instances without the library client having to know.  
2922 </para>
2923 <para>
2924 If an instance declaration is compiled without
2925 <option>-XOverlappingInstances</option>,
2926 then that instance can never be overlapped.  This could perhaps be
2927 inconvenient.  Perhaps the rule should instead say that the
2928 <emphasis>overlapping</emphasis> instance declaration should be compiled in
2929 this way, rather than the <emphasis>overlapped</emphasis> one.  Perhaps overlap
2930 at a usage site should be permitted regardless of how the instance declarations
2931 are compiled, if the <option>-XOverlappingInstances</option> flag is
2932 used at the usage site.  (Mind you, the exact usage site can occasionally be
2933 hard to pin down.)  We are interested to receive feedback on these points.
2934 </para>
2935 <para>The <option>-XIncoherentInstances</option> flag implies the
2936 <option>-XOverlappingInstances</option> flag, but not vice versa.
2937 </para>
2938 </sect3>
2939
2940 <sect3>
2941 <title>Type synonyms in the instance head</title>
2942
2943 <para>
2944 <emphasis>Unlike Haskell 98, instance heads may use type
2945 synonyms</emphasis>.  (The instance "head" is the bit after the "=>" in an instance decl.)
2946 As always, using a type synonym is just shorthand for
2947 writing the RHS of the type synonym definition.  For example:
2948
2949
2950 <programlisting>
2951   type Point = (Int,Int)
2952   instance C Point   where ...
2953   instance C [Point] where ...
2954 </programlisting>
2955
2956
2957 is legal.  However, if you added
2958
2959
2960 <programlisting>
2961   instance C (Int,Int) where ...
2962 </programlisting>
2963
2964
2965 as well, then the compiler will complain about the overlapping
2966 (actually, identical) instance declarations.  As always, type synonyms
2967 must be fully applied.  You cannot, for example, write:
2968
2969
2970 <programlisting>
2971   type P a = [[a]]
2972   instance Monad P where ...
2973 </programlisting>
2974
2975
2976 This design decision is independent of all the others, and easily
2977 reversed, but it makes sense to me.
2978
2979 </para>
2980 </sect3>
2981
2982
2983 </sect2>
2984
2985 <sect2 id="overloaded-strings">
2986 <title>Overloaded string literals
2987 </title>
2988
2989 <para>
2990 GHC supports <emphasis>overloaded string literals</emphasis>.  Normally a
2991 string literal has type <literal>String</literal>, but with overloaded string
2992 literals enabled (with <literal>-XOverloadedStrings</literal>)
2993  a string literal has type <literal>(IsString a) => a</literal>.
2994 </para>
2995 <para>
2996 This means that the usual string syntax can be used, e.g., for packed strings
2997 and other variations of string like types.  String literals behave very much
2998 like integer literals, i.e., they can be used in both expressions and patterns.
2999 If used in a pattern the literal with be replaced by an equality test, in the same
3000 way as an integer literal is.
3001 </para>
3002 <para>
3003 The class <literal>IsString</literal> is defined as:
3004 <programlisting>
3005 class IsString a where
3006     fromString :: String -> a
3007 </programlisting>
3008 The only predefined instance is the obvious one to make strings work as usual:
3009 <programlisting>
3010 instance IsString [Char] where
3011     fromString cs = cs
3012 </programlisting>
3013 The class <literal>IsString</literal> is not in scope by default.  If you want to mention
3014 it explicitly (for exmaple, to give an instance declaration for it), you can import it
3015 from module <literal>GHC.Exts</literal>.
3016 </para>
3017 <para>
3018 Haskell's defaulting mechanism is extended to cover string literals, when <option>-XOverloadedStrings</option> is specified.
3019 Specifically:
3020 <itemizedlist>
3021 <listitem><para>
3022 Each type in a default declaration must be an 
3023 instance of <literal>Num</literal> <emphasis>or</emphasis> of <literal>IsString</literal>.
3024 </para></listitem>
3025
3026 <listitem><para>
3027 The standard defaulting rule (<ulink url="http://haskell.org/onlinereport/decls.html#sect4.3.4">Haskell Report, Section 4.3.4</ulink>)
3028 is extended thus: defaulting applies when all the unresolved constraints involve standard classes
3029 <emphasis>or</emphasis> <literal>IsString</literal>; and at least one is a numeric class
3030 <emphasis>or</emphasis> <literal>IsString</literal>.
3031 </para></listitem>
3032 </itemizedlist>
3033 </para>
3034 <para>
3035 A small example:
3036 <programlisting>
3037 module Main where
3038
3039 import GHC.Exts( IsString(..) )
3040
3041 newtype MyString = MyString String deriving (Eq, Show)
3042 instance IsString MyString where
3043     fromString = MyString
3044
3045 greet :: MyString -> MyString
3046 greet "hello" = "world"
3047 greet other = other
3048
3049 main = do
3050     print $ greet "hello"
3051     print $ greet "fool"
3052 </programlisting>
3053 </para>
3054 <para>
3055 Note that deriving <literal>Eq</literal> is necessary for the pattern matching
3056 to work since it gets translated into an equality comparison.
3057 </para>
3058 </sect2>
3059
3060 </sect1>
3061
3062 <sect1 id="other-type-extensions">
3063 <title>Other type system extensions</title>
3064
3065 <sect2 id="type-restrictions">
3066 <title>Type signatures</title>
3067
3068 <sect3><title>The context of a type signature</title>
3069 <para>
3070 Unlike Haskell 98, constraints in types do <emphasis>not</emphasis> have to be of
3071 the form <emphasis>(class type-variable)</emphasis> or
3072 <emphasis>(class (type-variable type-variable ...))</emphasis>.  Thus,
3073 these type signatures are perfectly OK
3074 <programlisting>
3075   g :: Eq [a] => ...
3076   g :: Ord (T a ()) => ...
3077 </programlisting>
3078 </para>
3079 <para>
3080 GHC imposes the following restrictions on the constraints in a type signature.
3081 Consider the type:
3082
3083 <programlisting>
3084   forall tv1..tvn (c1, ...,cn) => type
3085 </programlisting>
3086
3087 (Here, we write the "foralls" explicitly, although the Haskell source
3088 language omits them; in Haskell 98, all the free type variables of an
3089 explicit source-language type signature are universally quantified,
3090 except for the class type variables in a class declaration.  However,
3091 in GHC, you can give the foralls if you want.  See <xref linkend="universal-quantification"/>).
3092 </para>
3093
3094 <para>
3095
3096 <orderedlist>
3097 <listitem>
3098
3099 <para>
3100  <emphasis>Each universally quantified type variable
3101 <literal>tvi</literal> must be reachable from <literal>type</literal></emphasis>.
3102
3103 A type variable <literal>a</literal> is "reachable" if it it appears
3104 in the same constraint as either a type variable free in in
3105 <literal>type</literal>, or another reachable type variable.  
3106 A value with a type that does not obey 
3107 this reachability restriction cannot be used without introducing
3108 ambiguity; that is why the type is rejected.
3109 Here, for example, is an illegal type:
3110
3111
3112 <programlisting>
3113   forall a. Eq a => Int
3114 </programlisting>
3115
3116
3117 When a value with this type was used, the constraint <literal>Eq tv</literal>
3118 would be introduced where <literal>tv</literal> is a fresh type variable, and
3119 (in the dictionary-translation implementation) the value would be
3120 applied to a dictionary for <literal>Eq tv</literal>.  The difficulty is that we
3121 can never know which instance of <literal>Eq</literal> to use because we never
3122 get any more information about <literal>tv</literal>.
3123 </para>
3124 <para>
3125 Note
3126 that the reachability condition is weaker than saying that <literal>a</literal> is
3127 functionally dependent on a type variable free in
3128 <literal>type</literal> (see <xref
3129 linkend="functional-dependencies"/>).  The reason for this is there
3130 might be a "hidden" dependency, in a superclass perhaps.  So
3131 "reachable" is a conservative approximation to "functionally dependent".
3132 For example, consider:
3133 <programlisting>
3134   class C a b | a -> b where ...
3135   class C a b => D a b where ...
3136   f :: forall a b. D a b => a -> a
3137 </programlisting>
3138 This is fine, because in fact <literal>a</literal> does functionally determine <literal>b</literal>
3139 but that is not immediately apparent from <literal>f</literal>'s type.
3140 </para>
3141 </listitem>
3142 <listitem>
3143
3144 <para>
3145  <emphasis>Every constraint <literal>ci</literal> must mention at least one of the
3146 universally quantified type variables <literal>tvi</literal></emphasis>.
3147
3148 For example, this type is OK because <literal>C a b</literal> mentions the
3149 universally quantified type variable <literal>b</literal>:
3150
3151
3152 <programlisting>
3153   forall a. C a b => burble
3154 </programlisting>
3155
3156
3157 The next type is illegal because the constraint <literal>Eq b</literal> does not
3158 mention <literal>a</literal>:
3159
3160
3161 <programlisting>
3162   forall a. Eq b => burble
3163 </programlisting>
3164
3165
3166 The reason for this restriction is milder than the other one.  The
3167 excluded types are never useful or necessary (because the offending
3168 context doesn't need to be witnessed at this point; it can be floated
3169 out).  Furthermore, floating them out increases sharing. Lastly,
3170 excluding them is a conservative choice; it leaves a patch of
3171 territory free in case we need it later.
3172
3173 </para>
3174 </listitem>
3175
3176 </orderedlist>
3177
3178 </para>
3179 </sect3>
3180
3181
3182
3183 </sect2>
3184
3185 <sect2 id="implicit-parameters">
3186 <title>Implicit parameters</title>
3187
3188 <para> Implicit parameters are implemented as described in 
3189 "Implicit parameters: dynamic scoping with static types", 
3190 J Lewis, MB Shields, E Meijer, J Launchbury,
3191 27th ACM Symposium on Principles of Programming Languages (POPL'00),
3192 Boston, Jan 2000.
3193 </para>
3194
3195 <para>(Most of the following, stil rather incomplete, documentation is
3196 due to Jeff Lewis.)</para>
3197
3198 <para>Implicit parameter support is enabled with the option
3199 <option>-XImplicitParams</option>.</para>
3200
3201 <para>
3202 A variable is called <emphasis>dynamically bound</emphasis> when it is bound by the calling
3203 context of a function and <emphasis>statically bound</emphasis> when bound by the callee's
3204 context. In Haskell, all variables are statically bound. Dynamic
3205 binding of variables is a notion that goes back to Lisp, but was later
3206 discarded in more modern incarnations, such as Scheme. Dynamic binding
3207 can be very confusing in an untyped language, and unfortunately, typed
3208 languages, in particular Hindley-Milner typed languages like Haskell,
3209 only support static scoping of variables.
3210 </para>
3211 <para>
3212 However, by a simple extension to the type class system of Haskell, we
3213 can support dynamic binding. Basically, we express the use of a
3214 dynamically bound variable as a constraint on the type. These
3215 constraints lead to types of the form <literal>(?x::t') => t</literal>, which says "this
3216 function uses a dynamically-bound variable <literal>?x</literal> 
3217 of type <literal>t'</literal>". For
3218 example, the following expresses the type of a sort function,
3219 implicitly parameterized by a comparison function named <literal>cmp</literal>.
3220 <programlisting>
3221   sort :: (?cmp :: a -> a -> Bool) => [a] -> [a]
3222 </programlisting>
3223 The dynamic binding constraints are just a new form of predicate in the type class system.
3224 </para>
3225 <para>
3226 An implicit parameter occurs in an expression using the special form <literal>?x</literal>, 
3227 where <literal>x</literal> is
3228 any valid identifier (e.g. <literal>ord ?x</literal> is a valid expression). 
3229 Use of this construct also introduces a new
3230 dynamic-binding constraint in the type of the expression. 
3231 For example, the following definition
3232 shows how we can define an implicitly parameterized sort function in
3233 terms of an explicitly parameterized <literal>sortBy</literal> function:
3234 <programlisting>
3235   sortBy :: (a -> a -> Bool) -> [a] -> [a]
3236
3237   sort   :: (?cmp :: a -> a -> Bool) => [a] -> [a]
3238   sort    = sortBy ?cmp
3239 </programlisting>
3240 </para>
3241
3242 <sect3>
3243 <title>Implicit-parameter type constraints</title>
3244 <para>
3245 Dynamic binding constraints behave just like other type class
3246 constraints in that they are automatically propagated. Thus, when a
3247 function is used, its implicit parameters are inherited by the
3248 function that called it. For example, our <literal>sort</literal> function might be used
3249 to pick out the least value in a list:
3250 <programlisting>
3251   least   :: (?cmp :: a -> a -> Bool) => [a] -> a
3252   least xs = head (sort xs)
3253 </programlisting>
3254 Without lifting a finger, the <literal>?cmp</literal> parameter is
3255 propagated to become a parameter of <literal>least</literal> as well. With explicit
3256 parameters, the default is that parameters must always be explicit
3257 propagated. With implicit parameters, the default is to always
3258 propagate them.
3259 </para>
3260 <para>
3261 An implicit-parameter type constraint differs from other type class constraints in the
3262 following way: All uses of a particular implicit parameter must have
3263 the same type. This means that the type of <literal>(?x, ?x)</literal> 
3264 is <literal>(?x::a) => (a,a)</literal>, and not 
3265 <literal>(?x::a, ?x::b) => (a, b)</literal>, as would be the case for type
3266 class constraints.
3267 </para>
3268
3269 <para> You can't have an implicit parameter in the context of a class or instance
3270 declaration.  For example, both these declarations are illegal:
3271 <programlisting>
3272   class (?x::Int) => C a where ...
3273   instance (?x::a) => Foo [a] where ...
3274 </programlisting>
3275 Reason: exactly which implicit parameter you pick up depends on exactly where
3276 you invoke a function. But the ``invocation'' of instance declarations is done
3277 behind the scenes by the compiler, so it's hard to figure out exactly where it is done.
3278 Easiest thing is to outlaw the offending types.</para>
3279 <para>
3280 Implicit-parameter constraints do not cause ambiguity.  For example, consider:
3281 <programlisting>
3282    f :: (?x :: [a]) => Int -> Int
3283    f n = n + length ?x
3284
3285    g :: (Read a, Show a) => String -> String
3286    g s = show (read s)
3287 </programlisting>
3288 Here, <literal>g</literal> has an ambiguous type, and is rejected, but <literal>f</literal>
3289 is fine.  The binding for <literal>?x</literal> at <literal>f</literal>'s call site is 
3290 quite unambiguous, and fixes the type <literal>a</literal>.
3291 </para>
3292 </sect3>
3293
3294 <sect3>
3295 <title>Implicit-parameter bindings</title>
3296
3297 <para>
3298 An implicit parameter is <emphasis>bound</emphasis> using the standard
3299 <literal>let</literal> or <literal>where</literal> binding forms.
3300 For example, we define the <literal>min</literal> function by binding
3301 <literal>cmp</literal>.
3302 <programlisting>
3303   min :: [a] -> a
3304   min  = let ?cmp = (&lt;=) in least
3305 </programlisting>
3306 </para>
3307 <para>
3308 A group of implicit-parameter bindings may occur anywhere a normal group of Haskell
3309 bindings can occur, except at top level.  That is, they can occur in a <literal>let</literal> 
3310 (including in a list comprehension, or do-notation, or pattern guards), 
3311 or a <literal>where</literal> clause.
3312 Note the following points:
3313 <itemizedlist>
3314 <listitem><para>
3315 An implicit-parameter binding group must be a
3316 collection of simple bindings to implicit-style variables (no
3317 function-style bindings, and no type signatures); these bindings are
3318 neither polymorphic or recursive.  
3319 </para></listitem>
3320 <listitem><para>
3321 You may not mix implicit-parameter bindings with ordinary bindings in a 
3322 single <literal>let</literal>
3323 expression; use two nested <literal>let</literal>s instead.
3324 (In the case of <literal>where</literal> you are stuck, since you can't nest <literal>where</literal> clauses.)
3325 </para></listitem>
3326
3327 <listitem><para>
3328 You may put multiple implicit-parameter bindings in a
3329 single binding group; but they are <emphasis>not</emphasis> treated
3330 as a mutually recursive group (as ordinary <literal>let</literal> bindings are).
3331 Instead they are treated as a non-recursive group, simultaneously binding all the implicit
3332 parameter.  The bindings are not nested, and may be re-ordered without changing
3333 the meaning of the program.
3334 For example, consider:
3335 <programlisting>
3336   f t = let { ?x = t; ?y = ?x+(1::Int) } in ?x + ?y
3337 </programlisting>
3338 The use of <literal>?x</literal> in the binding for <literal>?y</literal> does not "see"
3339 the binding for <literal>?x</literal>, so the type of <literal>f</literal> is
3340 <programlisting>
3341   f :: (?x::Int) => Int -> Int
3342 </programlisting>
3343 </para></listitem>
3344 </itemizedlist>
3345 </para>
3346
3347 </sect3>
3348
3349 <sect3><title>Implicit parameters and polymorphic recursion</title>
3350
3351 <para>
3352 Consider these two definitions:
3353 <programlisting>
3354   len1 :: [a] -> Int
3355   len1 xs = let ?acc = 0 in len_acc1 xs
3356
3357   len_acc1 [] = ?acc
3358   len_acc1 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc1 xs
3359
3360   ------------
3361
3362   len2 :: [a] -> Int
3363   len2 xs = let ?acc = 0 in len_acc2 xs
3364
3365   len_acc2 :: (?acc :: Int) => [a] -> Int
3366   len_acc2 [] = ?acc
3367   len_acc2 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc2 xs
3368 </programlisting>
3369 The only difference between the two groups is that in the second group
3370 <literal>len_acc</literal> is given a type signature.
3371 In the former case, <literal>len_acc1</literal> is monomorphic in its own
3372 right-hand side, so the implicit parameter <literal>?acc</literal> is not
3373 passed to the recursive call.  In the latter case, because <literal>len_acc2</literal>
3374 has a type signature, the recursive call is made to the
3375 <emphasis>polymoprhic</emphasis> version, which takes <literal>?acc</literal>
3376 as an implicit parameter.  So we get the following results in GHCi:
3377 <programlisting>
3378   Prog> len1 "hello"
3379   0
3380   Prog> len2 "hello"
3381   5
3382 </programlisting>
3383 Adding a type signature dramatically changes the result!  This is a rather
3384 counter-intuitive phenomenon, worth watching out for.
3385 </para>
3386 </sect3>
3387
3388 <sect3><title>Implicit parameters and monomorphism</title>
3389
3390 <para>GHC applies the dreaded Monomorphism Restriction (section 4.5.5 of the
3391 Haskell Report) to implicit parameters.  For example, consider:
3392 <programlisting>
3393  f :: Int -> Int
3394   f v = let ?x = 0     in
3395         let y = ?x + v in
3396         let ?x = 5     in
3397         y
3398 </programlisting>
3399 Since the binding for <literal>y</literal> falls under the Monomorphism
3400 Restriction it is not generalised, so the type of <literal>y</literal> is
3401 simply <literal>Int</literal>, not <literal>(?x::Int) => Int</literal>.
3402 Hence, <literal>(f 9)</literal> returns result <literal>9</literal>.
3403 If you add a type signature for <literal>y</literal>, then <literal>y</literal>
3404 will get type <literal>(?x::Int) => Int</literal>, so the occurrence of
3405 <literal>y</literal> in the body of the <literal>let</literal> will see the
3406 inner binding of <literal>?x</literal>, so <literal>(f 9)</literal> will return
3407 <literal>14</literal>.
3408 </para>
3409 </sect3>
3410 </sect2>
3411
3412     <!--   ======================= COMMENTED OUT ========================
3413
3414     We intend to remove linear implicit parameters, so I'm at least removing
3415     them from the 6.6 user manual
3416
3417 <sect2 id="linear-implicit-parameters">
3418 <title>Linear implicit parameters</title>
3419 <para>
3420 Linear implicit parameters are an idea developed by Koen Claessen,
3421 Mark Shields, and Simon PJ.  They address the long-standing
3422 problem that monads seem over-kill for certain sorts of problem, notably:
3423 </para>
3424 <itemizedlist>
3425 <listitem> <para> distributing a supply of unique names </para> </listitem>
3426 <listitem> <para> distributing a supply of random numbers </para> </listitem>
3427 <listitem> <para> distributing an oracle (as in QuickCheck) </para> </listitem>
3428 </itemizedlist>
3429
3430 <para>
3431 Linear implicit parameters are just like ordinary implicit parameters,
3432 except that they are "linear"; that is, they cannot be copied, and
3433 must be explicitly "split" instead.  Linear implicit parameters are
3434 written '<literal>%x</literal>' instead of '<literal>?x</literal>'.  
3435 (The '/' in the '%' suggests the split!)
3436 </para>
3437 <para>
3438 For example:
3439 <programlisting>
3440     import GHC.Exts( Splittable )
3441
3442     data NameSupply = ...
3443     
3444     splitNS :: NameSupply -> (NameSupply, NameSupply)
3445     newName :: NameSupply -> Name
3446
3447     instance Splittable NameSupply where
3448         split = splitNS
3449
3450
3451     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
3452     f env (Lam x e) = Lam x' (f env e)
3453                     where
3454                       x'   = newName %ns
3455                       env' = extend env x x'
3456     ...more equations for f...
3457 </programlisting>
3458 Notice that the implicit parameter %ns is consumed 
3459 <itemizedlist>
3460 <listitem> <para> once by the call to <literal>newName</literal> </para> </listitem>
3461 <listitem> <para> once by the recursive call to <literal>f</literal> </para></listitem>
3462 </itemizedlist>
3463 </para>
3464 <para>
3465 So the translation done by the type checker makes
3466 the parameter explicit:
3467 <programlisting>
3468     f :: NameSupply -> Env -> Expr -> Expr
3469     f ns env (Lam x e) = Lam x' (f ns1 env e)
3470                        where
3471                          (ns1,ns2) = splitNS ns
3472                          x' = newName ns2
3473                          env = extend env x x'
3474 </programlisting>
3475 Notice the call to 'split' introduced by the type checker.
3476 How did it know to use 'splitNS'?  Because what it really did
3477 was to introduce a call to the overloaded function 'split',
3478 defined by the class <literal>Splittable</literal>:
3479 <programlisting>
3480         class Splittable a where
3481           split :: a -> (a,a)
3482 </programlisting>
3483 The instance for <literal>Splittable NameSupply</literal> tells GHC how to implement
3484 split for name supplies.  But we can simply write
3485 <programlisting>
3486         g x = (x, %ns, %ns)
3487 </programlisting>
3488 and GHC will infer
3489 <programlisting>
3490         g :: (Splittable a, %ns :: a) => b -> (b,a,a)
3491 </programlisting>
3492 The <literal>Splittable</literal> class is built into GHC.  It's exported by module 
3493 <literal>GHC.Exts</literal>.
3494 </para>
3495 <para>
3496 Other points:
3497 <itemizedlist>
3498 <listitem> <para> '<literal>?x</literal>' and '<literal>%x</literal>' 
3499 are entirely distinct implicit parameters: you 
3500   can use them together and they won't intefere with each other. </para>
3501 </listitem>
3502
3503 <listitem> <para> You can bind linear implicit parameters in 'with' clauses. </para> </listitem>
3504
3505 <listitem> <para>You cannot have implicit parameters (whether linear or not)
3506   in the context of a class or instance declaration. </para></listitem>
3507 </itemizedlist>
3508 </para>
3509
3510 <sect3><title>Warnings</title>
3511
3512 <para>
3513 The monomorphism restriction is even more important than usual.
3514 Consider the example above:
3515 <programlisting>
3516     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
3517     f env (Lam x e) = Lam x' (f env e)
3518                     where
3519                       x'   = newName %ns
3520                       env' = extend env x x'
3521 </programlisting>
3522 If we replaced the two occurrences of x' by (newName %ns), which is
3523 usually a harmless thing to do, we get:
3524 <programlisting>
3525     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
3526     f env (Lam x e) = Lam (newName %ns) (f env e)
3527                     where
3528                       env' = extend env x (newName %ns)
3529 </programlisting>
3530 But now the name supply is consumed in <emphasis>three</emphasis> places
3531 (the two calls to newName,and the recursive call to f), so
3532 the result is utterly different.  Urk!  We don't even have 
3533 the beta rule.
3534 </para>
3535 <para>
3536 Well, this is an experimental change.  With implicit
3537 parameters we have already lost beta reduction anyway, and
3538 (as John Launchbury puts it) we can't sensibly reason about
3539 Haskell programs without knowing their typing.
3540 </para>
3541
3542 </sect3>
3543
3544 <sect3><title>Recursive functions</title>
3545 <para>Linear implicit parameters can be particularly tricky when you have a recursive function
3546 Consider
3547 <programlisting>
3548         foo :: %x::T => Int -> [Int]
3549         foo 0 = []
3550         foo n = %x : foo (n-1)
3551 </programlisting>
3552 where T is some type in class Splittable.</para>
3553 <para>
3554 Do you get a list of all the same T's or all different T's
3555 (assuming that split gives two distinct T's back)?
3556 </para><para>
3557 If you supply the type signature, taking advantage of polymorphic
3558 recursion, you get what you'd probably expect.  Here's the
3559 translated term, where the implicit param is made explicit:
3560 <programlisting>
3561         foo x 0 = []
3562         foo x n = let (x1,x2) = split x
3563                   in x1 : foo x2 (n-1)
3564 </programlisting>
3565 But if you don't supply a type signature, GHC uses the Hindley
3566 Milner trick of using a single monomorphic instance of the function
3567 for the recursive calls. That is what makes Hindley Milner type inference
3568 work.  So the translation becomes
3569 <programlisting>
3570         foo x = let
3571                   foom 0 = []
3572                   foom n = x : foom (n-1)
3573                 in
3574                 foom
3575 </programlisting>
3576 Result: 'x' is not split, and you get a list of identical T's.  So the
3577 semantics of the program depends on whether or not foo has a type signature.
3578 Yikes!
3579 </para><para>
3580 You may say that this is a good reason to dislike linear implicit parameters
3581 and you'd be right.  That is why they are an experimental feature. 
3582 </para>
3583 </sect3>
3584
3585 </sect2>
3586
3587 ================ END OF Linear Implicit Parameters commented out -->
3588
3589 <sect2 id="kinding">
3590 <title>Explicitly-kinded quantification</title>
3591
3592 <para>
3593 Haskell infers the kind of each type variable.  Sometimes it is nice to be able
3594 to give the kind explicitly as (machine-checked) documentation, 
3595 just as it is nice to give a type signature for a function.  On some occasions,
3596 it is essential to do so.  For example, in his paper "Restricted Data Types in Haskell" (Haskell Workshop 1999)
3597 John Hughes had to define the data type:
3598 <screen>
3599      data Set cxt a = Set [a]
3600                     | Unused (cxt a -> ())
3601 </screen>
3602 The only use for the <literal>Unused</literal> constructor was to force the correct
3603 kind for the type variable <literal>cxt</literal>.
3604 </para>
3605 <para>
3606 GHC now instead allows you to specify the kind of a type variable directly, wherever
3607 a type variable is explicitly bound, with the flag <option>-XKindSignatures</option>.
3608 </para>
3609 <para>
3610 This flag enables kind signatures in the following places:
3611 <itemizedlist>
3612 <listitem><para><literal>data</literal> declarations:
3613 <screen>
3614   data Set (cxt :: * -> *) a = Set [a]
3615 </screen></para></listitem>
3616 <listitem><para><literal>type</literal> declarations:
3617 <screen>
3618   type T (f :: * -> *) = f Int
3619 </screen></para></listitem>
3620 <listitem><para><literal>class</literal> declarations:
3621 <screen>
3622   class (Eq a) => C (f :: * -> *) a where ...
3623 </screen></para></listitem>
3624 <listitem><para><literal>forall</literal>'s in type signatures:
3625 <screen>
3626   f :: forall (cxt :: * -> *). Set cxt Int
3627 </screen></para></listitem>
3628 </itemizedlist>
3629 </para>
3630
3631 <para>
3632 The parentheses are required.  Some of the spaces are required too, to
3633 separate the lexemes.  If you write <literal>(f::*->*)</literal> you
3634 will get a parse error, because "<literal>::*->*</literal>" is a
3635 single lexeme in Haskell.
3636 </para>
3637
3638 <para>
3639 As part of the same extension, you can put kind annotations in types
3640 as well.  Thus:
3641 <screen>
3642    f :: (Int :: *) -> Int
3643    g :: forall a. a -> (a :: *)
3644 </screen>
3645 The syntax is
3646 <screen>
3647    atype ::= '(' ctype '::' kind ')
3648 </screen>
3649 The parentheses are required.
3650 </para>
3651 </sect2>
3652
3653
3654 <sect2 id="universal-quantification">
3655 <title>Arbitrary-rank polymorphism
3656 </title>
3657
3658 <para>
3659 Haskell type signatures are implicitly quantified.  The new keyword <literal>forall</literal>
3660 allows us to say exactly what this means.  For example:
3661 </para>
3662 <para>
3663 <programlisting>
3664         g :: b -> b
3665 </programlisting>
3666 means this:
3667 <programlisting>
3668         g :: forall b. (b -> b)
3669 </programlisting>
3670 The two are treated identically.
3671 </para>
3672
3673 <para>
3674 However, GHC's type system supports <emphasis>arbitrary-rank</emphasis> 
3675 explicit universal quantification in
3676 types. 
3677 For example, all the following types are legal:
3678 <programlisting>
3679     f1 :: forall a b. a -> b -> a
3680     g1 :: forall a b. (Ord a, Eq  b) => a -> b -> a
3681
3682     f2 :: (forall a. a->a) -> Int -> Int
3683     g2 :: (forall a. Eq a => [a] -> a -> Bool) -> Int -> Int
3684
3685     f3 :: ((forall a. a->a) -> Int) -> Bool -> Bool
3686
3687     f4 :: Int -> (forall a. a -> a)
3688 </programlisting>
3689 Here, <literal>f1</literal> and <literal>g1</literal> are rank-1 types, and
3690 can be written in standard Haskell (e.g. <literal>f1 :: a->b->a</literal>).
3691 The <literal>forall</literal> makes explicit the universal quantification that
3692 is implicitly added by Haskell.
3693 </para>
3694 <para>
3695 The functions <literal>f2</literal> and <literal>g2</literal> have rank-2 types;
3696 the <literal>forall</literal> is on the left of a function arrow.  As <literal>g2</literal>
3697 shows, the polymorphic type on the left of the function arrow can be overloaded.
3698 </para>
3699 <para>
3700 The function <literal>f3</literal> has a rank-3 type;
3701 it has rank-2 types on the left of a function arrow.
3702 </para>
3703 <para>
3704 GHC allows types of arbitrary rank; you can nest <literal>forall</literal>s
3705 arbitrarily deep in function arrows.   (GHC used to be restricted to rank 2, but
3706 that restriction has now been lifted.)
3707 In particular, a forall-type (also called a "type scheme"),
3708 including an operational type class context, is legal:
3709 <itemizedlist>
3710 <listitem> <para> On the left or right (see <literal>f4</literal>, for example)
3711 of a function arrow </para> </listitem>
3712 <listitem> <para> As the argument of a constructor, or type of a field, in a data type declaration. For
3713 example, any of the <literal>f1,f2,f3,g1,g2</literal> above would be valid
3714 field type signatures.</para> </listitem>
3715 <listitem> <para> As the type of an implicit parameter </para> </listitem>
3716 <listitem> <para> In a pattern type signature (see <xref linkend="scoped-type-variables"/>) </para> </listitem>
3717 </itemizedlist>
3718 Of course <literal>forall</literal> becomes a keyword; you can't use <literal>forall</literal> as
3719 a type variable any more!
3720 </para>
3721
3722
3723 <sect3 id="univ">
3724 <title>Examples
3725 </title>
3726
3727 <para>
3728 In a <literal>data</literal> or <literal>newtype</literal> declaration one can quantify
3729 the types of the constructor arguments.  Here are several examples:
3730 </para>
3731
3732 <para>
3733
3734 <programlisting>
3735 data T a = T1 (forall b. b -> b -> b) a
3736
3737 data MonadT m = MkMonad { return :: forall a. a -> m a,
3738                           bind   :: forall a b. m a -> (a -> m b) -> m b
3739                         }
3740
3741 newtype Swizzle = MkSwizzle (Ord a => [a] -> [a])
3742 </programlisting>
3743
3744 </para>
3745
3746 <para>
3747 The constructors have rank-2 types:
3748 </para>
3749
3750 <para>
3751
3752 <programlisting>
3753 T1 :: forall a. (forall b. b -> b -> b) -> a -> T a
3754 MkMonad :: forall m. (forall a. a -> m a)
3755                   -> (forall a b. m a -> (a -> m b) -> m b)
3756                   -> MonadT m
3757 MkSwizzle :: (Ord a => [a] -> [a]) -> Swizzle
3758 </programlisting>
3759
3760 </para>
3761
3762 <para>
3763 Notice that you don't need to use a <literal>forall</literal> if there's an
3764 explicit context.  For example in the first argument of the
3765 constructor <function>MkSwizzle</function>, an implicit "<literal>forall a.</literal>" is
3766 prefixed to the argument type.  The implicit <literal>forall</literal>
3767 quantifies all type variables that are not already in scope, and are
3768 mentioned in the type quantified over.
3769 </para>
3770
3771 <para>
3772 As for type signatures, implicit quantification happens for non-overloaded
3773 types too.  So if you write this:
3774
3775 <programlisting>
3776   data T a = MkT (Either a b) (b -> b)
3777 </programlisting>
3778
3779 it's just as if you had written this:
3780
3781 <programlisting>
3782   data T a = MkT (forall b. Either a b) (forall b. b -> b)
3783 </programlisting>
3784
3785 That is, since the type variable <literal>b</literal> isn't in scope, it's
3786 implicitly universally quantified.  (Arguably, it would be better
3787 to <emphasis>require</emphasis> explicit quantification on constructor arguments
3788 where that is what is wanted.  Feedback welcomed.)
3789 </para>
3790
3791 <para>
3792 You construct values of types <literal>T1, MonadT, Swizzle</literal> by applying
3793 the constructor to suitable values, just as usual.  For example,
3794 </para>
3795
3796 <para>
3797
3798 <programlisting>
3799     a1 :: T Int
3800     a1 = T1 (\xy->x) 3
3801     
3802     a2, a3 :: Swizzle
3803     a2 = MkSwizzle sort
3804     a3 = MkSwizzle reverse
3805     
3806     a4 :: MonadT Maybe
3807     a4 = let r x = Just x
3808              b m k = case m of
3809                        Just y -> k y
3810                        Nothing -> Nothing
3811          in
3812          MkMonad r b
3813
3814     mkTs :: (forall b. b -> b -> b) -> a -> [T a]
3815     mkTs f x y = [T1 f x, T1 f y]
3816 </programlisting>
3817
3818 </para>
3819
3820 <para>
3821 The type of the argument can, as usual, be more general than the type
3822 required, as <literal>(MkSwizzle reverse)</literal> shows.  (<function>reverse</function>
3823 does not need the <literal>Ord</literal> constraint.)
3824 </para>
3825
3826 <para>
3827 When you use pattern matching, the bound variables may now have
3828 polymorphic types.  For example:
3829 </para>
3830
3831 <para>
3832
3833 <programlisting>
3834     f :: T a -> a -> (a, Char)
3835     f (T1 w k) x = (w k x, w 'c' 'd')
3836
3837     g :: (Ord a, Ord b) => Swizzle -> [a] -> (a -> b) -> [b]
3838     g (MkSwizzle s) xs f = s (map f (s xs))
3839
3840     h :: MonadT m -> [m a] -> m [a]
3841     h m [] = return m []
3842     h m (x:xs) = bind m x          $ \y ->
3843                  bind m (h m xs)   $ \ys ->
3844                  return m (y:ys)
3845 </programlisting>
3846
3847 </para>
3848
3849 <para>
3850 In the function <function>h</function> we use the record selectors <literal>return</literal>
3851 and <literal>bind</literal> to extract the polymorphic bind and return functions
3852 from the <literal>MonadT</literal> data structure, rather than using pattern
3853 matching.
3854 </para>
3855 </sect3>
3856
3857 <sect3>
3858 <title>Type inference</title>
3859
3860 <para>
3861 In general, type inference for arbitrary-rank types is undecidable.
3862 GHC uses an algorithm proposed by Odersky and Laufer ("Putting type annotations to work", POPL'96)
3863 to get a decidable algorithm by requiring some help from the programmer.
3864 We do not yet have a formal specification of "some help" but the rule is this:
3865 </para>
3866 <para>
3867 <emphasis>For a lambda-bound or case-bound variable, x, either the programmer
3868 provides an explicit polymorphic type for x, or GHC's type inference will assume
3869 that x's type has no foralls in it</emphasis>.
3870 </para>
3871 <para>
3872 What does it mean to "provide" an explicit type for x?  You can do that by 
3873 giving a type signature for x directly, using a pattern type signature
3874 (<xref linkend="scoped-type-variables"/>), thus:
3875 <programlisting>
3876      \ f :: (forall a. a->a) -> (f True, f 'c')
3877 </programlisting>
3878 Alternatively, you can give a type signature to the enclosing
3879 context, which GHC can "push down" to find the type for the variable:
3880 <programlisting>
3881      (\ f -> (f True, f 'c')) :: (forall a. a->a) -> (Bool,Char)
3882 </programlisting>
3883 Here the type signature on the expression can be pushed inwards
3884 to give a type signature for f.  Similarly, and more commonly,
3885 one can give a type signature for the function itself:
3886 <programlisting>
3887      h :: (forall a. a->a) -> (Bool,Char)
3888      h f = (f True, f 'c')
3889 </programlisting>
3890 You don't need to give a type signature if the lambda bound variable
3891 is a constructor argument.  Here is an example we saw earlier:
3892 <programlisting>
3893     f :: T a -> a -> (a, Char)
3894     f (T1 w k) x = (w k x, w 'c' 'd')
3895 </programlisting>
3896 Here we do not need to give a type signature to <literal>w</literal>, because
3897 it is an argument of constructor <literal>T1</literal> and that tells GHC all
3898 it needs to know.
3899 </para>
3900
3901 </sect3>
3902
3903
3904 <sect3 id="implicit-quant">
3905 <title>Implicit quantification</title>
3906
3907 <para>
3908 GHC performs implicit quantification as follows.  <emphasis>At the top level (only) of 
3909 user-written types, if and only if there is no explicit <literal>forall</literal>,
3910 GHC finds all the type variables mentioned in the type that are not already
3911 in scope, and universally quantifies them.</emphasis>  For example, the following pairs are 
3912 equivalent:
3913 <programlisting>
3914   f :: a -> a
3915   f :: forall a. a -> a
3916
3917   g (x::a) = let
3918                 h :: a -> b -> b
3919                 h x y = y
3920              in ...
3921   g (x::a) = let
3922                 h :: forall b. a -> b -> b
3923                 h x y = y
3924              in ...
3925 </programlisting>
3926 </para>
3927 <para>
3928 Notice that GHC does <emphasis>not</emphasis> find the innermost possible quantification
3929 point.  For example:
3930 <programlisting>
3931   f :: (a -> a) -> Int
3932            -- MEANS
3933   f :: forall a. (a -> a) -> Int
3934            -- NOT
3935   f :: (forall a. a -> a) -> Int
3936
3937
3938   g :: (Ord a => a -> a) -> Int
3939            -- MEANS the illegal type
3940   g :: forall a. (Ord a => a -> a) -> Int
3941            -- NOT
3942   g :: (forall a. Ord a => a -> a) -> Int
3943 </programlisting>
3944 The latter produces an illegal type, which you might think is silly,
3945 but at least the rule is simple.  If you want the latter type, you
3946 can write your for-alls explicitly.  Indeed, doing so is strongly advised
3947 for rank-2 types.
3948 </para>
3949 </sect3>
3950 </sect2>
3951
3952
3953 <sect2 id="impredicative-polymorphism">
3954 <title>Impredicative polymorphism
3955 </title>
3956 <para>GHC supports <emphasis>impredicative polymorphism</emphasis>.  This means
3957 that you can call a polymorphic function at a polymorphic type, and
3958 parameterise data structures over polymorphic types.  For example:
3959 <programlisting>
3960   f :: Maybe (forall a. [a] -> [a]) -> Maybe ([Int], [Char])
3961   f (Just g) = Just (g [3], g "hello")
3962   f Nothing  = Nothing
3963 </programlisting>
3964 Notice here that the <literal>Maybe</literal> type is parameterised by the
3965 <emphasis>polymorphic</emphasis> type <literal>(forall a. [a] ->
3966 [a])</literal>.
3967 </para>
3968 <para>The technical details of this extension are described in the paper
3969 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/boxy">Boxy types:
3970 type inference for higher-rank types and impredicativity</ulink>,
3971 which appeared at ICFP 2006.  
3972 </para>
3973 </sect2>
3974
3975 <sect2 id="scoped-type-variables">
3976 <title>Lexically scoped type variables
3977 </title>
3978
3979 <para>
3980 GHC supports <emphasis>lexically scoped type variables</emphasis>, without
3981 which some type signatures are simply impossible to write. For example:
3982 <programlisting>
3983 f :: forall a. [a] -> [a]
3984 f xs = ys ++ ys
3985      where
3986        ys :: [a]
3987        ys = reverse xs
3988 </programlisting>
3989 The type signature for <literal>f</literal> brings the type variable <literal>a</literal> into scope; it scopes over
3990 the entire definition of <literal>f</literal>.
3991 In particular, it is in scope at the type signature for <varname>ys</varname>. 
3992 In Haskell 98 it is not possible to declare
3993 a type for <varname>ys</varname>; a major benefit of scoped type variables is that
3994 it becomes possible to do so.
3995 </para>
3996 <para>Lexically-scoped type variables are enabled by
3997 <option>-fglasgow-exts</option>.
3998 </para>
3999 <para>Note: GHC 6.6 contains substantial changes to the way that scoped type
4000 variables work, compared to earlier releases.  Read this section
4001 carefully!</para>
4002
4003 <sect3>
4004 <title>Overview</title>
4005
4006 <para>The design follows the following principles
4007 <itemizedlist>
4008 <listitem><para>A scoped type variable stands for a type <emphasis>variable</emphasis>, and not for
4009 a <emphasis>type</emphasis>. (This is a change from GHC's earlier
4010 design.)</para></listitem>
4011 <listitem><para>Furthermore, distinct lexical type variables stand for distinct
4012 type variables.  This means that every programmer-written type signature
4013 (includin one that contains free scoped type variables) denotes a
4014 <emphasis>rigid</emphasis> type; that is, the type is fully known to the type
4015 checker, and no inference is involved.</para></listitem>
4016 <listitem><para>Lexical type variables may be alpha-renamed freely, without
4017 changing the program.</para></listitem>
4018 </itemizedlist>
4019 </para>
4020 <para>
4021 A <emphasis>lexically scoped type variable</emphasis> can be bound by:
4022 <itemizedlist>
4023 <listitem><para>A declaration type signature (<xref linkend="decl-type-sigs"/>)</para></listitem>
4024 <listitem><para>An expression type signature (<xref linkend="exp-type-sigs"/>)</para></listitem>
4025 <listitem><para>A pattern type signature (<xref linkend="pattern-type-sigs"/>)</para></listitem>
4026 <listitem><para>Class and instance declarations (<xref linkend="cls-inst-scoped-tyvars"/>)</para></listitem>
4027 </itemizedlist>
4028 </para>
4029 <para>
4030 In Haskell, a programmer-written type signature is implicitly quantifed over
4031 its free type variables (<ulink
4032 url="http://haskell.org/onlinereport/decls.html#sect4.1.2">Section
4033 4.1.2</ulink> 
4034 of the Haskel Report).
4035 Lexically scoped type variables affect this implicit quantification rules
4036 as follows: any type variable that is in scope is <emphasis>not</emphasis> universally
4037 quantified. For example, if type variable <literal>a</literal> is in scope,
4038 then
4039 <programlisting>
4040   (e :: a -> a)     means     (e :: a -> a)
4041   (e :: b -> b)     means     (e :: forall b. b->b)
4042   (e :: a -> b)     means     (e :: forall b. a->b)
4043 </programlisting>
4044 </para>
4045
4046
4047 </sect3>
4048
4049
4050 <sect3 id="decl-type-sigs">
4051 <title>Declaration type signatures</title>
4052 <para>A declaration type signature that has <emphasis>explicit</emphasis>
4053 quantification (using <literal>forall</literal>) brings into scope the
4054 explicitly-quantified
4055 type variables, in the definition of the named function(s).  For example:
4056 <programlisting>
4057   f :: forall a. [a] -> [a]
4058   f (x:xs) = xs ++ [ x :: a ]
4059 </programlisting>
4060 The "<literal>forall a</literal>" brings "<literal>a</literal>" into scope in
4061 the definition of "<literal>f</literal>".
4062 </para>
4063 <para>This only happens if the quantification in <literal>f</literal>'s type
4064 signature is explicit.  For example:
4065 <programlisting>
4066   g :: [a] -> [a]
4067   g (x:xs) = xs ++ [ x :: a ]
4068 </programlisting>
4069 This program will be rejected, because "<literal>a</literal>" does not scope
4070 over the definition of "<literal>f</literal>", so "<literal>x::a</literal>"
4071 means "<literal>x::forall a. a</literal>" by Haskell's usual implicit
4072 quantification rules.
4073 </para>
4074 </sect3>
4075
4076 <sect3 id="exp-type-sigs">
4077 <title>Expression type signatures</title>
4078
4079 <para>An expression type signature that has <emphasis>explicit</emphasis>
4080 quantification (using <literal>forall</literal>) brings into scope the
4081 explicitly-quantified
4082 type variables, in the annotated expression.  For example:
4083 <programlisting>
4084   f = runST ( (op >>= \(x :: STRef s Int) -> g x) :: forall s. ST s Bool )
4085 </programlisting>
4086 Here, the type signature <literal>forall a. ST s Bool</literal> brings the 
4087 type variable <literal>s</literal> into scope, in the annotated expression 
4088 <literal>(op >>= \(x :: STRef s Int) -> g x)</literal>.
4089 </para>
4090
4091 </sect3>
4092
4093 <sect3 id="pattern-type-sigs">
4094 <title>Pattern type signatures</title>
4095 <para>
4096 A type signature may occur in any pattern; this is a <emphasis>pattern type
4097 signature</emphasis>.  
4098 For example:
4099 <programlisting>
4100   -- f and g assume that 'a' is already in scope
4101   f = \(x::Int, y::a) -> x
4102   g (x::a) = x
4103   h ((x,y) :: (Int,Bool)) = (y,x)
4104 </programlisting>
4105 In the case where all the type variables in the pattern type sigature are
4106 already in scope (i.e. bound by the enclosing context), matters are simple: the
4107 signature simply constrains the type of the pattern in the obvious way.
4108 </para>
4109 <para>
4110 There is only one situation in which you can write a pattern type signature that
4111 mentions a type variable that is not already in scope, namely in pattern match
4112 of an existential data constructor.  For example:
4113 <programlisting>
4114   data T = forall a. MkT [a]
4115
4116   k :: T -> T
4117   k (MkT [t::a]) = MkT t3
4118                  where
4119                    t3::[a] = [t,t,t]
4120 </programlisting>
4121 Here, the pattern type signature <literal>(t::a)</literal> mentions a lexical type
4122 variable that is not already in scope.  Indeed, it cannot already be in scope,
4123 because it is bound by the pattern match.  GHC's rule is that in this situation
4124 (and only then), a pattern type signature can mention a type variable that is
4125 not already in scope; the effect is to bring it into scope, standing for the
4126 existentially-bound type variable.
4127 </para>
4128 <para>
4129 If this seems a little odd, we think so too.  But we must have
4130 <emphasis>some</emphasis> way to bring such type variables into scope, else we
4131 could not name existentially-bound type variables in subequent type signatures.
4132 </para>
4133 <para>
4134 This is (now) the <emphasis>only</emphasis> situation in which a pattern type 
4135 signature is allowed to mention a lexical variable that is not already in
4136 scope.
4137 For example, both <literal>f</literal> and <literal>g</literal> would be
4138 illegal if <literal>a</literal> was not already in scope.
4139 </para>
4140
4141
4142 </sect3>
4143
4144 <!-- ==================== Commented out part about result type signatures 
4145
4146 <sect3 id="result-type-sigs">
4147 <title>Result type signatures</title>
4148
4149 <para>
4150 The result type of a function, lambda, or case expression alternative can be given a signature, thus:
4151
4152 <programlisting>
4153   {- f assumes that 'a' is already in scope -}
4154   f x y :: [a] = [x,y,x]
4155
4156   g = \ x :: [Int] -> [3,4]
4157
4158   h :: forall a. [a] -> a
4159   h xs = case xs of
4160             (y:ys) :: a -> y
4161 </programlisting>
4162 The final <literal>:: [a]</literal> after the patterns of <literal>f</literal> gives the type of 
4163 the result of the function.  Similarly, the body of the lambda in the RHS of
4164 <literal>g</literal> is <literal>[Int]</literal>, and the RHS of the case
4165 alternative in <literal>h</literal> is <literal>a</literal>.
4166 </para>
4167 <para> A result type signature never brings new type variables into scope.</para>
4168 <para>
4169 There are a couple of syntactic wrinkles.  First, notice that all three
4170 examples would parse quite differently with parentheses:
4171 <programlisting>
4172   {- f assumes that 'a' is already in scope -}
4173   f x (y :: [a]) = [x,y,x]
4174
4175   g = \ (x :: [Int]) -> [3,4]
4176
4177   h :: forall a. [a] -> a
4178   h xs = case xs of
4179             ((y:ys) :: a) -> y
4180 </programlisting>
4181 Now the signature is on the <emphasis>pattern</emphasis>; and
4182 <literal>h</literal> would certainly be ill-typed (since the pattern
4183 <literal>(y:ys)</literal> cannot have the type <literal>a</literal>.
4184
4185 Second, to avoid ambiguity, the type after the &ldquo;<literal>::</literal>&rdquo; in a result
4186 pattern signature on a lambda or <literal>case</literal> must be atomic (i.e. a single
4187 token or a parenthesised type of some sort).  To see why,
4188 consider how one would parse this:
4189 <programlisting>
4190   \ x :: a -> b -> x
4191 </programlisting>
4192 </para>
4193 </sect3>
4194
4195  -->
4196
4197 <sect3 id="cls-inst-scoped-tyvars">
4198 <title>Class and instance declarations</title>
4199 <para>
4200
4201 The type variables in the head of a <literal>class</literal> or <literal>instance</literal> declaration
4202 scope over the methods defined in the <literal>where</literal> part.  For example:
4203
4204
4205 <programlisting>
4206   class C a where
4207     op :: [a] -> a
4208
4209     op xs = let ys::[a]
4210                 ys = reverse xs
4211             in
4212             head ys
4213 </programlisting>
4214 </para>
4215 </sect3>
4216
4217 </sect2>
4218
4219
4220 <sect2 id="typing-binds">
4221 <title>Generalised typing of mutually recursive bindings</title>
4222
4223 <para>
4224 The Haskell Report specifies that a group of bindings (at top level, or in a
4225 <literal>let</literal> or <literal>where</literal>) should be sorted into
4226 strongly-connected components, and then type-checked in dependency order
4227 (<ulink url="http://haskell.org/onlinereport/decls.html#sect4.5.1">Haskell
4228 Report, Section 4.5.1</ulink>).  
4229 As each group is type-checked, any binders of the group that
4230 have
4231 an explicit type signature are put in the type environment with the specified
4232 polymorphic type,
4233 and all others are monomorphic until the group is generalised 
4234 (<ulink url="http://haskell.org/onlinereport/decls.html#sect4.5.2">Haskell Report, Section 4.5.2</ulink>).
4235 </para>
4236
4237 <para>Following a suggestion of Mark Jones, in his paper
4238 <ulink url="http://www.cse.ogi.edu/~mpj/thih/">Typing Haskell in
4239 Haskell</ulink>,
4240 GHC implements a more general scheme.  If <option>-XRelaxedPolyRec</option> is
4241 specified:
4242 <emphasis>the dependency analysis ignores references to variables that have an explicit
4243 type signature</emphasis>.
4244 As a result of this refined dependency analysis, the dependency groups are smaller, and more bindings will
4245 typecheck.  For example, consider:
4246 <programlisting>
4247   f :: Eq a =&gt; a -> Bool
4248   f x = (x == x) || g True || g "Yes"
4249   
4250   g y = (y &lt;= y) || f True
4251 </programlisting>
4252 This is rejected by Haskell 98, but under Jones's scheme the definition for
4253 <literal>g</literal> is typechecked first, separately from that for
4254 <literal>f</literal>,
4255 because the reference to <literal>f</literal> in <literal>g</literal>'s right
4256 hand side is ingored by the dependency analysis.  Then <literal>g</literal>'s
4257 type is generalised, to get
4258 <programlisting>
4259   g :: Ord a =&gt; a -> Bool
4260 </programlisting>
4261 Now, the defintion for <literal>f</literal> is typechecked, with this type for
4262 <literal>g</literal> in the type environment.
4263 </para>
4264
4265 <para>
4266 The same refined dependency analysis also allows the type signatures of 
4267 mutually-recursive functions to have different contexts, something that is illegal in
4268 Haskell 98 (Section 4.5.2, last sentence).  With
4269 <option>-XRelaxedPolyRec</option>
4270 GHC only insists that the type signatures of a <emphasis>refined</emphasis> group have identical
4271 type signatures; in practice this means that only variables bound by the same
4272 pattern binding must have the same context.  For example, this is fine:
4273 <programlisting>
4274   f :: Eq a =&gt; a -> Bool
4275   f x = (x == x) || g True
4276   
4277   g :: Ord a =&gt; a -> Bool
4278   g y = (y &lt;= y) || f True
4279 </programlisting>
4280 </para>
4281 </sect2>
4282
4283 <sect2 id="type-families">
4284 <title>Type families
4285 </title>
4286
4287 <para>
4288 GHC supports the definition of type families indexed by types.  They may be
4289 seen as an extension of Haskell 98's class-based overloading of values to
4290 types.  When type families are declared in classes, they are also known as
4291 associated types.
4292 </para>
4293 <para>
4294 There are two forms of type families: data families and type synonym families.
4295 Currently, only the former are fully implemented, while we are still working
4296 on the latter.  As a result, the specification of the language extension is
4297 also still to some degree in flux.  Hence, a more detailed description of
4298 the language extension and its use is currently available
4299 from <ulink url="http://haskell.org/haskellwiki/GHC/Indexed_types">the Haskell
4300 wiki page on type families</ulink>.  The material will be moved to this user's
4301 guide when it has stabilised.
4302 </para>
4303 <para>
4304 Type families are enabled by the flag <option>-XTypeFamilies</option>.
4305 </para>
4306
4307
4308 </sect2>
4309
4310 </sect1>
4311 <!-- ==================== End of type system extensions =================  -->
4312   
4313 <!-- ====================== TEMPLATE HASKELL =======================  -->
4314
4315 <sect1 id="template-haskell">
4316 <title>Template Haskell</title>
4317
4318 <para>Template Haskell allows you to do compile-time meta-programming in
4319 Haskell.  
4320 The background to
4321 the main technical innovations is discussed in "<ulink
4322 url="http://research.microsoft.com/~simonpj/papers/meta-haskell">
4323 Template Meta-programming for Haskell</ulink>" (Proc Haskell Workshop 2002).
4324 </para>
4325 <para>
4326 There is a Wiki page about
4327 Template Haskell at <ulink url="http://haskell.org/haskellwiki/Template_Haskell">
4328 http://www.haskell.org/haskellwiki/Template_Haskell</ulink>, and that is the best place to look for
4329 further details.
4330 You may also 
4331 consult the <ulink
4332 url="http://www.haskell.org/ghc/docs/latest/html/libraries/index.html">online
4333 Haskell library reference material</ulink> 
4334 (look for module <literal>Language.Haskell.TH</literal>).
4335 Many changes to the original design are described in 
4336       <ulink url="http://research.microsoft.com/~simonpj/papers/meta-haskell/notes2.ps">
4337 Notes on Template Haskell version 2</ulink>.
4338 Not all of these changes are in GHC, however.
4339 </para>
4340
4341 <para> The first example from that paper is set out below (<xref linkend="th-example"/>) 
4342 as a worked example to help get you started. 
4343 </para>
4344
4345 <para>
4346 The documentation here describes the realisation of Template Haskell in GHC.  It is not detailed enough to 
4347 understand Template Haskell; see the <ulink url="http://haskell.org/haskellwiki/Template_Haskell">
4348 Wiki page</ulink>.
4349 </para>
4350
4351     <sect2>
4352       <title>Syntax</title>
4353
4354       <para> Template Haskell has the following new syntactic
4355       constructions.  You need to use the flag
4356       <option>-XTemplateHaskell</option>
4357         <indexterm><primary><option>-XTemplateHaskell</option></primary>
4358       </indexterm>to switch these syntactic extensions on
4359       (<option>-XTemplateHaskell</option> is no longer implied by
4360       <option>-fglasgow-exts</option>).</para>
4361
4362         <itemizedlist>
4363               <listitem><para>
4364                   A splice is written <literal>$x</literal>, where <literal>x</literal> is an
4365                   identifier, or <literal>$(...)</literal>, where the "..." is an arbitrary expression.
4366                   There must be no space between the "$" and the identifier or parenthesis.  This use
4367                   of "$" overrides its meaning as an infix operator, just as "M.x" overrides the meaning
4368                   of "." as an infix operator.  If you want the infix operator, put spaces around it.
4369                   </para>
4370               <para> A splice can occur in place of 
4371                   <itemizedlist>
4372                     <listitem><para> an expression; the spliced expression must
4373                     have type <literal>Q Exp</literal></para></listitem>
4374                     <listitem><para> a list of top-level declarations; the spliced expression must have type <literal>Q [Dec]</literal></para></listitem>
4375                     </itemizedlist>
4376                 </para>
4377             Inside a splice you can can only call functions defined in imported modules,
4378         not functions defined elsewhere in the same module.</listitem>
4379
4380
4381               <listitem><para>
4382                   A expression quotation is written in Oxford brackets, thus:
4383                   <itemizedlist>
4384                     <listitem><para> <literal>[| ... |]</literal>, where the "..." is an expression; 
4385                              the quotation has type <literal>Q Exp</literal>.</para></listitem>
4386                     <listitem><para> <literal>[d| ... |]</literal>, where the "..." is a list of top-level declarations;
4387                              the quotation has type <literal>Q [Dec]</literal>.</para></listitem>
4388                     <listitem><para> <literal>[t| ... |]</literal>, where the "..." is a type;
4389                              the quotation has type <literal>Q Typ</literal>.</para></listitem>
4390                   </itemizedlist></para></listitem>
4391
4392               <listitem><para>
4393                   A name can be quoted with either one or two prefix single quotes:
4394                   <itemizedlist>
4395                     <listitem><para> <literal>'f</literal> has type <literal>Name</literal>, and names the function <literal>f</literal>.
4396                   Similarly <literal>'C</literal> has type <literal>Name</literal> and names the data constructor <literal>C</literal>.
4397                   In general <literal>'</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in an expression context.
4398                      </para></listitem> 
4399                     <listitem><para> <literal>''T</literal> has type <literal>Name</literal>, and names the type constructor  <literal>T</literal>.
4400                   That is, <literal>''</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in a type context.
4401                      </para></listitem> 
4402                   </itemizedlist>
4403                   These <literal>Names</literal> can be used to construct Template Haskell expressions, patterns, delarations etc.  They
4404                   may also be given as an argument to the <literal>reify</literal> function.
4405                  </para>
4406                 </listitem>
4407
4408                   
4409         </itemizedlist>
4410 (Compared to the original paper, there are many differnces of detail.
4411 The syntax for a declaration splice uses "<literal>$</literal>" not "<literal>splice</literal>".
4412 The type of the enclosed expression must be  <literal>Q [Dec]</literal>, not  <literal>[Q Dec]</literal>.
4413 Type splices are not implemented, and neither are pattern splices or quotations.
4414
4415 </sect2>
4416
4417 <sect2>  <title> Using Template Haskell </title>
4418 <para>
4419 <itemizedlist>
4420     <listitem><para>
4421     The data types and monadic constructor functions for Template Haskell are in the library
4422     <literal>Language.Haskell.THSyntax</literal>.
4423     </para></listitem>
4424
4425     <listitem><para>
4426     You can only run a function at compile time if it is imported from another module.  That is,
4427             you can't define a function in a module, and call it from within a splice in the same module.
4428             (It would make sense to do so, but it's hard to implement.)
4429    </para></listitem>
4430
4431    <listitem><para>
4432    Furthermore, you can only run a function at compile time if it is imported
4433    from another module <emphasis>that is not part of a mutually-recursive group of modules
4434    that includes the module currently being compiled</emphasis>.  For example, when compiling module A,
4435    you can only run Template Haskell functions imported from B if B does not import A (directly or indirectly).
4436    The reason should be clear: to run B we must compile and run A, but we are currently type-checking A.
4437    </para></listitem>
4438
4439     <listitem><para>
4440             The flag <literal>-ddump-splices</literal> shows the expansion of all top-level splices as they happen.
4441    </para></listitem>
4442     <listitem><para>
4443             If you are building GHC from source, you need at least a stage-2 bootstrap compiler to
4444               run Template Haskell.  A stage-1 compiler will reject the TH constructs.  Reason: TH
4445               compiles and runs a program, and then looks at the result.  So it's important that
4446               the program it compiles produces results whose representations are identical to
4447               those of the compiler itself.
4448    </para></listitem>
4449 </itemizedlist>
4450 </para>
4451 <para> Template Haskell works in any mode (<literal>--make</literal>, <literal>--interactive</literal>,
4452         or file-at-a-time).  There used to be a restriction to the former two, but that restriction 
4453         has been lifted.
4454 </para>
4455 </sect2>
4456  
4457 <sect2 id="th-example">  <title> A Template Haskell Worked Example </title>
4458 <para>To help you get over the confidence barrier, try out this skeletal worked example.
4459   First cut and paste the two modules below into "Main.hs" and "Printf.hs":</para>
4460
4461 <programlisting>
4462
4463 {- Main.hs -}
4464 module Main where
4465
4466 -- Import our template "pr"
4467 import Printf ( pr )
4468
4469 -- The splice operator $ takes the Haskell source code
4470 -- generated at compile time by "pr" and splices it into
4471 -- the argument of "putStrLn".
4472 main = putStrLn ( $(pr "Hello") )
4473
4474
4475 {- Printf.hs -}
4476 module Printf where
4477
4478 -- Skeletal printf from the paper.
4479 -- It needs to be in a separate module to the one where
4480 -- you intend to use it.
4481
4482 -- Import some Template Haskell syntax
4483 import Language.Haskell.TH
4484
4485 -- Describe a format string
4486 data Format = D | S | L String
4487
4488 -- Parse a format string.  This is left largely to you
4489 -- as we are here interested in building our first ever
4490 -- Template Haskell program and not in building printf.
4491 parse :: String -> [Format]
4492 parse s   = [ L s ]
4493
4494 -- Generate Haskell source code from a parsed representation
4495 -- of the format string.  This code will be spliced into
4496 -- the module which calls "pr", at compile time.
4497 gen :: [Format] -> Q Exp
4498 gen [D]   = [| \n -> show n |]
4499 gen [S]   = [| \s -> s |]
4500 gen [L s] = stringE s
4501
4502 -- Here we generate the Haskell code for the splice
4503 -- from an input format string.
4504 pr :: String -> Q Exp
4505 pr s = gen (parse s)
4506 </programlisting>
4507
4508 <para>Now run the compiler (here we are a Cygwin prompt on Windows):
4509 </para>
4510 <programlisting>
4511 $ ghc --make -XTemplateHaskell main.hs -o main.exe
4512 </programlisting>
4513
4514 <para>Run "main.exe" and here is your output:</para>
4515
4516 <programlisting>
4517 $ ./main
4518 Hello
4519 </programlisting>
4520
4521 </sect2>
4522
4523 <sect2>
4524 <title>Using Template Haskell with Profiling</title>
4525 <indexterm><primary>profiling</primary><secondary>with Template Haskell</secondary></indexterm>
4526  
4527 <para>Template Haskell relies on GHC's built-in bytecode compiler and
4528 interpreter to run the splice expressions.  The bytecode interpreter
4529 runs the compiled expression on top of the same runtime on which GHC
4530 itself is running; this means that the compiled code referred to by
4531 the interpreted expression must be compatible with this runtime, and
4532 in particular this means that object code that is compiled for
4533 profiling <emphasis>cannot</emphasis> be loaded and used by a splice
4534 expression, because profiled object code is only compatible with the
4535 profiling version of the runtime.</para>
4536
4537 <para>This causes difficulties if you have a multi-module program
4538 containing Template Haskell code and you need to compile it for
4539 profiling, because GHC cannot load the profiled object code and use it
4540 when executing the splices.  Fortunately GHC provides a workaround.
4541 The basic idea is to compile the program twice:</para>
4542
4543 <orderedlist>
4544 <listitem>
4545   <para>Compile the program or library first the normal way, without
4546   <option>-prof</option><indexterm><primary><option>-prof</option></primary></indexterm>.</para>
4547 </listitem>
4548 <listitem>
4549   <para>Then compile it again with <option>-prof</option>, and
4550   additionally use <option>-osuf
4551   p_o</option><indexterm><primary><option>-osuf</option></primary></indexterm>
4552   to name the object files differentliy (you can choose any suffix
4553   that isn't the normal object suffix here).  GHC will automatically
4554   load the object files built in the first step when executing splice
4555   expressions.  If you omit the <option>-osuf</option> flag when
4556   building with <option>-prof</option> and Template Haskell is used,
4557   GHC will emit an error message. </para>
4558 </listitem>
4559 </orderedlist>
4560 </sect2>
4561
4562 </sect1>
4563
4564 <!-- ===================== Arrow notation ===================  -->
4565
4566 <sect1 id="arrow-notation">
4567 <title>Arrow notation
4568 </title>
4569
4570 <para>Arrows are a generalization of monads introduced by John Hughes.
4571 For more details, see
4572 <itemizedlist>
4573
4574 <listitem>
4575 <para>
4576 &ldquo;Generalising Monads to Arrows&rdquo;,
4577 John Hughes, in <citetitle>Science of Computer Programming</citetitle> 37,
4578 pp67&ndash;111, May 2000.
4579 </para>
4580 </listitem>
4581
4582 <listitem>
4583 <para>
4584 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/notation.html">A New Notation for Arrows</ulink>&rdquo;,
4585 Ross Paterson, in <citetitle>ICFP</citetitle>, Sep 2001.
4586 </para>
4587 </listitem>
4588
4589 <listitem>
4590 <para>
4591 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/fop.html">Arrows and Computation</ulink>&rdquo;,
4592 Ross Paterson, in <citetitle>The Fun of Programming</citetitle>,
4593 Palgrave, 2003.
4594 </para>
4595 </listitem>
4596
4597 </itemizedlist>
4598 and the arrows web page at
4599 <ulink url="http://www.haskell.org/arrows/"><literal>http://www.haskell.org/arrows/</literal></ulink>.
4600 With the <option>-XArrows</option> flag, GHC supports the arrow
4601 notation described in the second of these papers.
4602 What follows is a brief introduction to the notation;
4603 it won't make much sense unless you've read Hughes's paper.
4604 This notation is translated to ordinary Haskell,
4605 using combinators from the
4606 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4607 module.
4608 </para>
4609
4610 <para>The extension adds a new kind of expression for defining arrows:
4611 <screen>
4612 <replaceable>exp</replaceable><superscript>10</superscript> ::= ...
4613        |  proc <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
4614 </screen>
4615 where <literal>proc</literal> is a new keyword.
4616 The variables of the pattern are bound in the body of the 
4617 <literal>proc</literal>-expression,
4618 which is a new sort of thing called a <firstterm>command</firstterm>.
4619 The syntax of commands is as follows:
4620 <screen>
4621 <replaceable>cmd</replaceable>   ::= <replaceable>exp</replaceable><superscript>10</superscript> -&lt;  <replaceable>exp</replaceable>
4622        |  <replaceable>exp</replaceable><superscript>10</superscript> -&lt;&lt; <replaceable>exp</replaceable>
4623        |  <replaceable>cmd</replaceable><superscript>0</superscript>
4624 </screen>
4625 with <replaceable>cmd</replaceable><superscript>0</superscript> up to
4626 <replaceable>cmd</replaceable><superscript>9</superscript> defined using
4627 infix operators as for expressions, and
4628 <screen>
4629 <replaceable>cmd</replaceable><superscript>10</superscript> ::= \ <replaceable>apat</replaceable> ... <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
4630        |  let <replaceable>decls</replaceable> in <replaceable>cmd</replaceable>
4631        |  if <replaceable>exp</replaceable> then <replaceable>cmd</replaceable> else <replaceable>cmd</replaceable>
4632        |  case <replaceable>exp</replaceable> of { <replaceable>calts</replaceable> }
4633        |  do { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> ; <replaceable>cmd</replaceable> }
4634        |  <replaceable>fcmd</replaceable>
4635
4636 <replaceable>fcmd</replaceable>  ::= <replaceable>fcmd</replaceable> <replaceable>aexp</replaceable>
4637        |  ( <replaceable>cmd</replaceable> )
4638        |  (| <replaceable>aexp</replaceable> <replaceable>cmd</replaceable> ... <replaceable>cmd</replaceable> |)
4639
4640 <replaceable>cstmt</replaceable> ::= let <replaceable>decls</replaceable>
4641        |  <replaceable>pat</replaceable> &lt;- <replaceable>cmd</replaceable>
4642        |  rec { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> [;] }
4643        |  <replaceable>cmd</replaceable>
4644 </screen>
4645 where <replaceable>calts</replaceable> are like <replaceable>alts</replaceable>
4646 except that the bodies are commands instead of expressions.
4647 </para>
4648
4649 <para>
4650 Commands produce values, but (like monadic computations)
4651 may yield more than one value,
4652 or none, and may do other things as well.
4653 For the most part, familiarity with monadic notation is a good guide to
4654 using commands.
4655 However the values of expressions, even monadic ones,
4656 are determined by the values of the variables they contain;
4657 this is not necessarily the case for commands.
4658 </para>
4659
4660 <para>
4661 A simple example of the new notation is the expression
4662 <screen>
4663 proc x -> f -&lt; x+1
4664 </screen>
4665 We call this a <firstterm>procedure</firstterm> or
4666 <firstterm>arrow abstraction</firstterm>.
4667 As with a lambda expression, the variable <literal>x</literal>
4668 is a new variable bound within the <literal>proc</literal>-expression.
4669 It refers to the input to the arrow.
4670 In the above example, <literal>-&lt;</literal> is not an identifier but an
4671 new reserved symbol used for building commands from an expression of arrow
4672 type and an expression to be fed as input to that arrow.
4673 (The weird look will make more sense later.)
4674 It may be read as analogue of application for arrows.
4675 The above example is equivalent to the Haskell expression
4676 <screen>
4677 arr (\ x -> x+1) >>> f
4678 </screen>
4679 That would make no sense if the expression to the left of
4680 <literal>-&lt;</literal> involves the bound variable <literal>x</literal>.
4681 More generally, the expression to the left of <literal>-&lt;</literal>
4682 may not involve any <firstterm>local variable</firstterm>,
4683 i.e. a variable bound in the current arrow abstraction.
4684 For such a situation there is a variant <literal>-&lt;&lt;</literal>, as in
4685 <screen>
4686 proc x -> f x -&lt;&lt; x+1
4687 </screen>
4688 which is equivalent to
4689 <screen>
4690 arr (\ x -> (f x, x+1)) >>> app
4691 </screen>
4692 so in this case the arrow must belong to the <literal>ArrowApply</literal>
4693 class.
4694 Such an arrow is equivalent to a monad, so if you're using this form
4695 you may find a monadic formulation more convenient.
4696 </para>
4697
4698 <sect2>
4699 <title>do-notation for commands</title>
4700
4701 <para>
4702 Another form of command is a form of <literal>do</literal>-notation.
4703 For example, you can write
4704 <screen>
4705 proc x -> do
4706         y &lt;- f -&lt; x+1
4707         g -&lt; 2*y
4708         let z = x+y
4709         t &lt;- h -&lt; x*z
4710         returnA -&lt; t+z
4711 </screen>
4712 You can read this much like ordinary <literal>do</literal>-notation,
4713 but with commands in place of monadic expressions.
4714 The first line sends the value of <literal>x+1</literal> as an input to
4715 the arrow <literal>f</literal>, and matches its output against
4716 <literal>y</literal>.
4717 In the next line, the output is discarded.
4718 The arrow <function>returnA</function> is defined in the
4719 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4720 module as <literal>arr id</literal>.
4721 The above example is treated as an abbreviation for
4722 <screen>
4723 arr (\ x -> (x, x)) >>>
4724         first (arr (\ x -> x+1) >>> f) >>>
4725         arr (\ (y, x) -> (y, (x, y))) >>>
4726         first (arr (\ y -> 2*y) >>> g) >>>
4727         arr snd >>>
4728         arr (\ (x, y) -> let z = x+y in ((x, z), z)) >>>
4729         first (arr (\ (x, z) -> x*z) >>> h) >>>
4730         arr (\ (t, z) -> t+z) >>>
4731         returnA
4732 </screen>
4733 Note that variables not used later in the composition are projected out.
4734 After simplification using rewrite rules (see <xref linkend="rewrite-rules"/>)
4735 defined in the
4736 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
4737 module, this reduces to
4738 <screen>
4739 arr (\ x -> (x+1, x)) >>>
4740         first f >>>
4741         arr (\ (y, x) -> (2*y, (x, y))) >>>
4742         first g >>>
4743         arr (\ (_, (x, y)) -> let z = x+y in (x*z, z)) >>>
4744         first h >>>
4745         arr (\ (t, z) -> t+z)
4746 </screen>
4747 which is what you might have written by hand.
4748 With arrow notation, GHC keeps track of all those tuples of variables for you.
4749 </para>
4750
4751 <para>
4752 Note that although the above translation suggests that
4753 <literal>let</literal>-bound variables like <literal>z</literal> must be
4754 monomorphic, the actual translation produces Core,
4755 so polymorphic variables are allowed.
4756 </para>
4757
4758 <para>
4759 It's also possible to have mutually recursive bindings,
4760 using the new <literal>rec</literal> keyword, as in the following example:
4761 <programlisting>
4762 counter :: ArrowCircuit a => a Bool Int
4763 counter = proc reset -> do
4764         rec     output &lt;- returnA -&lt; if reset then 0 else next
4765                 next &lt;- delay 0 -&lt; output+1
4766         returnA -&lt; output
4767 </programlisting>
4768 The translation of such forms uses the <function>loop</function> combinator,
4769 so the arrow concerned must belong to the <literal>ArrowLoop</literal> class.
4770 </para>
4771
4772 </sect2>
4773
4774 <sect2>
4775 <title>Conditional commands</title>
4776
4777 <para>
4778 In the previous example, we used a conditional expression to construct the
4779 input for an arrow.
4780 Sometimes we want to conditionally execute different commands, as in
4781 <screen>
4782 proc (x,y) ->
4783         if f x y
4784         then g -&lt; x+1
4785         else h -&lt; y+2
4786 </screen>
4787 which is translated to
4788 <screen>
4789 arr (\ (x,y) -> if f x y then Left x else Right y) >>>
4790         (arr (\x -> x+1) >>> f) ||| (arr (\y -> y+2) >>> g)
4791 </screen>
4792 Since the translation uses <function>|||</function>,
4793 the arrow concerned must belong to the <literal>ArrowChoice</literal> class.
4794 </para>
4795
4796 <para>
4797 There are also <literal>case</literal> commands, like
4798 <screen>
4799 case input of
4800     [] -> f -&lt; ()
4801     [x] -> g -&lt; x+1
4802     x1:x2:xs -> do
4803         y &lt;- h -&lt; (x1, x2)
4804         ys &lt;- k -&lt; xs
4805         returnA -&lt; y:ys
4806 </screen>
4807 The syntax is the same as for <literal>case</literal> expressions,
4808 except that the bodies of the alternatives are commands rather than expressions.
4809 The translation is similar to that of <literal>if</literal> commands.
4810 </para>
4811
4812 </sect2>
4813
4814 <sect2>
4815 <title>Defining your own control structures</title>
4816
4817 <para>
4818 As we're seen, arrow notation provides constructs,
4819 modelled on those for expressions,
4820 for sequencing, value recursion and conditionals.
4821 But suitable combinators,
4822 which you can define in ordinary Haskell,
4823 may also be used to build new commands out of existing ones.
4824 The basic idea is that a command defines an arrow from environments to values.
4825 These environments assign values to the free local variables of the command.
4826 Thus combinators that produce arrows from arrows
4827 may also be used to build commands from commands.
4828 For example, the <literal>ArrowChoice</literal> class includes a combinator
4829 <programlisting>
4830 ArrowChoice a => (&lt;+>) :: a e c -> a e c -> a e c
4831 </programlisting>
4832 so we can use it to build commands:
4833 <programlisting>
4834 expr' = proc x -> do
4835                 returnA -&lt; x
4836         &lt;+> do
4837                 symbol Plus -&lt; ()
4838                 y &lt;- term -&lt; ()
4839                 expr' -&lt; x + y
4840         &lt;+> do
4841                 symbol Minus -&lt; ()
4842                 y &lt;- term -&lt; ()
4843                 expr' -&lt; x - y
4844 </programlisting>
4845 (The <literal>do</literal> on the first line is needed to prevent the first
4846 <literal>&lt;+> ...</literal> from being interpreted as part of the
4847 expression on the previous line.)
4848 This is equivalent to
4849 <programlisting>
4850 expr' = (proc x -> returnA -&lt; x)
4851         &lt;+> (proc x -> do
4852                 symbol Plus -&lt; ()
4853                 y &lt;- term -&lt; ()
4854                 expr' -&lt; x + y)
4855         &lt;+> (proc x -> do
4856                 symbol Minus -&lt; ()
4857                 y &lt;- term -&lt; ()
4858                 expr' -&lt; x - y)
4859 </programlisting>
4860 It is essential that this operator be polymorphic in <literal>e</literal>
4861 (representing the environment input to the command
4862 and thence to its subcommands)
4863 and satisfy the corresponding naturality property
4864 <screen>
4865 arr k >>> (f &lt;+> g) = (arr k >>> f) &lt;+> (arr k >>> g)
4866 </screen>
4867 at least for strict <literal>k</literal>.
4868 (This should be automatic if you're not using <function>seq</function>.)
4869 This ensures that environments seen by the subcommands are environments
4870 of the whole command,
4871 and also allows the translation to safely trim these environments.
4872 The operator must also not use any variable defined within the current
4873 arrow abstraction.
4874 </para>
4875
4876 <para>
4877 We could define our own operator
4878 <programlisting>
4879 untilA :: ArrowChoice a => a e () -> a e Bool -> a e ()
4880 untilA body cond = proc x ->
4881         if cond x then returnA -&lt; ()
4882         else do
4883                 body -&lt; x
4884                 untilA body cond -&lt; x
4885 </programlisting>
4886 and use it in the same way.
4887 Of course this infix syntax only makes sense for binary operators;
4888 there is also a more general syntax involving special brackets:
4889 <screen>
4890 proc x -> do
4891         y &lt;- f -&lt; x+1
4892         (|untilA (increment -&lt; x+y) (within 0.5 -&lt; x)|)
4893 </screen>
4894 </para>
4895
4896 </sect2>
4897
4898 <sect2>
4899 <title>Primitive constructs</title>
4900
4901 <para>
4902 Some operators will need to pass additional inputs to their subcommands.
4903 For example, in an arrow type supporting exceptions,
4904 the operator that attaches an exception handler will wish to pass the
4905 exception that occurred to the handler.
4906 Such an operator might have a type
4907 <screen>
4908 handleA :: ... => a e c -> a (e,Ex) c -> a e c
4909 </screen>
4910 where <literal>Ex</literal> is the type of exceptions handled.
4911 You could then use this with arrow notation by writing a command
4912 <screen>
4913 body `handleA` \ ex -> handler
4914 </screen>
4915 so that if an exception is raised in the command <literal>body</literal>,
4916 the variable <literal>ex</literal> is bound to the value of the exception
4917 and the command <literal>handler</literal>,
4918 which typically refers to <literal>ex</literal>, is entered.
4919 Though the syntax here looks like a functional lambda,
4920 we are talking about commands, and something different is going on.
4921 The input to the arrow represented by a command consists of values for
4922 the free local variables in the command, plus a stack of anonymous values.
4923 In all the prior examples, this stack was empty.
4924 In the second argument to <function>handleA</function>,
4925 this stack consists of one value, the value of the exception.
4926 The command form of lambda merely gives this value a name.
4927 </para>
4928
4929 <para>
4930 More concretely,
4931 the values on the stack are paired to the right of the environment.
4932 So operators like <function>handleA</function> that pass
4933 extra inputs to their subcommands can be designed for use with the notation
4934 by pairing the values with the environment in this way.
4935 More precisely, the type of each argument of the operator (and its result)
4936 should have the form
4937 <screen>
4938 a (...(e,t1), ... tn) t
4939 </screen>
4940 where <replaceable>e</replaceable> is a polymorphic variable
4941 (representing the environment)
4942 and <replaceable>ti</replaceable> are the types of the values on the stack,
4943 with <replaceable>t1</replaceable> being the <quote>top</quote>.
4944 The polymorphic variable <replaceable>e</replaceable> must not occur in
4945 <replaceable>a</replaceable>, <replaceable>ti</replaceable> or
4946 <replaceable>t</replaceable>.
4947 However the arrows involved need not be the same.
4948 Here are some more examples of suitable operators:
4949 <screen>
4950 bracketA :: ... => a e b -> a (e,b) c -> a (e,c) d -> a e d
4951 runReader :: ... => a e c -> a' (e,State) c
4952 runState :: ... => a e c -> a' (e,State) (c,State)
4953 </screen>
4954 We can supply the extra input required by commands built with the last two
4955 by applying them to ordinary expressions, as in
4956 <screen>
4957 proc x -> do
4958         s &lt;- ...
4959         (|runReader (do { ... })|) s
4960 </screen>
4961 which adds <literal>s</literal> to the stack of inputs to the command
4962 built using <function>runReader</function>.
4963 </para>
4964
4965 <para>
4966 The command versions of lambda abstraction and application are analogous to
4967 the expression versions.
4968 In particular, the beta and eta rules describe equivalences of commands.
4969 These three features (operators, lambda abstraction and application)
4970 are the core of the notation; everything else can be built using them,
4971 though the results would be somewhat clumsy.
4972 For example, we could simulate <literal>do</literal>-notation by defining
4973 <programlisting>
4974 bind :: Arrow a => a e b -> a (e,b) c -> a e c
4975 u `bind` f = returnA &amp;&amp;&amp; u >>> f
4976
4977 bind_ :: Arrow a => a e b -> a e c -> a e c
4978 u `bind_` f = u `bind` (arr fst >>> f)
4979 </programlisting>
4980 We could simulate <literal>if</literal> by defining
4981 <programlisting>
4982 cond :: ArrowChoice a => a e b -> a e b -> a (e,Bool) b
4983 cond f g = arr (\ (e,b) -> if b then Left e else Right e) >>> f ||| g
4984 </programlisting>
4985 </para>
4986
4987 </sect2>
4988
4989 <sect2>
4990 <title>Differences with the paper</title>
4991
4992 <itemizedlist>
4993
4994 <listitem>
4995 <para>Instead of a single form of arrow application (arrow tail) with two
4996 translations, the implementation provides two forms
4997 <quote><literal>-&lt;</literal></quote> (first-order)
4998 and <quote><literal>-&lt;&lt;</literal></quote> (higher-order).
4999 </para>
5000 </listitem>
5001
5002 <listitem>
5003 <para>User-defined operators are flagged with banana brackets instead of
5004 a new <literal>form</literal> keyword.
5005 </para>
5006 </listitem>
5007
5008 </itemizedlist>
5009
5010 </sect2>
5011
5012 <sect2>
5013 <title>Portability</title>
5014
5015 <para>
5016 Although only GHC implements arrow notation directly,
5017 there is also a preprocessor
5018 (available from the 
5019 <ulink url="http://www.haskell.org/arrows/">arrows web page</ulink>)
5020 that translates arrow notation into Haskell 98
5021 for use with other Haskell systems.
5022 You would still want to check arrow programs with GHC;
5023 tracing type errors in the preprocessor output is not easy.
5024 Modules intended for both GHC and the preprocessor must observe some
5025 additional restrictions:
5026 <itemizedlist>
5027
5028 <listitem>
5029 <para>
5030 The module must import
5031 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>.
5032 </para>
5033 </listitem>
5034
5035 <listitem>
5036 <para>
5037 The preprocessor cannot cope with other Haskell extensions.
5038 These would have to go in separate modules.
5039 </para>
5040 </listitem>
5041
5042 <listitem>
5043 <para>
5044 Because the preprocessor targets Haskell (rather than Core),
5045 <literal>let</literal>-bound variables are monomorphic.
5046 </para>
5047 </listitem>
5048
5049 </itemizedlist>
5050 </para>
5051
5052 </sect2>
5053
5054 </sect1>
5055
5056 <!-- ==================== BANG PATTERNS =================  -->
5057
5058 <sect1 id="bang-patterns">
5059 <title>Bang patterns
5060 <indexterm><primary>Bang patterns</primary></indexterm>
5061 </title>
5062 <para>GHC supports an extension of pattern matching called <emphasis>bang
5063 patterns</emphasis>.   Bang patterns are under consideration for Haskell Prime.
5064 The <ulink
5065 url="http://hackage.haskell.org/trac/haskell-prime/wiki/BangPatterns">Haskell
5066 prime feature description</ulink> contains more discussion and examples
5067 than the material below.
5068 </para>
5069 <para>
5070 Bang patterns are enabled by the flag <option>-XBangPatterns</option>.
5071 </para>
5072
5073 <sect2 id="bang-patterns-informal">
5074 <title>Informal description of bang patterns
5075 </title>
5076 <para>
5077 The main idea is to add a single new production to the syntax of patterns:
5078 <programlisting>
5079   pat ::= !pat
5080 </programlisting>
5081 Matching an expression <literal>e</literal> against a pattern <literal>!p</literal> is done by first
5082 evaluating <literal>e</literal> (to WHNF) and then matching the result against <literal>p</literal>.
5083 Example:
5084 <programlisting>
5085 f1 !x = True
5086 </programlisting>
5087 This definition makes <literal>f1</literal> is strict in <literal>x</literal>,
5088 whereas without the bang it would be lazy.
5089 Bang patterns can be nested of course:
5090 <programlisting>
5091 f2 (!x, y) = [x,y]
5092 </programlisting>
5093 Here, <literal>f2</literal> is strict in <literal>x</literal> but not in
5094 <literal>y</literal>.  
5095 A bang only really has an effect if it precedes a variable or wild-card pattern:
5096 <programlisting>
5097 f3 !(x,y) = [x,y]
5098 f4 (x,y)  = [x,y]
5099 </programlisting>
5100 Here, <literal>f3</literal> and <literal>f4</literal> are identical; putting a bang before a pattern that
5101 forces evaluation anyway does nothing.
5102 </para><para>
5103 Bang patterns work in <literal>case</literal> expressions too, of course:
5104 <programlisting>
5105 g5 x = let y = f x in body
5106 g6 x = case f x of { y -&gt; body }
5107 g7 x = case f x of { !y -&gt; body }
5108 </programlisting>
5109 The functions <literal>g5</literal> and <literal>g6</literal> mean exactly the same thing.  
5110 But <literal>g7</literal> evalutes <literal>(f x)</literal>, binds <literal>y</literal> to the
5111 result, and then evaluates <literal>body</literal>.
5112 </para><para>
5113 Bang patterns work in <literal>let</literal> and <literal>where</literal>
5114 definitions too. For example:
5115 <programlisting>
5116 let ![x,y] = e in b
5117 </programlisting>
5118 is a strict pattern: operationally, it evaluates <literal>e</literal>, matches
5119 it against the pattern <literal>[x,y]</literal>, and then evaluates <literal>b</literal>
5120 The "<literal>!</literal>" should not be regarded as part of the pattern; after all,
5121 in a function argument <literal>![x,y]</literal> means the 
5122 same as <literal>[x,y]</literal>.  Rather, the "<literal>!</literal>" 
5123 is part of the syntax of <literal>let</literal> bindings.
5124 </para>
5125 </sect2>
5126
5127
5128 <sect2 id="bang-patterns-sem">
5129 <title>Syntax and semantics
5130 </title>
5131 <para>
5132
5133 We add a single new production to the syntax of patterns:
5134 <programlisting>
5135   pat ::= !pat
5136 </programlisting>
5137 There is one problem with syntactic ambiguity.  Consider:
5138 <programlisting>
5139 f !x = 3
5140 </programlisting>
5141 Is this a definition of the infix function "<literal>(!)</literal>",
5142 or of the "<literal>f</literal>" with a bang pattern? GHC resolves this
5143 ambiguity in favour of the latter.  If you want to define
5144 <literal>(!)</literal> with bang-patterns enabled, you have to do so using
5145 prefix notation:
5146 <programlisting>
5147 (!) f x = 3
5148 </programlisting>
5149 The semantics of Haskell pattern matching is described in <ulink
5150 url="http://haskell.org/onlinereport/exps.html#sect3.17.2">
5151 Section 3.17.2</ulink> of the Haskell Report.  To this description add 
5152 one extra item 10, saying:
5153 <itemizedlist><listitem><para>Matching
5154 the pattern <literal>!pat</literal> against a value <literal>v</literal> behaves as follows:
5155 <itemizedlist><listitem><para>if <literal>v</literal> is bottom, the match diverges</para></listitem>
5156                 <listitem><para>otherwise, <literal>pat</literal> is matched against
5157                 <literal>v</literal></para></listitem>
5158 </itemizedlist>
5159 </para></listitem></itemizedlist>
5160 Similarly, in Figure 4 of  <ulink url="http://haskell.org/onlinereport/exps.html#sect3.17.3">
5161 Section 3.17.3</ulink>, add a new case (t):
5162 <programlisting>
5163 case v of { !pat -> e; _ -> e' }
5164    = v `seq` case v of { pat -> e; _ -> e' }
5165 </programlisting>
5166 </para><para>
5167 That leaves let expressions, whose translation is given in 
5168 <ulink url="http://haskell.org/onlinereport/exps.html#sect3.12">Section
5169 3.12</ulink>
5170 of the Haskell Report.
5171 In the translation box, first apply 
5172 the following transformation:  for each pattern <literal>pi</literal> that is of 
5173 form <literal>!qi = ei</literal>, transform it to <literal>(xi,!qi) = ((),ei)</literal>, and and replace <literal>e0</literal> 
5174 by <literal>(xi `seq` e0)</literal>.  Then, when none of the left-hand-side patterns
5175 have a bang at the top, apply the rules in the existing box.
5176 </para>
5177 <para>The effect of the let rule is to force complete matching of the pattern
5178 <literal>qi</literal> before evaluation of the body is begun.  The bang is
5179 retained in the translated form in case <literal>qi</literal> is a variable,
5180 thus:
5181 <programlisting>
5182   let !y = f x in b
5183 </programlisting>
5184
5185 </para>
5186 <para>
5187 The let-binding can be recursive.  However, it is much more common for
5188 the let-binding to be non-recursive, in which case the following law holds:
5189 <literal>(let !p = rhs in body)</literal>
5190      is equivalent to
5191 <literal>(case rhs of !p -> body)</literal>
5192 </para>
5193 <para>
5194 A pattern with a bang at the outermost level is not allowed at the top level of
5195 a module.
5196 </para>
5197 </sect2>
5198 </sect1>
5199
5200 <!-- ==================== ASSERTIONS =================  -->
5201
5202 <sect1 id="assertions">
5203 <title>Assertions
5204 <indexterm><primary>Assertions</primary></indexterm>
5205 </title>
5206
5207 <para>
5208 If you want to make use of assertions in your standard Haskell code, you
5209 could define a function like the following:
5210 </para>
5211
5212 <para>
5213
5214 <programlisting>
5215 assert :: Bool -> a -> a
5216 assert False x = error "assertion failed!"
5217 assert _     x = x
5218 </programlisting>
5219
5220 </para>
5221
5222 <para>
5223 which works, but gives you back a less than useful error message --
5224 an assertion failed, but which and where?
5225 </para>
5226
5227 <para>
5228 One way out is to define an extended <function>assert</function> function which also
5229 takes a descriptive string to include in the error message and
5230 perhaps combine this with the use of a pre-processor which inserts
5231 the source location where <function>assert</function> was used.
5232 </para>
5233
5234 <para>
5235 Ghc offers a helping hand here, doing all of this for you. For every
5236 use of <function>assert</function> in the user's source:
5237 </para>
5238
5239 <para>
5240
5241 <programlisting>
5242 kelvinToC :: Double -> Double
5243 kelvinToC k = assert (k &gt;= 0.0) (k+273.15)
5244 </programlisting>
5245
5246 </para>
5247
5248 <para>
5249 Ghc will rewrite this to also include the source location where the
5250 assertion was made,
5251 </para>
5252
5253 <para>
5254
5255 <programlisting>
5256 assert pred val ==> assertError "Main.hs|15" pred val
5257 </programlisting>
5258
5259 </para>
5260
5261 <para>
5262 The rewrite is only performed by the compiler when it spots
5263 applications of <function>Control.Exception.assert</function>, so you
5264 can still define and use your own versions of
5265 <function>assert</function>, should you so wish. If not, import
5266 <literal>Control.Exception</literal> to make use
5267 <function>assert</function> in your code.
5268 </para>
5269
5270 <para>
5271 GHC ignores assertions when optimisation is turned on with the
5272       <option>-O</option><indexterm><primary><option>-O</option></primary></indexterm> flag.  That is, expressions of the form
5273 <literal>assert pred e</literal> will be rewritten to
5274 <literal>e</literal>.  You can also disable assertions using the
5275       <option>-fignore-asserts</option>
5276       option<indexterm><primary><option>-fignore-asserts</option></primary>
5277       </indexterm>.</para>
5278
5279 <para>
5280 Assertion failures can be caught, see the documentation for the
5281 <literal>Control.Exception</literal> library for the details.
5282 </para>
5283
5284 </sect1>
5285
5286
5287 <!-- =============================== PRAGMAS ===========================  -->
5288
5289   <sect1 id="pragmas">
5290     <title>Pragmas</title>
5291
5292     <indexterm><primary>pragma</primary></indexterm>
5293
5294     <para>GHC supports several pragmas, or instructions to the
5295     compiler placed in the source code.  Pragmas don't normally affect
5296     the meaning of the program, but they might affect the efficiency
5297     of the generated code.</para>
5298
5299     <para>Pragmas all take the form
5300
5301 <literal>{-# <replaceable>word</replaceable> ... #-}</literal>  
5302
5303     where <replaceable>word</replaceable> indicates the type of
5304     pragma, and is followed optionally by information specific to that
5305     type of pragma.  Case is ignored in
5306     <replaceable>word</replaceable>.  The various values for
5307     <replaceable>word</replaceable> that GHC understands are described
5308     in the following sections; any pragma encountered with an
5309     unrecognised <replaceable>word</replaceable> is (silently)
5310     ignored.</para>
5311
5312     <para>Certain pragmas are <emphasis>file-header pragmas</emphasis>.  A file-header
5313       pragma must precede the <literal>module</literal> keyword in the file.  
5314       There can be as many file-header pragmas as you please, and they can be
5315       preceded or followed by comments.</para>
5316
5317     <sect2 id="language-pragma">
5318       <title>LANGUAGE pragma</title>
5319
5320       <indexterm><primary>LANGUAGE</primary><secondary>pragma</secondary></indexterm>
5321       <indexterm><primary>pragma</primary><secondary>LANGUAGE</secondary></indexterm>
5322
5323       <para>The <literal>LANGUAGE</literal> pragma allows language extensions to be enabled 
5324         in a portable way.
5325         It is the intention that all Haskell compilers support the
5326         <literal>LANGUAGE</literal> pragma with the same syntax, although not
5327         all extensions are supported by all compilers, of
5328         course.  The <literal>LANGUAGE</literal> pragma should be used instead
5329         of <literal>OPTIONS_GHC</literal>, if possible.</para>
5330
5331       <para>For example, to enable the FFI and preprocessing with CPP:</para>
5332
5333 <programlisting>{-# LANGUAGE ForeignFunctionInterface, CPP #-}</programlisting>
5334
5335         <para><literal>LANGUAGE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
5336
5337       <para>Every language extension can also be turned into a command-line flag
5338         by prefixing it with "<literal>-X</literal>"; for example <option>-XForeignFunctionInterface</option>.
5339         (Similarly, all "<literal>-X</literal>" flags can be written as <literal>LANGUAGE</literal> pragmas.
5340       </para>
5341
5342       <para>A list of all supported language extensions can be obtained by invoking
5343         <literal>ghc --supported-languages</literal> (see <xref linkend="modes"/>).</para>
5344
5345       <para>Any extension from the <literal>Extension</literal> type defined in
5346         <ulink
5347           url="../libraries/Cabal/Language-Haskell-Extension.html"><literal>Language.Haskell.Extension</literal></ulink>
5348         may be used.  GHC will report an error if any of the requested extensions are not supported.</para>
5349     </sect2>
5350
5351
5352     <sect2 id="options-pragma">
5353       <title>OPTIONS_GHC pragma</title>
5354       <indexterm><primary>OPTIONS_GHC</primary>
5355       </indexterm>
5356       <indexterm><primary>pragma</primary><secondary>OPTIONS_GHC</secondary>
5357       </indexterm>
5358
5359       <para>The <literal>OPTIONS_GHC</literal> pragma is used to specify
5360       additional options that are given to the compiler when compiling
5361       this source file.  See <xref linkend="source-file-options"/> for
5362       details.</para>
5363
5364       <para>Previous versions of GHC accepted <literal>OPTIONS</literal> rather
5365         than <literal>OPTIONS_GHC</literal>, but that is now deprecated.</para>
5366     </sect2>
5367
5368         <para><literal>OPTIONS_GHC</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
5369
5370     <sect2 id="include-pragma">
5371       <title>INCLUDE pragma</title>
5372
5373       <para>The <literal>INCLUDE</literal> pragma is for specifying the names
5374         of C header files that should be <literal>#include</literal>'d into
5375         the C source code generated by the compiler for the current module (if
5376         compiling via C).  For example:</para>
5377
5378 <programlisting>
5379 {-# INCLUDE "foo.h" #-}
5380 {-# INCLUDE &lt;stdio.h&gt; #-}</programlisting>
5381
5382         <para><literal>INCLUDE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
5383
5384       <para>An <literal>INCLUDE</literal> pragma is  the preferred alternative
5385         to the <option>-#include</option> option (<xref
5386           linkend="options-C-compiler" />), because the
5387         <literal>INCLUDE</literal> pragma is understood by other
5388         compilers.  Yet another alternative is to add the include file to each
5389         <literal>foreign import</literal> declaration in your code, but we
5390         don't recommend using this approach with GHC.</para>
5391     </sect2>
5392
5393     <sect2 id="deprecated-pragma">
5394       <title>DEPRECATED pragma</title>
5395       <indexterm><primary>DEPRECATED</primary>
5396       </indexterm>
5397
5398       <para>The DEPRECATED pragma lets you specify that a particular
5399       function, class, or type, is deprecated.  There are two
5400       forms.
5401
5402       <itemizedlist>
5403         <listitem>
5404           <para>You can deprecate an entire module thus:</para>
5405 <programlisting>
5406    module Wibble {-# DEPRECATED "Use Wobble instead" #-} where
5407      ...
5408 </programlisting>
5409           <para>When you compile any module that import
5410           <literal>Wibble</literal>, GHC will print the specified
5411           message.</para>
5412         </listitem>
5413
5414         <listitem>
5415           <para>You can deprecate a function, class, type, or data constructor, with the
5416           following top-level declaration:</para>
5417 <programlisting>
5418    {-# DEPRECATED f, C, T "Don't use these" #-}
5419 </programlisting>
5420           <para>When you compile any module that imports and uses any
5421           of the specified entities, GHC will print the specified
5422           message.</para>
5423           <para> You can only depecate entities declared at top level in the module
5424           being compiled, and you can only use unqualified names in the list of
5425           entities being deprecated.  A capitalised name, such as <literal>T</literal>
5426           refers to <emphasis>either</emphasis> the type constructor <literal>T</literal>
5427           <emphasis>or</emphasis> the data constructor <literal>T</literal>, or both if
5428           both are in scope.  If both are in scope, there is currently no way to deprecate 
5429           one without the other (c.f. fixities <xref linkend="infix-tycons"/>).</para>
5430         </listitem>
5431       </itemizedlist>
5432       Any use of the deprecated item, or of anything from a deprecated
5433       module, will be flagged with an appropriate message.  However,
5434       deprecations are not reported for
5435       (a) uses of a deprecated function within its defining module, and
5436       (b) uses of a deprecated function in an export list.
5437       The latter reduces spurious complaints within a library
5438       in which one module gathers together and re-exports 
5439       the exports of several others.
5440       </para>
5441       <para>You can suppress the warnings with the flag
5442       <option>-fno-warn-deprecations</option>.</para>
5443     </sect2>
5444
5445     <sect2 id="inline-noinline-pragma">
5446       <title>INLINE and NOINLINE pragmas</title>
5447
5448       <para>These pragmas control the inlining of function
5449       definitions.</para>
5450
5451       <sect3 id="inline-pragma">
5452         <title>INLINE pragma</title>
5453         <indexterm><primary>INLINE</primary></indexterm>
5454
5455         <para>GHC (with <option>-O</option>, as always) tries to
5456         inline (or &ldquo;unfold&rdquo;) functions/values that are
5457         &ldquo;small enough,&rdquo; thus avoiding the call overhead
5458         and possibly exposing other more-wonderful optimisations.
5459         Normally, if GHC decides a function is &ldquo;too
5460         expensive&rdquo; to inline, it will not do so, nor will it
5461         export that unfolding for other modules to use.</para>
5462
5463         <para>The sledgehammer you can bring to bear is the
5464         <literal>INLINE</literal><indexterm><primary>INLINE
5465         pragma</primary></indexterm> pragma, used thusly:</para>
5466
5467 <programlisting>
5468 key_function :: Int -> String -> (Bool, Double)
5469
5470 #ifdef __GLASGOW_HASKELL__
5471 {-# INLINE key_function #-}
5472 #endif
5473 </programlisting>
5474
5475         <para>(You don't need to do the C pre-processor carry-on
5476         unless you're going to stick the code through HBC&mdash;it
5477         doesn't like <literal>INLINE</literal> pragmas.)</para>
5478
5479         <para>The major effect of an <literal>INLINE</literal> pragma
5480         is to declare a function's &ldquo;cost&rdquo; to be very low.
5481         The normal unfolding machinery will then be very keen to
5482         inline it.</para>
5483
5484         <para>Syntactically, an <literal>INLINE</literal> pragma for a
5485         function can be put anywhere its type signature could be
5486         put.</para>
5487
5488         <para><literal>INLINE</literal> pragmas are a particularly
5489         good idea for the
5490         <literal>then</literal>/<literal>return</literal> (or
5491         <literal>bind</literal>/<literal>unit</literal>) functions in
5492         a monad.  For example, in GHC's own
5493         <literal>UniqueSupply</literal> monad code, we have:</para>
5494
5495 <programlisting>
5496 #ifdef __GLASGOW_HASKELL__
5497 {-# INLINE thenUs #-}
5498 {-# INLINE returnUs #-}
5499 #endif
5500 </programlisting>
5501
5502         <para>See also the <literal>NOINLINE</literal> pragma (<xref
5503         linkend="noinline-pragma"/>).</para>
5504       </sect3>
5505
5506       <sect3 id="noinline-pragma">
5507         <title>NOINLINE pragma</title>
5508         
5509         <indexterm><primary>NOINLINE</primary></indexterm>
5510         <indexterm><primary>NOTINLINE</primary></indexterm>
5511
5512         <para>The <literal>NOINLINE</literal> pragma does exactly what
5513         you'd expect: it stops the named function from being inlined
5514         by the compiler.  You shouldn't ever need to do this, unless
5515         you're very cautious about code size.</para>
5516
5517         <para><literal>NOTINLINE</literal> is a synonym for
5518         <literal>NOINLINE</literal> (<literal>NOINLINE</literal> is
5519         specified by Haskell 98 as the standard way to disable
5520         inlining, so it should be used if you want your code to be
5521         portable).</para>
5522       </sect3>
5523
5524       <sect3 id="phase-control">
5525         <title>Phase control</title>
5526
5527         <para> Sometimes you want to control exactly when in GHC's
5528         pipeline the INLINE pragma is switched on.  Inlining happens
5529         only during runs of the <emphasis>simplifier</emphasis>.  Each
5530         run of the simplifier has a different <emphasis>phase
5531         number</emphasis>; the phase number decreases towards zero.
5532         If you use <option>-dverbose-core2core</option> you'll see the
5533         sequence of phase numbers for successive runs of the
5534         simplifier.  In an INLINE pragma you can optionally specify a
5535         phase number, thus:
5536         <itemizedlist>
5537           <listitem>
5538             <para>"<literal>INLINE[k] f</literal>" means: do not inline
5539             <literal>f</literal>
5540               until phase <literal>k</literal>, but from phase
5541               <literal>k</literal> onwards be very keen to inline it.
5542             </para></listitem>
5543           <listitem>
5544             <para>"<literal>INLINE[~k] f</literal>" means: be very keen to inline
5545             <literal>f</literal>
5546               until phase <literal>k</literal>, but from phase
5547               <literal>k</literal> onwards do not inline it.
5548             </para></listitem>
5549           <listitem>
5550             <para>"<literal>NOINLINE[k] f</literal>" means: do not inline
5551             <literal>f</literal>
5552               until phase <literal>k</literal>, but from phase
5553               <literal>k</literal> onwards be willing to inline it (as if
5554               there was no pragma).
5555             </para></listitem>
5556             <listitem>
5557             <para>"<literal>INLINE[~k] f</literal>" means: be willing to inline
5558             <literal>f</literal>
5559               until phase <literal>k</literal>, but from phase
5560               <literal>k</literal> onwards do not inline it.
5561             </para></listitem>
5562         </itemizedlist>
5563 The same information is summarised here:
5564 <programlisting>
5565                            -- Before phase 2     Phase 2 and later
5566   {-# INLINE   [2]  f #-}  --      No                 Yes
5567   {-# INLINE   [~2] f #-}  --      Yes                No
5568   {-# NOINLINE [2]  f #-}  --      No                 Maybe
5569   {-# NOINLINE [~2] f #-}  --      Maybe              No
5570
5571   {-# INLINE   f #-}       --      Yes                Yes
5572   {-# NOINLINE f #-}       --      No                 No
5573 </programlisting>
5574 By "Maybe" we mean that the usual heuristic inlining rules apply (if the
5575 function body is small, or it is applied to interesting-looking arguments etc).
5576 Another way to understand the semantics is this:
5577 <itemizedlist>
5578 <listitem><para>For both INLINE and NOINLINE, the phase number says
5579 when inlining is allowed at all.</para></listitem>
5580 <listitem><para>The INLINE pragma has the additional effect of making the
5581 function body look small, so that when inlining is allowed it is very likely to
5582 happen.
5583 </para></listitem>
5584 </itemizedlist>
5585 </para>
5586 <para>The same phase-numbering control is available for RULES
5587         (<xref linkend="rewrite-rules"/>).</para>
5588       </sect3>
5589     </sect2>
5590
5591     <sect2 id="line-pragma">
5592       <title>LINE pragma</title>
5593
5594       <indexterm><primary>LINE</primary><secondary>pragma</secondary></indexterm>
5595       <indexterm><primary>pragma</primary><secondary>LINE</secondary></indexterm>
5596       <para>This pragma is similar to C's <literal>&num;line</literal>
5597       pragma, and is mainly for use in automatically generated Haskell
5598       code.  It lets you specify the line number and filename of the
5599       original code; for example</para>
5600
5601 <programlisting>{-# LINE 42 "Foo.vhs" #-}</programlisting>
5602
5603       <para>if you'd generated the current file from something called
5604       <filename>Foo.vhs</filename> and this line corresponds to line
5605       42 in the original.  GHC will adjust its error messages to refer
5606       to the line/file named in the <literal>LINE</literal>
5607       pragma.</para>
5608     </sect2>
5609
5610     <sect2 id="rules">
5611       <title>RULES pragma</title>
5612
5613       <para>The RULES pragma lets you specify rewrite rules.  It is
5614       described in <xref linkend="rewrite-rules"/>.</para>
5615     </sect2>
5616
5617     <sect2 id="specialize-pragma">
5618       <title>SPECIALIZE pragma</title>
5619
5620       <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
5621       <indexterm><primary>pragma, SPECIALIZE</primary></indexterm>
5622       <indexterm><primary>overloading, death to</primary></indexterm>
5623
5624       <para>(UK spelling also accepted.)  For key overloaded
5625       functions, you can create extra versions (NB: more code space)
5626       specialised to particular types.  Thus, if you have an
5627       overloaded function:</para>
5628
5629 <programlisting>
5630   hammeredLookup :: Ord key => [(key, value)] -> key -> value
5631 </programlisting>
5632
5633       <para>If it is heavily used on lists with
5634       <literal>Widget</literal> keys, you could specialise it as
5635       follows:</para>
5636
5637 <programlisting>
5638   {-# SPECIALIZE hammeredLookup :: [(Widget, value)] -> Widget -> value #-}
5639 </programlisting>
5640
5641       <para>A <literal>SPECIALIZE</literal> pragma for a function can
5642       be put anywhere its type signature could be put.</para>
5643
5644       <para>A <literal>SPECIALIZE</literal> has the effect of generating
5645       (a) a specialised version of the function and (b) a rewrite rule
5646       (see <xref linkend="rewrite-rules"/>) that rewrites a call to the
5647       un-specialised function into a call to the specialised one.</para>
5648
5649       <para>The type in a SPECIALIZE pragma can be any type that is less
5650         polymorphic than the type of the original function.  In concrete terms,
5651         if the original function is <literal>f</literal> then the pragma
5652 <programlisting>
5653   {-# SPECIALIZE f :: &lt;type&gt; #-}
5654 </programlisting>
5655       is valid if and only if the defintion
5656 <programlisting>
5657   f_spec :: &lt;type&gt;
5658   f_spec = f
5659 </programlisting>
5660       is valid.  Here are some examples (where we only give the type signature
5661       for the original function, not its code):
5662 <programlisting>
5663   f :: Eq a => a -> b -> b
5664   {-# SPECIALISE f :: Int -> b -> b #-}
5665
5666   g :: (Eq a, Ix b) => a -> b -> b
5667   {-# SPECIALISE g :: (Eq a) => a -> Int -> Int #-}
5668
5669   h :: Eq a => a -> a -> a
5670   {-# SPECIALISE h :: (Eq a) => [a] -> [a] -> [a] #-}
5671 </programlisting>  
5672 The last of these examples will generate a 
5673 RULE with a somewhat-complex left-hand side (try it yourself), so it might not fire very
5674 well.  If you use this kind of specialisation, let us know how well it works.
5675 </para>
5676
5677 <para>A <literal>SPECIALIZE</literal> pragma can optionally be followed with a
5678 <literal>INLINE</literal> or <literal>NOINLINE</literal> pragma, optionally 
5679 followed by a phase, as described in <xref linkend="inline-noinline-pragma"/>.
5680 The <literal>INLINE</literal> pragma affects the specialised verison of the
5681 function (only), and applies even if the function is recursive.  The motivating
5682 example is this:
5683 <programlisting>
5684 -- A GADT for arrays with type-indexed representation
5685 data Arr e where
5686   ArrInt :: !Int -> ByteArray# -> Arr Int
5687   ArrPair :: !Int -> Arr e1 -> Arr e2 -> Arr (e1, e2)
5688
5689 (!:) :: Arr e -> Int -> e
5690 {-# SPECIALISE INLINE (!:) :: Arr Int -> Int -> Int #-}
5691 {-# SPECIALISE INLINE (!:) :: Arr (a, b) -> Int -> (a, b) #-}
5692 (ArrInt _ ba)     !: (I# i) = I# (indexIntArray# ba i)
5693 (ArrPair _ a1 a2) !: i      = (a1 !: i, a2 !: i)
5694 </programlisting>
5695 Here, <literal>(!:)</literal> is a recursive function that indexes arrays
5696 of type <literal>Arr e</literal>.  Consider a call to  <literal>(!:)</literal>
5697 at type <literal>(Int,Int)</literal>.  The second specialisation will fire, and
5698 the specialised function will be inlined.  It has two calls to
5699 <literal>(!:)</literal>,
5700 both at type <literal>Int</literal>.  Both these calls fire the first
5701 specialisation, whose body is also inlined.  The result is a type-based
5702 unrolling of the indexing function.</para>
5703 <para>Warning: you can make GHC diverge by using <literal>SPECIALISE INLINE</literal>
5704 on an ordinarily-recursive function.</para>
5705
5706       <para>Note: In earlier versions of GHC, it was possible to provide your own
5707       specialised function for a given type:
5708
5709 <programlisting>
5710 {-# SPECIALIZE hammeredLookup :: [(Int, value)] -> Int -> value = intLookup #-}
5711 </programlisting>
5712
5713       This feature has been removed, as it is now subsumed by the
5714       <literal>RULES</literal> pragma (see <xref linkend="rule-spec"/>).</para>
5715
5716     </sect2>
5717
5718 <sect2 id="specialize-instance-pragma">
5719 <title>SPECIALIZE instance pragma
5720 </title>
5721
5722 <para>
5723 <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
5724 <indexterm><primary>overloading, death to</primary></indexterm>
5725 Same idea, except for instance declarations.  For example:
5726
5727 <programlisting>
5728 instance (Eq a) => Eq (Foo a) where { 
5729    {-# SPECIALIZE instance Eq (Foo [(Int, Bar)]) #-}
5730    ... usual stuff ...
5731  }
5732 </programlisting>
5733 The pragma must occur inside the <literal>where</literal> part
5734 of the instance declaration.
5735 </para>
5736 <para>
5737 Compatible with HBC, by the way, except perhaps in the placement
5738 of the pragma.
5739 </para>
5740
5741 </sect2>
5742
5743     <sect2 id="unpack-pragma">
5744       <title>UNPACK pragma</title>
5745
5746       <indexterm><primary>UNPACK</primary></indexterm>
5747       
5748       <para>The <literal>UNPACK</literal> indicates to the compiler
5749       that it should unpack the contents of a constructor field into
5750       the constructor itself, removing a level of indirection.  For
5751       example:</para>
5752
5753 <programlisting>
5754 data T = T {-# UNPACK #-} !Float
5755            {-# UNPACK #-} !Float
5756 </programlisting>
5757
5758       <para>will create a constructor <literal>T</literal> containing
5759       two unboxed floats.  This may not always be an optimisation: if
5760       the <function>T</function> constructor is scrutinised and the
5761       floats passed to a non-strict function for example, they will
5762       have to be reboxed (this is done automatically by the
5763       compiler).</para>
5764
5765       <para>Unpacking constructor fields should only be used in
5766       conjunction with <option>-O</option>, in order to expose
5767       unfoldings to the compiler so the reboxing can be removed as
5768       often as possible.  For example:</para>
5769
5770 <programlisting>
5771 f :: T -&#62; Float
5772 f (T f1 f2) = f1 + f2
5773 </programlisting>
5774
5775       <para>The compiler will avoid reboxing <function>f1</function>
5776       and <function>f2</function> by inlining <function>+</function>
5777       on floats, but only when <option>-O</option> is on.</para>
5778
5779       <para>Any single-constructor data is eligible for unpacking; for
5780       example</para>
5781
5782 <programlisting>
5783 data T = T {-# UNPACK #-} !(Int,Int)
5784 </programlisting>
5785
5786       <para>will store the two <literal>Int</literal>s directly in the
5787       <function>T</function> constructor, by flattening the pair.
5788       Multi-level unpacking is also supported:</para>
5789
5790 <programlisting>
5791 data T = T {-# UNPACK #-} !S
5792 data S = S {-# UNPACK #-} !Int {-# UNPACK #-} !Int
5793 </programlisting>
5794
5795       <para>will store two unboxed <literal>Int&num;</literal>s
5796       directly in the <function>T</function> constructor.  The
5797       unpacker can see through newtypes, too.</para>
5798
5799       <para>If a field cannot be unpacked, you will not get a warning,
5800       so it might be an idea to check the generated code with
5801       <option>-ddump-simpl</option>.</para>
5802
5803       <para>See also the <option>-funbox-strict-fields</option> flag,
5804       which essentially has the effect of adding
5805       <literal>{-#&nbsp;UNPACK&nbsp;#-}</literal> to every strict
5806       constructor field.</para>
5807     </sect2>
5808
5809 </sect1>
5810
5811 <!--  ======================= REWRITE RULES ======================== -->
5812
5813 <sect1 id="rewrite-rules">
5814 <title>Rewrite rules
5815
5816 <indexterm><primary>RULES pragma</primary></indexterm>
5817 <indexterm><primary>pragma, RULES</primary></indexterm>
5818 <indexterm><primary>rewrite rules</primary></indexterm></title>
5819
5820 <para>
5821 The programmer can specify rewrite rules as part of the source program
5822 (in a pragma).  GHC applies these rewrite rules wherever it can, provided (a) 
5823 the <option>-O</option> flag (<xref linkend="options-optimise"/>) is on, 
5824 and (b) the <option>-frules-off</option> flag
5825 (<xref linkend="options-f"/>) is not specified, and (c) the
5826 <option>-fglasgow-exts</option> (<xref linkend="options-language"/>)
5827 flag is active.
5828 </para>
5829
5830 <para>
5831 Here is an example:
5832
5833 <programlisting>
5834   {-# RULES
5835         "map/map"       forall f g xs. map f (map g xs) = map (f.g) xs
5836   #-}
5837 </programlisting>
5838
5839 </para>
5840
5841 <sect2>
5842 <title>Syntax</title>
5843
5844 <para>
5845 From a syntactic point of view:
5846
5847 <itemizedlist>
5848 <listitem>
5849
5850 <para>
5851  There may be zero or more rules in a <literal>RULES</literal> pragma.
5852 </para>
5853 </listitem>
5854
5855 <listitem>
5856
5857 <para>
5858  Each rule has a name, enclosed in double quotes.  The name itself has
5859 no significance at all.  It is only used when reporting how many times the rule fired.
5860 </para>
5861 </listitem>
5862
5863 <listitem>
5864 <para>
5865 A rule may optionally have a phase-control number (see <xref linkend="phase-control"/>),
5866 immediately after the name of the rule.  Thus:
5867 <programlisting>
5868   {-# RULES
5869         "map/map" [2]  forall f g xs. map f (map g xs) = map (f.g) xs
5870   #-}
5871 </programlisting>
5872 The "[2]" means that the rule is active in Phase 2 and subsequent phases.  The inverse
5873 notation "[~2]" is also accepted, meaning that the rule is active up to, but not including,
5874 Phase 2.
5875 </para>
5876 </listitem>
5877
5878
5879 <listitem>
5880
5881 <para>
5882  Layout applies in a <literal>RULES</literal> pragma.  Currently no new indentation level
5883 is set, so you must lay out your rules starting in the same column as the
5884 enclosing definitions.
5885 </para>
5886 </listitem>
5887
5888 <listitem>
5889
5890 <para>
5891  Each variable mentioned in a rule must either be in scope (e.g. <function>map</function>),
5892 or bound by the <literal>forall</literal> (e.g. <function>f</function>, <function>g</function>, <function>xs</function>).  The variables bound by
5893 the <literal>forall</literal> are called the <emphasis>pattern</emphasis> variables.  They are separated
5894 by spaces, just like in a type <literal>forall</literal>.
5895 </para>
5896 </listitem>
5897 <listitem>
5898
5899 <para>
5900  A pattern variable may optionally have a type signature.
5901 If the type of the pattern variable is polymorphic, it <emphasis>must</emphasis> have a type signature.
5902 For example, here is the <literal>foldr/build</literal> rule:
5903
5904 <programlisting>
5905 "fold/build"  forall k z (g::forall b. (a->b->b) -> b -> b) .
5906               foldr k z (build g) = g k z
5907 </programlisting>
5908
5909 Since <function>g</function> has a polymorphic type, it must have a type signature.
5910
5911 </para>
5912 </listitem>
5913 <listitem>
5914
5915 <para>
5916 The left hand side of a rule must consist of a top-level variable applied
5917 to arbitrary expressions.  For example, this is <emphasis>not</emphasis> OK:
5918
5919 <programlisting>
5920 "wrong1"   forall e1 e2.  case True of { True -> e1; False -> e2 } = e1
5921 "wrong2"   forall f.      f True = True
5922 </programlisting>
5923
5924 In <literal>"wrong1"</literal>, the LHS is not an application; in <literal>"wrong2"</literal>, the LHS has a pattern variable
5925 in the head.
5926 </para>
5927 </listitem>
5928 <listitem>
5929
5930 <para>
5931  A rule does not need to be in the same module as (any of) the
5932 variables it mentions, though of course they need to be in scope.
5933 </para>
5934 </listitem>
5935 <listitem>
5936
5937 <para>
5938  Rules are automatically exported from a module, just as instance declarations are.
5939 </para>
5940 </listitem>
5941
5942 </itemizedlist>
5943
5944 </para>
5945
5946 </sect2>
5947
5948 <sect2>
5949 <title>Semantics</title>
5950
5951 <para>
5952 From a semantic point of view:
5953
5954 <itemizedlist>
5955 <listitem>
5956
5957 <para>
5958 Rules are only applied if you use the <option>-O</option> flag.
5959 </para>
5960 </listitem>
5961
5962 <listitem>
5963 <para>
5964  Rules are regarded as left-to-right rewrite rules.
5965 When GHC finds an expression that is a substitution instance of the LHS
5966 of a rule, it replaces the expression by the (appropriately-substituted) RHS.
5967 By "a substitution instance" we mean that the LHS can be made equal to the
5968 expression by substituting for the pattern variables.
5969
5970 </para>
5971 </listitem>
5972 <listitem>
5973
5974 <para>
5975  The LHS and RHS of a rule are typechecked, and must have the
5976 same type.
5977
5978 </para>
5979 </listitem>
5980 <listitem>
5981
5982 <para>
5983  GHC makes absolutely no attempt to verify that the LHS and RHS
5984 of a rule have the same meaning.  That is undecidable in general, and
5985 infeasible in most interesting cases.  The responsibility is entirely the programmer's!
5986
5987 </para>
5988 </listitem>
5989 <listitem>
5990
5991 <para>
5992  GHC makes no attempt to make sure that the rules are confluent or
5993 terminating.  For example:
5994
5995 <programlisting>
5996   "loop"        forall x,y.  f x y = f y x
5997 </programlisting>
5998
5999 This rule will cause the compiler to go into an infinite loop.
6000
6001 </para>
6002 </listitem>
6003 <listitem>
6004
6005 <para>
6006  If more than one rule matches a call, GHC will choose one arbitrarily to apply.
6007
6008 </para>
6009 </listitem>
6010 <listitem>
6011 <para>
6012  GHC currently uses a very simple, syntactic, matching algorithm
6013 for matching a rule LHS with an expression.  It seeks a substitution
6014 which makes the LHS and expression syntactically equal modulo alpha
6015 conversion.  The pattern (rule), but not the expression, is eta-expanded if
6016 necessary.  (Eta-expanding the expression can lead to laziness bugs.)
6017 But not beta conversion (that's called higher-order matching).
6018 </para>
6019
6020 <para>
6021 Matching is carried out on GHC's intermediate language, which includes
6022 type abstractions and applications.  So a rule only matches if the
6023 types match too.  See <xref linkend="rule-spec"/> below.
6024 </para>
6025 </listitem>
6026 <listitem>
6027
6028 <para>
6029  GHC keeps trying to apply the rules as it optimises the program.
6030 For example, consider:
6031
6032 <programlisting>
6033   let s = map f
6034       t = map g
6035   in
6036   s (t xs)
6037 </programlisting>
6038
6039 The expression <literal>s (t xs)</literal> does not match the rule <literal>"map/map"</literal>, but GHC
6040 will substitute for <varname>s</varname> and <varname>t</varname>, giving an expression which does match.
6041 If <varname>s</varname> or <varname>t</varname> was (a) used more than once, and (b) large or a redex, then it would
6042 not be substituted, and the rule would not fire.
6043
6044 </para>
6045 </listitem>
6046 <listitem>
6047
6048 <para>
6049  In the earlier phases of compilation, GHC inlines <emphasis>nothing
6050 that appears on the LHS of a rule</emphasis>, because once you have substituted
6051 for something you can't match against it (given the simple minded
6052 matching).  So if you write the rule
6053
6054 <programlisting>
6055         "map/map"       forall f,g.  map f . map g = map (f.g)
6056 </programlisting>
6057
6058 this <emphasis>won't</emphasis> match the expression <literal>map f (map g xs)</literal>.
6059 It will only match something written with explicit use of ".".
6060 Well, not quite.  It <emphasis>will</emphasis> match the expression
6061
6062 <programlisting>
6063 wibble f g xs
6064 </programlisting>
6065
6066 where <function>wibble</function> is defined:
6067
6068 <programlisting>
6069 wibble f g = map f . map g
6070 </programlisting>
6071
6072 because <function>wibble</function> will be inlined (it's small).
6073
6074 Later on in compilation, GHC starts inlining even things on the
6075 LHS of rules, but still leaves the rules enabled.  This inlining
6076 policy is controlled by the per-simplification-pass flag <option>-finline-phase</option><emphasis>n</emphasis>.
6077
6078 </para>
6079 </listitem>
6080 <listitem>
6081
6082 <para>
6083  All rules are implicitly exported from the module, and are therefore
6084 in force in any module that imports the module that defined the rule, directly
6085 or indirectly.  (That is, if A imports B, which imports C, then C's rules are
6086 in force when compiling A.)  The situation is very similar to that for instance
6087 declarations.
6088 </para>
6089 </listitem>
6090
6091 </itemizedlist>
6092
6093 </para>
6094
6095 </sect2>
6096
6097 <sect2>
6098 <title>List fusion</title>
6099
6100 <para>
6101 The RULES mechanism is used to implement fusion (deforestation) of common list functions.
6102 If a "good consumer" consumes an intermediate list constructed by a "good producer", the
6103 intermediate list should be eliminated entirely.
6104 </para>
6105
6106 <para>
6107 The following are good producers:
6108
6109 <itemizedlist>
6110 <listitem>
6111
6112 <para>
6113  List comprehensions
6114 </para>
6115 </listitem>
6116 <listitem>
6117
6118 <para>
6119  Enumerations of <literal>Int</literal> and <literal>Char</literal> (e.g. <literal>['a'..'z']</literal>).
6120 </para>
6121 </listitem>
6122 <listitem>
6123
6124 <para>
6125  Explicit lists (e.g. <literal>[True, False]</literal>)
6126 </para>
6127 </listitem>
6128 <listitem>
6129
6130 <para>
6131  The cons constructor (e.g <literal>3:4:[]</literal>)
6132 </para>
6133 </listitem>
6134 <listitem>
6135
6136 <para>
6137  <function>++</function>
6138 </para>
6139 </listitem>
6140
6141 <listitem>
6142 <para>
6143  <function>map</function>
6144 </para>
6145 </listitem>
6146
6147 <listitem>
6148 <para>
6149 <function>take</function>, <function>filter</function>
6150 </para>
6151 </listitem>
6152 <listitem>
6153
6154 <para>
6155  <function>iterate</function>, <function>repeat</function>
6156 </para>
6157 </listitem>
6158 <listitem>
6159
6160 <para>
6161  <function>zip</function>, <function>zipWith</function>
6162 </para>
6163 </listitem>
6164
6165 </itemizedlist>
6166
6167 </para>
6168
6169 <para>
6170 The following are good consumers:
6171
6172 <itemizedlist>
6173 <listitem>
6174
6175 <para>
6176  List comprehensions
6177 </para>
6178 </listitem>
6179 <listitem>
6180
6181 <para>
6182  <function>array</function> (on its second argument)
6183 </para>
6184 </listitem>
6185 <listitem>
6186
6187 <para>
6188  <function>++</function> (on its first argument)
6189 </para>
6190 </listitem>
6191
6192 <listitem>
6193 <para>
6194  <function>foldr</function>
6195 </para>
6196 </listitem>
6197
6198 <listitem>
6199 <para>
6200  <function>map</function>
6201 </para>
6202 </listitem>
6203 <listitem>
6204
6205 <para>
6206 <function>take</function>, <function>filter</function>
6207 </para>
6208 </listitem>
6209 <listitem>
6210
6211 <para>
6212  <function>concat</function>
6213 </para>
6214 </listitem>
6215 <listitem>
6216
6217 <para>
6218  <function>unzip</function>, <function>unzip2</function>, <function>unzip3</function>, <function>unzip4</function>
6219 </para>
6220 </listitem>
6221 <listitem>
6222
6223 <para>
6224  <function>zip</function>, <function>zipWith</function> (but on one argument only; if both are good producers, <function>zip</function>
6225 will fuse with one but not the other)
6226 </para>
6227 </listitem>
6228 <listitem>
6229
6230 <para>
6231  <function>partition</function>
6232 </para>
6233 </listitem>
6234 <listitem>
6235
6236 <para>
6237  <function>head</function>
6238 </para>
6239 </listitem>
6240 <listitem>
6241
6242 <para>
6243  <function>and</function>, <function>or</function>, <function>any</function>, <function>all</function>
6244 </para>
6245 </listitem>
6246 <listitem>
6247
6248 <para>
6249  <function>sequence&lowbar;</function>
6250 </para>
6251 </listitem>
6252 <listitem>
6253
6254 <para>
6255  <function>msum</function>
6256 </para>
6257 </listitem>
6258 <listitem>
6259
6260 <para>
6261  <function>sortBy</function>
6262 </para>
6263 </listitem>
6264
6265 </itemizedlist>
6266
6267 </para>
6268
6269  <para>
6270 So, for example, the following should generate no intermediate lists:
6271
6272 <programlisting>
6273 array (1,10) [(i,i*i) | i &#60;- map (+ 1) [0..9]]
6274 </programlisting>
6275
6276 </para>
6277
6278 <para>
6279 This list could readily be extended; if there are Prelude functions that you use
6280 a lot which are not included, please tell us.
6281 </para>
6282
6283 <para>
6284 If you want to write your own good consumers or producers, look at the
6285 Prelude definitions of the above functions to see how to do so.
6286 </para>
6287
6288 </sect2>
6289
6290 <sect2 id="rule-spec">
6291 <title>Specialisation
6292 </title>
6293
6294 <para>
6295 Rewrite rules can be used to get the same effect as a feature
6296 present in earlier versions of GHC.
6297 For example, suppose that:
6298
6299 <programlisting>
6300 genericLookup :: Ord a => Table a b   -> a   -> b
6301 intLookup     ::          Table Int b -> Int -> b
6302 </programlisting>
6303
6304 where <function>intLookup</function> is an implementation of
6305 <function>genericLookup</function> that works very fast for
6306 keys of type <literal>Int</literal>.  You might wish
6307 to tell GHC to use <function>intLookup</function> instead of
6308 <function>genericLookup</function> whenever the latter was called with
6309 type <literal>Table Int b -&gt; Int -&gt; b</literal>.
6310 It used to be possible to write
6311
6312 <programlisting>
6313 {-# SPECIALIZE genericLookup :: Table Int b -> Int -> b = intLookup #-}
6314 </programlisting>
6315
6316 This feature is no longer in GHC, but rewrite rules let you do the same thing:
6317
6318 <programlisting>
6319 {-# RULES "genericLookup/Int" genericLookup = intLookup #-}
6320 </programlisting>
6321
6322 This slightly odd-looking rule instructs GHC to replace
6323 <function>genericLookup</function> by <function>intLookup</function>
6324 <emphasis>whenever the types match</emphasis>.
6325 What is more, this rule does not need to be in the same
6326 file as <function>genericLookup</function>, unlike the
6327 <literal>SPECIALIZE</literal> pragmas which currently do (so that they
6328 have an original definition available to specialise).
6329 </para>
6330
6331 <para>It is <emphasis>Your Responsibility</emphasis> to make sure that
6332 <function>intLookup</function> really behaves as a specialised version
6333 of <function>genericLookup</function>!!!</para>
6334
6335 <para>An example in which using <literal>RULES</literal> for
6336 specialisation will Win Big:
6337
6338 <programlisting>
6339 toDouble :: Real a => a -> Double
6340 toDouble = fromRational . toRational
6341
6342 {-# RULES "toDouble/Int" toDouble = i2d #-}
6343 i2d (I# i) = D# (int2Double# i) -- uses Glasgow prim-op directly
6344 </programlisting>
6345
6346 The <function>i2d</function> function is virtually one machine
6347 instruction; the default conversion&mdash;via an intermediate
6348 <literal>Rational</literal>&mdash;is obscenely expensive by
6349 comparison.
6350 </para>
6351
6352 </sect2>
6353
6354 <sect2>
6355 <title>Controlling what's going on</title>
6356
6357 <para>
6358
6359 <itemizedlist>
6360 <listitem>
6361
6362 <para>
6363  Use <option>-ddump-rules</option> to see what transformation rules GHC is using.
6364 </para>
6365 </listitem>
6366 <listitem>
6367
6368 <para>
6369  Use <option>-ddump-simpl-stats</option> to see what rules are being fired.
6370 If you add <option>-dppr-debug</option> you get a more detailed listing.
6371 </para>
6372 </listitem>
6373 <listitem>
6374
6375 <para>
6376  The definition of (say) <function>build</function> in <filename>GHC/Base.lhs</filename> looks llike this:
6377
6378 <programlisting>
6379         build   :: forall a. (forall b. (a -> b -> b) -> b -> b) -> [a]
6380         {-# INLINE build #-}
6381         build g = g (:) []
6382 </programlisting>
6383
6384 Notice the <literal>INLINE</literal>!  That prevents <literal>(:)</literal> from being inlined when compiling
6385 <literal>PrelBase</literal>, so that an importing module will &ldquo;see&rdquo; the <literal>(:)</literal>, and can
6386 match it on the LHS of a rule.  <literal>INLINE</literal> prevents any inlining happening
6387 in the RHS of the <literal>INLINE</literal> thing.  I regret the delicacy of this.
6388
6389 </para>
6390 </listitem>
6391 <listitem>
6392
6393 <para>
6394  In <filename>libraries/base/GHC/Base.lhs</filename> look at the rules for <function>map</function> to
6395 see how to write rules that will do fusion and yet give an efficient
6396 program even if fusion doesn't happen.  More rules in <filename>GHC/List.lhs</filename>.
6397 </para>
6398 </listitem>
6399
6400 </itemizedlist>
6401
6402 </para>
6403
6404 </sect2>
6405
6406 <sect2 id="core-pragma">
6407   <title>CORE pragma</title>
6408
6409   <indexterm><primary>CORE pragma</primary></indexterm>
6410   <indexterm><primary>pragma, CORE</primary></indexterm>
6411   <indexterm><primary>core, annotation</primary></indexterm>
6412
6413 <para>
6414   The external core format supports <quote>Note</quote> annotations;
6415   the <literal>CORE</literal> pragma gives a way to specify what these
6416   should be in your Haskell source code.  Syntactically, core
6417   annotations are attached to expressions and take a Haskell string
6418   literal as an argument.  The following function definition shows an
6419   example:
6420
6421 <programlisting>
6422 f x = ({-# CORE "foo" #-} show) ({-# CORE "bar" #-} x)
6423 </programlisting>
6424
6425   Semantically, this is equivalent to:
6426
6427 <programlisting>
6428 g x = show x
6429 </programlisting>
6430 </para>
6431
6432 <para>
6433   However, when external for is generated (via
6434   <option>-fext-core</option>), there will be Notes attached to the
6435   expressions <function>show</function> and <varname>x</varname>.
6436   The core function declaration for <function>f</function> is:
6437 </para>
6438
6439 <programlisting>
6440   f :: %forall a . GHCziShow.ZCTShow a ->
6441                    a -> GHCziBase.ZMZN GHCziBase.Char =
6442     \ @ a (zddShow::GHCziShow.ZCTShow a) (eta::a) ->
6443         (%note "foo"
6444          %case zddShow %of (tpl::GHCziShow.ZCTShow a)
6445            {GHCziShow.ZCDShow
6446             (tpl1::GHCziBase.Int ->
6447                    a ->
6448                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
6449 r)
6450             (tpl2::a -> GHCziBase.ZMZN GHCziBase.Char)
6451             (tpl3::GHCziBase.ZMZN a ->
6452                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
6453 r) ->
6454               tpl2})
6455         (%note "bar"
6456          eta);
6457 </programlisting>
6458
6459 <para>
6460   Here, we can see that the function <function>show</function> (which
6461   has been expanded out to a case expression over the Show dictionary)
6462   has a <literal>%note</literal> attached to it, as does the
6463   expression <varname>eta</varname> (which used to be called
6464   <varname>x</varname>).
6465 </para>
6466
6467 </sect2>
6468
6469 </sect1>
6470
6471 <sect1 id="special-ids">
6472 <title>Special built-in functions</title>
6473 <para>GHC has a few built-in funcions with special behaviour.  These
6474 are now described in the module <ulink
6475 url="../libraries/base/GHC-Prim.html"><literal>GHC.Prim</literal></ulink>
6476 in the library documentation.</para>
6477 </sect1>
6478
6479
6480 <sect1 id="generic-classes">
6481 <title>Generic classes</title>
6482
6483 <para>
6484 The ideas behind this extension are described in detail in "Derivable type classes",
6485 Ralf Hinze and Simon Peyton Jones, Haskell Workshop, Montreal Sept 2000, pp94-105.
6486 An example will give the idea:
6487 </para>
6488
6489 <programlisting>
6490   import Generics
6491
6492   class Bin a where
6493     toBin   :: a -> [Int]
6494     fromBin :: [Int] -> (a, [Int])
6495   
6496     toBin {| Unit |}    Unit      = []
6497     toBin {| a :+: b |} (Inl x)   = 0 : toBin x
6498     toBin {| a :+: b |} (Inr y)   = 1 : toBin y
6499     toBin {| a :*: b |} (x :*: y) = toBin x ++ toBin y
6500   
6501     fromBin {| Unit |}    bs      = (Unit, bs)
6502     fromBin {| a :+: b |} (0:bs)  = (Inl x, bs')    where (x,bs') = fromBin bs
6503     fromBin {| a :+: b |} (1:bs)  = (Inr y, bs')    where (y,bs') = fromBin bs
6504     fromBin {| a :*: b |} bs      = (x :*: y, bs'') where (x,bs' ) = fromBin bs
6505                                                           (y,bs'') = fromBin bs'
6506 </programlisting>
6507 <para>
6508 This class declaration explains how <literal>toBin</literal> and <literal>fromBin</literal>
6509 work for arbitrary data types.  They do so by giving cases for unit, product, and sum,
6510 which are defined thus in the library module <literal>Generics</literal>:
6511 </para>
6512 <programlisting>
6513   data Unit    = Unit
6514   data a :+: b = Inl a | Inr b
6515   data a :*: b = a :*: b
6516 </programlisting>
6517 <para>
6518 Now you can make a data type into an instance of Bin like this:
6519 <programlisting>
6520   instance (Bin a, Bin b) => Bin (a,b)
6521   instance Bin a => Bin [a]
6522 </programlisting>
6523 That is, just leave off the "where" clause.  Of course, you can put in the
6524 where clause and over-ride whichever methods you please.
6525 </para>
6526
6527     <sect2>
6528       <title> Using generics </title>
6529       <para>To use generics you need to</para>
6530       <itemizedlist>
6531         <listitem>
6532           <para>Use the flags <option>-fglasgow-exts</option> (to enable the extra syntax), 
6533                 <option>-XGenerics</option> (to generate extra per-data-type code),
6534                 and <option>-package lang</option> (to make the <literal>Generics</literal> library
6535                 available.  </para>
6536         </listitem>
6537         <listitem>
6538           <para>Import the module <literal>Generics</literal> from the
6539           <literal>lang</literal> package.  This import brings into
6540           scope the data types <literal>Unit</literal>,
6541           <literal>:*:</literal>, and <literal>:+:</literal>.  (You
6542           don't need this import if you don't mention these types
6543           explicitly; for example, if you are simply giving instance
6544           declarations.)</para>
6545         </listitem>
6546       </itemizedlist>
6547     </sect2>
6548
6549 <sect2> <title> Changes wrt the paper </title>
6550 <para>
6551 Note that the type constructors <literal>:+:</literal> and <literal>:*:</literal> 
6552 can be written infix (indeed, you can now use
6553 any operator starting in a colon as an infix type constructor).  Also note that
6554 the type constructors are not exactly as in the paper (Unit instead of 1, etc).
6555 Finally, note that the syntax of the type patterns in the class declaration
6556 uses "<literal>{|</literal>" and "<literal>|}</literal>" brackets; curly braces
6557 alone would ambiguous when they appear on right hand sides (an extension we 
6558 anticipate wanting).
6559 </para>
6560 </sect2>
6561
6562 <sect2> <title>Terminology and restrictions</title>
6563 <para>
6564 Terminology.  A "generic default method" in a class declaration
6565 is one that is defined using type patterns as above.
6566 A "polymorphic default method" is a default method defined as in Haskell 98.
6567 A "generic class declaration" is a class declaration with at least one
6568 generic default method.
6569 </para>
6570
6571 <para>
6572 Restrictions:
6573 <itemizedlist>
6574 <listitem>
6575 <para>
6576 Alas, we do not yet implement the stuff about constructor names and 
6577 field labels.
6578 </para>
6579 </listitem>
6580
6581 <listitem>
6582 <para>
6583 A generic class can have only one parameter; you can't have a generic
6584 multi-parameter class.
6585 </para>
6586 </listitem>
6587
6588 <listitem>
6589 <para>
6590 A default method must be defined entirely using type patterns, or entirely
6591 without.  So this is illegal:
6592 <programlisting>
6593   class Foo a where
6594     op :: a -> (a, Bool)
6595     op {| Unit |} Unit = (Unit, True)
6596     op x               = (x,    False)
6597 </programlisting>
6598 However it is perfectly OK for some methods of a generic class to have 
6599 generic default methods and others to have polymorphic default methods.
6600 </para>
6601 </listitem>
6602
6603 <listitem>
6604 <para>
6605 The type variable(s) in the type pattern for a generic method declaration
6606 scope over the right hand side.  So this is legal (note the use of the type variable ``p'' in a type signature on the right hand side:
6607 <programlisting>
6608   class Foo a where
6609     op :: a -> Bool
6610     op {| p :*: q |} (x :*: y) = op (x :: p)
6611     ...
6612 </programlisting>
6613 </para>
6614 </listitem>
6615
6616 <listitem>
6617 <para>
6618 The type patterns in a generic default method must take one of the forms:
6619 <programlisting>
6620        a :+: b
6621        a :*: b
6622        Unit
6623 </programlisting>
6624 where "a" and "b" are type variables.  Furthermore, all the type patterns for
6625 a single type constructor (<literal>:*:</literal>, say) must be identical; they
6626 must use the same type variables.  So this is illegal:
6627 <programlisting>
6628   class Foo a where
6629     op :: a -> Bool
6630     op {| a :+: b |} (Inl x) = True
6631     op {| p :+: q |} (Inr y) = False
6632 </programlisting>
6633 The type patterns must be identical, even in equations for different methods of the class.
6634 So this too is illegal:
6635 <programlisting>
6636   class Foo a where
6637     op1 :: a -> Bool
6638     op1 {| a :*: b |} (x :*: y) = True
6639
6640     op2 :: a -> Bool
6641     op2 {| p :*: q |} (x :*: y) = False
6642 </programlisting>
6643 (The reason for this restriction is that we gather all the equations for a particular type consructor
6644 into a single generic instance declaration.)
6645 </para>
6646 </listitem>
6647
6648 <listitem>
6649 <para>
6650 A generic method declaration must give a case for each of the three type constructors.
6651 </para>
6652 </listitem>
6653
6654 <listitem>
6655 <para>
6656 The type for a generic method can be built only from:
6657   <itemizedlist>
6658   <listitem> <para> Function arrows </para> </listitem>
6659   <listitem> <para> Type variables </para> </listitem>
6660   <listitem> <para> Tuples </para> </listitem>
6661   <listitem> <para> Arbitrary types not involving type variables </para> </listitem>
6662   </itemizedlist>
6663 Here are some example type signatures for generic methods:
6664 <programlisting>
6665     op1 :: a -> Bool
6666     op2 :: Bool -> (a,Bool)
6667     op3 :: [Int] -> a -> a
6668     op4 :: [a] -> Bool
6669 </programlisting>
6670 Here, op1, op2, op3 are OK, but op4 is rejected, because it has a type variable
6671 inside a list.  
6672 </para>
6673 <para>
6674 This restriction is an implementation restriction: we just havn't got around to
6675 implementing the necessary bidirectional maps over arbitrary type constructors.
6676 It would be relatively easy to add specific type constructors, such as Maybe and list,
6677 to the ones that are allowed.</para>
6678 </listitem>
6679
6680 <listitem>
6681 <para>
6682 In an instance declaration for a generic class, the idea is that the compiler
6683 will fill in the methods for you, based on the generic templates.  However it can only
6684 do so if
6685   <itemizedlist>
6686   <listitem>
6687   <para>
6688   The instance type is simple (a type constructor applied to type variables, as in Haskell 98).
6689   </para>
6690   </listitem>
6691   <listitem>
6692   <para>
6693   No constructor of the instance type has unboxed fields.
6694   </para>
6695   </listitem>
6696   </itemizedlist>
6697 (Of course, these things can only arise if you are already using GHC extensions.)
6698 However, you can still give an instance declarations for types which break these rules,
6699 provided you give explicit code to override any generic default methods.
6700 </para>
6701 </listitem>
6702
6703 </itemizedlist>
6704 </para>
6705
6706 <para>
6707 The option <option>-ddump-deriv</option> dumps incomprehensible stuff giving details of 
6708 what the compiler does with generic declarations.
6709 </para>
6710
6711 </sect2>
6712
6713 <sect2> <title> Another example </title>
6714 <para>
6715 Just to finish with, here's another example I rather like:
6716 <programlisting>
6717   class Tag a where
6718     nCons :: a -> Int
6719     nCons {| Unit |}    _ = 1
6720     nCons {| a :*: b |} _ = 1
6721     nCons {| a :+: b |} _ = nCons (bot::a) + nCons (bot::b)
6722   
6723     tag :: a -> Int
6724     tag {| Unit |}    _       = 1
6725     tag {| a :*: b |} _       = 1   
6726     tag {| a :+: b |} (Inl x) = tag x
6727     tag {| a :+: b |} (Inr y) = nCons (bot::a) + tag y
6728 </programlisting>
6729 </para>
6730 </sect2>
6731 </sect1>
6732
6733 <sect1 id="monomorphism">
6734 <title>Control over monomorphism</title>
6735
6736 <para>GHC supports two flags that control the way in which generalisation is
6737 carried out at let and where bindings.
6738 </para>
6739
6740 <sect2>
6741 <title>Switching off the dreaded Monomorphism Restriction</title>
6742           <indexterm><primary><option>-XNoMonomorphismRestriction</option></primary></indexterm>
6743
6744 <para>Haskell's monomorphism restriction (see 
6745 <ulink url="http://haskell.org/onlinereport/decls.html#sect4.5.5">Section
6746 4.5.5</ulink>
6747 of the Haskell Report)
6748 can be completely switched off by
6749 <option>-XNoMonomorphismRestriction</option>.
6750 </para>
6751 </sect2>
6752
6753 <sect2>
6754 <title>Monomorphic pattern bindings</title>
6755           <indexterm><primary><option>-XNoMonoPatBinds</option></primary></indexterm>
6756           <indexterm><primary><option>-XMonoPatBinds</option></primary></indexterm>
6757
6758           <para> As an experimental change, we are exploring the possibility of
6759           making pattern bindings monomorphic; that is, not generalised at all.  
6760             A pattern binding is a binding whose LHS has no function arguments,
6761             and is not a simple variable.  For example:
6762 <programlisting>
6763   f x = x                    -- Not a pattern binding
6764   f = \x -> x                -- Not a pattern binding
6765   f :: Int -> Int = \x -> x  -- Not a pattern binding
6766
6767   (g,h) = e                  -- A pattern binding
6768   (f) = e                    -- A pattern binding
6769   [x] = e                    -- A pattern binding
6770 </programlisting>
6771 Experimentally, GHC now makes pattern bindings monomorphic <emphasis>by
6772 default</emphasis>.  Use <option>-XMonoPatBinds</option> to recover the
6773 standard behaviour.
6774 </para>
6775 </sect2>
6776 </sect1>
6777
6778
6779
6780 <!-- Emacs stuff:
6781      ;;; Local Variables: ***
6782      ;;; mode: xml ***
6783      ;;; sgml-parent-document: ("users_guide.xml" "book" "chapter" "sect1") ***
6784      ;;; End: ***
6785  -->
6786