Document the fact that impredicative polymorphism is deprecated
[ghc-hetmet.git] / docs / users_guide / glasgow_exts.xml
1 <?xml version="1.0" encoding="iso-8859-1"?>
2 <para>
3 <indexterm><primary>language, GHC</primary></indexterm>
4 <indexterm><primary>extensions, GHC</primary></indexterm>
5 As with all known Haskell systems, GHC implements some extensions to
6 the language.  They are all enabled by options; by default GHC
7 understands only plain Haskell 98.
8 </para>
9
10 <para>
11 Some of the Glasgow extensions serve to give you access to the
12 underlying facilities with which we implement Haskell.  Thus, you can
13 get at the Raw Iron, if you are willing to write some non-portable
14 code at a more primitive level.  You need not be &ldquo;stuck&rdquo;
15 on performance because of the implementation costs of Haskell's
16 &ldquo;high-level&rdquo; features&mdash;you can always code
17 &ldquo;under&rdquo; them.  In an extreme case, you can write all your
18 time-critical code in C, and then just glue it together with Haskell!
19 </para>
20
21 <para>
22 Before you get too carried away working at the lowest level (e.g.,
23 sloshing <literal>MutableByteArray&num;</literal>s around your
24 program), you may wish to check if there are libraries that provide a
25 &ldquo;Haskellised veneer&rdquo; over the features you want.  The
26 separate <ulink url="../libraries/index.html">libraries
27 documentation</ulink> describes all the libraries that come with GHC.
28 </para>
29
30 <!-- LANGUAGE OPTIONS -->
31   <sect1 id="options-language">
32     <title>Language options</title>
33
34     <indexterm><primary>language</primary><secondary>option</secondary>
35     </indexterm>
36     <indexterm><primary>options</primary><secondary>language</secondary>
37     </indexterm>
38     <indexterm><primary>extensions</primary><secondary>options controlling</secondary>
39     </indexterm>
40
41     <para>The language option flags control what variation of the language are
42     permitted.  Leaving out all of them gives you standard Haskell
43     98.</para>
44
45     <para>Language options can be controlled in two ways:
46     <itemizedlist>
47       <listitem><para>Every language option can switched on by a command-line flag "<option>-X...</option>" 
48         (e.g. <option>-XTemplateHaskell</option>), and switched off by the flag "<option>-XNo...</option>"; 
49         (e.g. <option>-XNoTemplateHaskell</option>).</para></listitem>
50       <listitem><para>
51           Language options recognised by Cabal can also be enabled using the <literal>LANGUAGE</literal> pragma,
52           thus <literal>{-# LANGUAGE TemplateHaskell #-}</literal> (see <xref linkend="language-pragma"/>). </para>
53           </listitem>
54       </itemizedlist></para>
55
56     <para>The flag <option>-fglasgow-exts</option>
57           <indexterm><primary><option>-fglasgow-exts</option></primary></indexterm>
58           is equivalent to enabling the following extensions: 
59           <option>-XPrintExplicitForalls</option>,
60           <option>-XForeignFunctionInterface</option>,
61           <option>-XUnliftedFFITypes</option>,
62           <option>-XGADTs</option>,
63           <option>-XImplicitParams</option>,
64           <option>-XScopedTypeVariables</option>,
65           <option>-XUnboxedTuples</option>,
66           <option>-XTypeSynonymInstances</option>,
67           <option>-XStandaloneDeriving</option>,
68           <option>-XDeriveDataTypeable</option>,
69           <option>-XFlexibleContexts</option>,
70           <option>-XFlexibleInstances</option>,
71           <option>-XConstrainedClassMethods</option>,
72           <option>-XMultiParamTypeClasses</option>,
73           <option>-XFunctionalDependencies</option>,
74           <option>-XMagicHash</option>,
75           <option>-XPolymorphicComponents</option>,
76           <option>-XExistentialQuantification</option>,
77           <option>-XUnicodeSyntax</option>,
78           <option>-XPostfixOperators</option>,
79           <option>-XPatternGuards</option>,
80           <option>-XLiberalTypeSynonyms</option>,
81           <option>-XExplicitForAll</option>,
82           <option>-XRankNTypes</option>,
83           <option>-XImpredicativeTypes</option>,
84           <option>-XTypeOperators</option>,
85           <option>-XDoRec</option>,
86           <option>-XParallelListComp</option>,
87           <option>-XEmptyDataDecls</option>,
88           <option>-XKindSignatures</option>,
89           <option>-XGeneralizedNewtypeDeriving</option>,
90           <option>-XTypeFamilies</option>.
91             Enabling these options is the <emphasis>only</emphasis> 
92             effect of <option>-fglasgow-exts</option>.
93           We are trying to move away from this portmanteau flag, 
94           and towards enabling features individually.</para>
95
96   </sect1>
97
98 <!-- UNBOXED TYPES AND PRIMITIVE OPERATIONS -->
99 <sect1 id="primitives">
100   <title>Unboxed types and primitive operations</title>
101
102 <para>GHC is built on a raft of primitive data types and operations;
103 "primitive" in the sense that they cannot be defined in Haskell itself.
104 While you really can use this stuff to write fast code,
105   we generally find it a lot less painful, and more satisfying in the
106   long run, to use higher-level language features and libraries.  With
107   any luck, the code you write will be optimised to the efficient
108   unboxed version in any case.  And if it isn't, we'd like to know
109   about it.</para>
110
111 <para>All these primitive data types and operations are exported by the 
112 library <literal>GHC.Prim</literal>, for which there is 
113 <ulink url="../libraries/ghc-prim/GHC-Prim.html">detailed online documentation</ulink>.
114 (This documentation is generated from the file <filename>compiler/prelude/primops.txt.pp</filename>.)
115 </para>
116 <para>
117 If you want to mention any of the primitive data types or operations in your
118 program, you must first import <literal>GHC.Prim</literal> to bring them
119 into scope.  Many of them have names ending in "&num;", and to mention such
120 names you need the <option>-XMagicHash</option> extension (<xref linkend="magic-hash"/>).
121 </para>
122
123 <para>The primops make extensive use of <link linkend="glasgow-unboxed">unboxed types</link> 
124 and <link linkend="unboxed-tuples">unboxed tuples</link>, which
125 we briefly summarise here. </para>
126   
127 <sect2 id="glasgow-unboxed">
128 <title>Unboxed types
129 </title>
130
131 <para>
132 <indexterm><primary>Unboxed types (Glasgow extension)</primary></indexterm>
133 </para>
134
135 <para>Most types in GHC are <firstterm>boxed</firstterm>, which means
136 that values of that type are represented by a pointer to a heap
137 object.  The representation of a Haskell <literal>Int</literal>, for
138 example, is a two-word heap object.  An <firstterm>unboxed</firstterm>
139 type, however, is represented by the value itself, no pointers or heap
140 allocation are involved.
141 </para>
142
143 <para>
144 Unboxed types correspond to the &ldquo;raw machine&rdquo; types you
145 would use in C: <literal>Int&num;</literal> (long int),
146 <literal>Double&num;</literal> (double), <literal>Addr&num;</literal>
147 (void *), etc.  The <emphasis>primitive operations</emphasis>
148 (PrimOps) on these types are what you might expect; e.g.,
149 <literal>(+&num;)</literal> is addition on
150 <literal>Int&num;</literal>s, and is the machine-addition that we all
151 know and love&mdash;usually one instruction.
152 </para>
153
154 <para>
155 Primitive (unboxed) types cannot be defined in Haskell, and are
156 therefore built into the language and compiler.  Primitive types are
157 always unlifted; that is, a value of a primitive type cannot be
158 bottom.  We use the convention (but it is only a convention) 
159 that primitive types, values, and
160 operations have a <literal>&num;</literal> suffix (see <xref linkend="magic-hash"/>).
161 For some primitive types we have special syntax for literals, also
162 described in the <link linkend="magic-hash">same section</link>.
163 </para>
164
165 <para>
166 Primitive values are often represented by a simple bit-pattern, such
167 as <literal>Int&num;</literal>, <literal>Float&num;</literal>,
168 <literal>Double&num;</literal>.  But this is not necessarily the case:
169 a primitive value might be represented by a pointer to a
170 heap-allocated object.  Examples include
171 <literal>Array&num;</literal>, the type of primitive arrays.  A
172 primitive array is heap-allocated because it is too big a value to fit
173 in a register, and would be too expensive to copy around; in a sense,
174 it is accidental that it is represented by a pointer.  If a pointer
175 represents a primitive value, then it really does point to that value:
176 no unevaluated thunks, no indirections&hellip;nothing can be at the
177 other end of the pointer than the primitive value.
178 A numerically-intensive program using unboxed types can
179 go a <emphasis>lot</emphasis> faster than its &ldquo;standard&rdquo;
180 counterpart&mdash;we saw a threefold speedup on one example.
181 </para>
182
183 <para>
184 There are some restrictions on the use of primitive types:
185 <itemizedlist>
186 <listitem><para>The main restriction
187 is that you can't pass a primitive value to a polymorphic
188 function or store one in a polymorphic data type.  This rules out
189 things like <literal>[Int&num;]</literal> (i.e. lists of primitive
190 integers).  The reason for this restriction is that polymorphic
191 arguments and constructor fields are assumed to be pointers: if an
192 unboxed integer is stored in one of these, the garbage collector would
193 attempt to follow it, leading to unpredictable space leaks.  Or a
194 <function>seq</function> operation on the polymorphic component may
195 attempt to dereference the pointer, with disastrous results.  Even
196 worse, the unboxed value might be larger than a pointer
197 (<literal>Double&num;</literal> for instance).
198 </para>
199 </listitem>
200 <listitem><para> You cannot define a newtype whose representation type
201 (the argument type of the data constructor) is an unboxed type.  Thus,
202 this is illegal:
203 <programlisting>
204   newtype A = MkA Int#
205 </programlisting>
206 </para></listitem>
207 <listitem><para> You cannot bind a variable with an unboxed type
208 in a <emphasis>top-level</emphasis> binding.
209 </para></listitem>
210 <listitem><para> You cannot bind a variable with an unboxed type
211 in a <emphasis>recursive</emphasis> binding.
212 </para></listitem>
213 <listitem><para> You may bind unboxed variables in a (non-recursive,
214 non-top-level) pattern binding, but you must make any such pattern-match
215 strict.  For example, rather than:
216 <programlisting>
217   data Foo = Foo Int Int#
218
219   f x = let (Foo a b, w) = ..rhs.. in ..body..
220 </programlisting>
221 you must write:
222 <programlisting>
223   data Foo = Foo Int Int#
224
225   f x = let !(Foo a b, w) = ..rhs.. in ..body..
226 </programlisting>
227 since <literal>b</literal> has type <literal>Int#</literal>.
228 </para>
229 </listitem>
230 </itemizedlist>
231 </para>
232
233 </sect2>
234
235 <sect2 id="unboxed-tuples">
236 <title>Unboxed Tuples
237 </title>
238
239 <para>
240 Unboxed tuples aren't really exported by <literal>GHC.Exts</literal>,
241 they're available by default with <option>-fglasgow-exts</option>.  An
242 unboxed tuple looks like this:
243 </para>
244
245 <para>
246
247 <programlisting>
248 (# e_1, ..., e_n #)
249 </programlisting>
250
251 </para>
252
253 <para>
254 where <literal>e&lowbar;1..e&lowbar;n</literal> are expressions of any
255 type (primitive or non-primitive).  The type of an unboxed tuple looks
256 the same.
257 </para>
258
259 <para>
260 Unboxed tuples are used for functions that need to return multiple
261 values, but they avoid the heap allocation normally associated with
262 using fully-fledged tuples.  When an unboxed tuple is returned, the
263 components are put directly into registers or on the stack; the
264 unboxed tuple itself does not have a composite representation.  Many
265 of the primitive operations listed in <literal>primops.txt.pp</literal> return unboxed
266 tuples.
267 In particular, the <literal>IO</literal> and <literal>ST</literal> monads use unboxed
268 tuples to avoid unnecessary allocation during sequences of operations.
269 </para>
270
271 <para>
272 There are some pretty stringent restrictions on the use of unboxed tuples:
273 <itemizedlist>
274 <listitem>
275
276 <para>
277 Values of unboxed tuple types are subject to the same restrictions as
278 other unboxed types; i.e. they may not be stored in polymorphic data
279 structures or passed to polymorphic functions.
280
281 </para>
282 </listitem>
283 <listitem>
284
285 <para>
286 No variable can have an unboxed tuple type, nor may a constructor or function
287 argument have an unboxed tuple type.  The following are all illegal:
288
289
290 <programlisting>
291   data Foo = Foo (# Int, Int #)
292
293   f :: (# Int, Int #) -&#62; (# Int, Int #)
294   f x = x
295
296   g :: (# Int, Int #) -&#62; Int
297   g (# a,b #) = a
298
299   h x = let y = (# x,x #) in ...
300 </programlisting>
301 </para>
302 </listitem>
303 </itemizedlist>
304 </para>
305 <para>
306 The typical use of unboxed tuples is simply to return multiple values,
307 binding those multiple results with a <literal>case</literal> expression, thus:
308 <programlisting>
309   f x y = (# x+1, y-1 #)
310   g x = case f x x of { (# a, b #) -&#62; a + b }
311 </programlisting>
312 You can have an unboxed tuple in a pattern binding, thus
313 <programlisting>
314   f x = let (# p,q #) = h x in ..body..
315 </programlisting>
316 If the types of <literal>p</literal> and <literal>q</literal> are not unboxed,
317 the resulting binding is lazy like any other Haskell pattern binding.  The 
318 above example desugars like this:
319 <programlisting>
320   f x = let t = case h x o f{ (# p,q #) -> (p,q)
321             p = fst t
322             q = snd t
323         in ..body..
324 </programlisting>
325 Indeed, the bindings can even be recursive.
326 </para>
327
328 </sect2>
329 </sect1>
330
331
332 <!-- ====================== SYNTACTIC EXTENSIONS =======================  -->
333
334 <sect1 id="syntax-extns">
335 <title>Syntactic extensions</title>
336  
337     <sect2 id="unicode-syntax">
338       <title>Unicode syntax</title>
339       <para>The language
340       extension <option>-XUnicodeSyntax</option><indexterm><primary><option>-XUnicodeSyntax</option></primary></indexterm>
341       enables Unicode characters to be used to stand for certain ASCII
342       character sequences.  The following alternatives are provided:</para>
343
344       <informaltable>
345         <tgroup cols="2" align="left" colsep="1" rowsep="1">
346           <thead>
347             <row>
348               <entry>ASCII</entry>
349               <entry>Unicode alternative</entry>
350               <entry>Code point</entry>
351               <entry>Name</entry>
352             </row>
353           </thead>
354           <tbody>
355             <row>
356               <entry><literal>::</literal></entry>
357               <entry>::</entry> <!-- no special char, apparently -->
358               <entry>0x2237</entry>
359               <entry>PROPORTION</entry>
360             </row>
361           </tbody>
362           <tbody>
363             <row>
364               <entry><literal>=&gt;</literal></entry>
365               <entry>&rArr;</entry>
366               <entry>0x21D2</entry>
367               <entry>RIGHTWARDS DOUBLE ARROW</entry>
368             </row>
369           </tbody>
370           <tbody>
371             <row>
372               <entry><literal>forall</literal></entry>
373               <entry>&forall;</entry>
374               <entry>0x2200</entry>
375               <entry>FOR ALL</entry>
376             </row>
377           </tbody>
378           <tbody>
379             <row>
380               <entry><literal>-&gt;</literal></entry>
381               <entry>&rarr;</entry>
382               <entry>0x2192</entry>
383               <entry>RIGHTWARDS ARROW</entry>
384             </row>
385           </tbody>
386           <tbody>
387             <row>
388               <entry><literal>&lt;-</literal></entry>
389               <entry>&larr;</entry>
390               <entry>0x2190</entry>
391               <entry>LEFTWARDS ARROW</entry>
392             </row>
393           </tbody>
394           <tbody>
395             <row>
396               <entry>..</entry>
397               <entry>&hellip;</entry>
398               <entry>0x22EF</entry>
399               <entry>MIDLINE HORIZONTAL ELLIPSIS</entry>
400             </row>
401           </tbody>
402         </tgroup>
403       </informaltable>
404     </sect2>
405
406     <sect2 id="magic-hash">
407       <title>The magic hash</title>
408       <para>The language extension <option>-XMagicHash</option> allows "&num;" as a
409         postfix modifier to identifiers.  Thus, "x&num;" is a valid variable, and "T&num;" is
410         a valid type constructor or data constructor.</para>
411
412       <para>The hash sign does not change sematics at all.  We tend to use variable
413         names ending in "&num;" for unboxed values or types (e.g. <literal>Int&num;</literal>), 
414         but there is no requirement to do so; they are just plain ordinary variables.
415         Nor does the <option>-XMagicHash</option> extension bring anything into scope.
416         For example, to bring <literal>Int&num;</literal> into scope you must 
417         import <literal>GHC.Prim</literal> (see <xref linkend="primitives"/>); 
418         the <option>-XMagicHash</option> extension
419         then allows you to <emphasis>refer</emphasis> to the <literal>Int&num;</literal>
420         that is now in scope.</para>
421       <para> The <option>-XMagicHash</option> also enables some new forms of literals (see <xref linkend="glasgow-unboxed"/>):
422         <itemizedlist> 
423           <listitem><para> <literal>'x'&num;</literal> has type <literal>Char&num;</literal></para> </listitem>
424           <listitem><para> <literal>&quot;foo&quot;&num;</literal> has type <literal>Addr&num;</literal></para> </listitem>
425           <listitem><para> <literal>3&num;</literal> has type <literal>Int&num;</literal>. In general,
426           any Haskell 98 integer lexeme followed by a <literal>&num;</literal> is an <literal>Int&num;</literal> literal, e.g.
427             <literal>-0x3A&num;</literal> as well as <literal>32&num;</literal></para>.</listitem>
428           <listitem><para> <literal>3&num;&num;</literal> has type <literal>Word&num;</literal>. In general,
429           any non-negative Haskell 98 integer lexeme followed by <literal>&num;&num;</literal> 
430               is a <literal>Word&num;</literal>. </para> </listitem>
431           <listitem><para> <literal>3.2&num;</literal> has type <literal>Float&num;</literal>.</para> </listitem>
432           <listitem><para> <literal>3.2&num;&num;</literal> has type <literal>Double&num;</literal></para> </listitem>
433           </itemizedlist>
434       </para>
435    </sect2>
436
437     <sect2 id="new-qualified-operators">
438       <title>New qualified operator syntax</title>
439
440       <para>A new syntax for referencing qualified operators is
441         planned to be introduced by Haskell', and is enabled in GHC
442         with
443         the <option>-XNewQualifiedOperators</option><indexterm><primary><option>-XNewQualifiedOperators</option></primary></indexterm>
444         option.  In the new syntax, the prefix form of a qualified
445         operator is
446         written <literal><replaceable>module</replaceable>.(<replaceable>symbol</replaceable>)</literal>
447         (in Haskell 98 this would
448         be <literal>(<replaceable>module</replaceable>.<replaceable>symbol</replaceable>)</literal>),
449         and the infix form is
450         written <literal>`<replaceable>module</replaceable>.(<replaceable>symbol</replaceable>)`</literal>
451         (in Haskell 98 this would
452         be <literal>`<replaceable>module</replaceable>.<replaceable>symbol</replaceable>`</literal>.
453         For example:
454 <programlisting>
455   add x y = Prelude.(+) x y
456   subtract y = (`Prelude.(-)` y)
457 </programlisting>
458         The new form of qualified operators is intended to regularise
459         the syntax by eliminating odd cases
460         like <literal>Prelude..</literal>.  For example,
461         when <literal>NewQualifiedOperators</literal> is on, it is possible to
462         write the enumerated sequence <literal>[Monday..]</literal>
463         without spaces, whereas in Haskell 98 this would be a
464         reference to the operator &lsquo;<literal>.</literal>&lsquo;
465         from module <literal>Monday</literal>.</para>
466
467       <para>When <option>-XNewQualifiedOperators</option> is on, the old Haskell
468         98 syntax for qualified operators is not accepted, so this
469         option may cause existing Haskell 98 code to break.</para>
470
471     </sect2>
472         
473
474     <!-- ====================== HIERARCHICAL MODULES =======================  -->
475
476
477     <sect2 id="hierarchical-modules">
478       <title>Hierarchical Modules</title>
479
480       <para>GHC supports a small extension to the syntax of module
481       names: a module name is allowed to contain a dot
482       <literal>&lsquo;.&rsquo;</literal>.  This is also known as the
483       &ldquo;hierarchical module namespace&rdquo; extension, because
484       it extends the normally flat Haskell module namespace into a
485       more flexible hierarchy of modules.</para>
486
487       <para>This extension has very little impact on the language
488       itself; modules names are <emphasis>always</emphasis> fully
489       qualified, so you can just think of the fully qualified module
490       name as <quote>the module name</quote>.  In particular, this
491       means that the full module name must be given after the
492       <literal>module</literal> keyword at the beginning of the
493       module; for example, the module <literal>A.B.C</literal> must
494       begin</para>
495
496 <programlisting>module A.B.C</programlisting>
497
498
499       <para>It is a common strategy to use the <literal>as</literal>
500       keyword to save some typing when using qualified names with
501       hierarchical modules.  For example:</para>
502
503 <programlisting>
504 import qualified Control.Monad.ST.Strict as ST
505 </programlisting>
506
507       <para>For details on how GHC searches for source and interface
508       files in the presence of hierarchical modules, see <xref
509       linkend="search-path"/>.</para>
510
511       <para>GHC comes with a large collection of libraries arranged
512       hierarchically; see the accompanying <ulink
513       url="../libraries/index.html">library
514       documentation</ulink>.  More libraries to install are available
515       from <ulink
516       url="http://hackage.haskell.org/packages/hackage.html">HackageDB</ulink>.</para>
517     </sect2>
518
519     <!-- ====================== PATTERN GUARDS =======================  -->
520
521 <sect2 id="pattern-guards">
522 <title>Pattern guards</title>
523
524 <para>
525 <indexterm><primary>Pattern guards (Glasgow extension)</primary></indexterm>
526 The discussion that follows is an abbreviated version of Simon Peyton Jones's original <ulink url="http://research.microsoft.com/~simonpj/Haskell/guards.html">proposal</ulink>. (Note that the proposal was written before pattern guards were implemented, so refers to them as unimplemented.)
527 </para>
528
529 <para>
530 Suppose we have an abstract data type of finite maps, with a
531 lookup operation:
532
533 <programlisting>
534 lookup :: FiniteMap -> Int -> Maybe Int
535 </programlisting>
536
537 The lookup returns <function>Nothing</function> if the supplied key is not in the domain of the mapping, and <function>(Just v)</function> otherwise,
538 where <varname>v</varname> is the value that the key maps to.  Now consider the following definition:
539 </para>
540
541 <programlisting>
542 clunky env var1 var2 | ok1 &amp;&amp; ok2 = val1 + val2
543 | otherwise  = var1 + var2
544 where
545   m1 = lookup env var1
546   m2 = lookup env var2
547   ok1 = maybeToBool m1
548   ok2 = maybeToBool m2
549   val1 = expectJust m1
550   val2 = expectJust m2
551 </programlisting>
552
553 <para>
554 The auxiliary functions are 
555 </para>
556
557 <programlisting>
558 maybeToBool :: Maybe a -&gt; Bool
559 maybeToBool (Just x) = True
560 maybeToBool Nothing  = False
561
562 expectJust :: Maybe a -&gt; a
563 expectJust (Just x) = x
564 expectJust Nothing  = error "Unexpected Nothing"
565 </programlisting>
566
567 <para>
568 What is <function>clunky</function> doing? The guard <literal>ok1 &amp;&amp;
569 ok2</literal> checks that both lookups succeed, using
570 <function>maybeToBool</function> to convert the <function>Maybe</function>
571 types to booleans. The (lazily evaluated) <function>expectJust</function>
572 calls extract the values from the results of the lookups, and binds the
573 returned values to <varname>val1</varname> and <varname>val2</varname>
574 respectively.  If either lookup fails, then clunky takes the
575 <literal>otherwise</literal> case and returns the sum of its arguments.
576 </para>
577
578 <para>
579 This is certainly legal Haskell, but it is a tremendously verbose and
580 un-obvious way to achieve the desired effect.  Arguably, a more direct way
581 to write clunky would be to use case expressions:
582 </para>
583
584 <programlisting>
585 clunky env var1 var2 = case lookup env var1 of
586   Nothing -&gt; fail
587   Just val1 -&gt; case lookup env var2 of
588     Nothing -&gt; fail
589     Just val2 -&gt; val1 + val2
590 where
591   fail = var1 + var2
592 </programlisting>
593
594 <para>
595 This is a bit shorter, but hardly better.  Of course, we can rewrite any set
596 of pattern-matching, guarded equations as case expressions; that is
597 precisely what the compiler does when compiling equations! The reason that
598 Haskell provides guarded equations is because they allow us to write down
599 the cases we want to consider, one at a time, independently of each other. 
600 This structure is hidden in the case version.  Two of the right-hand sides
601 are really the same (<function>fail</function>), and the whole expression
602 tends to become more and more indented. 
603 </para>
604
605 <para>
606 Here is how I would write clunky:
607 </para>
608
609 <programlisting>
610 clunky env var1 var2
611   | Just val1 &lt;- lookup env var1
612   , Just val2 &lt;- lookup env var2
613   = val1 + val2
614 ...other equations for clunky...
615 </programlisting>
616
617 <para>
618 The semantics should be clear enough.  The qualifiers are matched in order. 
619 For a <literal>&lt;-</literal> qualifier, which I call a pattern guard, the
620 right hand side is evaluated and matched against the pattern on the left. 
621 If the match fails then the whole guard fails and the next equation is
622 tried.  If it succeeds, then the appropriate binding takes place, and the
623 next qualifier is matched, in the augmented environment.  Unlike list
624 comprehensions, however, the type of the expression to the right of the
625 <literal>&lt;-</literal> is the same as the type of the pattern to its
626 left.  The bindings introduced by pattern guards scope over all the
627 remaining guard qualifiers, and over the right hand side of the equation.
628 </para>
629
630 <para>
631 Just as with list comprehensions, boolean expressions can be freely mixed
632 with among the pattern guards.  For example:
633 </para>
634
635 <programlisting>
636 f x | [y] &lt;- x
637     , y > 3
638     , Just z &lt;- h y
639     = ...
640 </programlisting>
641
642 <para>
643 Haskell's current guards therefore emerge as a special case, in which the
644 qualifier list has just one element, a boolean expression.
645 </para>
646 </sect2>
647
648     <!-- ===================== View patterns ===================  -->
649
650 <sect2 id="view-patterns">
651 <title>View patterns
652 </title>
653
654 <para>
655 View patterns are enabled by the flag <literal>-XViewPatterns</literal>.
656 More information and examples of view patterns can be found on the
657 <ulink url="http://hackage.haskell.org/trac/ghc/wiki/ViewPatterns">Wiki
658 page</ulink>.
659 </para>
660
661 <para>
662 View patterns are somewhat like pattern guards that can be nested inside
663 of other patterns.  They are a convenient way of pattern-matching
664 against values of abstract types. For example, in a programming language
665 implementation, we might represent the syntax of the types of the
666 language as follows:
667
668 <programlisting>
669 type Typ
670  
671 data TypView = Unit
672              | Arrow Typ Typ
673
674 view :: Type -> TypeView
675
676 -- additional operations for constructing Typ's ...
677 </programlisting>
678
679 The representation of Typ is held abstract, permitting implementations
680 to use a fancy representation (e.g., hash-consing to manage sharing).
681
682 Without view patterns, using this signature a little inconvenient: 
683 <programlisting>
684 size :: Typ -> Integer
685 size t = case view t of
686   Unit -> 1
687   Arrow t1 t2 -> size t1 + size t2
688 </programlisting>
689
690 It is necessary to iterate the case, rather than using an equational
691 function definition. And the situation is even worse when the matching
692 against <literal>t</literal> is buried deep inside another pattern.
693 </para>
694
695 <para>
696 View patterns permit calling the view function inside the pattern and
697 matching against the result: 
698 <programlisting>
699 size (view -> Unit) = 1
700 size (view -> Arrow t1 t2) = size t1 + size t2
701 </programlisting>
702
703 That is, we add a new form of pattern, written
704 <replaceable>expression</replaceable> <literal>-></literal>
705 <replaceable>pattern</replaceable> that means "apply the expression to
706 whatever we're trying to match against, and then match the result of
707 that application against the pattern". The expression can be any Haskell
708 expression of function type, and view patterns can be used wherever
709 patterns are used.
710 </para>
711
712 <para>
713 The semantics of a pattern <literal>(</literal>
714 <replaceable>exp</replaceable> <literal>-></literal>
715 <replaceable>pat</replaceable> <literal>)</literal> are as follows:
716
717 <itemizedlist>
718
719 <listitem> Scoping:
720
721 <para>The variables bound by the view pattern are the variables bound by
722 <replaceable>pat</replaceable>.
723 </para>
724
725 <para>
726 Any variables in <replaceable>exp</replaceable> are bound occurrences,
727 but variables bound "to the left" in a pattern are in scope.  This
728 feature permits, for example, one argument to a function to be used in
729 the view of another argument.  For example, the function
730 <literal>clunky</literal> from <xref linkend="pattern-guards" /> can be
731 written using view patterns as follows:
732
733 <programlisting>
734 clunky env (lookup env -> Just val1) (lookup env -> Just val2) = val1 + val2
735 ...other equations for clunky...
736 </programlisting>
737 </para>
738
739 <para>
740 More precisely, the scoping rules are: 
741 <itemizedlist>
742 <listitem>
743 <para>
744 In a single pattern, variables bound by patterns to the left of a view
745 pattern expression are in scope. For example:
746 <programlisting>
747 example :: Maybe ((String -> Integer,Integer), String) -> Bool
748 example Just ((f,_), f -> 4) = True
749 </programlisting>
750
751 Additionally, in function definitions, variables bound by matching earlier curried
752 arguments may be used in view pattern expressions in later arguments:
753 <programlisting>
754 example :: (String -> Integer) -> String -> Bool
755 example f (f -> 4) = True
756 </programlisting>
757 That is, the scoping is the same as it would be if the curried arguments
758 were collected into a tuple.  
759 </para>
760 </listitem>
761
762 <listitem>
763 <para>
764 In mutually recursive bindings, such as <literal>let</literal>,
765 <literal>where</literal>, or the top level, view patterns in one
766 declaration may not mention variables bound by other declarations.  That
767 is, each declaration must be self-contained.  For example, the following
768 program is not allowed:
769 <programlisting>
770 let {(x -> y) = e1 ;
771      (y -> x) = e2 } in x
772 </programlisting>
773
774 (We may lift this
775 restriction in the future; the only cost is that type checking patterns
776 would get a little more complicated.)  
777
778
779 </para>
780 </listitem>
781 </itemizedlist>
782
783 </para>
784 </listitem>
785
786 <listitem><para> Typing: If <replaceable>exp</replaceable> has type
787 <replaceable>T1</replaceable> <literal>-></literal>
788 <replaceable>T2</replaceable> and <replaceable>pat</replaceable> matches
789 a <replaceable>T2</replaceable>, then the whole view pattern matches a
790 <replaceable>T1</replaceable>.
791 </para></listitem>
792
793 <listitem><para> Matching: To the equations in Section 3.17.3 of the
794 <ulink url="http://www.haskell.org/onlinereport/">Haskell 98
795 Report</ulink>, add the following:
796 <programlisting>
797 case v of { (e -> p) -> e1 ; _ -> e2 } 
798  = 
799 case (e v) of { p -> e1 ; _ -> e2 }
800 </programlisting>
801 That is, to match a variable <replaceable>v</replaceable> against a pattern
802 <literal>(</literal> <replaceable>exp</replaceable>
803 <literal>-></literal> <replaceable>pat</replaceable>
804 <literal>)</literal>, evaluate <literal>(</literal>
805 <replaceable>exp</replaceable> <replaceable> v</replaceable>
806 <literal>)</literal> and match the result against
807 <replaceable>pat</replaceable>.  
808 </para></listitem>
809
810 <listitem><para> Efficiency: When the same view function is applied in
811 multiple branches of a function definition or a case expression (e.g.,
812 in <literal>size</literal> above), GHC makes an attempt to collect these
813 applications into a single nested case expression, so that the view
814 function is only applied once.  Pattern compilation in GHC follows the
815 matrix algorithm described in Chapter 4 of <ulink
816 url="http://research.microsoft.com/~simonpj/Papers/slpj-book-1987/">The
817 Implementation of Functional Programming Languages</ulink>.  When the
818 top rows of the first column of a matrix are all view patterns with the
819 "same" expression, these patterns are transformed into a single nested
820 case.  This includes, for example, adjacent view patterns that line up
821 in a tuple, as in
822 <programlisting>
823 f ((view -> A, p1), p2) = e1
824 f ((view -> B, p3), p4) = e2
825 </programlisting>
826 </para>
827
828 <para> The current notion of when two view pattern expressions are "the
829 same" is very restricted: it is not even full syntactic equality.
830 However, it does include variables, literals, applications, and tuples;
831 e.g., two instances of <literal>view ("hi", "there")</literal> will be
832 collected.  However, the current implementation does not compare up to
833 alpha-equivalence, so two instances of <literal>(x, view x ->
834 y)</literal> will not be coalesced.
835 </para>
836
837 </listitem>
838
839 </itemizedlist>
840 </para>
841
842 </sect2>
843
844     <!-- ===================== n+k patterns ===================  -->
845
846 <sect2 id="n-k-patterns">
847 <title>n+k patterns</title>
848 <indexterm><primary><option>-XNoNPlusKPatterns</option></primary></indexterm>
849
850 <para>
851 <literal>n+k</literal> pattern support is enabled by default. To disable
852 it, you can use the <option>-XNoNPlusKPatterns</option> flag.
853 </para>
854
855 </sect2>
856
857     <!-- ===================== Recursive do-notation ===================  -->
858
859 <sect2 id="mdo-notation">
860 <title>The recursive do-notation
861 </title>
862
863 <para>
864 The do-notation of Haskell 98 does not allow <emphasis>recursive bindings</emphasis>,
865 that is, the variables bound in a do-expression are visible only in the textually following 
866 code block. Compare this to a let-expression, where bound variables are visible in the entire binding
867 group. It turns out that several applications can benefit from recursive bindings in
868 the do-notation.  The <option>-XDoRec</option> flag provides the necessary syntactic support.
869 </para>
870 <para>
871 Here is a simple (albeit contrived) example:
872 <programlisting>
873 {-# LANGUAGE DoRec #-}
874 justOnes = do { rec { xs &lt;- Just (1:xs) }
875               ; return (map negate xs) }
876 </programlisting>
877 As you can guess <literal>justOnes</literal> will evaluate to <literal>Just [-1,-1,-1,...</literal>.
878 </para>
879 <para>
880 The background and motivation for recusrive do-notation is described in
881 <ulink url="http://sites.google.com/site/leventerkok/">A recursive do for Haskell</ulink>,
882 by Levent Erkok, John Launchbury,
883 Haskell Workshop 2002, pages: 29-37. Pittsburgh, Pennsylvania. 
884 The theory behind monadic value recursion is explained further in Erkok's thesis
885 <ulink url="http://sites.google.com/site/leventerkok/erkok-thesis.pdf">Value Recursion in Monadic Computations</ulink>.
886 However, note that GHC uses a different syntax than the one described in these documents.
887 </para>
888
889 <sect3>
890 <title>Details of recursive do-notation</title>
891 <para>
892 The recursive do-notation is enabled with the flag <option>-XDoRec</option> or, equivalently,
893 the LANGUAGE pragma <option>DoRec</option>.  It introduces the single new keyword "<literal>rec</literal>",
894 which wraps a mutually-recursive group of monadic statements,
895 producing a single statement.
896 </para>
897 <para>Similar to a <literal>let</literal>
898 statement, the variables bound in the <literal>rec</literal> are 
899 visible throughout the <literal>rec</literal> group, and below it.
900 For example, compare
901 <programlisting>
902 do { a &lt;- getChar              do { a &lt;- getChar                    
903    ; let { r1 = f a r2             ; rec { r1 &lt;- f a r2      
904          ; r2 = g r1 }                   ; r2 &lt;- g r1 }      
905    ; return (r1 ++ r2) }          ; return (r1 ++ r2) }
906 </programlisting>
907 In both cases, <literal>r1</literal> and <literal>r2</literal> are 
908 available both throughout the <literal>let</literal> or <literal>rec</literal> block, and
909 in the statements that follow it.  The difference is that <literal>let</literal> is non-monadic,
910 while <literal>rec</literal> is monadic.  (In Haskell <literal>let</literal> is 
911 really <literal>letrec</literal>, of course.)
912 </para>
913 <para>
914 The static and dynamic semantics of <literal>rec</literal> can be described as follows:  
915 <itemizedlist>
916 <listitem><para>
917 First,
918 similar to let-bindings, the <literal>rec</literal> is broken into 
919 minimal recursive groups, a process known as <emphasis>segmentation</emphasis>.
920 For example:
921 <programlisting>
922 rec { a &lt;- getChar      ===>     a &lt;- getChar
923     ; b &lt;- f a c                 rec { b &lt;- f a c
924     ; c &lt;- f b a                     ; c &lt;- f b a }
925     ; putChar c }                putChar c 
926 </programlisting>
927 The details of segmentation are described in Section 3.2 of
928 <ulink url="http://sites.google.com/site/leventerkok/">A recursive do for Haskell</ulink>.
929 Segmentation improves polymorphism, reduces the size of the recursive "knot", and, as the paper 
930 describes, also has a semantic effect (unless the monad satisfies the right-shrinking law).
931 </para></listitem>
932 <listitem><para>
933 Then each resulting <literal>rec</literal> is desugared, using a call to <literal>Control.Monad.Fix.mfix</literal>.
934 For example, the <literal>rec</literal> group in the preceding example is desugared like this:
935 <programlisting>
936 rec { b &lt;- f a c     ===>    (b,c) &lt;- mfix (\~(b,c) -> do { b &lt;- f a c
937     ; c &lt;- f b a }                                        ; c &lt;- f b a
938                                                           ; return (b,c) })
939 </programlisting>
940 In general, the statment <literal>rec <replaceable>ss</replaceable></literal>
941 is desugared to the statement
942 <programlisting>
943 <replaceable>vs</replaceable> &lt;- mfix (\~<replaceable>vs</replaceable> -&gt; do { <replaceable>ss</replaceable>; return <replaceable>vs</replaceable> })
944 </programlisting>
945 where <replaceable>vs</replaceable> is a tuple of the variables bound by <replaceable>ss</replaceable>.
946 </para><para>
947 The original <literal>rec</literal> typechecks exactly 
948 when the above desugared version would do so.  For example, this means that 
949 the variables <replaceable>vs</replaceable> are all monomorphic in the statements
950 following the <literal>rec</literal>, because they are bound by a lambda.
951 </para>
952 <para>
953 The <literal>mfix</literal> function is defined in the <literal>MonadFix</literal> 
954 class, in <literal>Control.Monad.Fix</literal>, thus:
955 <programlisting>
956 class Monad m => MonadFix m where
957    mfix :: (a -> m a) -> m a
958 </programlisting>
959 </para>
960 </listitem>
961 </itemizedlist>
962 </para>
963 <para>
964 Here are some other important points in using the recursive-do notation:
965 <itemizedlist>
966 <listitem><para>
967 It is enabled with the flag <literal>-XDoRec</literal>, which is in turn implied by
968 <literal>-fglasgow-exts</literal>.
969 </para></listitem>
970
971 <listitem><para>
972 If recursive bindings are required for a monad,
973 then that monad must be declared an instance of the <literal>MonadFix</literal> class.
974 </para></listitem>
975
976 <listitem><para>
977 The following instances of <literal>MonadFix</literal> are automatically provided: List, Maybe, IO. 
978 Furthermore, the Control.Monad.ST and Control.Monad.ST.Lazy modules provide the instances of the MonadFix class 
979 for Haskell's internal state monad (strict and lazy, respectively).
980 </para></listitem>
981
982 <listitem><para>
983 Like <literal>let</literal> and <literal>where</literal> bindings,
984 name shadowing is not allowed within a <literal>rec</literal>; 
985 that is, all the names bound in a single <literal>rec</literal> must
986 be distinct (Section 3.3 of the paper).
987 </para></listitem>
988 <listitem><para>
989 It supports rebindable syntax (see <xref linkend="rebindable-syntax"/>).
990 </para></listitem>
991 </itemizedlist>
992 </para>
993 </sect3>
994
995 <sect3> <title> Mdo-notation (deprecated) </title>
996
997 <para> GHC used to support the flag <option>-XREecursiveDo</option>,
998 which enabled the keyword <literal>mdo</literal>, precisely as described in
999 <ulink url="http://sites.google.com/site/leventerkok/">A recursive do for Haskell</ulink>,
1000 but this is now deprecated.  Instead of <literal>mdo { Q; e }</literal>, write
1001 <literal>do { rec Q; e }</literal>.
1002 </para>
1003 <para>
1004 Historical note: The old implementation of the mdo-notation (and most
1005 of the existing documents) used the name
1006 <literal>MonadRec</literal> for the class and the corresponding library.
1007 This name is not supported by GHC.
1008 </para>
1009 </sect3>
1010
1011 </sect2>
1012
1013
1014    <!-- ===================== PARALLEL LIST COMPREHENSIONS ===================  -->
1015
1016   <sect2 id="parallel-list-comprehensions">
1017     <title>Parallel List Comprehensions</title>
1018     <indexterm><primary>list comprehensions</primary><secondary>parallel</secondary>
1019     </indexterm>
1020     <indexterm><primary>parallel list comprehensions</primary>
1021     </indexterm>
1022
1023     <para>Parallel list comprehensions are a natural extension to list
1024     comprehensions.  List comprehensions can be thought of as a nice
1025     syntax for writing maps and filters.  Parallel comprehensions
1026     extend this to include the zipWith family.</para>
1027
1028     <para>A parallel list comprehension has multiple independent
1029     branches of qualifier lists, each separated by a `|' symbol.  For
1030     example, the following zips together two lists:</para>
1031
1032 <programlisting>
1033    [ (x, y) | x &lt;- xs | y &lt;- ys ] 
1034 </programlisting>
1035
1036     <para>The behavior of parallel list comprehensions follows that of
1037     zip, in that the resulting list will have the same length as the
1038     shortest branch.</para>
1039
1040     <para>We can define parallel list comprehensions by translation to
1041     regular comprehensions.  Here's the basic idea:</para>
1042
1043     <para>Given a parallel comprehension of the form: </para>
1044
1045 <programlisting>
1046    [ e | p1 &lt;- e11, p2 &lt;- e12, ... 
1047        | q1 &lt;- e21, q2 &lt;- e22, ... 
1048        ... 
1049    ] 
1050 </programlisting>
1051
1052     <para>This will be translated to: </para>
1053
1054 <programlisting>
1055    [ e | ((p1,p2), (q1,q2), ...) &lt;- zipN [(p1,p2) | p1 &lt;- e11, p2 &lt;- e12, ...] 
1056                                          [(q1,q2) | q1 &lt;- e21, q2 &lt;- e22, ...] 
1057                                          ... 
1058    ] 
1059 </programlisting>
1060
1061     <para>where `zipN' is the appropriate zip for the given number of
1062     branches.</para>
1063
1064   </sect2>
1065   
1066   <!-- ===================== TRANSFORM LIST COMPREHENSIONS ===================  -->
1067
1068   <sect2 id="generalised-list-comprehensions">
1069     <title>Generalised (SQL-Like) List Comprehensions</title>
1070     <indexterm><primary>list comprehensions</primary><secondary>generalised</secondary>
1071     </indexterm>
1072     <indexterm><primary>extended list comprehensions</primary>
1073     </indexterm>
1074     <indexterm><primary>group</primary></indexterm>
1075     <indexterm><primary>sql</primary></indexterm>
1076
1077
1078     <para>Generalised list comprehensions are a further enhancement to the
1079     list comprehension syntactic sugar to allow operations such as sorting
1080     and grouping which are familiar from SQL.   They are fully described in the
1081         paper <ulink url="http://research.microsoft.com/~simonpj/papers/list-comp">
1082           Comprehensive comprehensions: comprehensions with "order by" and "group by"</ulink>,
1083     except that the syntax we use differs slightly from the paper.</para>
1084 <para>The extension is enabled with the flag <option>-XTransformListComp</option>.</para>
1085 <para>Here is an example: 
1086 <programlisting>
1087 employees = [ ("Simon", "MS", 80)
1088 , ("Erik", "MS", 100)
1089 , ("Phil", "Ed", 40)
1090 , ("Gordon", "Ed", 45)
1091 , ("Paul", "Yale", 60)]
1092
1093 output = [ (the dept, sum salary)
1094 | (name, dept, salary) &lt;- employees
1095 , then group by dept
1096 , then sortWith by (sum salary)
1097 , then take 5 ]
1098 </programlisting>
1099 In this example, the list <literal>output</literal> would take on 
1100     the value:
1101     
1102 <programlisting>
1103 [("Yale", 60), ("Ed", 85), ("MS", 180)]
1104 </programlisting>
1105 </para>
1106 <para>There are three new keywords: <literal>group</literal>, <literal>by</literal>, and <literal>using</literal>.
1107 (The function <literal>sortWith</literal> is not a keyword; it is an ordinary
1108 function that is exported by <literal>GHC.Exts</literal>.)</para>
1109
1110 <para>There are five new forms of comprehension qualifier,
1111 all introduced by the (existing) keyword <literal>then</literal>:
1112     <itemizedlist>
1113     <listitem>
1114     
1115 <programlisting>
1116 then f
1117 </programlisting>
1118
1119     This statement requires that <literal>f</literal> have the type <literal>
1120     forall a. [a] -> [a]</literal>. You can see an example of its use in the
1121     motivating example, as this form is used to apply <literal>take 5</literal>.
1122     
1123     </listitem>
1124     
1125     
1126     <listitem>
1127 <para>
1128 <programlisting>
1129 then f by e
1130 </programlisting>
1131
1132     This form is similar to the previous one, but allows you to create a function
1133     which will be passed as the first argument to f. As a consequence f must have 
1134     the type <literal>forall a. (a -> t) -> [a] -> [a]</literal>. As you can see
1135     from the type, this function lets f &quot;project out&quot; some information 
1136     from the elements of the list it is transforming.</para>
1137
1138     <para>An example is shown in the opening example, where <literal>sortWith</literal> 
1139     is supplied with a function that lets it find out the <literal>sum salary</literal> 
1140     for any item in the list comprehension it transforms.</para>
1141
1142     </listitem>
1143
1144
1145     <listitem>
1146
1147 <programlisting>
1148 then group by e using f
1149 </programlisting>
1150
1151     <para>This is the most general of the grouping-type statements. In this form,
1152     f is required to have type <literal>forall a. (a -> t) -> [a] -> [[a]]</literal>.
1153     As with the <literal>then f by e</literal> case above, the first argument
1154     is a function supplied to f by the compiler which lets it compute e on every
1155     element of the list being transformed. However, unlike the non-grouping case,
1156     f additionally partitions the list into a number of sublists: this means that
1157     at every point after this statement, binders occurring before it in the comprehension
1158     refer to <emphasis>lists</emphasis> of possible values, not single values. To help understand
1159     this, let's look at an example:</para>
1160     
1161 <programlisting>
1162 -- This works similarly to groupWith in GHC.Exts, but doesn't sort its input first
1163 groupRuns :: Eq b => (a -> b) -> [a] -> [[a]]
1164 groupRuns f = groupBy (\x y -> f x == f y)
1165
1166 output = [ (the x, y)
1167 | x &lt;- ([1..3] ++ [1..2])
1168 , y &lt;- [4..6]
1169 , then group by x using groupRuns ]
1170 </programlisting>
1171
1172     <para>This results in the variable <literal>output</literal> taking on the value below:</para>
1173
1174 <programlisting>
1175 [(1, [4, 5, 6]), (2, [4, 5, 6]), (3, [4, 5, 6]), (1, [4, 5, 6]), (2, [4, 5, 6])]
1176 </programlisting>
1177
1178     <para>Note that we have used the <literal>the</literal> function to change the type 
1179     of x from a list to its original numeric type. The variable y, in contrast, is left 
1180     unchanged from the list form introduced by the grouping.</para>
1181
1182     </listitem>
1183
1184     <listitem>
1185
1186 <programlisting>
1187 then group by e
1188 </programlisting>
1189
1190     <para>This form of grouping is essentially the same as the one described above. However,
1191     since no function to use for the grouping has been supplied it will fall back on the
1192     <literal>groupWith</literal> function defined in 
1193     <ulink url="../libraries/base/GHC-Exts.html"><literal>GHC.Exts</literal></ulink>. This
1194     is the form of the group statement that we made use of in the opening example.</para>
1195
1196     </listitem>
1197     
1198     
1199     <listitem>
1200
1201 <programlisting>
1202 then group using f
1203 </programlisting>
1204
1205     <para>With this form of the group statement, f is required to simply have the type
1206     <literal>forall a. [a] -> [[a]]</literal>, which will be used to group up the
1207     comprehension so far directly. An example of this form is as follows:</para>
1208     
1209 <programlisting>
1210 output = [ x
1211 | y &lt;- [1..5]
1212 , x &lt;- "hello"
1213 , then group using inits]
1214 </programlisting>
1215
1216     <para>This will yield a list containing every prefix of the word "hello" written out 5 times:</para>
1217
1218 <programlisting>
1219 ["","h","he","hel","hell","hello","helloh","hellohe","hellohel","hellohell","hellohello","hellohelloh",...]
1220 </programlisting>
1221
1222     </listitem>
1223 </itemizedlist>
1224 </para>
1225   </sect2>
1226
1227    <!-- ===================== REBINDABLE SYNTAX ===================  -->
1228
1229 <sect2 id="rebindable-syntax">
1230 <title>Rebindable syntax and the implicit Prelude import</title>
1231
1232  <para><indexterm><primary>-XNoImplicitPrelude
1233  option</primary></indexterm> GHC normally imports
1234  <filename>Prelude.hi</filename> files for you.  If you'd
1235  rather it didn't, then give it a
1236  <option>-XNoImplicitPrelude</option> option.  The idea is
1237  that you can then import a Prelude of your own.  (But don't
1238  call it <literal>Prelude</literal>; the Haskell module
1239  namespace is flat, and you must not conflict with any
1240  Prelude module.)</para>
1241
1242             <para>Suppose you are importing a Prelude of your own
1243               in order to define your own numeric class
1244             hierarchy.  It completely defeats that purpose if the
1245             literal "1" means "<literal>Prelude.fromInteger
1246             1</literal>", which is what the Haskell Report specifies.
1247             So the <option>-XNoImplicitPrelude</option> 
1248               flag <emphasis>also</emphasis> causes
1249             the following pieces of built-in syntax to refer to
1250             <emphasis>whatever is in scope</emphasis>, not the Prelude
1251             versions:
1252             <itemizedlist>
1253               <listitem>
1254                 <para>An integer literal <literal>368</literal> means
1255                 "<literal>fromInteger (368::Integer)</literal>", rather than
1256                 "<literal>Prelude.fromInteger (368::Integer)</literal>".
1257 </para> </listitem>         
1258
1259       <listitem><para>Fractional literals are handed in just the same way,
1260           except that the translation is 
1261               <literal>fromRational (3.68::Rational)</literal>.
1262 </para> </listitem>         
1263
1264           <listitem><para>The equality test in an overloaded numeric pattern
1265               uses whatever <literal>(==)</literal> is in scope.
1266 </para> </listitem>         
1267
1268           <listitem><para>The subtraction operation, and the
1269           greater-than-or-equal test, in <literal>n+k</literal> patterns
1270               use whatever <literal>(-)</literal> and <literal>(>=)</literal> are in scope.
1271               </para></listitem>
1272
1273               <listitem>
1274                 <para>Negation (e.g. "<literal>- (f x)</literal>")
1275                 means "<literal>negate (f x)</literal>", both in numeric
1276                 patterns, and expressions.
1277               </para></listitem>
1278
1279               <listitem>
1280           <para>"Do" notation is translated using whatever
1281               functions <literal>(>>=)</literal>,
1282               <literal>(>>)</literal>, and <literal>fail</literal>,
1283               are in scope (not the Prelude
1284               versions).  List comprehensions, mdo (<xref linkend="mdo-notation"/>), and parallel array
1285               comprehensions, are unaffected.  </para></listitem>
1286
1287               <listitem>
1288                 <para>Arrow
1289                 notation (see <xref linkend="arrow-notation"/>)
1290                 uses whatever <literal>arr</literal>,
1291                 <literal>(>>>)</literal>, <literal>first</literal>,
1292                 <literal>app</literal>, <literal>(|||)</literal> and
1293                 <literal>loop</literal> functions are in scope. But unlike the
1294                 other constructs, the types of these functions must match the
1295                 Prelude types very closely.  Details are in flux; if you want
1296                 to use this, ask!
1297               </para></listitem>
1298             </itemizedlist>
1299 In all cases (apart from arrow notation), the static semantics should be that of the desugared form,
1300 even if that is a little unexpected. For example, the 
1301 static semantics of the literal <literal>368</literal>
1302 is exactly that of <literal>fromInteger (368::Integer)</literal>; it's fine for
1303 <literal>fromInteger</literal> to have any of the types:
1304 <programlisting>
1305 fromInteger :: Integer -> Integer
1306 fromInteger :: forall a. Foo a => Integer -> a
1307 fromInteger :: Num a => a -> Integer
1308 fromInteger :: Integer -> Bool -> Bool
1309 </programlisting>
1310 </para>
1311                 
1312              <para>Be warned: this is an experimental facility, with
1313              fewer checks than usual.  Use <literal>-dcore-lint</literal>
1314              to typecheck the desugared program.  If Core Lint is happy
1315              you should be all right.</para>
1316
1317 </sect2>
1318
1319 <sect2 id="postfix-operators">
1320 <title>Postfix operators</title>
1321
1322 <para>
1323   The <option>-XPostfixOperators</option> flag enables a small
1324 extension to the syntax of left operator sections, which allows you to
1325 define postfix operators.  The extension is this: the left section
1326 <programlisting>
1327   (e !)
1328 </programlisting>
1329 is equivalent (from the point of view of both type checking and execution) to the expression
1330 <programlisting>
1331   ((!) e)
1332 </programlisting>
1333 (for any expression <literal>e</literal> and operator <literal>(!)</literal>.
1334 The strict Haskell 98 interpretation is that the section is equivalent to
1335 <programlisting>
1336   (\y -> (!) e y)
1337 </programlisting>
1338 That is, the operator must be a function of two arguments.  GHC allows it to
1339 take only one argument, and that in turn allows you to write the function
1340 postfix.
1341 </para>
1342 <para>The extension does not extend to the left-hand side of function
1343 definitions; you must define such a function in prefix form.</para>
1344
1345 </sect2>
1346
1347 <sect2 id="tuple-sections">
1348 <title>Tuple sections</title>
1349
1350 <para>
1351   The <option>-XTupleSections</option> flag enables Python-style partially applied
1352   tuple constructors. For example, the following program
1353 <programlisting>
1354   (, True)
1355 </programlisting>
1356   is considered to be an alternative notation for the more unwieldy alternative
1357 <programlisting>
1358   \x -> (x, True)
1359 </programlisting>
1360 You can omit any combination of arguments to the tuple, as in the following
1361 <programlisting>
1362   (, "I", , , "Love", , 1337)
1363 </programlisting>
1364 which translates to
1365 <programlisting>
1366   \a b c d -> (a, "I", b, c, "Love", d, 1337)
1367 </programlisting>
1368 </para>
1369
1370 <para>
1371   If you have <link linkend="unboxed-tuples">unboxed tuples</link> enabled, tuple sections
1372   will also be available for them, like so
1373 <programlisting>
1374   (# , True #)
1375 </programlisting>
1376 Because there is no unboxed unit tuple, the following expression
1377 <programlisting>
1378   (# #)
1379 </programlisting>
1380 continues to stand for the unboxed singleton tuple data constructor.
1381 </para>
1382
1383 </sect2>
1384
1385 <sect2 id="disambiguate-fields">
1386 <title>Record field disambiguation</title>
1387 <para>
1388 In record construction and record pattern matching
1389 it is entirely unambiguous which field is referred to, even if there are two different
1390 data types in scope with a common field name.  For example:
1391 <programlisting>
1392 module M where
1393   data S = MkS { x :: Int, y :: Bool }
1394
1395 module Foo where
1396   import M
1397
1398   data T = MkT { x :: Int }
1399   
1400   ok1 (MkS { x = n }) = n+1   -- Unambiguous
1401   ok2 n = MkT { x = n+1 }     -- Unambiguous
1402
1403   bad1 k = k { x = 3 }  -- Ambiguous
1404   bad2 k = x k          -- Ambiguous
1405 </programlisting>
1406 Even though there are two <literal>x</literal>'s in scope,
1407 it is clear that the <literal>x</literal> in the pattern in the
1408 definition of <literal>ok1</literal> can only mean the field
1409 <literal>x</literal> from type <literal>S</literal>. Similarly for
1410 the function <literal>ok2</literal>.  However, in the record update
1411 in <literal>bad1</literal> and the record selection in <literal>bad2</literal>
1412 it is not clear which of the two types is intended.
1413 </para>
1414 <para>
1415 Haskell 98 regards all four as ambiguous, but with the
1416 <option>-XDisambiguateRecordFields</option> flag, GHC will accept
1417 the former two.  The rules are precisely the same as those for instance
1418 declarations in Haskell 98, where the method names on the left-hand side 
1419 of the method bindings in an instance declaration refer unambiguously
1420 to the method of that class (provided they are in scope at all), even
1421 if there are other variables in scope with the same name.
1422 This reduces the clutter of qualified names when you import two
1423 records from different modules that use the same field name.
1424 </para>
1425 <para>
1426 Some details:
1427 <itemizedlist>
1428 <listitem><para>
1429 Field disambiguation can be combined with punning (see <xref linkend="record-puns"/>). For exampe:
1430 <programlisting>
1431 module Foo where
1432   import M
1433   x=True
1434   ok3 (MkS { x }) = x+1   -- Uses both disambiguation and punning
1435 </programlisting>
1436 </para></listitem>
1437
1438 <listitem><para>
1439 With <option>-XDisambiguateRecordFields</option> you can use <emphasis>unqualifed</emphasis>
1440 field names even if the correponding selector is only in scope <emphasis>qualified</emphasis>
1441 For example, assuming the same module <literal>M</literal> as in our earlier example, this is legal:
1442 <programlisting>
1443 module Foo where
1444   import qualified M    -- Note qualified
1445
1446   ok4 (M.MkS { x = n }) = n+1   -- Unambiguous
1447 </programlisting>
1448 Since the constructore <literal>MkS</literal> is only in scope qualified, you must
1449 name it <literal>M.MkS</literal>, but the field <literal>x</literal> does not need
1450 to be qualified even though <literal>M.x</literal> is in scope but <literal>x</literal>
1451 is not.  (In effect, it is qualified by the constructor.)
1452 </para></listitem>
1453 </itemizedlist>
1454 </para>
1455
1456 </sect2>
1457
1458     <!-- ===================== Record puns ===================  -->
1459
1460 <sect2 id="record-puns">
1461 <title>Record puns
1462 </title>
1463
1464 <para>
1465 Record puns are enabled by the flag <literal>-XNamedFieldPuns</literal>.
1466 </para>
1467
1468 <para>
1469 When using records, it is common to write a pattern that binds a
1470 variable with the same name as a record field, such as:
1471
1472 <programlisting>
1473 data C = C {a :: Int}
1474 f (C {a = a}) = a
1475 </programlisting>
1476 </para>
1477
1478 <para>
1479 Record punning permits the variable name to be elided, so one can simply
1480 write
1481
1482 <programlisting>
1483 f (C {a}) = a
1484 </programlisting>
1485
1486 to mean the same pattern as above.  That is, in a record pattern, the
1487 pattern <literal>a</literal> expands into the pattern <literal>a =
1488 a</literal> for the same name <literal>a</literal>.  
1489 </para>
1490
1491 <para>
1492 Note that:
1493 <itemizedlist>
1494 <listitem><para>
1495 Record punning can also be used in an expression, writing, for example,
1496 <programlisting>
1497 let a = 1 in C {a}
1498 </programlisting>
1499 instead of 
1500 <programlisting>
1501 let a = 1 in C {a = a}
1502 </programlisting>
1503 The expansion is purely syntactic, so the expanded right-hand side
1504 expression refers to the nearest enclosing variable that is spelled the
1505 same as the field name.
1506 </para></listitem>
1507
1508 <listitem><para>
1509 Puns and other patterns can be mixed in the same record:
1510 <programlisting>
1511 data C = C {a :: Int, b :: Int}
1512 f (C {a, b = 4}) = a
1513 </programlisting>
1514 </para></listitem>
1515
1516 <listitem><para>
1517 Puns can be used wherever record patterns occur (e.g. in
1518 <literal>let</literal> bindings or at the top-level).  
1519 </para></listitem>
1520
1521 <listitem><para>
1522 A pun on a qualified field name is expanded by stripping off the module qualifier.
1523 For example:
1524 <programlisting>
1525 f (C {M.a}) = a
1526 </programlisting>
1527 means
1528 <programlisting>
1529 f (M.C {M.a = a}) = a
1530 </programlisting>
1531 (This is useful if the field selector <literal>a</literal> for constructor <literal>M.C</literal>
1532 is only in scope in qualified form.)
1533 </para></listitem>
1534 </itemizedlist>
1535 </para>
1536
1537
1538 </sect2>
1539
1540     <!-- ===================== Record wildcards ===================  -->
1541
1542 <sect2 id="record-wildcards">
1543 <title>Record wildcards
1544 </title>
1545
1546 <para>
1547 Record wildcards are enabled by the flag <literal>-XRecordWildCards</literal>.
1548 This flag implies <literal>-XDisambiguateRecordFields</literal>.
1549 </para>
1550
1551 <para>
1552 For records with many fields, it can be tiresome to write out each field
1553 individually in a record pattern, as in
1554 <programlisting>
1555 data C = C {a :: Int, b :: Int, c :: Int, d :: Int}
1556 f (C {a = 1, b = b, c = c, d = d}) = b + c + d
1557 </programlisting>
1558 </para>
1559
1560 <para>
1561 Record wildcard syntax permits a "<literal>..</literal>" in a record
1562 pattern, where each elided field <literal>f</literal> is replaced by the
1563 pattern <literal>f = f</literal>.  For example, the above pattern can be
1564 written as
1565 <programlisting>
1566 f (C {a = 1, ..}) = b + c + d
1567 </programlisting>
1568 </para>
1569
1570 <para>
1571 More details:
1572 <itemizedlist>
1573 <listitem><para>
1574 Wildcards can be mixed with other patterns, including puns
1575 (<xref linkend="record-puns"/>); for example, in a pattern <literal>C {a
1576 = 1, b, ..})</literal>.  Additionally, record wildcards can be used
1577 wherever record patterns occur, including in <literal>let</literal>
1578 bindings and at the top-level.  For example, the top-level binding
1579 <programlisting>
1580 C {a = 1, ..} = e
1581 </programlisting>
1582 defines <literal>b</literal>, <literal>c</literal>, and
1583 <literal>d</literal>.
1584 </para></listitem>
1585
1586 <listitem><para>
1587 Record wildcards can also be used in expressions, writing, for example,
1588 <programlisting>
1589 let {a = 1; b = 2; c = 3; d = 4} in C {..}
1590 </programlisting>
1591 in place of
1592 <programlisting>
1593 let {a = 1; b = 2; c = 3; d = 4} in C {a=a, b=b, c=c, d=d}
1594 </programlisting>
1595 The expansion is purely syntactic, so the record wildcard
1596 expression refers to the nearest enclosing variables that are spelled
1597 the same as the omitted field names.
1598 </para></listitem>
1599
1600 <listitem><para>
1601 The "<literal>..</literal>" expands to the missing 
1602 <emphasis>in-scope</emphasis> record fields, where "in scope"
1603 includes both unqualified and qualified-only.  
1604 Any fields that are not in scope are not filled in.  For example
1605 <programlisting>
1606 module M where
1607   data R = R { a,b,c :: Int }
1608 module X where
1609   import qualified M( R(a,b) )
1610   f a b = R { .. }
1611 </programlisting>
1612 The <literal>{..}</literal> expands to <literal>{M.a=a,M.b=b}</literal>,
1613 omitting <literal>c</literal> since it is not in scope at all.
1614 </para></listitem>
1615 </itemizedlist>
1616 </para>
1617
1618 </sect2>
1619
1620     <!-- ===================== Local fixity declarations ===================  -->
1621
1622 <sect2 id="local-fixity-declarations">
1623 <title>Local Fixity Declarations
1624 </title>
1625
1626 <para>A careful reading of the Haskell 98 Report reveals that fixity
1627 declarations (<literal>infix</literal>, <literal>infixl</literal>, and
1628 <literal>infixr</literal>) are permitted to appear inside local bindings
1629 such those introduced by <literal>let</literal> and
1630 <literal>where</literal>.  However, the Haskell Report does not specify
1631 the semantics of such bindings very precisely.
1632 </para>
1633
1634 <para>In GHC, a fixity declaration may accompany a local binding:
1635 <programlisting>
1636 let f = ...
1637     infixr 3 `f`
1638 in 
1639     ...
1640 </programlisting>
1641 and the fixity declaration applies wherever the binding is in scope.
1642 For example, in a <literal>let</literal>, it applies in the right-hand
1643 sides of other <literal>let</literal>-bindings and the body of the
1644 <literal>let</literal>C. Or, in recursive <literal>do</literal>
1645 expressions (<xref linkend="mdo-notation"/>), the local fixity
1646 declarations of a <literal>let</literal> statement scope over other
1647 statements in the group, just as the bound name does.
1648 </para>
1649
1650 <para>
1651 Moreover, a local fixity declaration *must* accompany a local binding of
1652 that name: it is not possible to revise the fixity of name bound
1653 elsewhere, as in
1654 <programlisting>
1655 let infixr 9 $ in ...
1656 </programlisting>
1657
1658 Because local fixity declarations are technically Haskell 98, no flag is
1659 necessary to enable them.
1660 </para>
1661 </sect2>
1662
1663 <sect2 id="package-imports">
1664   <title>Package-qualified imports</title>
1665
1666   <para>With the <option>-XPackageImports</option> flag, GHC allows
1667   import declarations to be qualified by the package name that the
1668     module is intended to be imported from.  For example:</para>
1669
1670 <programlisting>
1671 import "network" Network.Socket
1672 </programlisting>
1673   
1674   <para>would import the module <literal>Network.Socket</literal> from
1675     the package <literal>network</literal> (any version).  This may
1676     be used to disambiguate an import when the same module is
1677     available from multiple packages, or is present in both the
1678     current package being built and an external package.</para>
1679
1680   <para>Note: you probably don't need to use this feature, it was
1681     added mainly so that we can build backwards-compatible versions of
1682     packages when APIs change.  It can lead to fragile dependencies in
1683     the common case: modules occasionally move from one package to
1684     another, rendering any package-qualified imports broken.</para>
1685 </sect2>
1686
1687 <sect2 id="syntax-stolen">
1688 <title>Summary of stolen syntax</title>
1689
1690     <para>Turning on an option that enables special syntax
1691     <emphasis>might</emphasis> cause working Haskell 98 code to fail
1692     to compile, perhaps because it uses a variable name which has
1693     become a reserved word.  This section lists the syntax that is
1694     "stolen" by language extensions.
1695      We use
1696     notation and nonterminal names from the Haskell 98 lexical syntax
1697     (see the Haskell 98 Report).  
1698     We only list syntax changes here that might affect
1699     existing working programs (i.e. "stolen" syntax).  Many of these
1700     extensions will also enable new context-free syntax, but in all
1701     cases programs written to use the new syntax would not be
1702     compilable without the option enabled.</para>
1703
1704 <para>There are two classes of special
1705     syntax:
1706
1707     <itemizedlist>
1708       <listitem>
1709         <para>New reserved words and symbols: character sequences
1710         which are no longer available for use as identifiers in the
1711         program.</para>
1712       </listitem>
1713       <listitem>
1714         <para>Other special syntax: sequences of characters that have
1715         a different meaning when this particular option is turned
1716         on.</para>
1717       </listitem>
1718     </itemizedlist>
1719     
1720 The following syntax is stolen:
1721
1722     <variablelist>
1723       <varlistentry>
1724         <term>
1725           <literal>forall</literal>
1726           <indexterm><primary><literal>forall</literal></primary></indexterm>
1727         </term>
1728         <listitem><para>
1729         Stolen (in types) by: <option>-XExplicitForAll</option>, and hence by
1730             <option>-XScopedTypeVariables</option>,
1731             <option>-XLiberalTypeSynonyms</option>,
1732             <option>-XRank2Types</option>,
1733             <option>-XRankNTypes</option>,
1734             <option>-XPolymorphicComponents</option>,
1735             <option>-XExistentialQuantification</option>
1736           </para></listitem>
1737       </varlistentry>
1738
1739       <varlistentry>
1740         <term>
1741           <literal>mdo</literal>
1742           <indexterm><primary><literal>mdo</literal></primary></indexterm>
1743         </term>
1744         <listitem><para>
1745         Stolen by: <option>-XRecursiveDo</option>,
1746           </para></listitem>
1747       </varlistentry>
1748
1749       <varlistentry>
1750         <term>
1751           <literal>foreign</literal>
1752           <indexterm><primary><literal>foreign</literal></primary></indexterm>
1753         </term>
1754         <listitem><para>
1755         Stolen by: <option>-XForeignFunctionInterface</option>,
1756           </para></listitem>
1757       </varlistentry>
1758
1759       <varlistentry>
1760         <term>
1761           <literal>rec</literal>,
1762           <literal>proc</literal>, <literal>-&lt;</literal>,
1763           <literal>&gt;-</literal>, <literal>-&lt;&lt;</literal>,
1764           <literal>&gt;&gt;-</literal>, and <literal>(|</literal>,
1765           <literal>|)</literal> brackets
1766           <indexterm><primary><literal>proc</literal></primary></indexterm>
1767         </term>
1768         <listitem><para>
1769         Stolen by: <option>-XArrows</option>,
1770           </para></listitem>
1771       </varlistentry>
1772
1773       <varlistentry>
1774         <term>
1775           <literal>?<replaceable>varid</replaceable></literal>,
1776           <literal>%<replaceable>varid</replaceable></literal>
1777           <indexterm><primary>implicit parameters</primary></indexterm>
1778         </term>
1779         <listitem><para>
1780         Stolen by: <option>-XImplicitParams</option>,
1781           </para></listitem>
1782       </varlistentry>
1783
1784       <varlistentry>
1785         <term>
1786           <literal>[|</literal>,
1787           <literal>[e|</literal>, <literal>[p|</literal>,
1788           <literal>[d|</literal>, <literal>[t|</literal>,
1789           <literal>$(</literal>,
1790           <literal>$<replaceable>varid</replaceable></literal>
1791           <indexterm><primary>Template Haskell</primary></indexterm>
1792         </term>
1793         <listitem><para>
1794         Stolen by: <option>-XTemplateHaskell</option>,
1795           </para></listitem>
1796       </varlistentry>
1797
1798       <varlistentry>
1799         <term>
1800           <literal>[:<replaceable>varid</replaceable>|</literal>
1801           <indexterm><primary>quasi-quotation</primary></indexterm>
1802         </term>
1803         <listitem><para>
1804         Stolen by: <option>-XQuasiQuotes</option>,
1805           </para></listitem>
1806       </varlistentry>
1807
1808       <varlistentry>
1809         <term>
1810               <replaceable>varid</replaceable>{<literal>&num;</literal>},
1811               <replaceable>char</replaceable><literal>&num;</literal>,      
1812               <replaceable>string</replaceable><literal>&num;</literal>,    
1813               <replaceable>integer</replaceable><literal>&num;</literal>,    
1814               <replaceable>float</replaceable><literal>&num;</literal>,    
1815               <replaceable>float</replaceable><literal>&num;&num;</literal>,    
1816               <literal>(&num;</literal>, <literal>&num;)</literal>,         
1817         </term>
1818         <listitem><para>
1819         Stolen by: <option>-XMagicHash</option>,
1820           </para></listitem>
1821       </varlistentry>
1822     </variablelist>
1823 </para>
1824 </sect2>
1825 </sect1>
1826
1827
1828 <!-- TYPE SYSTEM EXTENSIONS -->
1829 <sect1 id="data-type-extensions">
1830 <title>Extensions to data types and type synonyms</title>
1831
1832 <sect2 id="nullary-types">
1833 <title>Data types with no constructors</title>
1834
1835 <para>With the <option>-fglasgow-exts</option> flag, GHC lets you declare
1836 a data type with no constructors.  For example:</para>
1837
1838 <programlisting>
1839   data S      -- S :: *
1840   data T a    -- T :: * -> *
1841 </programlisting>
1842
1843 <para>Syntactically, the declaration lacks the "= constrs" part.  The 
1844 type can be parameterised over types of any kind, but if the kind is
1845 not <literal>*</literal> then an explicit kind annotation must be used
1846 (see <xref linkend="kinding"/>).</para>
1847
1848 <para>Such data types have only one value, namely bottom.
1849 Nevertheless, they can be useful when defining "phantom types".</para>
1850 </sect2>
1851
1852 <sect2 id="infix-tycons">
1853 <title>Infix type constructors, classes, and type variables</title>
1854
1855 <para>
1856 GHC allows type constructors, classes, and type variables to be operators, and
1857 to be written infix, very much like expressions.  More specifically:
1858 <itemizedlist>
1859 <listitem><para>
1860   A type constructor or class can be an operator, beginning with a colon; e.g. <literal>:*:</literal>.
1861   The lexical syntax is the same as that for data constructors.
1862   </para></listitem>
1863 <listitem><para>
1864   Data type and type-synonym declarations can be written infix, parenthesised
1865   if you want further arguments.  E.g.
1866 <screen>
1867   data a :*: b = Foo a b
1868   type a :+: b = Either a b
1869   class a :=: b where ...
1870
1871   data (a :**: b) x = Baz a b x
1872   type (a :++: b) y = Either (a,b) y
1873 </screen>
1874   </para></listitem>
1875 <listitem><para>
1876   Types, and class constraints, can be written infix.  For example
1877   <screen>
1878         x :: Int :*: Bool
1879         f :: (a :=: b) => a -> b
1880   </screen>
1881   </para></listitem>
1882 <listitem><para>
1883   A type variable can be an (unqualified) operator e.g. <literal>+</literal>.
1884   The lexical syntax is the same as that for variable operators, excluding "(.)",
1885   "(!)", and "(*)".  In a binding position, the operator must be
1886   parenthesised.  For example:
1887 <programlisting>
1888    type T (+) = Int + Int
1889    f :: T Either
1890    f = Left 3
1891  
1892    liftA2 :: Arrow (~>)
1893           => (a -> b -> c) -> (e ~> a) -> (e ~> b) -> (e ~> c)
1894    liftA2 = ...
1895 </programlisting>
1896   </para></listitem>
1897 <listitem><para>
1898   Back-quotes work
1899   as for expressions, both for type constructors and type variables;  e.g. <literal>Int `Either` Bool</literal>, or
1900   <literal>Int `a` Bool</literal>.  Similarly, parentheses work the same; e.g.  <literal>(:*:) Int Bool</literal>.
1901   </para></listitem>
1902 <listitem><para>
1903   Fixities may be declared for type constructors, or classes, just as for data constructors.  However,
1904   one cannot distinguish between the two in a fixity declaration; a fixity declaration
1905   sets the fixity for a data constructor and the corresponding type constructor.  For example:
1906 <screen>
1907   infixl 7 T, :*:
1908 </screen>
1909   sets the fixity for both type constructor <literal>T</literal> and data constructor <literal>T</literal>,
1910   and similarly for <literal>:*:</literal>.
1911   <literal>Int `a` Bool</literal>.
1912   </para></listitem>
1913 <listitem><para>
1914   Function arrow is <literal>infixr</literal> with fixity 0.  (This might change; I'm not sure what it should be.)
1915   </para></listitem>
1916
1917 </itemizedlist>
1918 </para>
1919 </sect2>
1920
1921 <sect2 id="type-synonyms">
1922 <title>Liberalised type synonyms</title>
1923
1924 <para>
1925 Type synonyms are like macros at the type level, but Haskell 98 imposes many rules
1926 on individual synonym declarations.
1927 With the <option>-XLiberalTypeSynonyms</option> extension,
1928 GHC does validity checking on types <emphasis>only after expanding type synonyms</emphasis>.
1929 That means that GHC can be very much more liberal about type synonyms than Haskell 98. 
1930
1931 <itemizedlist>
1932 <listitem> <para>You can write a <literal>forall</literal> (including overloading)
1933 in a type synonym, thus:
1934 <programlisting>
1935   type Discard a = forall b. Show b => a -> b -> (a, String)
1936
1937   f :: Discard a
1938   f x y = (x, show y)
1939
1940   g :: Discard Int -> (Int,String)    -- A rank-2 type
1941   g f = f 3 True
1942 </programlisting>
1943 </para>
1944 </listitem>
1945
1946 <listitem><para>
1947 If you also use <option>-XUnboxedTuples</option>, 
1948 you can write an unboxed tuple in a type synonym:
1949 <programlisting>
1950   type Pr = (# Int, Int #)
1951
1952   h :: Int -> Pr
1953   h x = (# x, x #)
1954 </programlisting>
1955 </para></listitem>
1956
1957 <listitem><para>
1958 You can apply a type synonym to a forall type:
1959 <programlisting>
1960   type Foo a = a -> a -> Bool
1961  
1962   f :: Foo (forall b. b->b)
1963 </programlisting>
1964 After expanding the synonym, <literal>f</literal> has the legal (in GHC) type:
1965 <programlisting>
1966   f :: (forall b. b->b) -> (forall b. b->b) -> Bool
1967 </programlisting>
1968 </para></listitem>
1969
1970 <listitem><para>
1971 You can apply a type synonym to a partially applied type synonym:
1972 <programlisting>
1973   type Generic i o = forall x. i x -> o x
1974   type Id x = x
1975   
1976   foo :: Generic Id []
1977 </programlisting>
1978 After expanding the synonym, <literal>foo</literal> has the legal (in GHC) type:
1979 <programlisting>
1980   foo :: forall x. x -> [x]
1981 </programlisting>
1982 </para></listitem>
1983
1984 </itemizedlist>
1985 </para>
1986
1987 <para>
1988 GHC currently does kind checking before expanding synonyms (though even that
1989 could be changed.)
1990 </para>
1991 <para>
1992 After expanding type synonyms, GHC does validity checking on types, looking for
1993 the following mal-formedness which isn't detected simply by kind checking:
1994 <itemizedlist>
1995 <listitem><para>
1996 Type constructor applied to a type involving for-alls.
1997 </para></listitem>
1998 <listitem><para>
1999 Unboxed tuple on left of an arrow.
2000 </para></listitem>
2001 <listitem><para>
2002 Partially-applied type synonym.
2003 </para></listitem>
2004 </itemizedlist>
2005 So, for example,
2006 this will be rejected:
2007 <programlisting>
2008   type Pr = (# Int, Int #)
2009
2010   h :: Pr -> Int
2011   h x = ...
2012 </programlisting>
2013 because GHC does not allow  unboxed tuples on the left of a function arrow.
2014 </para>
2015 </sect2>
2016
2017
2018 <sect2 id="existential-quantification">
2019 <title>Existentially quantified data constructors
2020 </title>
2021
2022 <para>
2023 The idea of using existential quantification in data type declarations
2024 was suggested by Perry, and implemented in Hope+ (Nigel Perry, <emphasis>The Implementation
2025 of Practical Functional Programming Languages</emphasis>, PhD Thesis, University of
2026 London, 1991). It was later formalised by Laufer and Odersky
2027 (<emphasis>Polymorphic type inference and abstract data types</emphasis>,
2028 TOPLAS, 16(5), pp1411-1430, 1994).
2029 It's been in Lennart
2030 Augustsson's <command>hbc</command> Haskell compiler for several years, and
2031 proved very useful.  Here's the idea.  Consider the declaration:
2032 </para>
2033
2034 <para>
2035
2036 <programlisting>
2037   data Foo = forall a. MkFoo a (a -> Bool)
2038            | Nil
2039 </programlisting>
2040
2041 </para>
2042
2043 <para>
2044 The data type <literal>Foo</literal> has two constructors with types:
2045 </para>
2046
2047 <para>
2048
2049 <programlisting>
2050   MkFoo :: forall a. a -> (a -> Bool) -> Foo
2051   Nil   :: Foo
2052 </programlisting>
2053
2054 </para>
2055
2056 <para>
2057 Notice that the type variable <literal>a</literal> in the type of <function>MkFoo</function>
2058 does not appear in the data type itself, which is plain <literal>Foo</literal>.
2059 For example, the following expression is fine:
2060 </para>
2061
2062 <para>
2063
2064 <programlisting>
2065   [MkFoo 3 even, MkFoo 'c' isUpper] :: [Foo]
2066 </programlisting>
2067
2068 </para>
2069
2070 <para>
2071 Here, <literal>(MkFoo 3 even)</literal> packages an integer with a function
2072 <function>even</function> that maps an integer to <literal>Bool</literal>; and <function>MkFoo 'c'
2073 isUpper</function> packages a character with a compatible function.  These
2074 two things are each of type <literal>Foo</literal> and can be put in a list.
2075 </para>
2076
2077 <para>
2078 What can we do with a value of type <literal>Foo</literal>?.  In particular,
2079 what happens when we pattern-match on <function>MkFoo</function>?
2080 </para>
2081
2082 <para>
2083
2084 <programlisting>
2085   f (MkFoo val fn) = ???
2086 </programlisting>
2087
2088 </para>
2089
2090 <para>
2091 Since all we know about <literal>val</literal> and <function>fn</function> is that they
2092 are compatible, the only (useful) thing we can do with them is to
2093 apply <function>fn</function> to <literal>val</literal> to get a boolean.  For example:
2094 </para>
2095
2096 <para>
2097
2098 <programlisting>
2099   f :: Foo -> Bool
2100   f (MkFoo val fn) = fn val
2101 </programlisting>
2102
2103 </para>
2104
2105 <para>
2106 What this allows us to do is to package heterogeneous values
2107 together with a bunch of functions that manipulate them, and then treat
2108 that collection of packages in a uniform manner.  You can express
2109 quite a bit of object-oriented-like programming this way.
2110 </para>
2111
2112 <sect3 id="existential">
2113 <title>Why existential?
2114 </title>
2115
2116 <para>
2117 What has this to do with <emphasis>existential</emphasis> quantification?
2118 Simply that <function>MkFoo</function> has the (nearly) isomorphic type
2119 </para>
2120
2121 <para>
2122
2123 <programlisting>
2124   MkFoo :: (exists a . (a, a -> Bool)) -> Foo
2125 </programlisting>
2126
2127 </para>
2128
2129 <para>
2130 But Haskell programmers can safely think of the ordinary
2131 <emphasis>universally</emphasis> quantified type given above, thereby avoiding
2132 adding a new existential quantification construct.
2133 </para>
2134
2135 </sect3>
2136
2137 <sect3 id="existential-with-context">
2138 <title>Existentials and type classes</title>
2139
2140 <para>
2141 An easy extension is to allow
2142 arbitrary contexts before the constructor.  For example:
2143 </para>
2144
2145 <para>
2146
2147 <programlisting>
2148 data Baz = forall a. Eq a => Baz1 a a
2149          | forall b. Show b => Baz2 b (b -> b)
2150 </programlisting>
2151
2152 </para>
2153
2154 <para>
2155 The two constructors have the types you'd expect:
2156 </para>
2157
2158 <para>
2159
2160 <programlisting>
2161 Baz1 :: forall a. Eq a => a -> a -> Baz
2162 Baz2 :: forall b. Show b => b -> (b -> b) -> Baz
2163 </programlisting>
2164
2165 </para>
2166
2167 <para>
2168 But when pattern matching on <function>Baz1</function> the matched values can be compared
2169 for equality, and when pattern matching on <function>Baz2</function> the first matched
2170 value can be converted to a string (as well as applying the function to it).
2171 So this program is legal:
2172 </para>
2173
2174 <para>
2175
2176 <programlisting>
2177   f :: Baz -> String
2178   f (Baz1 p q) | p == q    = "Yes"
2179                | otherwise = "No"
2180   f (Baz2 v fn)            = show (fn v)
2181 </programlisting>
2182
2183 </para>
2184
2185 <para>
2186 Operationally, in a dictionary-passing implementation, the
2187 constructors <function>Baz1</function> and <function>Baz2</function> must store the
2188 dictionaries for <literal>Eq</literal> and <literal>Show</literal> respectively, and
2189 extract it on pattern matching.
2190 </para>
2191
2192 </sect3>
2193
2194 <sect3 id="existential-records">
2195 <title>Record Constructors</title>
2196
2197 <para>
2198 GHC allows existentials to be used with records syntax as well.  For example:
2199
2200 <programlisting>
2201 data Counter a = forall self. NewCounter
2202     { _this    :: self
2203     , _inc     :: self -> self
2204     , _display :: self -> IO ()
2205     , tag      :: a
2206     }
2207 </programlisting>
2208 Here <literal>tag</literal> is a public field, with a well-typed selector
2209 function <literal>tag :: Counter a -> a</literal>.  The <literal>self</literal>
2210 type is hidden from the outside; any attempt to apply <literal>_this</literal>,
2211 <literal>_inc</literal> or <literal>_display</literal> as functions will raise a
2212 compile-time error.  In other words, <emphasis>GHC defines a record selector function
2213 only for fields whose type does not mention the existentially-quantified variables</emphasis>.
2214 (This example used an underscore in the fields for which record selectors
2215 will not be defined, but that is only programming style; GHC ignores them.)
2216 </para>
2217
2218 <para>
2219 To make use of these hidden fields, we need to create some helper functions:
2220
2221 <programlisting>
2222 inc :: Counter a -> Counter a
2223 inc (NewCounter x i d t) = NewCounter
2224     { _this = i x, _inc = i, _display = d, tag = t } 
2225
2226 display :: Counter a -> IO ()
2227 display NewCounter{ _this = x, _display = d } = d x
2228 </programlisting>
2229
2230 Now we can define counters with different underlying implementations:
2231
2232 <programlisting>
2233 counterA :: Counter String 
2234 counterA = NewCounter
2235     { _this = 0, _inc = (1+), _display = print, tag = "A" }
2236
2237 counterB :: Counter String 
2238 counterB = NewCounter
2239     { _this = "", _inc = ('#':), _display = putStrLn, tag = "B" }
2240
2241 main = do
2242     display (inc counterA)         -- prints "1"
2243     display (inc (inc counterB))   -- prints "##"
2244 </programlisting>
2245
2246 Record update syntax is supported for existentials (and GADTs):
2247 <programlisting>
2248 setTag :: Counter a -> a -> Counter a
2249 setTag obj t = obj{ tag = t }
2250 </programlisting>
2251 The rule for record update is this: <emphasis>
2252 the types of the updated fields may
2253 mention only the universally-quantified type variables
2254 of the data constructor.  For GADTs, the field may mention only types
2255 that appear as a simple type-variable argument in the constructor's result
2256 type</emphasis>.  For example:
2257 <programlisting>
2258 data T a b where { T1 { f1::a, f2::b, f3::(b,c) } :: T a b } -- c is existential
2259 upd1 t x = t { f1=x }   -- OK:   upd1 :: T a b -> a' -> T a' b
2260 upd2 t x = t { f3=x }   -- BAD   (f3's type mentions c, which is
2261                         --        existentially quantified)
2262
2263 data G a b where { G1 { g1::a, g2::c } :: G a [c] }
2264 upd3 g x = g { g1=x }   -- OK:   upd3 :: G a b -> c -> G c b
2265 upd4 g x = g { g2=x }   -- BAD (f2's type mentions c, which is not a simple
2266                         --      type-variable argument in G1's result type)
2267 </programlisting>
2268 </para>
2269
2270 </sect3>
2271
2272
2273 <sect3>
2274 <title>Restrictions</title>
2275
2276 <para>
2277 There are several restrictions on the ways in which existentially-quantified
2278 constructors can be use.
2279 </para>
2280
2281 <para>
2282
2283 <itemizedlist>
2284 <listitem>
2285
2286 <para>
2287  When pattern matching, each pattern match introduces a new,
2288 distinct, type for each existential type variable.  These types cannot
2289 be unified with any other type, nor can they escape from the scope of
2290 the pattern match.  For example, these fragments are incorrect:
2291
2292
2293 <programlisting>
2294 f1 (MkFoo a f) = a
2295 </programlisting>
2296
2297
2298 Here, the type bound by <function>MkFoo</function> "escapes", because <literal>a</literal>
2299 is the result of <function>f1</function>.  One way to see why this is wrong is to
2300 ask what type <function>f1</function> has:
2301
2302
2303 <programlisting>
2304   f1 :: Foo -> a             -- Weird!
2305 </programlisting>
2306
2307
2308 What is this "<literal>a</literal>" in the result type? Clearly we don't mean
2309 this:
2310
2311
2312 <programlisting>
2313   f1 :: forall a. Foo -> a   -- Wrong!
2314 </programlisting>
2315
2316
2317 The original program is just plain wrong.  Here's another sort of error
2318
2319
2320 <programlisting>
2321   f2 (Baz1 a b) (Baz1 p q) = a==q
2322 </programlisting>
2323
2324
2325 It's ok to say <literal>a==b</literal> or <literal>p==q</literal>, but
2326 <literal>a==q</literal> is wrong because it equates the two distinct types arising
2327 from the two <function>Baz1</function> constructors.
2328
2329
2330 </para>
2331 </listitem>
2332 <listitem>
2333
2334 <para>
2335 You can't pattern-match on an existentially quantified
2336 constructor in a <literal>let</literal> or <literal>where</literal> group of
2337 bindings. So this is illegal:
2338
2339
2340 <programlisting>
2341   f3 x = a==b where { Baz1 a b = x }
2342 </programlisting>
2343
2344 Instead, use a <literal>case</literal> expression:
2345
2346 <programlisting>
2347   f3 x = case x of Baz1 a b -> a==b
2348 </programlisting>
2349
2350 In general, you can only pattern-match
2351 on an existentially-quantified constructor in a <literal>case</literal> expression or
2352 in the patterns of a function definition.
2353
2354 The reason for this restriction is really an implementation one.
2355 Type-checking binding groups is already a nightmare without
2356 existentials complicating the picture.  Also an existential pattern
2357 binding at the top level of a module doesn't make sense, because it's
2358 not clear how to prevent the existentially-quantified type "escaping".
2359 So for now, there's a simple-to-state restriction.  We'll see how
2360 annoying it is.
2361
2362 </para>
2363 </listitem>
2364 <listitem>
2365
2366 <para>
2367 You can't use existential quantification for <literal>newtype</literal>
2368 declarations.  So this is illegal:
2369
2370
2371 <programlisting>
2372   newtype T = forall a. Ord a => MkT a
2373 </programlisting>
2374
2375
2376 Reason: a value of type <literal>T</literal> must be represented as a
2377 pair of a dictionary for <literal>Ord t</literal> and a value of type
2378 <literal>t</literal>.  That contradicts the idea that
2379 <literal>newtype</literal> should have no concrete representation.
2380 You can get just the same efficiency and effect by using
2381 <literal>data</literal> instead of <literal>newtype</literal>.  If
2382 there is no overloading involved, then there is more of a case for
2383 allowing an existentially-quantified <literal>newtype</literal>,
2384 because the <literal>data</literal> version does carry an
2385 implementation cost, but single-field existentially quantified
2386 constructors aren't much use.  So the simple restriction (no
2387 existential stuff on <literal>newtype</literal>) stands, unless there
2388 are convincing reasons to change it.
2389
2390
2391 </para>
2392 </listitem>
2393 <listitem>
2394
2395 <para>
2396  You can't use <literal>deriving</literal> to define instances of a
2397 data type with existentially quantified data constructors.
2398
2399 Reason: in most cases it would not make sense. For example:;
2400
2401 <programlisting>
2402 data T = forall a. MkT [a] deriving( Eq )
2403 </programlisting>
2404
2405 To derive <literal>Eq</literal> in the standard way we would need to have equality
2406 between the single component of two <function>MkT</function> constructors:
2407
2408 <programlisting>
2409 instance Eq T where
2410   (MkT a) == (MkT b) = ???
2411 </programlisting>
2412
2413 But <varname>a</varname> and <varname>b</varname> have distinct types, and so can't be compared.
2414 It's just about possible to imagine examples in which the derived instance
2415 would make sense, but it seems altogether simpler simply to prohibit such
2416 declarations.  Define your own instances!
2417 </para>
2418 </listitem>
2419
2420 </itemizedlist>
2421
2422 </para>
2423
2424 </sect3>
2425 </sect2>
2426
2427 <!-- ====================== Generalised algebraic data types =======================  -->
2428
2429 <sect2 id="gadt-style">
2430 <title>Declaring data types with explicit constructor signatures</title>
2431
2432 <para>GHC allows you to declare an algebraic data type by 
2433 giving the type signatures of constructors explicitly.  For example:
2434 <programlisting>
2435   data Maybe a where
2436       Nothing :: Maybe a
2437       Just    :: a -> Maybe a
2438 </programlisting>
2439 The form is called a "GADT-style declaration"
2440 because Generalised Algebraic Data Types, described in <xref linkend="gadt"/>, 
2441 can only be declared using this form.</para>
2442 <para>Notice that GADT-style syntax generalises existential types (<xref linkend="existential-quantification"/>).  
2443 For example, these two declarations are equivalent:
2444 <programlisting>
2445   data Foo = forall a. MkFoo a (a -> Bool)
2446   data Foo' where { MKFoo :: a -> (a->Bool) -> Foo' }
2447 </programlisting>
2448 </para>
2449 <para>Any data type that can be declared in standard Haskell-98 syntax 
2450 can also be declared using GADT-style syntax.
2451 The choice is largely stylistic, but GADT-style declarations differ in one important respect:
2452 they treat class constraints on the data constructors differently.
2453 Specifically, if the constructor is given a type-class context, that
2454 context is made available by pattern matching.  For example:
2455 <programlisting>
2456   data Set a where
2457     MkSet :: Eq a => [a] -> Set a
2458
2459   makeSet :: Eq a => [a] -> Set a
2460   makeSet xs = MkSet (nub xs)
2461
2462   insert :: a -> Set a -> Set a
2463   insert a (MkSet as) | a `elem` as = MkSet as
2464                       | otherwise   = MkSet (a:as)
2465 </programlisting>
2466 A use of <literal>MkSet</literal> as a constructor (e.g. in the definition of <literal>makeSet</literal>) 
2467 gives rise to a <literal>(Eq a)</literal>
2468 constraint, as you would expect.  The new feature is that pattern-matching on <literal>MkSet</literal>
2469 (as in the definition of <literal>insert</literal>) makes <emphasis>available</emphasis> an <literal>(Eq a)</literal>
2470 context.  In implementation terms, the <literal>MkSet</literal> constructor has a hidden field that stores
2471 the <literal>(Eq a)</literal> dictionary that is passed to <literal>MkSet</literal>; so
2472 when pattern-matching that dictionary becomes available for the right-hand side of the match.
2473 In the example, the equality dictionary is used to satisfy the equality constraint 
2474 generated by the call to <literal>elem</literal>, so that the type of
2475 <literal>insert</literal> itself has no <literal>Eq</literal> constraint.
2476 </para>
2477 <para>
2478 For example, one possible application is to reify dictionaries:
2479 <programlisting>
2480    data NumInst a where
2481      MkNumInst :: Num a => NumInst a
2482
2483    intInst :: NumInst Int
2484    intInst = MkNumInst
2485
2486    plus :: NumInst a -> a -> a -> a
2487    plus MkNumInst p q = p + q
2488 </programlisting>
2489 Here, a value of type <literal>NumInst a</literal> is equivalent 
2490 to an explicit <literal>(Num a)</literal> dictionary.
2491 </para>
2492 <para>
2493 All this applies to constructors declared using the syntax of <xref linkend="existential-with-context"/>.
2494 For example, the <literal>NumInst</literal> data type above could equivalently be declared 
2495 like this:
2496 <programlisting>
2497    data NumInst a 
2498       = Num a => MkNumInst (NumInst a)
2499 </programlisting>
2500 Notice that, unlike the situation when declaring an existential, there is 
2501 no <literal>forall</literal>, because the <literal>Num</literal> constrains the
2502 data type's universally quantified type variable <literal>a</literal>.  
2503 A constructor may have both universal and existential type variables: for example,
2504 the following two declarations are equivalent:
2505 <programlisting>
2506    data T1 a 
2507         = forall b. (Num a, Eq b) => MkT1 a b
2508    data T2 a where
2509         MkT2 :: (Num a, Eq b) => a -> b -> T2 a
2510 </programlisting>
2511 </para>
2512 <para>All this behaviour contrasts with Haskell 98's peculiar treatment of 
2513 contexts on a data type declaration (Section 4.2.1 of the Haskell 98 Report).
2514 In Haskell 98 the definition
2515 <programlisting>
2516   data Eq a => Set' a = MkSet' [a]
2517 </programlisting>
2518 gives <literal>MkSet'</literal> the same type as <literal>MkSet</literal> above.  But instead of 
2519 <emphasis>making available</emphasis> an <literal>(Eq a)</literal> constraint, pattern-matching
2520 on <literal>MkSet'</literal> <emphasis>requires</emphasis> an <literal>(Eq a)</literal> constraint!
2521 GHC faithfully implements this behaviour, odd though it is.  But for GADT-style declarations,
2522 GHC's behaviour is much more useful, as well as much more intuitive.
2523 </para>
2524
2525 <para>
2526 The rest of this section gives further details about GADT-style data
2527 type declarations.
2528
2529 <itemizedlist>
2530 <listitem><para>
2531 The result type of each data constructor must begin with the type constructor being defined.
2532 If the result type of all constructors 
2533 has the form <literal>T a1 ... an</literal>, where <literal>a1 ... an</literal>
2534 are distinct type variables, then the data type is <emphasis>ordinary</emphasis>;
2535 otherwise is a <emphasis>generalised</emphasis> data type (<xref linkend="gadt"/>).
2536 </para></listitem>
2537
2538 <listitem><para>
2539 As with other type signatures, you can give a single signature for several data constructors.
2540 In this example we give a single signature for <literal>T1</literal> and <literal>T2</literal>:
2541 <programlisting>
2542   data T a where
2543     T1,T2 :: a -> T a
2544     T3 :: T a
2545 </programlisting>
2546 </para></listitem>
2547
2548 <listitem><para>
2549 The type signature of
2550 each constructor is independent, and is implicitly universally quantified as usual. 
2551 In particular, the type variable(s) in the "<literal>data T a where</literal>" header 
2552 have no scope, and different constructors may have different universally-quantified type variables:
2553 <programlisting>
2554   data T a where        -- The 'a' has no scope
2555     T1,T2 :: b -> T b   -- Means forall b. b -> T b
2556     T3 :: T a           -- Means forall a. T a
2557 </programlisting>
2558 </para></listitem>
2559
2560 <listitem><para>
2561 A constructor signature may mention type class constraints, which can differ for
2562 different constructors.  For example, this is fine:
2563 <programlisting>
2564   data T a where
2565     T1 :: Eq b => b -> b -> T b
2566     T2 :: (Show c, Ix c) => c -> [c] -> T c
2567 </programlisting>
2568 When patten matching, these constraints are made available to discharge constraints
2569 in the body of the match. For example:
2570 <programlisting>
2571   f :: T a -> String
2572   f (T1 x y) | x==y      = "yes"
2573              | otherwise = "no"
2574   f (T2 a b)             = show a
2575 </programlisting>
2576 Note that <literal>f</literal> is not overloaded; the <literal>Eq</literal> constraint arising
2577 from the use of <literal>==</literal> is discharged by the pattern match on <literal>T1</literal>
2578 and similarly the <literal>Show</literal> constraint arising from the use of <literal>show</literal>.
2579 </para></listitem>
2580
2581 <listitem><para>
2582 Unlike a Haskell-98-style 
2583 data type declaration, the type variable(s) in the "<literal>data Set a where</literal>" header 
2584 have no scope.  Indeed, one can write a kind signature instead:
2585 <programlisting>
2586   data Set :: * -> * where ...
2587 </programlisting>
2588 or even a mixture of the two:
2589 <programlisting>
2590   data Bar a :: (* -> *) -> * where ...
2591 </programlisting>
2592 The type variables (if given) may be explicitly kinded, so we could also write the header for <literal>Foo</literal>
2593 like this:
2594 <programlisting>
2595   data Bar a (b :: * -> *) where ...
2596 </programlisting>
2597 </para></listitem>
2598
2599
2600 <listitem><para>
2601 You can use strictness annotations, in the obvious places
2602 in the constructor type:
2603 <programlisting>
2604   data Term a where
2605       Lit    :: !Int -> Term Int
2606       If     :: Term Bool -> !(Term a) -> !(Term a) -> Term a
2607       Pair   :: Term a -> Term b -> Term (a,b)
2608 </programlisting>
2609 </para></listitem>
2610
2611 <listitem><para>
2612 You can use a <literal>deriving</literal> clause on a GADT-style data type
2613 declaration.   For example, these two declarations are equivalent
2614 <programlisting>
2615   data Maybe1 a where {
2616       Nothing1 :: Maybe1 a ;
2617       Just1    :: a -> Maybe1 a
2618     } deriving( Eq, Ord )
2619
2620   data Maybe2 a = Nothing2 | Just2 a 
2621        deriving( Eq, Ord )
2622 </programlisting>
2623 </para></listitem>
2624
2625 <listitem><para>
2626 The type signature may have quantified type variables that do not appear
2627 in the result type:
2628 <programlisting>
2629   data Foo where
2630      MkFoo :: a -> (a->Bool) -> Foo
2631      Nil   :: Foo
2632 </programlisting>
2633 Here the type variable <literal>a</literal> does not appear in the result type
2634 of either constructor.  
2635 Although it is universally quantified in the type of the constructor, such
2636 a type variable is often called "existential".  
2637 Indeed, the above declaration declares precisely the same type as 
2638 the <literal>data Foo</literal> in <xref linkend="existential-quantification"/>.
2639 </para><para>
2640 The type may contain a class context too, of course:
2641 <programlisting>
2642   data Showable where
2643     MkShowable :: Show a => a -> Showable
2644 </programlisting>
2645 </para></listitem>
2646
2647 <listitem><para>
2648 You can use record syntax on a GADT-style data type declaration:
2649
2650 <programlisting>
2651   data Person where
2652       Adult :: { name :: String, children :: [Person] } -> Person
2653       Child :: Show a => { name :: !String, funny :: a } -> Person
2654 </programlisting>
2655 As usual, for every constructor that has a field <literal>f</literal>, the type of
2656 field <literal>f</literal> must be the same (modulo alpha conversion).
2657 The <literal>Child</literal> constructor above shows that the signature
2658 may have a context, existentially-quantified variables, and strictness annotations, 
2659 just as in the non-record case.  (NB: the "type" that follows the double-colon
2660 is not really a type, because of the record syntax and strictness annotations.
2661 A "type" of this form can appear only in a constructor signature.)
2662 </para></listitem>
2663
2664 <listitem><para> 
2665 Record updates are allowed with GADT-style declarations, 
2666 only fields that have the following property: the type of the field
2667 mentions no existential type variables.
2668 </para></listitem>
2669
2670 <listitem><para> 
2671 As in the case of existentials declared using the Haskell-98-like record syntax 
2672 (<xref linkend="existential-records"/>),
2673 record-selector functions are generated only for those fields that have well-typed
2674 selectors.  
2675 Here is the example of that section, in GADT-style syntax:
2676 <programlisting>
2677 data Counter a where
2678     NewCounter { _this    :: self
2679                , _inc     :: self -> self
2680                , _display :: self -> IO ()
2681                , tag      :: a
2682                }
2683         :: Counter a
2684 </programlisting>
2685 As before, only one selector function is generated here, that for <literal>tag</literal>.
2686 Nevertheless, you can still use all the field names in pattern matching and record construction.
2687 </para></listitem>
2688 </itemizedlist></para>
2689 </sect2>
2690
2691 <sect2 id="gadt">
2692 <title>Generalised Algebraic Data Types (GADTs)</title>
2693
2694 <para>Generalised Algebraic Data Types generalise ordinary algebraic data types 
2695 by allowing constructors to have richer return types.  Here is an example:
2696 <programlisting>
2697   data Term a where
2698       Lit    :: Int -> Term Int
2699       Succ   :: Term Int -> Term Int
2700       IsZero :: Term Int -> Term Bool   
2701       If     :: Term Bool -> Term a -> Term a -> Term a
2702       Pair   :: Term a -> Term b -> Term (a,b)
2703 </programlisting>
2704 Notice that the return type of the constructors is not always <literal>Term a</literal>, as is the
2705 case with ordinary data types.  This generality allows us to 
2706 write a well-typed <literal>eval</literal> function
2707 for these <literal>Terms</literal>:
2708 <programlisting>
2709   eval :: Term a -> a
2710   eval (Lit i)      = i
2711   eval (Succ t)     = 1 + eval t
2712   eval (IsZero t)   = eval t == 0
2713   eval (If b e1 e2) = if eval b then eval e1 else eval e2
2714   eval (Pair e1 e2) = (eval e1, eval e2)
2715 </programlisting>
2716 The key point about GADTs is that <emphasis>pattern matching causes type refinement</emphasis>.  
2717 For example, in the right hand side of the equation
2718 <programlisting>
2719   eval :: Term a -> a
2720   eval (Lit i) =  ...
2721 </programlisting>
2722 the type <literal>a</literal> is refined to <literal>Int</literal>.  That's the whole point!
2723 A precise specification of the type rules is beyond what this user manual aspires to, 
2724 but the design closely follows that described in
2725 the paper <ulink
2726 url="http://research.microsoft.com/%7Esimonpj/papers/gadt/">Simple
2727 unification-based type inference for GADTs</ulink>,
2728 (ICFP 2006).
2729 The general principle is this: <emphasis>type refinement is only carried out 
2730 based on user-supplied type annotations</emphasis>.
2731 So if no type signature is supplied for <literal>eval</literal>, no type refinement happens, 
2732 and lots of obscure error messages will
2733 occur.  However, the refinement is quite general.  For example, if we had:
2734 <programlisting>
2735   eval :: Term a -> a -> a
2736   eval (Lit i) j =  i+j
2737 </programlisting>
2738 the pattern match causes the type <literal>a</literal> to be refined to <literal>Int</literal> (because of the type
2739 of the constructor <literal>Lit</literal>), and that refinement also applies to the type of <literal>j</literal>, and
2740 the result type of the <literal>case</literal> expression.  Hence the addition <literal>i+j</literal> is legal.
2741 </para>
2742 <para>
2743 These and many other examples are given in papers by Hongwei Xi, and
2744 Tim Sheard. There is a longer introduction
2745 <ulink url="http://www.haskell.org/haskellwiki/GADT">on the wiki</ulink>,
2746 and Ralf Hinze's
2747 <ulink url="http://www.informatik.uni-bonn.de/~ralf/publications/With.pdf">Fun with phantom types</ulink> also has a number of examples. Note that papers
2748 may use different notation to that implemented in GHC.
2749 </para>
2750 <para>
2751 The rest of this section outlines the extensions to GHC that support GADTs.   The extension is enabled with 
2752 <option>-XGADTs</option>.  The <option>-XGADTs</option> flag also sets <option>-XRelaxedPolyRec</option>.
2753 <itemizedlist>
2754 <listitem><para>
2755 A GADT can only be declared using GADT-style syntax (<xref linkend="gadt-style"/>); 
2756 the old Haskell-98 syntax for data declarations always declares an ordinary data type.
2757 The result type of each constructor must begin with the type constructor being defined,
2758 but for a GADT the arguments to the type constructor can be arbitrary monotypes.  
2759 For example, in the <literal>Term</literal> data
2760 type above, the type of each constructor must end with <literal>Term ty</literal>, but
2761 the <literal>ty</literal> need not be a type variable (e.g. the <literal>Lit</literal>
2762 constructor).
2763 </para></listitem>
2764
2765 <listitem><para>
2766 It is permitted to declare an ordinary algebraic data type using GADT-style syntax.
2767 What makes a GADT into a GADT is not the syntax, but rather the presence of data constructors
2768 whose result type is not just <literal>T a b</literal>.
2769 </para></listitem>
2770
2771 <listitem><para>
2772 You cannot use a <literal>deriving</literal> clause for a GADT; only for
2773 an ordinary data type.
2774 </para></listitem>
2775
2776 <listitem><para>
2777 As mentioned in <xref linkend="gadt-style"/>, record syntax is supported.
2778 For example:
2779 <programlisting>
2780   data Term a where
2781       Lit    { val  :: Int }      :: Term Int
2782       Succ   { num  :: Term Int } :: Term Int
2783       Pred   { num  :: Term Int } :: Term Int
2784       IsZero { arg  :: Term Int } :: Term Bool  
2785       Pair   { arg1 :: Term a
2786              , arg2 :: Term b
2787              }                    :: Term (a,b)
2788       If     { cnd  :: Term Bool
2789              , tru  :: Term a
2790              , fls  :: Term a
2791              }                    :: Term a
2792 </programlisting>
2793 However, for GADTs there is the following additional constraint: 
2794 every constructor that has a field <literal>f</literal> must have
2795 the same result type (modulo alpha conversion)
2796 Hence, in the above example, we cannot merge the <literal>num</literal> 
2797 and <literal>arg</literal> fields above into a 
2798 single name.  Although their field types are both <literal>Term Int</literal>,
2799 their selector functions actually have different types:
2800
2801 <programlisting>
2802   num :: Term Int -> Term Int
2803   arg :: Term Bool -> Term Int
2804 </programlisting>
2805 </para></listitem>
2806
2807 <listitem><para>
2808 When pattern-matching against data constructors drawn from a GADT, 
2809 for example in a <literal>case</literal> expression, the following rules apply:
2810 <itemizedlist>
2811 <listitem><para>The type of the scrutinee must be rigid.</para></listitem>
2812 <listitem><para>The type of the entire <literal>case</literal> expression must be rigid.</para></listitem>
2813 <listitem><para>The type of any free variable mentioned in any of
2814 the <literal>case</literal> alternatives must be rigid.</para></listitem>
2815 </itemizedlist>
2816 A type is "rigid" if it is completely known to the compiler at its binding site.  The easiest
2817 way to ensure that a variable a rigid type is to give it a type signature.
2818 For more precise details see <ulink url="http://research.microsoft.com/%7Esimonpj/papers/gadt">
2819 Simple unification-based type inference for GADTs
2820 </ulink>. The criteria implemented by GHC are given in the Appendix.
2821
2822 </para></listitem>
2823
2824 </itemizedlist>
2825 </para>
2826
2827 </sect2>
2828 </sect1>
2829
2830 <!-- ====================== End of Generalised algebraic data types =======================  -->
2831
2832 <sect1 id="deriving">
2833 <title>Extensions to the "deriving" mechanism</title>
2834
2835 <sect2 id="deriving-inferred">
2836 <title>Inferred context for deriving clauses</title>
2837
2838 <para>
2839 The Haskell Report is vague about exactly when a <literal>deriving</literal> clause is
2840 legal.  For example:
2841 <programlisting>
2842   data T0 f a = MkT0 a         deriving( Eq )
2843   data T1 f a = MkT1 (f a)     deriving( Eq )
2844   data T2 f a = MkT2 (f (f a)) deriving( Eq )
2845 </programlisting>
2846 The natural generated <literal>Eq</literal> code would result in these instance declarations:
2847 <programlisting>
2848   instance Eq a         => Eq (T0 f a) where ...
2849   instance Eq (f a)     => Eq (T1 f a) where ...
2850   instance Eq (f (f a)) => Eq (T2 f a) where ...
2851 </programlisting>
2852 The first of these is obviously fine. The second is still fine, although less obviously. 
2853 The third is not Haskell 98, and risks losing termination of instances.
2854 </para>
2855 <para>
2856 GHC takes a conservative position: it accepts the first two, but not the third.  The  rule is this:
2857 each constraint in the inferred instance context must consist only of type variables, 
2858 with no repetitions.
2859 </para>
2860 <para>
2861 This rule is applied regardless of flags.  If you want a more exotic context, you can write
2862 it yourself, using the <link linkend="stand-alone-deriving">standalone deriving mechanism</link>.
2863 </para>
2864 </sect2>
2865
2866 <sect2 id="stand-alone-deriving">
2867 <title>Stand-alone deriving declarations</title>
2868
2869 <para>
2870 GHC now allows stand-alone <literal>deriving</literal> declarations, enabled by <literal>-XStandaloneDeriving</literal>:
2871 <programlisting>
2872   data Foo a = Bar a | Baz String
2873
2874   deriving instance Eq a => Eq (Foo a)
2875 </programlisting>
2876 The syntax is identical to that of an ordinary instance declaration apart from (a) the keyword
2877 <literal>deriving</literal>, and (b) the absence of the <literal>where</literal> part.
2878 Note the following points:
2879 <itemizedlist>
2880 <listitem><para>
2881 You must supply an explicit context (in the example the context is <literal>(Eq a)</literal>), 
2882 exactly as you would in an ordinary instance declaration.
2883 (In contrast, in a <literal>deriving</literal> clause 
2884 attached to a data type declaration, the context is inferred.) 
2885 </para></listitem>
2886
2887 <listitem><para>
2888 A <literal>deriving instance</literal> declaration
2889 must obey the same rules concerning form and termination as ordinary instance declarations,
2890 controlled by the same flags; see <xref linkend="instance-decls"/>.
2891 </para></listitem>
2892
2893 <listitem><para>
2894 Unlike a <literal>deriving</literal>
2895 declaration attached to a <literal>data</literal> declaration, the instance can be more specific
2896 than the data type (assuming you also use 
2897 <literal>-XFlexibleInstances</literal>, <xref linkend="instance-rules"/>).  Consider
2898 for example
2899 <programlisting>
2900   data Foo a = Bar a | Baz String
2901
2902   deriving instance Eq a => Eq (Foo [a])
2903   deriving instance Eq a => Eq (Foo (Maybe a))
2904 </programlisting>
2905 This will generate a derived instance for <literal>(Foo [a])</literal> and <literal>(Foo (Maybe a))</literal>,
2906 but other types such as <literal>(Foo (Int,Bool))</literal> will not be an instance of <literal>Eq</literal>.
2907 </para></listitem>
2908
2909 <listitem><para>
2910 Unlike a <literal>deriving</literal>
2911 declaration attached to a <literal>data</literal> declaration, 
2912 GHC does not restrict the form of the data type.  Instead, GHC simply generates the appropriate
2913 boilerplate code for the specified class, and typechecks it. If there is a type error, it is
2914 your problem. (GHC will show you the offending code if it has a type error.) 
2915 The merit of this is that you can derive instances for GADTs and other exotic
2916 data types, providing only that the boilerplate code does indeed typecheck.  For example:
2917 <programlisting>
2918   data T a where
2919      T1 :: T Int
2920      T2 :: T Bool
2921
2922   deriving instance Show (T a)
2923 </programlisting>
2924 In this example, you cannot say <literal>... deriving( Show )</literal> on the 
2925 data type declaration for <literal>T</literal>, 
2926 because <literal>T</literal> is a GADT, but you <emphasis>can</emphasis> generate
2927 the instance declaration using stand-alone deriving.
2928 </para>
2929 </listitem>
2930
2931 <listitem>
2932 <para>The stand-alone syntax is generalised for newtypes in exactly the same
2933 way that ordinary <literal>deriving</literal> clauses are generalised (<xref linkend="newtype-deriving"/>).
2934 For example:
2935 <programlisting>
2936   newtype Foo a = MkFoo (State Int a)
2937
2938   deriving instance MonadState Int Foo
2939 </programlisting>
2940 GHC always treats the <emphasis>last</emphasis> parameter of the instance
2941 (<literal>Foo</literal> in this example) as the type whose instance is being derived.
2942 </para></listitem>
2943 </itemizedlist></para>
2944
2945 </sect2>
2946
2947
2948 <sect2 id="deriving-typeable">
2949 <title>Deriving clause for extra classes (<literal>Typeable</literal>, <literal>Data</literal>, etc)</title>
2950
2951 <para>
2952 Haskell 98 allows the programmer to add "<literal>deriving( Eq, Ord )</literal>" to a data type 
2953 declaration, to generate a standard instance declaration for classes specified in the <literal>deriving</literal> clause.  
2954 In Haskell 98, the only classes that may appear in the <literal>deriving</literal> clause are the standard
2955 classes <literal>Eq</literal>, <literal>Ord</literal>, 
2956 <literal>Enum</literal>, <literal>Ix</literal>, <literal>Bounded</literal>, <literal>Read</literal>, and <literal>Show</literal>.
2957 </para>
2958 <para>
2959 GHC extends this list with several more classes that may be automatically derived:
2960 <itemizedlist>
2961 <listitem><para> With <option>-XDeriveDataTypeable</option>, you can derive instances of the classes
2962 <literal>Typeable</literal>, and <literal>Data</literal>, defined in the library
2963 modules <literal>Data.Typeable</literal> and <literal>Data.Generics</literal> respectively.
2964 </para>
2965 <para>An instance of <literal>Typeable</literal> can only be derived if the
2966 data type has seven or fewer type parameters, all of kind <literal>*</literal>.
2967 The reason for this is that the <literal>Typeable</literal> class is derived using the scheme
2968 described in
2969 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/hmap/gmap2.ps">
2970 Scrap More Boilerplate: Reflection, Zips, and Generalised Casts
2971 </ulink>.
2972 (Section 7.4 of the paper describes the multiple <literal>Typeable</literal> classes that
2973 are used, and only <literal>Typeable1</literal> up to
2974 <literal>Typeable7</literal> are provided in the library.)
2975 In other cases, there is nothing to stop the programmer writing a <literal>TypableX</literal>
2976 class, whose kind suits that of the data type constructor, and
2977 then writing the data type instance by hand.
2978 </para>
2979 </listitem>
2980
2981 <listitem><para> With <option>-XDeriveFunctor</option>, you can derive instances of 
2982 the class <literal>Functor</literal>,
2983 defined in <literal>GHC.Base</literal>.
2984 </para></listitem>
2985
2986 <listitem><para> With <option>-XDeriveFoldable</option>, you can derive instances of 
2987 the class <literal>Foldable</literal>,
2988 defined in <literal>Data.Foldable</literal>.
2989 </para></listitem>
2990
2991 <listitem><para> With <option>-XDeriveTraversable</option>, you can derive instances of 
2992 the class <literal>Traversable</literal>,
2993 defined in <literal>Data.Traversable</literal>.
2994 </para></listitem>
2995 </itemizedlist>
2996 In each case the appropriate class must be in scope before it 
2997 can be mentioned in the <literal>deriving</literal> clause.
2998 </para>
2999 </sect2>
3000
3001 <sect2 id="newtype-deriving">
3002 <title>Generalised derived instances for newtypes</title>
3003
3004 <para>
3005 When you define an abstract type using <literal>newtype</literal>, you may want
3006 the new type to inherit some instances from its representation. In
3007 Haskell 98, you can inherit instances of <literal>Eq</literal>, <literal>Ord</literal>,
3008 <literal>Enum</literal> and <literal>Bounded</literal> by deriving them, but for any
3009 other classes you have to write an explicit instance declaration. For
3010 example, if you define
3011
3012 <programlisting>
3013   newtype Dollars = Dollars Int 
3014 </programlisting>
3015
3016 and you want to use arithmetic on <literal>Dollars</literal>, you have to
3017 explicitly define an instance of <literal>Num</literal>:
3018
3019 <programlisting>
3020   instance Num Dollars where
3021     Dollars a + Dollars b = Dollars (a+b)
3022     ...
3023 </programlisting>
3024 All the instance does is apply and remove the <literal>newtype</literal>
3025 constructor. It is particularly galling that, since the constructor
3026 doesn't appear at run-time, this instance declaration defines a
3027 dictionary which is <emphasis>wholly equivalent</emphasis> to the <literal>Int</literal>
3028 dictionary, only slower!
3029 </para>
3030
3031
3032 <sect3> <title> Generalising the deriving clause </title>
3033 <para>
3034 GHC now permits such instances to be derived instead, 
3035 using the flag <option>-XGeneralizedNewtypeDeriving</option>,
3036 so one can write 
3037 <programlisting>
3038   newtype Dollars = Dollars Int deriving (Eq,Show,Num)
3039 </programlisting>
3040
3041 and the implementation uses the <emphasis>same</emphasis> <literal>Num</literal> dictionary
3042 for <literal>Dollars</literal> as for <literal>Int</literal>. Notionally, the compiler
3043 derives an instance declaration of the form
3044
3045 <programlisting>
3046   instance Num Int => Num Dollars
3047 </programlisting>
3048
3049 which just adds or removes the <literal>newtype</literal> constructor according to the type.
3050 </para>
3051 <para>
3052
3053 We can also derive instances of constructor classes in a similar
3054 way. For example, suppose we have implemented state and failure monad
3055 transformers, such that
3056
3057 <programlisting>
3058   instance Monad m => Monad (State s m) 
3059   instance Monad m => Monad (Failure m)
3060 </programlisting>
3061 In Haskell 98, we can define a parsing monad by 
3062 <programlisting>
3063   type Parser tok m a = State [tok] (Failure m) a
3064 </programlisting>
3065
3066 which is automatically a monad thanks to the instance declarations
3067 above. With the extension, we can make the parser type abstract,
3068 without needing to write an instance of class <literal>Monad</literal>, via
3069
3070 <programlisting>
3071   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
3072                          deriving Monad
3073 </programlisting>
3074 In this case the derived instance declaration is of the form 
3075 <programlisting>
3076   instance Monad (State [tok] (Failure m)) => Monad (Parser tok m) 
3077 </programlisting>
3078
3079 Notice that, since <literal>Monad</literal> is a constructor class, the
3080 instance is a <emphasis>partial application</emphasis> of the new type, not the
3081 entire left hand side. We can imagine that the type declaration is
3082 "eta-converted" to generate the context of the instance
3083 declaration.
3084 </para>
3085 <para>
3086
3087 We can even derive instances of multi-parameter classes, provided the
3088 newtype is the last class parameter. In this case, a ``partial
3089 application'' of the class appears in the <literal>deriving</literal>
3090 clause. For example, given the class
3091
3092 <programlisting>
3093   class StateMonad s m | m -> s where ... 
3094   instance Monad m => StateMonad s (State s m) where ... 
3095 </programlisting>
3096 then we can derive an instance of <literal>StateMonad</literal> for <literal>Parser</literal>s by 
3097 <programlisting>
3098   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
3099                          deriving (Monad, StateMonad [tok])
3100 </programlisting>
3101
3102 The derived instance is obtained by completing the application of the
3103 class to the new type:
3104
3105 <programlisting>
3106   instance StateMonad [tok] (State [tok] (Failure m)) =>
3107            StateMonad [tok] (Parser tok m)
3108 </programlisting>
3109 </para>
3110 <para>
3111
3112 As a result of this extension, all derived instances in newtype
3113  declarations are treated uniformly (and implemented just by reusing
3114 the dictionary for the representation type), <emphasis>except</emphasis>
3115 <literal>Show</literal> and <literal>Read</literal>, which really behave differently for
3116 the newtype and its representation.
3117 </para>
3118 </sect3>
3119
3120 <sect3> <title> A more precise specification </title>
3121 <para>
3122 Derived instance declarations are constructed as follows. Consider the
3123 declaration (after expansion of any type synonyms)
3124
3125 <programlisting>
3126   newtype T v1...vn = T' (t vk+1...vn) deriving (c1...cm) 
3127 </programlisting>
3128
3129 where 
3130  <itemizedlist>
3131 <listitem><para>
3132   The <literal>ci</literal> are partial applications of
3133   classes of the form <literal>C t1'...tj'</literal>, where the arity of <literal>C</literal>
3134   is exactly <literal>j+1</literal>.  That is, <literal>C</literal> lacks exactly one type argument.
3135 </para></listitem>
3136 <listitem><para>
3137   The <literal>k</literal> is chosen so that <literal>ci (T v1...vk)</literal> is well-kinded.
3138 </para></listitem>
3139 <listitem><para>
3140   The type <literal>t</literal> is an arbitrary type.
3141 </para></listitem>
3142 <listitem><para>
3143   The type variables <literal>vk+1...vn</literal> do not occur in <literal>t</literal>, 
3144   nor in the <literal>ci</literal>, and
3145 </para></listitem>
3146 <listitem><para>
3147   None of the <literal>ci</literal> is <literal>Read</literal>, <literal>Show</literal>, 
3148                 <literal>Typeable</literal>, or <literal>Data</literal>.  These classes
3149                 should not "look through" the type or its constructor.  You can still
3150                 derive these classes for a newtype, but it happens in the usual way, not 
3151                 via this new mechanism.  
3152 </para></listitem>
3153 </itemizedlist>
3154 Then, for each <literal>ci</literal>, the derived instance
3155 declaration is:
3156 <programlisting>
3157   instance ci t => ci (T v1...vk)
3158 </programlisting>
3159 As an example which does <emphasis>not</emphasis> work, consider 
3160 <programlisting>
3161   newtype NonMonad m s = NonMonad (State s m s) deriving Monad 
3162 </programlisting>
3163 Here we cannot derive the instance 
3164 <programlisting>
3165   instance Monad (State s m) => Monad (NonMonad m) 
3166 </programlisting>
3167
3168 because the type variable <literal>s</literal> occurs in <literal>State s m</literal>,
3169 and so cannot be "eta-converted" away. It is a good thing that this
3170 <literal>deriving</literal> clause is rejected, because <literal>NonMonad m</literal> is
3171 not, in fact, a monad --- for the same reason. Try defining
3172 <literal>>>=</literal> with the correct type: you won't be able to.
3173 </para>
3174 <para>
3175
3176 Notice also that the <emphasis>order</emphasis> of class parameters becomes
3177 important, since we can only derive instances for the last one. If the
3178 <literal>StateMonad</literal> class above were instead defined as
3179
3180 <programlisting>
3181   class StateMonad m s | m -> s where ... 
3182 </programlisting>
3183
3184 then we would not have been able to derive an instance for the
3185 <literal>Parser</literal> type above. We hypothesise that multi-parameter
3186 classes usually have one "main" parameter for which deriving new
3187 instances is most interesting.
3188 </para>
3189 <para>Lastly, all of this applies only for classes other than
3190 <literal>Read</literal>, <literal>Show</literal>, <literal>Typeable</literal>, 
3191 and <literal>Data</literal>, for which the built-in derivation applies (section
3192 4.3.3. of the Haskell Report).
3193 (For the standard classes <literal>Eq</literal>, <literal>Ord</literal>,
3194 <literal>Ix</literal>, and <literal>Bounded</literal> it is immaterial whether
3195 the standard method is used or the one described here.)
3196 </para>
3197 </sect3>
3198 </sect2>
3199 </sect1>
3200
3201
3202 <!-- TYPE SYSTEM EXTENSIONS -->
3203 <sect1 id="type-class-extensions">
3204 <title>Class and instances declarations</title>
3205
3206 <sect2 id="multi-param-type-classes">
3207 <title>Class declarations</title>
3208
3209 <para>
3210 This section, and the next one, documents GHC's type-class extensions.
3211 There's lots of background in the paper <ulink
3212 url="http://research.microsoft.com/~simonpj/Papers/type-class-design-space/">Type
3213 classes: exploring the design space</ulink> (Simon Peyton Jones, Mark
3214 Jones, Erik Meijer).
3215 </para>
3216 <para>
3217 All the extensions are enabled by the <option>-fglasgow-exts</option> flag.
3218 </para>
3219
3220 <sect3>
3221 <title>Multi-parameter type classes</title>
3222 <para>
3223 Multi-parameter type classes are permitted, with flag <option>-XMultiParamTypeClasses</option>. 
3224 For example:
3225
3226
3227 <programlisting>
3228   class Collection c a where
3229     union :: c a -> c a -> c a
3230     ...etc.
3231 </programlisting>
3232
3233 </para>
3234 </sect3>
3235
3236 <sect3 id="superclass-rules">
3237 <title>The superclasses of a class declaration</title>
3238
3239 <para>
3240 In Haskell 98 the context of a class declaration (which introduces superclasses)
3241 must be simple; that is, each predicate must consist of a class applied to 
3242 type variables.  The flag <option>-XFlexibleContexts</option> 
3243 (<xref linkend="flexible-contexts"/>)
3244 lifts this restriction,
3245 so that the only restriction on the context in a class declaration is 
3246 that the class hierarchy must be acyclic.  So these class declarations are OK:
3247
3248
3249 <programlisting>
3250   class Functor (m k) => FiniteMap m k where
3251     ...
3252
3253   class (Monad m, Monad (t m)) => Transform t m where
3254     lift :: m a -> (t m) a
3255 </programlisting>
3256
3257
3258 </para>
3259 <para>
3260 As in Haskell 98, The class hierarchy must be acyclic.  However, the definition
3261 of "acyclic" involves only the superclass relationships.  For example,
3262 this is OK:
3263
3264
3265 <programlisting>
3266   class C a where {
3267     op :: D b => a -> b -> b
3268   }
3269
3270   class C a => D a where { ... }
3271 </programlisting>
3272
3273
3274 Here, <literal>C</literal> is a superclass of <literal>D</literal>, but it's OK for a
3275 class operation <literal>op</literal> of <literal>C</literal> to mention <literal>D</literal>.  (It
3276 would not be OK for <literal>D</literal> to be a superclass of <literal>C</literal>.)
3277 </para>
3278 </sect3>
3279
3280
3281
3282
3283 <sect3 id="class-method-types">
3284 <title>Class method types</title>
3285
3286 <para>
3287 Haskell 98 prohibits class method types to mention constraints on the
3288 class type variable, thus:
3289 <programlisting>
3290   class Seq s a where
3291     fromList :: [a] -> s a
3292     elem     :: Eq a => a -> s a -> Bool
3293 </programlisting>
3294 The type of <literal>elem</literal> is illegal in Haskell 98, because it
3295 contains the constraint <literal>Eq a</literal>, constrains only the 
3296 class type variable (in this case <literal>a</literal>).
3297 GHC lifts this restriction (flag <option>-XConstrainedClassMethods</option>).
3298 </para>
3299
3300
3301 </sect3>
3302 </sect2>
3303
3304 <sect2 id="functional-dependencies">
3305 <title>Functional dependencies
3306 </title>
3307
3308 <para> Functional dependencies are implemented as described by Mark Jones
3309 in &ldquo;<ulink url="http://citeseer.ist.psu.edu/jones00type.html">Type Classes with Functional Dependencies</ulink>&rdquo;, Mark P. Jones, 
3310 In Proceedings of the 9th European Symposium on Programming, 
3311 ESOP 2000, Berlin, Germany, March 2000, Springer-Verlag LNCS 1782,
3312 .
3313 </para>
3314 <para>
3315 Functional dependencies are introduced by a vertical bar in the syntax of a 
3316 class declaration;  e.g. 
3317 <programlisting>
3318   class (Monad m) => MonadState s m | m -> s where ...
3319
3320   class Foo a b c | a b -> c where ...
3321 </programlisting>
3322 There should be more documentation, but there isn't (yet).  Yell if you need it.
3323 </para>
3324
3325 <sect3><title>Rules for functional dependencies </title>
3326 <para>
3327 In a class declaration, all of the class type variables must be reachable (in the sense 
3328 mentioned in <xref linkend="flexible-contexts"/>)
3329 from the free variables of each method type.
3330 For example:
3331
3332 <programlisting>
3333   class Coll s a where
3334     empty  :: s
3335     insert :: s -> a -> s
3336 </programlisting>
3337
3338 is not OK, because the type of <literal>empty</literal> doesn't mention
3339 <literal>a</literal>.  Functional dependencies can make the type variable
3340 reachable:
3341 <programlisting>
3342   class Coll s a | s -> a where
3343     empty  :: s
3344     insert :: s -> a -> s
3345 </programlisting>
3346
3347 Alternatively <literal>Coll</literal> might be rewritten
3348
3349 <programlisting>
3350   class Coll s a where
3351     empty  :: s a
3352     insert :: s a -> a -> s a
3353 </programlisting>
3354
3355
3356 which makes the connection between the type of a collection of
3357 <literal>a</literal>'s (namely <literal>(s a)</literal>) and the element type <literal>a</literal>.
3358 Occasionally this really doesn't work, in which case you can split the
3359 class like this:
3360
3361
3362 <programlisting>
3363   class CollE s where
3364     empty  :: s
3365
3366   class CollE s => Coll s a where
3367     insert :: s -> a -> s
3368 </programlisting>
3369 </para>
3370 </sect3>
3371
3372
3373 <sect3>
3374 <title>Background on functional dependencies</title>
3375
3376 <para>The following description of the motivation and use of functional dependencies is taken
3377 from the Hugs user manual, reproduced here (with minor changes) by kind
3378 permission of Mark Jones.
3379 </para>
3380 <para> 
3381 Consider the following class, intended as part of a
3382 library for collection types:
3383 <programlisting>
3384    class Collects e ce where
3385        empty  :: ce
3386        insert :: e -> ce -> ce
3387        member :: e -> ce -> Bool
3388 </programlisting>
3389 The type variable e used here represents the element type, while ce is the type
3390 of the container itself. Within this framework, we might want to define
3391 instances of this class for lists or characteristic functions (both of which
3392 can be used to represent collections of any equality type), bit sets (which can
3393 be used to represent collections of characters), or hash tables (which can be
3394 used to represent any collection whose elements have a hash function). Omitting
3395 standard implementation details, this would lead to the following declarations: 
3396 <programlisting>
3397    instance Eq e => Collects e [e] where ...
3398    instance Eq e => Collects e (e -> Bool) where ...
3399    instance Collects Char BitSet where ...
3400    instance (Hashable e, Collects a ce)
3401               => Collects e (Array Int ce) where ...
3402 </programlisting>
3403 All this looks quite promising; we have a class and a range of interesting
3404 implementations. Unfortunately, there are some serious problems with the class
3405 declaration. First, the empty function has an ambiguous type: 
3406 <programlisting>
3407    empty :: Collects e ce => ce
3408 </programlisting>
3409 By "ambiguous" we mean that there is a type variable e that appears on the left
3410 of the <literal>=&gt;</literal> symbol, but not on the right. The problem with
3411 this is that, according to the theoretical foundations of Haskell overloading,
3412 we cannot guarantee a well-defined semantics for any term with an ambiguous
3413 type.
3414 </para>
3415 <para>
3416 We can sidestep this specific problem by removing the empty member from the
3417 class declaration. However, although the remaining members, insert and member,
3418 do not have ambiguous types, we still run into problems when we try to use
3419 them. For example, consider the following two functions: 
3420 <programlisting>
3421    f x y = insert x . insert y
3422    g     = f True 'a'
3423 </programlisting>
3424 for which GHC infers the following types: 
3425 <programlisting>
3426    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3427    g :: (Collects Bool c, Collects Char c) => c -> c
3428 </programlisting>
3429 Notice that the type for f allows the two parameters x and y to be assigned
3430 different types, even though it attempts to insert each of the two values, one
3431 after the other, into the same collection. If we're trying to model collections
3432 that contain only one type of value, then this is clearly an inaccurate
3433 type. Worse still, the definition for g is accepted, without causing a type
3434 error. As a result, the error in this code will not be flagged at the point
3435 where it appears. Instead, it will show up only when we try to use g, which
3436 might even be in a different module.
3437 </para>
3438
3439 <sect4><title>An attempt to use constructor classes</title>
3440
3441 <para>
3442 Faced with the problems described above, some Haskell programmers might be
3443 tempted to use something like the following version of the class declaration: 
3444 <programlisting>
3445    class Collects e c where
3446       empty  :: c e
3447       insert :: e -> c e -> c e
3448       member :: e -> c e -> Bool
3449 </programlisting>
3450 The key difference here is that we abstract over the type constructor c that is
3451 used to form the collection type c e, and not over that collection type itself,
3452 represented by ce in the original class declaration. This avoids the immediate
3453 problems that we mentioned above: empty has type <literal>Collects e c => c
3454 e</literal>, which is not ambiguous. 
3455 </para>
3456 <para>
3457 The function f from the previous section has a more accurate type: 
3458 <programlisting>
3459    f :: (Collects e c) => e -> e -> c e -> c e
3460 </programlisting>
3461 The function g from the previous section is now rejected with a type error as
3462 we would hope because the type of f does not allow the two arguments to have
3463 different types. 
3464 This, then, is an example of a multiple parameter class that does actually work
3465 quite well in practice, without ambiguity problems.
3466 There is, however, a catch. This version of the Collects class is nowhere near
3467 as general as the original class seemed to be: only one of the four instances
3468 for <literal>Collects</literal>
3469 given above can be used with this version of Collects because only one of
3470 them---the instance for lists---has a collection type that can be written in
3471 the form c e, for some type constructor c, and element type e.
3472 </para>
3473 </sect4>
3474
3475 <sect4><title>Adding functional dependencies</title>
3476
3477 <para>
3478 To get a more useful version of the Collects class, Hugs provides a mechanism
3479 that allows programmers to specify dependencies between the parameters of a
3480 multiple parameter class (For readers with an interest in theoretical
3481 foundations and previous work: The use of dependency information can be seen
3482 both as a generalization of the proposal for `parametric type classes' that was
3483 put forward by Chen, Hudak, and Odersky, or as a special case of Mark Jones's
3484 later framework for "improvement" of qualified types. The
3485 underlying ideas are also discussed in a more theoretical and abstract setting
3486 in a manuscript [implparam], where they are identified as one point in a
3487 general design space for systems of implicit parameterization.).
3488
3489 To start with an abstract example, consider a declaration such as: 
3490 <programlisting>
3491    class C a b where ...
3492 </programlisting>
3493 which tells us simply that C can be thought of as a binary relation on types
3494 (or type constructors, depending on the kinds of a and b). Extra clauses can be
3495 included in the definition of classes to add information about dependencies
3496 between parameters, as in the following examples: 
3497 <programlisting>
3498    class D a b | a -> b where ...
3499    class E a b | a -> b, b -> a where ...
3500 </programlisting>
3501 The notation <literal>a -&gt; b</literal> used here between the | and where
3502 symbols --- not to be
3503 confused with a function type --- indicates that the a parameter uniquely
3504 determines the b parameter, and might be read as "a determines b." Thus D is
3505 not just a relation, but actually a (partial) function. Similarly, from the two
3506 dependencies that are included in the definition of E, we can see that E
3507 represents a (partial) one-one mapping between types.
3508 </para>
3509 <para>
3510 More generally, dependencies take the form <literal>x1 ... xn -&gt; y1 ... ym</literal>,
3511 where x1, ..., xn, and y1, ..., yn are type variables with n&gt;0 and
3512 m&gt;=0, meaning that the y parameters are uniquely determined by the x
3513 parameters. Spaces can be used as separators if more than one variable appears
3514 on any single side of a dependency, as in <literal>t -&gt; a b</literal>. Note that a class may be
3515 annotated with multiple dependencies using commas as separators, as in the
3516 definition of E above. Some dependencies that we can write in this notation are
3517 redundant, and will be rejected because they don't serve any useful
3518 purpose, and may instead indicate an error in the program. Examples of
3519 dependencies like this include  <literal>a -&gt; a </literal>,  
3520 <literal>a -&gt; a a </literal>,  
3521 <literal>a -&gt; </literal>, etc. There can also be
3522 some redundancy if multiple dependencies are given, as in  
3523 <literal>a-&gt;b</literal>, 
3524  <literal>b-&gt;c </literal>,  <literal>a-&gt;c </literal>, and
3525 in which some subset implies the remaining dependencies. Examples like this are
3526 not treated as errors. Note that dependencies appear only in class
3527 declarations, and not in any other part of the language. In particular, the
3528 syntax for instance declarations, class constraints, and types is completely
3529 unchanged.
3530 </para>
3531 <para>
3532 By including dependencies in a class declaration, we provide a mechanism for
3533 the programmer to specify each multiple parameter class more precisely. The
3534 compiler, on the other hand, is responsible for ensuring that the set of
3535 instances that are in scope at any given point in the program is consistent
3536 with any declared dependencies. For example, the following pair of instance
3537 declarations cannot appear together in the same scope because they violate the
3538 dependency for D, even though either one on its own would be acceptable: 
3539 <programlisting>
3540    instance D Bool Int where ...
3541    instance D Bool Char where ...
3542 </programlisting>
3543 Note also that the following declaration is not allowed, even by itself: 
3544 <programlisting>
3545    instance D [a] b where ...
3546 </programlisting>
3547 The problem here is that this instance would allow one particular choice of [a]
3548 to be associated with more than one choice for b, which contradicts the
3549 dependency specified in the definition of D. More generally, this means that,
3550 in any instance of the form: 
3551 <programlisting>
3552    instance D t s where ...
3553 </programlisting>
3554 for some particular types t and s, the only variables that can appear in s are
3555 the ones that appear in t, and hence, if the type t is known, then s will be
3556 uniquely determined.
3557 </para>
3558 <para>
3559 The benefit of including dependency information is that it allows us to define
3560 more general multiple parameter classes, without ambiguity problems, and with
3561 the benefit of more accurate types. To illustrate this, we return to the
3562 collection class example, and annotate the original definition of <literal>Collects</literal>
3563 with a simple dependency: 
3564 <programlisting>
3565    class Collects e ce | ce -> e where
3566       empty  :: ce
3567       insert :: e -> ce -> ce
3568       member :: e -> ce -> Bool
3569 </programlisting>
3570 The dependency <literal>ce -&gt; e</literal> here specifies that the type e of elements is uniquely
3571 determined by the type of the collection ce. Note that both parameters of
3572 Collects are of kind *; there are no constructor classes here. Note too that
3573 all of the instances of Collects that we gave earlier can be used
3574 together with this new definition.
3575 </para>
3576 <para>
3577 What about the ambiguity problems that we encountered with the original
3578 definition? The empty function still has type Collects e ce => ce, but it is no
3579 longer necessary to regard that as an ambiguous type: Although the variable e
3580 does not appear on the right of the => symbol, the dependency for class
3581 Collects tells us that it is uniquely determined by ce, which does appear on
3582 the right of the => symbol. Hence the context in which empty is used can still
3583 give enough information to determine types for both ce and e, without
3584 ambiguity. More generally, we need only regard a type as ambiguous if it
3585 contains a variable on the left of the => that is not uniquely determined
3586 (either directly or indirectly) by the variables on the right.
3587 </para>
3588 <para>
3589 Dependencies also help to produce more accurate types for user defined
3590 functions, and hence to provide earlier detection of errors, and less cluttered
3591 types for programmers to work with. Recall the previous definition for a
3592 function f: 
3593 <programlisting>
3594    f x y = insert x y = insert x . insert y
3595 </programlisting>
3596 for which we originally obtained a type: 
3597 <programlisting>
3598    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3599 </programlisting>
3600 Given the dependency information that we have for Collects, however, we can
3601 deduce that a and b must be equal because they both appear as the second
3602 parameter in a Collects constraint with the same first parameter c. Hence we
3603 can infer a shorter and more accurate type for f: 
3604 <programlisting>
3605    f :: (Collects a c) => a -> a -> c -> c
3606 </programlisting>
3607 In a similar way, the earlier definition of g will now be flagged as a type error.
3608 </para>
3609 <para>
3610 Although we have given only a few examples here, it should be clear that the
3611 addition of dependency information can help to make multiple parameter classes
3612 more useful in practice, avoiding ambiguity problems, and allowing more general
3613 sets of instance declarations.
3614 </para>
3615 </sect4>
3616 </sect3>
3617 </sect2>
3618
3619 <sect2 id="instance-decls">
3620 <title>Instance declarations</title>
3621
3622 <para>An instance declaration has the form
3623 <screen>
3624   instance ( <replaceable>assertion</replaceable><subscript>1</subscript>, ..., <replaceable>assertion</replaceable><subscript>n</subscript>) =&gt; <replaceable>class</replaceable> <replaceable>type</replaceable><subscript>1</subscript> ... <replaceable>type</replaceable><subscript>m</subscript> where ...
3625 </screen>
3626 The part before the "<literal>=&gt;</literal>" is the
3627 <emphasis>context</emphasis>, while the part after the
3628 "<literal>=&gt;</literal>" is the <emphasis>head</emphasis> of the instance declaration.
3629 </para>
3630
3631 <sect3 id="flexible-instance-head">
3632 <title>Relaxed rules for the instance head</title>
3633
3634 <para>
3635 In Haskell 98 the head of an instance declaration
3636 must be of the form <literal>C (T a1 ... an)</literal>, where
3637 <literal>C</literal> is the class, <literal>T</literal> is a data type constructor,
3638 and the <literal>a1 ... an</literal> are distinct type variables.
3639 GHC relaxes these rules in two ways.
3640 <itemizedlist>
3641 <listitem>
3642 <para>
3643 The <option>-XFlexibleInstances</option> flag allows the head of the instance
3644 declaration to mention arbitrary nested types.
3645 For example, this becomes a legal instance declaration
3646 <programlisting>
3647   instance C (Maybe Int) where ...
3648 </programlisting>
3649 See also the <link linkend="instance-overlap">rules on overlap</link>.
3650 </para></listitem>
3651 <listitem><para>
3652 With the <option>-XTypeSynonymInstances</option> flag, instance heads may use type
3653 synonyms. As always, using a type synonym is just shorthand for
3654 writing the RHS of the type synonym definition.  For example:
3655
3656
3657 <programlisting>
3658   type Point = (Int,Int)
3659   instance C Point   where ...
3660   instance C [Point] where ...
3661 </programlisting>
3662
3663
3664 is legal.  However, if you added
3665
3666
3667 <programlisting>
3668   instance C (Int,Int) where ...
3669 </programlisting>
3670
3671
3672 as well, then the compiler will complain about the overlapping
3673 (actually, identical) instance declarations.  As always, type synonyms
3674 must be fully applied.  You cannot, for example, write:
3675
3676 <programlisting>
3677   type P a = [[a]]
3678   instance Monad P where ...
3679 </programlisting>
3680
3681 </para></listitem>
3682 </itemizedlist>
3683 </para>
3684 </sect3>
3685
3686 <sect3 id="instance-rules">
3687 <title>Relaxed rules for instance contexts</title>
3688
3689 <para>In Haskell 98, the assertions in the context of the instance declaration
3690 must be of the form <literal>C a</literal> where <literal>a</literal>
3691 is a type variable that occurs in the head.
3692 </para>
3693
3694 <para>
3695 The <option>-XFlexibleContexts</option> flag relaxes this rule, as well
3696 as the corresponding rule for type signatures (see <xref linkend="flexible-contexts"/>).
3697 With this flag the context of the instance declaration can each consist of arbitrary
3698 (well-kinded) assertions <literal>(C t1 ... tn)</literal> subject only to the
3699 following rules:
3700 <orderedlist>
3701 <listitem><para>
3702 The Paterson Conditions: for each assertion in the context
3703 <orderedlist>
3704 <listitem><para>No type variable has more occurrences in the assertion than in the head</para></listitem>
3705 <listitem><para>The assertion has fewer constructors and variables (taken together
3706       and counting repetitions) than the head</para></listitem>
3707 </orderedlist>
3708 </para></listitem>
3709
3710 <listitem><para>The Coverage Condition.  For each functional dependency,
3711 <replaceable>tvs</replaceable><subscript>left</subscript> <literal>-&gt;</literal>
3712 <replaceable>tvs</replaceable><subscript>right</subscript>,  of the class,
3713 every type variable in
3714 S(<replaceable>tvs</replaceable><subscript>right</subscript>) must appear in 
3715 S(<replaceable>tvs</replaceable><subscript>left</subscript>), where S is the
3716 substitution mapping each type variable in the class declaration to the
3717 corresponding type in the instance declaration.
3718 </para></listitem>
3719 </orderedlist>
3720 These restrictions ensure that context reduction terminates: each reduction
3721 step makes the problem smaller by at least one
3722 constructor.  Both the Paterson Conditions and the Coverage Condition are lifted 
3723 if you give the <option>-XUndecidableInstances</option> 
3724 flag (<xref linkend="undecidable-instances"/>).
3725 You can find lots of background material about the reason for these
3726 restrictions in the paper <ulink
3727 url="http://research.microsoft.com/%7Esimonpj/papers/fd%2Dchr/">
3728 Understanding functional dependencies via Constraint Handling Rules</ulink>.
3729 </para>
3730 <para>
3731 For example, these are OK:
3732 <programlisting>
3733   instance C Int [a]          -- Multiple parameters
3734   instance Eq (S [a])         -- Structured type in head
3735
3736       -- Repeated type variable in head
3737   instance C4 a a => C4 [a] [a] 
3738   instance Stateful (ST s) (MutVar s)
3739
3740       -- Head can consist of type variables only
3741   instance C a
3742   instance (Eq a, Show b) => C2 a b
3743
3744       -- Non-type variables in context
3745   instance Show (s a) => Show (Sized s a)
3746   instance C2 Int a => C3 Bool [a]
3747   instance C2 Int a => C3 [a] b
3748 </programlisting>
3749 But these are not:
3750 <programlisting>
3751       -- Context assertion no smaller than head
3752   instance C a => C a where ...
3753       -- (C b b) has more more occurrences of b than the head
3754   instance C b b => Foo [b] where ...
3755 </programlisting>
3756 </para>
3757
3758 <para>
3759 The same restrictions apply to instances generated by
3760 <literal>deriving</literal> clauses.  Thus the following is accepted:
3761 <programlisting>
3762   data MinHeap h a = H a (h a)
3763     deriving (Show)
3764 </programlisting>
3765 because the derived instance
3766 <programlisting>
3767   instance (Show a, Show (h a)) => Show (MinHeap h a)
3768 </programlisting>
3769 conforms to the above rules.
3770 </para>
3771
3772 <para>
3773 A useful idiom permitted by the above rules is as follows.
3774 If one allows overlapping instance declarations then it's quite
3775 convenient to have a "default instance" declaration that applies if
3776 something more specific does not:
3777 <programlisting>
3778   instance C a where
3779     op = ... -- Default
3780 </programlisting>
3781 </para>
3782 </sect3>
3783
3784 <sect3 id="undecidable-instances">
3785 <title>Undecidable instances</title>
3786
3787 <para>
3788 Sometimes even the rules of <xref linkend="instance-rules"/> are too onerous.
3789 For example, sometimes you might want to use the following to get the
3790 effect of a "class synonym":
3791 <programlisting>
3792   class (C1 a, C2 a, C3 a) => C a where { }
3793
3794   instance (C1 a, C2 a, C3 a) => C a where { }
3795 </programlisting>
3796 This allows you to write shorter signatures:
3797 <programlisting>
3798   f :: C a => ...
3799 </programlisting>
3800 instead of
3801 <programlisting>
3802   f :: (C1 a, C2 a, C3 a) => ...
3803 </programlisting>
3804 The restrictions on functional dependencies (<xref
3805 linkend="functional-dependencies"/>) are particularly troublesome.
3806 It is tempting to introduce type variables in the context that do not appear in
3807 the head, something that is excluded by the normal rules. For example:
3808 <programlisting>
3809   class HasConverter a b | a -> b where
3810      convert :: a -> b
3811    
3812   data Foo a = MkFoo a
3813
3814   instance (HasConverter a b,Show b) => Show (Foo a) where
3815      show (MkFoo value) = show (convert value)
3816 </programlisting>
3817 This is dangerous territory, however. Here, for example, is a program that would make the
3818 typechecker loop:
3819 <programlisting>
3820   class D a
3821   class F a b | a->b
3822   instance F [a] [[a]]
3823   instance (D c, F a c) => D [a]   -- 'c' is not mentioned in the head
3824 </programlisting>
3825 Similarly, it can be tempting to lift the coverage condition:
3826 <programlisting>
3827   class Mul a b c | a b -> c where
3828         (.*.) :: a -> b -> c
3829
3830   instance Mul Int Int Int where (.*.) = (*)
3831   instance Mul Int Float Float where x .*. y = fromIntegral x * y
3832   instance Mul a b c => Mul a [b] [c] where x .*. v = map (x.*.) v
3833 </programlisting>
3834 The third instance declaration does not obey the coverage condition;
3835 and indeed the (somewhat strange) definition:
3836 <programlisting>
3837   f = \ b x y -> if b then x .*. [y] else y
3838 </programlisting>
3839 makes instance inference go into a loop, because it requires the constraint
3840 <literal>(Mul a [b] b)</literal>.
3841 </para>
3842 <para>
3843 Nevertheless, GHC allows you to experiment with more liberal rules.  If you use
3844 the experimental flag <option>-XUndecidableInstances</option>
3845 <indexterm><primary>-XUndecidableInstances</primary></indexterm>, 
3846 both the Paterson Conditions and the Coverage Condition
3847 (described in <xref linkend="instance-rules"/>) are lifted.  Termination is ensured by having a
3848 fixed-depth recursion stack.  If you exceed the stack depth you get a
3849 sort of backtrace, and the opportunity to increase the stack depth
3850 with <option>-fcontext-stack=</option><emphasis>N</emphasis>.
3851 </para>
3852
3853 </sect3>
3854
3855
3856 <sect3 id="instance-overlap">
3857 <title>Overlapping instances</title>
3858 <para>
3859 In general, <emphasis>GHC requires that that it be unambiguous which instance
3860 declaration
3861 should be used to resolve a type-class constraint</emphasis>. This behaviour
3862 can be modified by two flags: <option>-XOverlappingInstances</option>
3863 <indexterm><primary>-XOverlappingInstances
3864 </primary></indexterm> 
3865 and <option>-XIncoherentInstances</option>
3866 <indexterm><primary>-XIncoherentInstances
3867 </primary></indexterm>, as this section discusses.  Both these
3868 flags are dynamic flags, and can be set on a per-module basis, using 
3869 an <literal>OPTIONS_GHC</literal> pragma if desired (<xref linkend="source-file-options"/>).</para>
3870 <para>
3871 When GHC tries to resolve, say, the constraint <literal>C Int Bool</literal>,
3872 it tries to match every instance declaration against the
3873 constraint,
3874 by instantiating the head of the instance declaration.  For example, consider
3875 these declarations:
3876 <programlisting>
3877   instance context1 => C Int a     where ...  -- (A)
3878   instance context2 => C a   Bool  where ...  -- (B)
3879   instance context3 => C Int [a]   where ...  -- (C)
3880   instance context4 => C Int [Int] where ...  -- (D)
3881 </programlisting>
3882 The instances (A) and (B) match the constraint <literal>C Int Bool</literal>, 
3883 but (C) and (D) do not.  When matching, GHC takes
3884 no account of the context of the instance declaration
3885 (<literal>context1</literal> etc).
3886 GHC's default behaviour is that <emphasis>exactly one instance must match the
3887 constraint it is trying to resolve</emphasis>.  
3888 It is fine for there to be a <emphasis>potential</emphasis> of overlap (by
3889 including both declarations (A) and (B), say); an error is only reported if a 
3890 particular constraint matches more than one.
3891 </para>
3892
3893 <para>
3894 The <option>-XOverlappingInstances</option> flag instructs GHC to allow
3895 more than one instance to match, provided there is a most specific one.  For
3896 example, the constraint <literal>C Int [Int]</literal> matches instances (A),
3897 (C) and (D), but the last is more specific, and hence is chosen.  If there is no
3898 most-specific match, the program is rejected.
3899 </para>
3900 <para>
3901 However, GHC is conservative about committing to an overlapping instance.  For example:
3902 <programlisting>
3903   f :: [b] -> [b]
3904   f x = ...
3905 </programlisting>
3906 Suppose that from the RHS of <literal>f</literal> we get the constraint
3907 <literal>C Int [b]</literal>.  But
3908 GHC does not commit to instance (C), because in a particular
3909 call of <literal>f</literal>, <literal>b</literal> might be instantiate 
3910 to <literal>Int</literal>, in which case instance (D) would be more specific still.
3911 So GHC rejects the program.  
3912 (If you add the flag <option>-XIncoherentInstances</option>,
3913 GHC will instead pick (C), without complaining about 
3914 the problem of subsequent instantiations.)
3915 </para>
3916 <para>
3917 Notice that we gave a type signature to <literal>f</literal>, so GHC had to
3918 <emphasis>check</emphasis> that <literal>f</literal> has the specified type.  
3919 Suppose instead we do not give a type signature, asking GHC to <emphasis>infer</emphasis>
3920 it instead.  In this case, GHC will refrain from
3921 simplifying the constraint <literal>C Int [b]</literal> (for the same reason
3922 as before) but, rather than rejecting the program, it will infer the type
3923 <programlisting>
3924   f :: C Int [b] => [b] -> [b]
3925 </programlisting>
3926 That postpones the question of which instance to pick to the 
3927 call site for <literal>f</literal>
3928 by which time more is known about the type <literal>b</literal>.
3929 You can write this type signature yourself if you use the 
3930 <link linkend="flexible-contexts"><option>-XFlexibleContexts</option></link>
3931 flag.
3932 </para>
3933 <para>
3934 Exactly the same situation can arise in instance declarations themselves.  Suppose we have
3935 <programlisting>
3936   class Foo a where
3937      f :: a -> a
3938   instance Foo [b] where
3939      f x = ...
3940 </programlisting>
3941 and, as before, the constraint <literal>C Int [b]</literal> arises from <literal>f</literal>'s
3942 right hand side.  GHC will reject the instance, complaining as before that it does not know how to resolve
3943 the constraint <literal>C Int [b]</literal>, because it matches more than one instance
3944 declaration.  The solution is to postpone the choice by adding the constraint to the context
3945 of the instance declaration, thus:
3946 <programlisting>
3947   instance C Int [b] => Foo [b] where
3948      f x = ...
3949 </programlisting>
3950 (You need <link linkend="instance-rules"><option>-XFlexibleInstances</option></link> to do this.)
3951 </para>
3952 <para>
3953 The willingness to be overlapped or incoherent is a property of 
3954 the <emphasis>instance declaration</emphasis> itself, controlled by the
3955 presence or otherwise of the <option>-XOverlappingInstances</option> 
3956 and <option>-XIncoherentInstances</option> flags when that module is
3957 being defined.  Neither flag is required in a module that imports and uses the
3958 instance declaration.  Specifically, during the lookup process:
3959 <itemizedlist>
3960 <listitem><para>
3961 An instance declaration is ignored during the lookup process if (a) a more specific
3962 match is found, and (b) the instance declaration was compiled with 
3963 <option>-XOverlappingInstances</option>.  The flag setting for the
3964 more-specific instance does not matter.
3965 </para></listitem>
3966 <listitem><para>
3967 Suppose an instance declaration does not match the constraint being looked up, but
3968 does unify with it, so that it might match when the constraint is further 
3969 instantiated.  Usually GHC will regard this as a reason for not committing to
3970 some other constraint.  But if the instance declaration was compiled with
3971 <option>-XIncoherentInstances</option>, GHC will skip the "does-it-unify?" 
3972 check for that declaration.
3973 </para></listitem>
3974 </itemizedlist>
3975 These rules make it possible for a library author to design a library that relies on 
3976 overlapping instances without the library client having to know.  
3977 </para>
3978 <para>
3979 If an instance declaration is compiled without
3980 <option>-XOverlappingInstances</option>,
3981 then that instance can never be overlapped.  This could perhaps be
3982 inconvenient.  Perhaps the rule should instead say that the
3983 <emphasis>overlapping</emphasis> instance declaration should be compiled in
3984 this way, rather than the <emphasis>overlapped</emphasis> one.  Perhaps overlap
3985 at a usage site should be permitted regardless of how the instance declarations
3986 are compiled, if the <option>-XOverlappingInstances</option> flag is
3987 used at the usage site.  (Mind you, the exact usage site can occasionally be
3988 hard to pin down.)  We are interested to receive feedback on these points.
3989 </para>
3990 <para>The <option>-XIncoherentInstances</option> flag implies the
3991 <option>-XOverlappingInstances</option> flag, but not vice versa.
3992 </para>
3993 </sect3>
3994
3995
3996
3997 </sect2>
3998
3999 <sect2 id="overloaded-strings">
4000 <title>Overloaded string literals
4001 </title>
4002
4003 <para>
4004 GHC supports <emphasis>overloaded string literals</emphasis>.  Normally a
4005 string literal has type <literal>String</literal>, but with overloaded string
4006 literals enabled (with <literal>-XOverloadedStrings</literal>)
4007  a string literal has type <literal>(IsString a) => a</literal>.
4008 </para>
4009 <para>
4010 This means that the usual string syntax can be used, e.g., for packed strings
4011 and other variations of string like types.  String literals behave very much
4012 like integer literals, i.e., they can be used in both expressions and patterns.
4013 If used in a pattern the literal with be replaced by an equality test, in the same
4014 way as an integer literal is.
4015 </para>
4016 <para>
4017 The class <literal>IsString</literal> is defined as:
4018 <programlisting>
4019 class IsString a where
4020     fromString :: String -> a
4021 </programlisting>
4022 The only predefined instance is the obvious one to make strings work as usual:
4023 <programlisting>
4024 instance IsString [Char] where
4025     fromString cs = cs
4026 </programlisting>
4027 The class <literal>IsString</literal> is not in scope by default.  If you want to mention
4028 it explicitly (for example, to give an instance declaration for it), you can import it
4029 from module <literal>GHC.Exts</literal>.
4030 </para>
4031 <para>
4032 Haskell's defaulting mechanism is extended to cover string literals, when <option>-XOverloadedStrings</option> is specified.
4033 Specifically:
4034 <itemizedlist>
4035 <listitem><para>
4036 Each type in a default declaration must be an 
4037 instance of <literal>Num</literal> <emphasis>or</emphasis> of <literal>IsString</literal>.
4038 </para></listitem>
4039
4040 <listitem><para>
4041 The standard defaulting rule (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.3.4">Haskell Report, Section 4.3.4</ulink>)
4042 is extended thus: defaulting applies when all the unresolved constraints involve standard classes
4043 <emphasis>or</emphasis> <literal>IsString</literal>; and at least one is a numeric class
4044 <emphasis>or</emphasis> <literal>IsString</literal>.
4045 </para></listitem>
4046 </itemizedlist>
4047 </para>
4048 <para>
4049 A small example:
4050 <programlisting>
4051 module Main where
4052
4053 import GHC.Exts( IsString(..) )
4054
4055 newtype MyString = MyString String deriving (Eq, Show)
4056 instance IsString MyString where
4057     fromString = MyString
4058
4059 greet :: MyString -> MyString
4060 greet "hello" = "world"
4061 greet other = other
4062
4063 main = do
4064     print $ greet "hello"
4065     print $ greet "fool"
4066 </programlisting>
4067 </para>
4068 <para>
4069 Note that deriving <literal>Eq</literal> is necessary for the pattern matching
4070 to work since it gets translated into an equality comparison.
4071 </para>
4072 </sect2>
4073
4074 </sect1>
4075
4076 <sect1 id="type-families">
4077 <title>Type families</title>
4078
4079 <para>
4080   <firstterm>Indexed type families</firstterm> are a new GHC extension to
4081   facilitate type-level 
4082   programming. Type families are a generalisation of <firstterm>associated
4083   data types</firstterm> 
4084   (&ldquo;<ulink url="http://www.cse.unsw.edu.au/~chak/papers/CKPM05.html">Associated 
4085   Types with Class</ulink>&rdquo;, M. Chakravarty, G. Keller, S. Peyton Jones,
4086   and S. Marlow. In Proceedings of &ldquo;The 32nd Annual ACM SIGPLAN-SIGACT
4087      Symposium on Principles of Programming Languages (POPL'05)&rdquo;, pages
4088   1-13, ACM Press, 2005) and <firstterm>associated type synonyms</firstterm>
4089   (&ldquo;<ulink url="http://www.cse.unsw.edu.au/~chak/papers/CKP05.html">Type  
4090   Associated Type Synonyms</ulink>&rdquo;. M. Chakravarty, G. Keller, and
4091   S. Peyton Jones. 
4092   In Proceedings of &ldquo;The Tenth ACM SIGPLAN International Conference on
4093   Functional Programming&rdquo;, ACM Press, pages 241-253, 2005).  Type families
4094   themselves are described in the paper &ldquo;<ulink 
4095   url="http://www.cse.unsw.edu.au/~chak/papers/SPCS08.html">Type
4096   Checking with Open Type Functions</ulink>&rdquo;, T. Schrijvers,
4097   S. Peyton-Jones, 
4098   M. Chakravarty, and M. Sulzmann, in Proceedings of &ldquo;ICFP 2008: The
4099   13th ACM SIGPLAN International Conference on Functional
4100   Programming&rdquo;, ACM Press, pages 51-62, 2008. Type families
4101   essentially provide type-indexed data types and named functions on types,
4102   which are useful for generic programming and highly parameterised library
4103   interfaces as well as interfaces with enhanced static information, much like
4104   dependent types. They might also be regarded as an alternative to functional
4105   dependencies, but provide a more functional style of type-level programming
4106   than the relational style of functional dependencies. 
4107 </para>
4108 <para>
4109   Indexed type families, or type families for short, are type constructors that
4110   represent sets of types. Set members are denoted by supplying the type family
4111   constructor with type parameters, which are called <firstterm>type
4112   indices</firstterm>. The 
4113   difference between vanilla parametrised type constructors and family
4114   constructors is much like between parametrically polymorphic functions and
4115   (ad-hoc polymorphic) methods of type classes. Parametric polymorphic functions
4116   behave the same at all type instances, whereas class methods can change their
4117   behaviour in dependence on the class type parameters. Similarly, vanilla type
4118   constructors imply the same data representation for all type instances, but
4119   family constructors can have varying representation types for varying type
4120   indices. 
4121 </para>
4122 <para>
4123   Indexed type families come in two flavours: <firstterm>data
4124     families</firstterm> and <firstterm>type synonym 
4125     families</firstterm>. They are the indexed family variants of algebraic
4126   data types and type synonyms, respectively. The instances of data families
4127   can be data types and newtypes. 
4128 </para>
4129 <para>
4130   Type families are enabled by the flag <option>-XTypeFamilies</option>.
4131   Additional information on the use of type families in GHC is available on
4132   <ulink url="http://www.haskell.org/haskellwiki/GHC/Indexed_types">the
4133   Haskell wiki page on type families</ulink>.
4134 </para>
4135
4136 <sect2 id="data-families">
4137   <title>Data families</title>
4138
4139   <para>
4140     Data families appear in two flavours: (1) they can be defined on the
4141     toplevel 
4142     or (2) they can appear inside type classes (in which case they are known as
4143     associated types). The former is the more general variant, as it lacks the
4144     requirement for the type-indexes to coincide with the class
4145     parameters. However, the latter can lead to more clearly structured code and
4146     compiler warnings if some type instances were - possibly accidentally -
4147     omitted. In the following, we always discuss the general toplevel form first
4148     and then cover the additional constraints placed on associated types.
4149   </para>
4150
4151   <sect3 id="data-family-declarations"> 
4152     <title>Data family declarations</title>
4153
4154     <para>
4155       Indexed data families are introduced by a signature, such as 
4156 <programlisting>
4157 data family GMap k :: * -> *
4158 </programlisting>
4159       The special <literal>family</literal> distinguishes family from standard
4160       data declarations.  The result kind annotation is optional and, as
4161       usual, defaults to <literal>*</literal> if omitted.  An example is
4162 <programlisting>
4163 data family Array e
4164 </programlisting>
4165       Named arguments can also be given explicit kind signatures if needed.
4166       Just as with
4167       [http://www.haskell.org/ghc/docs/latest/html/users_guide/gadt.html GADT
4168       declarations] named arguments are entirely optional, so that we can
4169       declare <literal>Array</literal> alternatively with 
4170 <programlisting>
4171 data family Array :: * -> *
4172 </programlisting>
4173     </para>
4174
4175     <sect4 id="assoc-data-family-decl">
4176       <title>Associated data family declarations</title>
4177       <para>
4178         When a data family is declared as part of a type class, we drop
4179         the <literal>family</literal> special.  The <literal>GMap</literal>
4180         declaration takes the following form 
4181 <programlisting>
4182 class GMapKey k where
4183   data GMap k :: * -> *
4184   ...
4185 </programlisting>
4186         In contrast to toplevel declarations, named arguments must be used for
4187         all type parameters that are to be used as type-indexes.  Moreover,
4188         the argument names must be class parameters.  Each class parameter may
4189         only be used at most once per associated type, but some may be omitted
4190         and they may be in an order other than in the class head.  Hence, the
4191         following contrived example is admissible: 
4192 <programlisting>
4193   class C a b c where
4194   data T c a :: *
4195 </programlisting>
4196       </para>
4197     </sect4>
4198   </sect3>
4199
4200   <sect3 id="data-instance-declarations"> 
4201     <title>Data instance declarations</title>
4202
4203     <para>
4204       Instance declarations of data and newtype families are very similar to
4205       standard data and newtype declarations.  The only two differences are
4206       that the keyword <literal>data</literal> or <literal>newtype</literal>
4207       is followed by <literal>instance</literal> and that some or all of the
4208       type arguments can be non-variable types, but may not contain forall
4209       types or type synonym families.  However, data families are generally
4210       allowed in type parameters, and type synonyms are allowed as long as
4211       they are fully applied and expand to a type that is itself admissible -
4212       exactly as this is required for occurrences of type synonyms in class
4213       instance parameters.  For example, the <literal>Either</literal>
4214       instance for <literal>GMap</literal> is 
4215 <programlisting>
4216 data instance GMap (Either a b) v = GMapEither (GMap a v) (GMap b v)
4217 </programlisting>
4218       In this example, the declaration has only one variant.  In general, it
4219       can be any number.
4220     </para>
4221     <para>
4222       Data and newtype instance declarations are only permitted when an
4223       appropriate family declaration is in scope - just as a class instance declaratoin
4224       requires the class declaration to be visible.  Moreover, each instance
4225       declaration has to conform to the kind determined by its family
4226       declaration.  This implies that the number of parameters of an instance
4227       declaration matches the arity determined by the kind of the family.
4228     </para>
4229     <para>
4230       A data family instance declaration can use the full exprssiveness of
4231       ordinary <literal>data</literal> or <literal>newtype</literal> declarations:
4232       <itemizedlist>
4233       <listitem><para> Although, a data family is <emphasis>introduced</emphasis> with
4234       the keyword "<literal>data</literal>", a data family <emphasis>instance</emphasis> can 
4235       use either <literal>data</literal> or <literal>newtype</literal>. For example:
4236 <programlisting>
4237 data family T a
4238 data    instance T Int  = T1 Int | T2 Bool
4239 newtype instance T Char = TC Bool
4240 </programlisting>
4241       </para></listitem>
4242       <listitem><para> A <literal>data instance</literal> can use GADT syntax for the data constructors,
4243       and indeed can define a GADT.  For example:
4244 <programlisting>
4245 data family G a b
4246 data instance G [a] b where
4247    G1 :: c -> G [Int] b
4248    G2 :: G [a] Bool
4249 </programlisting>
4250       </para></listitem>
4251       <listitem><para> You can use a <literal>deriving</literal> clause on a
4252       <literal>data instance</literal> or <literal>newtype instance</literal>
4253       declaration.
4254       </para></listitem>
4255       </itemizedlist>
4256     </para>
4257
4258     <para>
4259       Even if type families are defined as toplevel declarations, functions
4260       that perform different computations for different family instances may still
4261       need to be defined as methods of type classes.  In particular, the
4262       following is not possible: 
4263 <programlisting>
4264 data family T a
4265 data instance T Int  = A
4266 data instance T Char = B
4267 foo :: T a -> Int
4268 foo A = 1             -- WRONG: These two equations together...
4269 foo B = 2             -- ...will produce a type error.
4270 </programlisting>
4271 Instead, you would have to write <literal>foo</literal> as a class operation, thus:
4272 <programlisting>
4273 class C a where 
4274   foo :: T a -> Int
4275 instance Foo Int where
4276   foo A = 1
4277 instance Foo Char where
4278   foo B = 2
4279 </programlisting>
4280       (Given the functionality provided by GADTs (Generalised Algebraic Data
4281       Types), it might seem as if a definition, such as the above, should be
4282       feasible.  However, type families are - in contrast to GADTs - are
4283       <emphasis>open;</emphasis> i.e., new instances can always be added,
4284       possibly in other 
4285       modules.  Supporting pattern matching across different data instances
4286       would require a form of extensible case construct.)
4287     </para>
4288
4289     <sect4 id="assoc-data-inst">
4290       <title>Associated data instances</title>
4291       <para>
4292         When an associated data family instance is declared within a type
4293         class instance, we drop the <literal>instance</literal> keyword in the
4294         family instance.  So, the <literal>Either</literal> instance
4295         for <literal>GMap</literal> becomes: 
4296 <programlisting>
4297 instance (GMapKey a, GMapKey b) => GMapKey (Either a b) where
4298   data GMap (Either a b) v = GMapEither (GMap a v) (GMap b v)
4299   ...
4300 </programlisting>
4301         The most important point about associated family instances is that the
4302         type indexes corresponding to class parameters must be identical to
4303         the type given in the instance head; here this is the first argument
4304         of <literal>GMap</literal>, namely <literal>Either a b</literal>,
4305         which coincides with the only class parameter.  Any parameters to the
4306         family constructor that do not correspond to class parameters, need to
4307         be variables in every instance; here this is the
4308         variable <literal>v</literal>. 
4309       </para>
4310       <para>
4311         Instances for an associated family can only appear as part of
4312         instances declarations of the class in which the family was declared -
4313         just as with the equations of the methods of a class.  Also in
4314         correspondence to how methods are handled, declarations of associated
4315         types can be omitted in class instances.  If an associated family
4316         instance is omitted, the corresponding instance type is not inhabited;
4317         i.e., only diverging expressions, such
4318         as <literal>undefined</literal>, can assume the type. 
4319       </para>
4320     </sect4>
4321
4322     <sect4 id="scoping-class-params">
4323       <title>Scoping of class parameters</title>
4324       <para>
4325         In the case of multi-parameter type classes, the visibility of class
4326         parameters in the right-hand side of associated family instances
4327         depends <emphasis>solely</emphasis> on the parameters of the data
4328         family.  As an example, consider the simple class declaration 
4329 <programlisting>
4330 class C a b where
4331   data T a
4332 </programlisting>
4333         Only one of the two class parameters is a parameter to the data
4334         family.  Hence, the following instance declaration is invalid: 
4335 <programlisting>
4336 instance C [c] d where
4337   data T [c] = MkT (c, d)    -- WRONG!!  'd' is not in scope
4338 </programlisting>
4339         Here, the right-hand side of the data instance mentions the type
4340         variable <literal>d</literal> that does not occur in its left-hand
4341         side.  We cannot admit such data instances as they would compromise
4342         type safety. 
4343       </para>
4344     </sect4>
4345
4346     <sect4 id="family-class-inst">
4347       <title>Type class instances of family instances</title>
4348       <para>
4349         Type class instances of instances of data families can be defined as
4350         usual, and in particular data instance declarations can
4351         have <literal>deriving</literal> clauses.  For example, we can write 
4352 <programlisting>
4353 data GMap () v = GMapUnit (Maybe v)
4354                deriving Show
4355 </programlisting>
4356         which implicitly defines an instance of the form
4357 <programlisting>
4358 instance Show v => Show (GMap () v) where ...
4359 </programlisting>
4360       </para>
4361       <para>
4362         Note that class instances are always for
4363         particular <emphasis>instances</emphasis> of a data family and never
4364         for an entire family as a whole.  This is for essentially the same
4365         reasons that we cannot define a toplevel function that performs
4366         pattern matching on the data constructors
4367         of <emphasis>different</emphasis> instances of a single type family.
4368         It would require a form of extensible case construct. 
4369       </para>
4370     </sect4>
4371
4372     <sect4 id="data-family-overlap">
4373       <title>Overlap of data instances</title>
4374       <para>
4375         The instance declarations of a data family used in a single program
4376         may not overlap at all, independent of whether they are associated or
4377         not.  In contrast to type class instances, this is not only a matter
4378         of consistency, but one of type safety. 
4379       </para>
4380     </sect4>
4381
4382   </sect3>
4383
4384   <sect3 id="data-family-import-export">
4385     <title>Import and export</title>
4386
4387     <para>
4388       The association of data constructors with type families is more dynamic
4389       than that is the case with standard data and newtype declarations.  In
4390       the standard case, the notation <literal>T(..)</literal> in an import or
4391       export list denotes the type constructor and all the data constructors
4392       introduced in its declaration.  However, a family declaration never
4393       introduces any data constructors; instead, data constructors are
4394       introduced by family instances.  As a result, which data constructors
4395       are associated with a type family depends on the currently visible
4396       instance declarations for that family.  Consequently, an import or
4397       export item of the form <literal>T(..)</literal> denotes the family
4398       constructor and all currently visible data constructors - in the case of
4399       an export item, these may be either imported or defined in the current
4400       module.  The treatment of import and export items that explicitly list
4401       data constructors, such as <literal>GMap(GMapEither)</literal>, is
4402       analogous. 
4403     </para>
4404
4405     <sect4 id="data-family-impexp-assoc">
4406       <title>Associated families</title>
4407       <para>
4408         As expected, an import or export item of the
4409         form <literal>C(..)</literal> denotes all of the class' methods and
4410         associated types.  However, when associated types are explicitly
4411         listed as subitems of a class, we need some new syntax, as uppercase
4412         identifiers as subitems are usually data constructors, not type
4413         constructors.  To clarify that we denote types here, each associated
4414         type name needs to be prefixed by the keyword <literal>type</literal>.
4415         So for example, when explicitly listing the components of
4416         the <literal>GMapKey</literal> class, we write <literal>GMapKey(type
4417         GMap, empty, lookup, insert)</literal>. 
4418       </para>
4419     </sect4>
4420
4421     <sect4 id="data-family-impexp-examples">
4422       <title>Examples</title>
4423       <para>
4424         Assuming our running <literal>GMapKey</literal> class example, let us
4425         look at some export lists and their meaning: 
4426         <itemizedlist>
4427           <listitem>
4428             <para><literal>module GMap (GMapKey) where...</literal>: Exports
4429               just the class name.</para>
4430           </listitem>
4431           <listitem>
4432             <para><literal>module GMap (GMapKey(..)) where...</literal>:
4433               Exports the class, the associated type <literal>GMap</literal>
4434               and the member
4435               functions <literal>empty</literal>, <literal>lookup</literal>,
4436               and <literal>insert</literal>.  None of the data constructors is 
4437               exported.</para>
4438           </listitem> 
4439           <listitem>
4440             <para><literal>module GMap (GMapKey(..), GMap(..))
4441                 where...</literal>: As before, but also exports all the data
4442               constructors <literal>GMapInt</literal>, 
4443               <literal>GMapChar</literal>,  
4444               <literal>GMapUnit</literal>, <literal>GMapPair</literal>,
4445               and <literal>GMapUnit</literal>.</para>
4446           </listitem>
4447           <listitem>
4448             <para><literal>module GMap (GMapKey(empty, lookup, insert),
4449             GMap(..)) where...</literal>: As before.</para>
4450           </listitem>
4451           <listitem>
4452             <para><literal>module GMap (GMapKey, empty, lookup, insert, GMap(..))
4453                 where...</literal>: As before.</para>
4454           </listitem>
4455         </itemizedlist>
4456       </para>
4457       <para>
4458         Finally, you can write <literal>GMapKey(type GMap)</literal> to denote
4459         both the class <literal>GMapKey</literal> as well as its associated
4460         type <literal>GMap</literal>.  However, you cannot
4461         write <literal>GMapKey(type GMap(..))</literal> &mdash; i.e.,
4462         sub-component specifications cannot be nested.  To
4463         specify <literal>GMap</literal>'s data constructors, you have to list
4464         it separately. 
4465       </para>
4466     </sect4>
4467
4468     <sect4 id="data-family-impexp-instances">
4469       <title>Instances</title>
4470       <para>
4471         Family instances are implicitly exported, just like class instances.
4472         However, this applies only to the heads of instances, not to the data
4473         constructors an instance defines. 
4474       </para>
4475     </sect4>
4476
4477   </sect3>
4478
4479 </sect2>
4480
4481 <sect2 id="synonym-families">
4482   <title>Synonym families</title>
4483
4484   <para>
4485     Type families appear in two flavours: (1) they can be defined on the
4486     toplevel or (2) they can appear inside type classes (in which case they
4487     are known as associated type synonyms).  The former is the more general
4488     variant, as it lacks the requirement for the type-indexes to coincide with
4489     the class parameters.  However, the latter can lead to more clearly
4490     structured code and compiler warnings if some type instances were -
4491     possibly accidentally - omitted.  In the following, we always discuss the
4492     general toplevel form first and then cover the additional constraints
4493     placed on associated types.
4494   </para>
4495
4496   <sect3 id="type-family-declarations">
4497     <title>Type family declarations</title>
4498
4499     <para>
4500       Indexed type families are introduced by a signature, such as 
4501 <programlisting>
4502 type family Elem c :: *
4503 </programlisting>
4504       The special <literal>family</literal> distinguishes family from standard
4505       type declarations.  The result kind annotation is optional and, as
4506       usual, defaults to <literal>*</literal> if omitted.  An example is 
4507 <programlisting>
4508 type family Elem c
4509 </programlisting>
4510       Parameters can also be given explicit kind signatures if needed.  We
4511       call the number of parameters in a type family declaration, the family's
4512       arity, and all applications of a type family must be fully saturated
4513       w.r.t. to that arity.  This requirement is unlike ordinary type synonyms
4514       and it implies that the kind of a type family is not sufficient to
4515       determine a family's arity, and hence in general, also insufficient to
4516       determine whether a type family application is well formed.  As an
4517       example, consider the following declaration: 
4518 <programlisting>
4519 type family F a b :: * -> *   -- F's arity is 2, 
4520                               -- although its overall kind is * -> * -> * -> *
4521 </programlisting>
4522       Given this declaration the following are examples of well-formed and
4523       malformed types: 
4524 <programlisting>
4525 F Char [Int]       -- OK!  Kind: * -> *
4526 F Char [Int] Bool  -- OK!  Kind: *
4527 F IO Bool          -- WRONG: kind mismatch in the first argument
4528 F Bool             -- WRONG: unsaturated application
4529 </programlisting>
4530       </para>
4531
4532     <sect4 id="assoc-type-family-decl">
4533       <title>Associated type family declarations</title>
4534       <para>
4535         When a type family is declared as part of a type class, we drop
4536         the <literal>family</literal> special.  The <literal>Elem</literal>
4537         declaration takes the following form 
4538 <programlisting>
4539 class Collects ce where
4540   type Elem ce :: *
4541   ...
4542 </programlisting>
4543         The argument names of the type family must be class parameters.  Each
4544         class parameter may only be used at most once per associated type, but
4545         some may be omitted and they may be in an order other than in the
4546         class head.  Hence, the following contrived example is admissible: 
4547 <programlisting>
4548 class C a b c where
4549   type T c a :: *
4550 </programlisting>
4551         These rules are exactly as for associated data families.
4552       </para>
4553     </sect4>
4554   </sect3>
4555
4556   <sect3 id="type-instance-declarations">
4557     <title>Type instance declarations</title>
4558     <para>
4559       Instance declarations of type families are very similar to standard type
4560       synonym declarations.  The only two differences are that the
4561       keyword <literal>type</literal> is followed
4562       by <literal>instance</literal> and that some or all of the type
4563       arguments can be non-variable types, but may not contain forall types or
4564       type synonym families. However, data families are generally allowed, and
4565       type synonyms are allowed as long as they are fully applied and expand
4566       to a type that is admissible - these are the exact same requirements as
4567       for data instances.  For example, the <literal>[e]</literal> instance
4568       for <literal>Elem</literal> is 
4569 <programlisting>
4570 type instance Elem [e] = e
4571 </programlisting>
4572     </para>
4573     <para>
4574       Type family instance declarations are only legitimate when an
4575       appropriate family declaration is in scope - just like class instances
4576       require the class declaration to be visible.  Moreover, each instance
4577       declaration has to conform to the kind determined by its family
4578       declaration, and the number of type parameters in an instance
4579       declaration must match the number of type parameters in the family
4580       declaration.   Finally, the right-hand side of a type instance must be a
4581       monotype (i.e., it may not include foralls) and after the expansion of
4582       all saturated vanilla type synonyms, no synonyms, except family synonyms
4583       may remain.  Here are some examples of admissible and illegal type
4584       instances: 
4585 <programlisting>
4586 type family F a :: *
4587 type instance F [Int]              = Int         -- OK!
4588 type instance F String             = Char        -- OK!
4589 type instance F (F a)              = a           -- WRONG: type parameter mentions a type family
4590 type instance F (forall a. (a, b)) = b           -- WRONG: a forall type appears in a type parameter
4591 type instance F Float              = forall a.a  -- WRONG: right-hand side may not be a forall type
4592
4593 type family G a b :: * -> *
4594 type instance G Int            = (,)     -- WRONG: must be two type parameters
4595 type instance G Int Char Float = Double  -- WRONG: must be two type parameters
4596 </programlisting>
4597     </para>
4598
4599     <sect4 id="assoc-type-instance">
4600       <title>Associated type instance declarations</title>
4601       <para>
4602         When an associated family instance is declared within a type class
4603         instance, we drop the <literal>instance</literal> keyword in the family
4604         instance.  So, the <literal>[e]</literal> instance
4605         for <literal>Elem</literal> becomes: 
4606 <programlisting>
4607 instance (Eq (Elem [e])) => Collects ([e]) where
4608   type Elem [e] = e
4609   ...
4610 </programlisting>
4611         The most important point about associated family instances is that the
4612         type indexes corresponding to class parameters must be identical to the
4613         type given in the instance head; here this is <literal>[e]</literal>,
4614         which coincides with the only class parameter. 
4615       </para>
4616       <para>
4617         Instances for an associated family can only appear as part of  instances
4618         declarations of the class in which the family was declared - just as
4619         with the equations of the methods of a class.  Also in correspondence to
4620         how methods are handled, declarations of associated types can be omitted
4621         in class instances.  If an associated family instance is omitted, the
4622         corresponding instance type is not inhabited; i.e., only diverging
4623         expressions, such as <literal>undefined</literal>, can assume the type. 
4624       </para>
4625     </sect4>
4626
4627     <sect4 id="type-family-overlap">
4628       <title>Overlap of type synonym instances</title>
4629       <para>
4630         The instance declarations of a type family used in a single program
4631         may only overlap if the right-hand sides of the overlapping instances
4632         coincide for the overlapping types.  More formally, two instance
4633         declarations overlap if there is a substitution that makes the
4634         left-hand sides of the instances syntactically the same.  Whenever
4635         that is the case, the right-hand sides of the instances must also be
4636         syntactically equal under the same substitution.  This condition is
4637         independent of whether the type family is associated or not, and it is
4638         not only a matter of consistency, but one of type safety. 
4639       </para>
4640       <para>
4641         Here are two example to illustrate the condition under which overlap
4642         is permitted. 
4643 <programlisting>
4644 type instance F (a, Int) = [a]
4645 type instance F (Int, b) = [b]   -- overlap permitted
4646
4647 type instance G (a, Int)  = [a]
4648 type instance G (Char, a) = [a]  -- ILLEGAL overlap, as [Char] /= [Int]
4649 </programlisting>
4650       </para>
4651     </sect4>
4652
4653     <sect4 id="type-family-decidability">
4654       <title>Decidability of type synonym instances</title>
4655       <para>
4656         In order to guarantee that type inference in the presence of type
4657         families decidable, we need to place a number of additional
4658         restrictions on the formation of type instance declarations (c.f.,
4659         Definition 5 (Relaxed Conditions) of &ldquo;<ulink 
4660         url="http://www.cse.unsw.edu.au/~chak/papers/SPCS08.html">Type
4661           Checking with Open Type Functions</ulink>&rdquo;).  Instance
4662           declarations have the general form 
4663 <programlisting>
4664 type instance F t1 .. tn = t
4665 </programlisting>
4666         where we require that for every type family application <literal>(G s1
4667         .. sm)</literal> in <literal>t</literal>,  
4668         <orderedlist>
4669           <listitem>
4670             <para><literal>s1 .. sm</literal> do not contain any type family
4671             constructors,</para>
4672           </listitem>
4673           <listitem>
4674             <para>the total number of symbols (data type constructors and type
4675             variables) in <literal>s1 .. sm</literal> is strictly smaller than
4676             in <literal>t1 .. tn</literal>, and</para> 
4677           </listitem>
4678           <listitem>
4679             <para>for every type
4680             variable <literal>a</literal>, <literal>a</literal> occurs
4681             in <literal>s1 .. sm</literal> at most as often as in <literal>t1
4682             .. tn</literal>.</para>
4683           </listitem>
4684         </orderedlist>
4685         These restrictions are easily verified and ensure termination of type
4686         inference.  However, they are not sufficient to guarantee completeness
4687         of type inference in the presence of, so called, ''loopy equalities'',
4688         such as <literal>a ~ [F a]</literal>, where a recursive occurrence of
4689         a type variable is underneath a family application and data
4690         constructor application - see the above mentioned paper for details.   
4691       </para>
4692       <para>
4693         If the option <option>-XUndecidableInstances</option> is passed to the
4694         compiler, the above restrictions are not enforced and it is on the
4695         programmer to ensure termination of the normalisation of type families
4696         during type inference. 
4697       </para>
4698     </sect4>
4699   </sect3>
4700
4701   <sect3 id-="equality-constraints">
4702     <title>Equality constraints</title>
4703     <para>
4704       Type context can include equality constraints of the form <literal>t1 ~
4705       t2</literal>, which denote that the types <literal>t1</literal>
4706       and <literal>t2</literal> need to be the same.  In the presence of type
4707       families, whether two types are equal cannot generally be decided
4708       locally.  Hence, the contexts of function signatures may include
4709       equality constraints, as in the following example: 
4710 <programlisting>
4711 sumCollects :: (Collects c1, Collects c2, Elem c1 ~ Elem c2) => c1 -> c2 -> c2
4712 </programlisting>
4713       where we require that the element type of <literal>c1</literal>
4714       and <literal>c2</literal> are the same.  In general, the
4715       types <literal>t1</literal> and <literal>t2</literal> of an equality
4716       constraint may be arbitrary monotypes; i.e., they may not contain any
4717       quantifiers, independent of whether higher-rank types are otherwise
4718       enabled. 
4719     </para>
4720     <para>
4721       Equality constraints can also appear in class and instance contexts.
4722       The former enable a simple translation of programs using functional
4723       dependencies into programs using family synonyms instead.  The general
4724       idea is to rewrite a class declaration of the form 
4725 <programlisting>
4726 class C a b | a -> b
4727 </programlisting>
4728       to
4729 <programlisting>
4730 class (F a ~ b) => C a b where
4731   type F a
4732 </programlisting>
4733       That is, we represent every functional dependency (FD) <literal>a1 .. an
4734       -> b</literal> by an FD type family <literal>F a1 .. an</literal> and a
4735       superclass context equality <literal>F a1 .. an ~ b</literal>,
4736       essentially giving a name to the functional dependency.  In class
4737       instances, we define the type instances of FD families in accordance
4738       with the class head.  Method signatures are not affected by that
4739       process. 
4740     </para>
4741     <para>
4742       NB: Equalities in superclass contexts are not fully implemented in
4743       GHC 6.10. 
4744     </para>
4745   </sect3>
4746
4747   <sect3 id-="ty-fams-in-instances">
4748     <title>Type families and instance declarations</title>
4749     <para>Type families require us to extend the rules for 
4750       the form of instance heads, which are given 
4751       in <xref linkend="flexible-instance-head"/>.
4752       Specifically:
4753 <itemizedlist>
4754  <listitem><para>Data type families may appear in an instance head</para></listitem>
4755  <listitem><para>Type synonym families may not appear (at all) in an instance head</para></listitem>
4756 </itemizedlist>
4757 The reason for the latter restriction is that there is no way to check for. Consider
4758 <programlisting>
4759    type family F a
4760    type instance F Bool = Int
4761
4762    class C a
4763
4764    instance C Int
4765    instance C (F a)
4766 </programlisting>
4767 Now a constraint <literal>(C (F Bool))</literal> would match both instances.
4768 The situation is especially bad because the type instance for <literal>F Bool</literal>
4769 might be in another module, or even in a module that is not yet written.
4770 </para>
4771 </sect3>
4772 </sect2>
4773
4774 </sect1>
4775
4776 <sect1 id="other-type-extensions">
4777 <title>Other type system extensions</title>
4778
4779 <sect2 id="explicit-foralls"><title>Explicit universal quantification (forall)</title>
4780 <para>
4781 Haskell type signatures are implicitly quantified.  When the language option <option>-XExplicitForAll</option>
4782 is used, the keyword <literal>forall</literal>
4783 allows us to say exactly what this means.  For example:
4784 </para>
4785 <para>
4786 <programlisting>
4787         g :: b -> b
4788 </programlisting>
4789 means this:
4790 <programlisting>
4791         g :: forall b. (b -> b)
4792 </programlisting>
4793 The two are treated identically.
4794 </para>
4795 <para>
4796 Of course <literal>forall</literal> becomes a keyword; you can't use <literal>forall</literal> as
4797 a type variable any more!
4798 </para>
4799 </sect2>
4800
4801
4802 <sect2 id="flexible-contexts"><title>The context of a type signature</title>
4803 <para>
4804 The <option>-XFlexibleContexts</option> flag lifts the Haskell 98 restriction
4805 that the type-class constraints in a type signature must have the 
4806 form <emphasis>(class type-variable)</emphasis> or
4807 <emphasis>(class (type-variable type-variable ...))</emphasis>. 
4808 With <option>-XFlexibleContexts</option>
4809 these type signatures are perfectly OK
4810 <programlisting>
4811   g :: Eq [a] => ...
4812   g :: Ord (T a ()) => ...
4813 </programlisting>
4814 The flag <option>-XFlexibleContexts</option> also lifts the corresponding
4815 restriction on class declarations (<xref linkend="superclass-rules"/>) and instance declarations
4816 (<xref linkend="instance-rules"/>).
4817 </para>
4818
4819 <para>
4820 GHC imposes the following restrictions on the constraints in a type signature.
4821 Consider the type:
4822
4823 <programlisting>
4824   forall tv1..tvn (c1, ...,cn) => type
4825 </programlisting>
4826
4827 (Here, we write the "foralls" explicitly, although the Haskell source
4828 language omits them; in Haskell 98, all the free type variables of an
4829 explicit source-language type signature are universally quantified,
4830 except for the class type variables in a class declaration.  However,
4831 in GHC, you can give the foralls if you want.  See <xref linkend="explicit-foralls"/>).
4832 </para>
4833
4834 <para>
4835
4836 <orderedlist>
4837 <listitem>
4838
4839 <para>
4840  <emphasis>Each universally quantified type variable
4841 <literal>tvi</literal> must be reachable from <literal>type</literal></emphasis>.
4842
4843 A type variable <literal>a</literal> is "reachable" if it appears
4844 in the same constraint as either a type variable free in
4845 <literal>type</literal>, or another reachable type variable.  
4846 A value with a type that does not obey 
4847 this reachability restriction cannot be used without introducing
4848 ambiguity; that is why the type is rejected.
4849 Here, for example, is an illegal type:
4850
4851
4852 <programlisting>
4853   forall a. Eq a => Int
4854 </programlisting>
4855
4856
4857 When a value with this type was used, the constraint <literal>Eq tv</literal>
4858 would be introduced where <literal>tv</literal> is a fresh type variable, and
4859 (in the dictionary-translation implementation) the value would be
4860 applied to a dictionary for <literal>Eq tv</literal>.  The difficulty is that we
4861 can never know which instance of <literal>Eq</literal> to use because we never
4862 get any more information about <literal>tv</literal>.
4863 </para>
4864 <para>
4865 Note
4866 that the reachability condition is weaker than saying that <literal>a</literal> is
4867 functionally dependent on a type variable free in
4868 <literal>type</literal> (see <xref
4869 linkend="functional-dependencies"/>).  The reason for this is there
4870 might be a "hidden" dependency, in a superclass perhaps.  So
4871 "reachable" is a conservative approximation to "functionally dependent".
4872 For example, consider:
4873 <programlisting>
4874   class C a b | a -> b where ...
4875   class C a b => D a b where ...
4876   f :: forall a b. D a b => a -> a
4877 </programlisting>
4878 This is fine, because in fact <literal>a</literal> does functionally determine <literal>b</literal>
4879 but that is not immediately apparent from <literal>f</literal>'s type.
4880 </para>
4881 </listitem>
4882 <listitem>
4883
4884 <para>
4885  <emphasis>Every constraint <literal>ci</literal> must mention at least one of the
4886 universally quantified type variables <literal>tvi</literal></emphasis>.
4887
4888 For example, this type is OK because <literal>C a b</literal> mentions the
4889 universally quantified type variable <literal>b</literal>:
4890
4891
4892 <programlisting>
4893   forall a. C a b => burble
4894 </programlisting>
4895
4896
4897 The next type is illegal because the constraint <literal>Eq b</literal> does not
4898 mention <literal>a</literal>:
4899
4900
4901 <programlisting>
4902   forall a. Eq b => burble
4903 </programlisting>
4904
4905
4906 The reason for this restriction is milder than the other one.  The
4907 excluded types are never useful or necessary (because the offending
4908 context doesn't need to be witnessed at this point; it can be floated
4909 out).  Furthermore, floating them out increases sharing. Lastly,
4910 excluding them is a conservative choice; it leaves a patch of
4911 territory free in case we need it later.
4912
4913 </para>
4914 </listitem>
4915
4916 </orderedlist>
4917
4918 </para>
4919
4920 </sect2>
4921
4922 <sect2 id="implicit-parameters">
4923 <title>Implicit parameters</title>
4924
4925 <para> Implicit parameters are implemented as described in 
4926 "Implicit parameters: dynamic scoping with static types", 
4927 J Lewis, MB Shields, E Meijer, J Launchbury,
4928 27th ACM Symposium on Principles of Programming Languages (POPL'00),
4929 Boston, Jan 2000.
4930 </para>
4931
4932 <para>(Most of the following, still rather incomplete, documentation is
4933 due to Jeff Lewis.)</para>
4934
4935 <para>Implicit parameter support is enabled with the option
4936 <option>-XImplicitParams</option>.</para>
4937
4938 <para>
4939 A variable is called <emphasis>dynamically bound</emphasis> when it is bound by the calling
4940 context of a function and <emphasis>statically bound</emphasis> when bound by the callee's
4941 context. In Haskell, all variables are statically bound. Dynamic
4942 binding of variables is a notion that goes back to Lisp, but was later
4943 discarded in more modern incarnations, such as Scheme. Dynamic binding
4944 can be very confusing in an untyped language, and unfortunately, typed
4945 languages, in particular Hindley-Milner typed languages like Haskell,
4946 only support static scoping of variables.
4947 </para>
4948 <para>
4949 However, by a simple extension to the type class system of Haskell, we
4950 can support dynamic binding. Basically, we express the use of a
4951 dynamically bound variable as a constraint on the type. These
4952 constraints lead to types of the form <literal>(?x::t') => t</literal>, which says "this
4953 function uses a dynamically-bound variable <literal>?x</literal> 
4954 of type <literal>t'</literal>". For
4955 example, the following expresses the type of a sort function,
4956 implicitly parameterized by a comparison function named <literal>cmp</literal>.
4957 <programlisting>
4958   sort :: (?cmp :: a -> a -> Bool) => [a] -> [a]
4959 </programlisting>
4960 The dynamic binding constraints are just a new form of predicate in the type class system.
4961 </para>
4962 <para>
4963 An implicit parameter occurs in an expression using the special form <literal>?x</literal>, 
4964 where <literal>x</literal> is
4965 any valid identifier (e.g. <literal>ord ?x</literal> is a valid expression). 
4966 Use of this construct also introduces a new
4967 dynamic-binding constraint in the type of the expression. 
4968 For example, the following definition
4969 shows how we can define an implicitly parameterized sort function in
4970 terms of an explicitly parameterized <literal>sortBy</literal> function:
4971 <programlisting>
4972   sortBy :: (a -> a -> Bool) -> [a] -> [a]
4973
4974   sort   :: (?cmp :: a -> a -> Bool) => [a] -> [a]
4975   sort    = sortBy ?cmp
4976 </programlisting>
4977 </para>
4978
4979 <sect3>
4980 <title>Implicit-parameter type constraints</title>
4981 <para>
4982 Dynamic binding constraints behave just like other type class
4983 constraints in that they are automatically propagated. Thus, when a
4984 function is used, its implicit parameters are inherited by the
4985 function that called it. For example, our <literal>sort</literal> function might be used
4986 to pick out the least value in a list:
4987 <programlisting>
4988   least   :: (?cmp :: a -> a -> Bool) => [a] -> a
4989   least xs = head (sort xs)
4990 </programlisting>
4991 Without lifting a finger, the <literal>?cmp</literal> parameter is
4992 propagated to become a parameter of <literal>least</literal> as well. With explicit
4993 parameters, the default is that parameters must always be explicit
4994 propagated. With implicit parameters, the default is to always
4995 propagate them.
4996 </para>
4997 <para>
4998 An implicit-parameter type constraint differs from other type class constraints in the
4999 following way: All uses of a particular implicit parameter must have
5000 the same type. This means that the type of <literal>(?x, ?x)</literal> 
5001 is <literal>(?x::a) => (a,a)</literal>, and not 
5002 <literal>(?x::a, ?x::b) => (a, b)</literal>, as would be the case for type
5003 class constraints.
5004 </para>
5005
5006 <para> You can't have an implicit parameter in the context of a class or instance
5007 declaration.  For example, both these declarations are illegal:
5008 <programlisting>
5009   class (?x::Int) => C a where ...
5010   instance (?x::a) => Foo [a] where ...
5011 </programlisting>
5012 Reason: exactly which implicit parameter you pick up depends on exactly where
5013 you invoke a function. But the ``invocation'' of instance declarations is done
5014 behind the scenes by the compiler, so it's hard to figure out exactly where it is done.
5015 Easiest thing is to outlaw the offending types.</para>
5016 <para>
5017 Implicit-parameter constraints do not cause ambiguity.  For example, consider:
5018 <programlisting>
5019    f :: (?x :: [a]) => Int -> Int
5020    f n = n + length ?x
5021
5022    g :: (Read a, Show a) => String -> String
5023    g s = show (read s)
5024 </programlisting>
5025 Here, <literal>g</literal> has an ambiguous type, and is rejected, but <literal>f</literal>
5026 is fine.  The binding for <literal>?x</literal> at <literal>f</literal>'s call site is 
5027 quite unambiguous, and fixes the type <literal>a</literal>.
5028 </para>
5029 </sect3>
5030
5031 <sect3>
5032 <title>Implicit-parameter bindings</title>
5033
5034 <para>
5035 An implicit parameter is <emphasis>bound</emphasis> using the standard
5036 <literal>let</literal> or <literal>where</literal> binding forms.
5037 For example, we define the <literal>min</literal> function by binding
5038 <literal>cmp</literal>.
5039 <programlisting>
5040   min :: [a] -> a
5041   min  = let ?cmp = (&lt;=) in least
5042 </programlisting>
5043 </para>
5044 <para>
5045 A group of implicit-parameter bindings may occur anywhere a normal group of Haskell
5046 bindings can occur, except at top level.  That is, they can occur in a <literal>let</literal> 
5047 (including in a list comprehension, or do-notation, or pattern guards), 
5048 or a <literal>where</literal> clause.
5049 Note the following points:
5050 <itemizedlist>
5051 <listitem><para>
5052 An implicit-parameter binding group must be a
5053 collection of simple bindings to implicit-style variables (no
5054 function-style bindings, and no type signatures); these bindings are
5055 neither polymorphic or recursive.  
5056 </para></listitem>
5057 <listitem><para>
5058 You may not mix implicit-parameter bindings with ordinary bindings in a 
5059 single <literal>let</literal>
5060 expression; use two nested <literal>let</literal>s instead.
5061 (In the case of <literal>where</literal> you are stuck, since you can't nest <literal>where</literal> clauses.)
5062 </para></listitem>
5063
5064 <listitem><para>
5065 You may put multiple implicit-parameter bindings in a
5066 single binding group; but they are <emphasis>not</emphasis> treated
5067 as a mutually recursive group (as ordinary <literal>let</literal> bindings are).
5068 Instead they are treated as a non-recursive group, simultaneously binding all the implicit
5069 parameter.  The bindings are not nested, and may be re-ordered without changing
5070 the meaning of the program.
5071 For example, consider:
5072 <programlisting>
5073   f t = let { ?x = t; ?y = ?x+(1::Int) } in ?x + ?y
5074 </programlisting>
5075 The use of <literal>?x</literal> in the binding for <literal>?y</literal> does not "see"
5076 the binding for <literal>?x</literal>, so the type of <literal>f</literal> is
5077 <programlisting>
5078   f :: (?x::Int) => Int -> Int
5079 </programlisting>
5080 </para></listitem>
5081 </itemizedlist>
5082 </para>
5083
5084 </sect3>
5085
5086 <sect3><title>Implicit parameters and polymorphic recursion</title>
5087
5088 <para>
5089 Consider these two definitions:
5090 <programlisting>
5091   len1 :: [a] -> Int
5092   len1 xs = let ?acc = 0 in len_acc1 xs
5093
5094   len_acc1 [] = ?acc
5095   len_acc1 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc1 xs
5096
5097   ------------
5098
5099   len2 :: [a] -> Int
5100   len2 xs = let ?acc = 0 in len_acc2 xs
5101
5102   len_acc2 :: (?acc :: Int) => [a] -> Int
5103   len_acc2 [] = ?acc
5104   len_acc2 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc2 xs
5105 </programlisting>
5106 The only difference between the two groups is that in the second group
5107 <literal>len_acc</literal> is given a type signature.
5108 In the former case, <literal>len_acc1</literal> is monomorphic in its own
5109 right-hand side, so the implicit parameter <literal>?acc</literal> is not
5110 passed to the recursive call.  In the latter case, because <literal>len_acc2</literal>
5111 has a type signature, the recursive call is made to the
5112 <emphasis>polymorphic</emphasis> version, which takes <literal>?acc</literal>
5113 as an implicit parameter.  So we get the following results in GHCi:
5114 <programlisting>
5115   Prog> len1 "hello"
5116   0
5117   Prog> len2 "hello"
5118   5
5119 </programlisting>
5120 Adding a type signature dramatically changes the result!  This is a rather
5121 counter-intuitive phenomenon, worth watching out for.
5122 </para>
5123 </sect3>
5124
5125 <sect3><title>Implicit parameters and monomorphism</title>
5126
5127 <para>GHC applies the dreaded Monomorphism Restriction (section 4.5.5 of the
5128 Haskell Report) to implicit parameters.  For example, consider:
5129 <programlisting>
5130  f :: Int -> Int
5131   f v = let ?x = 0     in
5132         let y = ?x + v in
5133         let ?x = 5     in
5134         y
5135 </programlisting>
5136 Since the binding for <literal>y</literal> falls under the Monomorphism
5137 Restriction it is not generalised, so the type of <literal>y</literal> is
5138 simply <literal>Int</literal>, not <literal>(?x::Int) => Int</literal>.
5139 Hence, <literal>(f 9)</literal> returns result <literal>9</literal>.
5140 If you add a type signature for <literal>y</literal>, then <literal>y</literal>
5141 will get type <literal>(?x::Int) => Int</literal>, so the occurrence of
5142 <literal>y</literal> in the body of the <literal>let</literal> will see the
5143 inner binding of <literal>?x</literal>, so <literal>(f 9)</literal> will return
5144 <literal>14</literal>.
5145 </para>
5146 </sect3>
5147 </sect2>
5148
5149     <!--   ======================= COMMENTED OUT ========================
5150
5151     We intend to remove linear implicit parameters, so I'm at least removing
5152     them from the 6.6 user manual
5153
5154 <sect2 id="linear-implicit-parameters">
5155 <title>Linear implicit parameters</title>
5156 <para>
5157 Linear implicit parameters are an idea developed by Koen Claessen,
5158 Mark Shields, and Simon PJ.  They address the long-standing
5159 problem that monads seem over-kill for certain sorts of problem, notably:
5160 </para>
5161 <itemizedlist>
5162 <listitem> <para> distributing a supply of unique names </para> </listitem>
5163 <listitem> <para> distributing a supply of random numbers </para> </listitem>
5164 <listitem> <para> distributing an oracle (as in QuickCheck) </para> </listitem>
5165 </itemizedlist>
5166
5167 <para>
5168 Linear implicit parameters are just like ordinary implicit parameters,
5169 except that they are "linear"; that is, they cannot be copied, and
5170 must be explicitly "split" instead.  Linear implicit parameters are
5171 written '<literal>%x</literal>' instead of '<literal>?x</literal>'.  
5172 (The '/' in the '%' suggests the split!)
5173 </para>
5174 <para>
5175 For example:
5176 <programlisting>
5177     import GHC.Exts( Splittable )
5178
5179     data NameSupply = ...
5180     
5181     splitNS :: NameSupply -> (NameSupply, NameSupply)
5182     newName :: NameSupply -> Name
5183
5184     instance Splittable NameSupply where
5185         split = splitNS
5186
5187
5188     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
5189     f env (Lam x e) = Lam x' (f env e)
5190                     where
5191                       x'   = newName %ns
5192                       env' = extend env x x'
5193     ...more equations for f...
5194 </programlisting>
5195 Notice that the implicit parameter %ns is consumed 
5196 <itemizedlist>
5197 <listitem> <para> once by the call to <literal>newName</literal> </para> </listitem>
5198 <listitem> <para> once by the recursive call to <literal>f</literal> </para></listitem>
5199 </itemizedlist>
5200 </para>
5201 <para>
5202 So the translation done by the type checker makes
5203 the parameter explicit:
5204 <programlisting>
5205     f :: NameSupply -> Env -> Expr -> Expr
5206     f ns env (Lam x e) = Lam x' (f ns1 env e)
5207                        where
5208                          (ns1,ns2) = splitNS ns
5209                          x' = newName ns2
5210                          env = extend env x x'
5211 </programlisting>
5212 Notice the call to 'split' introduced by the type checker.
5213 How did it know to use 'splitNS'?  Because what it really did
5214 was to introduce a call to the overloaded function 'split',
5215 defined by the class <literal>Splittable</literal>:
5216 <programlisting>
5217         class Splittable a where
5218           split :: a -> (a,a)
5219 </programlisting>
5220 The instance for <literal>Splittable NameSupply</literal> tells GHC how to implement
5221 split for name supplies.  But we can simply write
5222 <programlisting>
5223         g x = (x, %ns, %ns)
5224 </programlisting>
5225 and GHC will infer
5226 <programlisting>
5227         g :: (Splittable a, %ns :: a) => b -> (b,a,a)
5228 </programlisting>
5229 The <literal>Splittable</literal> class is built into GHC.  It's exported by module 
5230 <literal>GHC.Exts</literal>.
5231 </para>
5232 <para>
5233 Other points:
5234 <itemizedlist>
5235 <listitem> <para> '<literal>?x</literal>' and '<literal>%x</literal>' 
5236 are entirely distinct implicit parameters: you 
5237   can use them together and they won't interfere with each other. </para>
5238 </listitem>
5239
5240 <listitem> <para> You can bind linear implicit parameters in 'with' clauses. </para> </listitem>
5241
5242 <listitem> <para>You cannot have implicit parameters (whether linear or not)
5243   in the context of a class or instance declaration. </para></listitem>
5244 </itemizedlist>
5245 </para>
5246
5247 <sect3><title>Warnings</title>
5248
5249 <para>
5250 The monomorphism restriction is even more important than usual.
5251 Consider the example above:
5252 <programlisting>
5253     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
5254     f env (Lam x e) = Lam x' (f env e)
5255                     where
5256                       x'   = newName %ns
5257                       env' = extend env x x'
5258 </programlisting>
5259 If we replaced the two occurrences of x' by (newName %ns), which is
5260 usually a harmless thing to do, we get:
5261 <programlisting>
5262     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
5263     f env (Lam x e) = Lam (newName %ns) (f env e)
5264                     where
5265                       env' = extend env x (newName %ns)
5266 </programlisting>
5267 But now the name supply is consumed in <emphasis>three</emphasis> places
5268 (the two calls to newName,and the recursive call to f), so
5269 the result is utterly different.  Urk!  We don't even have 
5270 the beta rule.
5271 </para>
5272 <para>
5273 Well, this is an experimental change.  With implicit
5274 parameters we have already lost beta reduction anyway, and
5275 (as John Launchbury puts it) we can't sensibly reason about
5276 Haskell programs without knowing their typing.
5277 </para>
5278
5279 </sect3>
5280
5281 <sect3><title>Recursive functions</title>
5282 <para>Linear implicit parameters can be particularly tricky when you have a recursive function
5283 Consider
5284 <programlisting>
5285         foo :: %x::T => Int -> [Int]
5286         foo 0 = []
5287         foo n = %x : foo (n-1)
5288 </programlisting>
5289 where T is some type in class Splittable.</para>
5290 <para>
5291 Do you get a list of all the same T's or all different T's
5292 (assuming that split gives two distinct T's back)?
5293 </para><para>
5294 If you supply the type signature, taking advantage of polymorphic
5295 recursion, you get what you'd probably expect.  Here's the
5296 translated term, where the implicit param is made explicit:
5297 <programlisting>
5298         foo x 0 = []
5299         foo x n = let (x1,x2) = split x
5300                   in x1 : foo x2 (n-1)
5301 </programlisting>
5302 But if you don't supply a type signature, GHC uses the Hindley
5303 Milner trick of using a single monomorphic instance of the function
5304 for the recursive calls. That is what makes Hindley Milner type inference
5305 work.  So the translation becomes
5306 <programlisting>
5307         foo x = let
5308                   foom 0 = []
5309                   foom n = x : foom (n-1)
5310                 in
5311                 foom
5312 </programlisting>
5313 Result: 'x' is not split, and you get a list of identical T's.  So the
5314 semantics of the program depends on whether or not foo has a type signature.
5315 Yikes!
5316 </para><para>
5317 You may say that this is a good reason to dislike linear implicit parameters
5318 and you'd be right.  That is why they are an experimental feature. 
5319 </para>
5320 </sect3>
5321
5322 </sect2>
5323
5324 ================ END OF Linear Implicit Parameters commented out -->
5325
5326 <sect2 id="kinding">
5327 <title>Explicitly-kinded quantification</title>
5328
5329 <para>
5330 Haskell infers the kind of each type variable.  Sometimes it is nice to be able
5331 to give the kind explicitly as (machine-checked) documentation, 
5332 just as it is nice to give a type signature for a function.  On some occasions,
5333 it is essential to do so.  For example, in his paper "Restricted Data Types in Haskell" (Haskell Workshop 1999)
5334 John Hughes had to define the data type:
5335 <screen>
5336      data Set cxt a = Set [a]
5337                     | Unused (cxt a -> ())
5338 </screen>
5339 The only use for the <literal>Unused</literal> constructor was to force the correct
5340 kind for the type variable <literal>cxt</literal>.
5341 </para>
5342 <para>
5343 GHC now instead allows you to specify the kind of a type variable directly, wherever
5344 a type variable is explicitly bound, with the flag <option>-XKindSignatures</option>.
5345 </para>
5346 <para>
5347 This flag enables kind signatures in the following places:
5348 <itemizedlist>
5349 <listitem><para><literal>data</literal> declarations:
5350 <screen>
5351   data Set (cxt :: * -> *) a = Set [a]
5352 </screen></para></listitem>
5353 <listitem><para><literal>type</literal> declarations:
5354 <screen>
5355   type T (f :: * -> *) = f Int
5356 </screen></para></listitem>
5357 <listitem><para><literal>class</literal> declarations:
5358 <screen>
5359   class (Eq a) => C (f :: * -> *) a where ...
5360 </screen></para></listitem>
5361 <listitem><para><literal>forall</literal>'s in type signatures:
5362 <screen>
5363   f :: forall (cxt :: * -> *). Set cxt Int
5364 </screen></para></listitem>
5365 </itemizedlist>
5366 </para>
5367
5368 <para>
5369 The parentheses are required.  Some of the spaces are required too, to
5370 separate the lexemes.  If you write <literal>(f::*->*)</literal> you
5371 will get a parse error, because "<literal>::*->*</literal>" is a
5372 single lexeme in Haskell.
5373 </para>
5374
5375 <para>
5376 As part of the same extension, you can put kind annotations in types
5377 as well.  Thus:
5378 <screen>
5379    f :: (Int :: *) -> Int
5380    g :: forall a. a -> (a :: *)
5381 </screen>
5382 The syntax is
5383 <screen>
5384    atype ::= '(' ctype '::' kind ')
5385 </screen>
5386 The parentheses are required.
5387 </para>
5388 </sect2>
5389
5390
5391 <sect2 id="universal-quantification">
5392 <title>Arbitrary-rank polymorphism
5393 </title>
5394
5395 <para>
5396 GHC's type system supports <emphasis>arbitrary-rank</emphasis> 
5397 explicit universal quantification in
5398 types. 
5399 For example, all the following types are legal:
5400 <programlisting>
5401     f1 :: forall a b. a -> b -> a
5402     g1 :: forall a b. (Ord a, Eq  b) => a -> b -> a
5403
5404     f2 :: (forall a. a->a) -> Int -> Int
5405     g2 :: (forall a. Eq a => [a] -> a -> Bool) -> Int -> Int
5406
5407     f3 :: ((forall a. a->a) -> Int) -> Bool -> Bool
5408
5409     f4 :: Int -> (forall a. a -> a)
5410 </programlisting>
5411 Here, <literal>f1</literal> and <literal>g1</literal> are rank-1 types, and
5412 can be written in standard Haskell (e.g. <literal>f1 :: a->b->a</literal>).
5413 The <literal>forall</literal> makes explicit the universal quantification that
5414 is implicitly added by Haskell.
5415 </para>
5416 <para>
5417 The functions <literal>f2</literal> and <literal>g2</literal> have rank-2 types;
5418 the <literal>forall</literal> is on the left of a function arrow.  As <literal>g2</literal>
5419 shows, the polymorphic type on the left of the function arrow can be overloaded.
5420 </para>
5421 <para>
5422 The function <literal>f3</literal> has a rank-3 type;
5423 it has rank-2 types on the left of a function arrow.
5424 </para>
5425 <para>
5426 GHC has three flags to control higher-rank types:
5427 <itemizedlist>
5428 <listitem><para>
5429  <option>-XPolymorphicComponents</option>: data constructors (only) can have polymorphic argument types.
5430 </para></listitem>
5431 <listitem><para>
5432  <option>-XRank2Types</option>: any function (including data constructors) can have a rank-2 type.
5433 </para></listitem>
5434 <listitem><para>
5435  <option>-XRankNTypes</option>: any function (including data constructors) can have an arbitrary-rank type.
5436 That is,  you can nest <literal>forall</literal>s
5437 arbitrarily deep in function arrows.
5438 In particular, a forall-type (also called a "type scheme"),
5439 including an operational type class context, is legal:
5440 <itemizedlist>
5441 <listitem> <para> On the left or right (see <literal>f4</literal>, for example)
5442 of a function arrow </para> </listitem>
5443 <listitem> <para> As the argument of a constructor, or type of a field, in a data type declaration. For
5444 example, any of the <literal>f1,f2,f3,g1,g2</literal> above would be valid
5445 field type signatures.</para> </listitem>
5446 <listitem> <para> As the type of an implicit parameter </para> </listitem>
5447 <listitem> <para> In a pattern type signature (see <xref linkend="scoped-type-variables"/>) </para> </listitem>
5448 </itemizedlist>
5449 </para></listitem>
5450 </itemizedlist>
5451 </para>
5452
5453
5454 <sect3 id="univ">
5455 <title>Examples
5456 </title>
5457
5458 <para>
5459 In a <literal>data</literal> or <literal>newtype</literal> declaration one can quantify
5460 the types of the constructor arguments.  Here are several examples:
5461 </para>
5462
5463 <para>
5464
5465 <programlisting>
5466 data T a = T1 (forall b. b -> b -> b) a
5467
5468 data MonadT m = MkMonad { return :: forall a. a -> m a,
5469                           bind   :: forall a b. m a -> (a -> m b) -> m b
5470                         }
5471
5472 newtype Swizzle = MkSwizzle (Ord a => [a] -> [a])
5473 </programlisting>
5474
5475 </para>
5476
5477 <para>
5478 The constructors have rank-2 types:
5479 </para>
5480
5481 <para>
5482
5483 <programlisting>
5484 T1 :: forall a. (forall b. b -> b -> b) -> a -> T a
5485 MkMonad :: forall m. (forall a. a -> m a)
5486                   -> (forall a b. m a -> (a -> m b) -> m b)
5487                   -> MonadT m
5488 MkSwizzle :: (Ord a => [a] -> [a]) -> Swizzle
5489 </programlisting>
5490
5491 </para>
5492
5493 <para>
5494 Notice that you don't need to use a <literal>forall</literal> if there's an
5495 explicit context.  For example in the first argument of the
5496 constructor <function>MkSwizzle</function>, an implicit "<literal>forall a.</literal>" is
5497 prefixed to the argument type.  The implicit <literal>forall</literal>
5498 quantifies all type variables that are not already in scope, and are
5499 mentioned in the type quantified over.
5500 </para>
5501
5502 <para>
5503 As for type signatures, implicit quantification happens for non-overloaded
5504 types too.  So if you write this:
5505
5506 <programlisting>
5507   data T a = MkT (Either a b) (b -> b)
5508 </programlisting>
5509
5510 it's just as if you had written this:
5511
5512 <programlisting>
5513   data T a = MkT (forall b. Either a b) (forall b. b -> b)
5514 </programlisting>
5515
5516 That is, since the type variable <literal>b</literal> isn't in scope, it's
5517 implicitly universally quantified.  (Arguably, it would be better
5518 to <emphasis>require</emphasis> explicit quantification on constructor arguments
5519 where that is what is wanted.  Feedback welcomed.)
5520 </para>
5521
5522 <para>
5523 You construct values of types <literal>T1, MonadT, Swizzle</literal> by applying
5524 the constructor to suitable values, just as usual.  For example,
5525 </para>
5526
5527 <para>
5528
5529 <programlisting>
5530     a1 :: T Int
5531     a1 = T1 (\xy->x) 3
5532     
5533     a2, a3 :: Swizzle
5534     a2 = MkSwizzle sort
5535     a3 = MkSwizzle reverse
5536     
5537     a4 :: MonadT Maybe
5538     a4 = let r x = Just x
5539              b m k = case m of
5540                        Just y -> k y
5541                        Nothing -> Nothing
5542          in
5543          MkMonad r b
5544
5545     mkTs :: (forall b. b -> b -> b) -> a -> [T a]
5546     mkTs f x y = [T1 f x, T1 f y]
5547 </programlisting>
5548
5549 </para>
5550
5551 <para>
5552 The type of the argument can, as usual, be more general than the type
5553 required, as <literal>(MkSwizzle reverse)</literal> shows.  (<function>reverse</function>
5554 does not need the <literal>Ord</literal> constraint.)
5555 </para>
5556
5557 <para>
5558 When you use pattern matching, the bound variables may now have
5559 polymorphic types.  For example:
5560 </para>
5561
5562 <para>
5563
5564 <programlisting>
5565     f :: T a -> a -> (a, Char)
5566     f (T1 w k) x = (w k x, w 'c' 'd')
5567
5568     g :: (Ord a, Ord b) => Swizzle -> [a] -> (a -> b) -> [b]
5569     g (MkSwizzle s) xs f = s (map f (s xs))
5570
5571     h :: MonadT m -> [m a] -> m [a]
5572     h m [] = return m []
5573     h m (x:xs) = bind m x          $ \y ->
5574                  bind m (h m xs)   $ \ys ->
5575                  return m (y:ys)
5576 </programlisting>
5577
5578 </para>
5579
5580 <para>
5581 In the function <function>h</function> we use the record selectors <literal>return</literal>
5582 and <literal>bind</literal> to extract the polymorphic bind and return functions
5583 from the <literal>MonadT</literal> data structure, rather than using pattern
5584 matching.
5585 </para>
5586 </sect3>
5587
5588 <sect3>
5589 <title>Type inference</title>
5590
5591 <para>
5592 In general, type inference for arbitrary-rank types is undecidable.
5593 GHC uses an algorithm proposed by Odersky and Laufer ("Putting type annotations to work", POPL'96)
5594 to get a decidable algorithm by requiring some help from the programmer.
5595 We do not yet have a formal specification of "some help" but the rule is this:
5596 </para>
5597 <para>
5598 <emphasis>For a lambda-bound or case-bound variable, x, either the programmer
5599 provides an explicit polymorphic type for x, or GHC's type inference will assume
5600 that x's type has no foralls in it</emphasis>.
5601 </para>
5602 <para>
5603 What does it mean to "provide" an explicit type for x?  You can do that by 
5604 giving a type signature for x directly, using a pattern type signature
5605 (<xref linkend="scoped-type-variables"/>), thus:
5606 <programlisting>
5607      \ f :: (forall a. a->a) -> (f True, f 'c')
5608 </programlisting>
5609 Alternatively, you can give a type signature to the enclosing
5610 context, which GHC can "push down" to find the type for the variable:
5611 <programlisting>
5612      (\ f -> (f True, f 'c')) :: (forall a. a->a) -> (Bool,Char)
5613 </programlisting>
5614 Here the type signature on the expression can be pushed inwards
5615 to give a type signature for f.  Similarly, and more commonly,
5616 one can give a type signature for the function itself:
5617 <programlisting>
5618      h :: (forall a. a->a) -> (Bool,Char)
5619      h f = (f True, f 'c')
5620 </programlisting>
5621 You don't need to give a type signature if the lambda bound variable
5622 is a constructor argument.  Here is an example we saw earlier:
5623 <programlisting>
5624     f :: T a -> a -> (a, Char)
5625     f (T1 w k) x = (w k x, w 'c' 'd')
5626 </programlisting>
5627 Here we do not need to give a type signature to <literal>w</literal>, because
5628 it is an argument of constructor <literal>T1</literal> and that tells GHC all
5629 it needs to know.
5630 </para>
5631
5632 </sect3>
5633
5634
5635 <sect3 id="implicit-quant">
5636 <title>Implicit quantification</title>
5637
5638 <para>
5639 GHC performs implicit quantification as follows.  <emphasis>At the top level (only) of 
5640 user-written types, if and only if there is no explicit <literal>forall</literal>,
5641 GHC finds all the type variables mentioned in the type that are not already
5642 in scope, and universally quantifies them.</emphasis>  For example, the following pairs are 
5643 equivalent:
5644 <programlisting>
5645   f :: a -> a
5646   f :: forall a. a -> a
5647
5648   g (x::a) = let
5649                 h :: a -> b -> b
5650                 h x y = y
5651              in ...
5652   g (x::a) = let
5653                 h :: forall b. a -> b -> b
5654                 h x y = y
5655              in ...
5656 </programlisting>
5657 </para>
5658 <para>
5659 Notice that GHC does <emphasis>not</emphasis> find the innermost possible quantification
5660 point.  For example:
5661 <programlisting>
5662   f :: (a -> a) -> Int
5663            -- MEANS
5664   f :: forall a. (a -> a) -> Int
5665            -- NOT
5666   f :: (forall a. a -> a) -> Int
5667
5668
5669   g :: (Ord a => a -> a) -> Int
5670            -- MEANS the illegal type
5671   g :: forall a. (Ord a => a -> a) -> Int
5672            -- NOT
5673   g :: (forall a. Ord a => a -> a) -> Int
5674 </programlisting>
5675 The latter produces an illegal type, which you might think is silly,
5676 but at least the rule is simple.  If you want the latter type, you
5677 can write your for-alls explicitly.  Indeed, doing so is strongly advised
5678 for rank-2 types.
5679 </para>
5680 </sect3>
5681 </sect2>
5682
5683
5684 <sect2 id="impredicative-polymorphism">
5685 <title>Impredicative polymorphism
5686 </title>
5687 <para><emphasis>NOTE: the impredicative-polymorphism feature is deprecated in GHC 6.12, and
5688 will be removed or replaced in GHC 6.14.</emphasis></para>
5689
5690 <para>GHC supports <emphasis>impredicative polymorphism</emphasis>, 
5691 enabled with <option>-XImpredicativeTypes</option>.  
5692 This means
5693 that you can call a polymorphic function at a polymorphic type, and
5694 parameterise data structures over polymorphic types.  For example:
5695 <programlisting>
5696   f :: Maybe (forall a. [a] -> [a]) -> Maybe ([Int], [Char])
5697   f (Just g) = Just (g [3], g "hello")
5698   f Nothing  = Nothing
5699 </programlisting>
5700 Notice here that the <literal>Maybe</literal> type is parameterised by the
5701 <emphasis>polymorphic</emphasis> type <literal>(forall a. [a] ->
5702 [a])</literal>.
5703 </para>
5704 <para>The technical details of this extension are described in the paper
5705 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/boxy/">Boxy types:
5706 type inference for higher-rank types and impredicativity</ulink>,
5707 which appeared at ICFP 2006.  
5708 </para>
5709 </sect2>
5710
5711 <sect2 id="scoped-type-variables">
5712 <title>Lexically scoped type variables
5713 </title>
5714
5715 <para>
5716 GHC supports <emphasis>lexically scoped type variables</emphasis>, without
5717 which some type signatures are simply impossible to write. For example:
5718 <programlisting>
5719 f :: forall a. [a] -> [a]
5720 f xs = ys ++ ys
5721      where
5722        ys :: [a]
5723        ys = reverse xs
5724 </programlisting>
5725 The type signature for <literal>f</literal> brings the type variable <literal>a</literal> into scope,
5726 because of the explicit <literal>forall</literal> (<xref linkend="decl-type-sigs"/>).
5727 The type variables bound by a <literal>forall</literal> scope over
5728 the entire definition of the accompanying value declaration.
5729 In this example, the type variable <literal>a</literal> scopes over the whole 
5730 definition of <literal>f</literal>, including over
5731 the type signature for <varname>ys</varname>. 
5732 In Haskell 98 it is not possible to declare
5733 a type for <varname>ys</varname>; a major benefit of scoped type variables is that
5734 it becomes possible to do so.
5735 </para>
5736 <para>Lexically-scoped type variables are enabled by
5737 <option>-XScopedTypeVariables</option>.  This flag implies <option>-XRelaxedPolyRec</option>.
5738 </para>
5739 <para>Note: GHC 6.6 contains substantial changes to the way that scoped type
5740 variables work, compared to earlier releases.  Read this section
5741 carefully!</para>
5742
5743 <sect3>
5744 <title>Overview</title>
5745
5746 <para>The design follows the following principles
5747 <itemizedlist>
5748 <listitem><para>A scoped type variable stands for a type <emphasis>variable</emphasis>, and not for
5749 a <emphasis>type</emphasis>. (This is a change from GHC's earlier
5750 design.)</para></listitem>
5751 <listitem><para>Furthermore, distinct lexical type variables stand for distinct
5752 type variables.  This means that every programmer-written type signature
5753 (including one that contains free scoped type variables) denotes a
5754 <emphasis>rigid</emphasis> type; that is, the type is fully known to the type
5755 checker, and no inference is involved.</para></listitem>
5756 <listitem><para>Lexical type variables may be alpha-renamed freely, without
5757 changing the program.</para></listitem>
5758 </itemizedlist>
5759 </para>
5760 <para>
5761 A <emphasis>lexically scoped type variable</emphasis> can be bound by:
5762 <itemizedlist>
5763 <listitem><para>A declaration type signature (<xref linkend="decl-type-sigs"/>)</para></listitem>
5764 <listitem><para>An expression type signature (<xref linkend="exp-type-sigs"/>)</para></listitem>
5765 <listitem><para>A pattern type signature (<xref linkend="pattern-type-sigs"/>)</para></listitem>
5766 <listitem><para>Class and instance declarations (<xref linkend="cls-inst-scoped-tyvars"/>)</para></listitem>
5767 </itemizedlist>
5768 </para>
5769 <para>
5770 In Haskell, a programmer-written type signature is implicitly quantified over
5771 its free type variables (<ulink
5772 url="http://www.haskell.org/onlinereport/decls.html#sect4.1.2">Section
5773 4.1.2</ulink> 
5774 of the Haskell Report).
5775 Lexically scoped type variables affect this implicit quantification rules
5776 as follows: any type variable that is in scope is <emphasis>not</emphasis> universally
5777 quantified. For example, if type variable <literal>a</literal> is in scope,
5778 then
5779 <programlisting>
5780   (e :: a -> a)     means     (e :: a -> a)
5781   (e :: b -> b)     means     (e :: forall b. b->b)
5782   (e :: a -> b)     means     (e :: forall b. a->b)
5783 </programlisting>
5784 </para>
5785
5786
5787 </sect3>
5788
5789
5790 <sect3 id="decl-type-sigs">
5791 <title>Declaration type signatures</title>
5792 <para>A declaration type signature that has <emphasis>explicit</emphasis>
5793 quantification (using <literal>forall</literal>) brings into scope the
5794 explicitly-quantified
5795 type variables, in the definition of the named function.  For example:
5796 <programlisting>
5797   f :: forall a. [a] -> [a]
5798   f (x:xs) = xs ++ [ x :: a ]
5799 </programlisting>
5800 The "<literal>forall a</literal>" brings "<literal>a</literal>" into scope in
5801 the definition of "<literal>f</literal>".
5802 </para>
5803 <para>This only happens if:
5804 <itemizedlist>
5805 <listitem><para> The quantification in <literal>f</literal>'s type
5806 signature is explicit.  For example:
5807 <programlisting>
5808   g :: [a] -> [a]
5809   g (x:xs) = xs ++ [ x :: a ]
5810 </programlisting>
5811 This program will be rejected, because "<literal>a</literal>" does not scope
5812 over the definition of "<literal>f</literal>", so "<literal>x::a</literal>"
5813 means "<literal>x::forall a. a</literal>" by Haskell's usual implicit
5814 quantification rules.
5815 </para></listitem>
5816 <listitem><para> The signature gives a type for a function binding or a bare variable binding, 
5817 not a pattern binding.
5818 For example:
5819 <programlisting>
5820   f1 :: forall a. [a] -> [a]
5821   f1 (x:xs) = xs ++ [ x :: a ]   -- OK
5822
5823   f2 :: forall a. [a] -> [a]
5824   f2 = \(x:xs) -> xs ++ [ x :: a ]   -- OK
5825
5826   f3 :: forall a. [a] -> [a] 
5827   Just f3 = Just (\(x:xs) -> xs ++ [ x :: a ])   -- Not OK!
5828 </programlisting>
5829 The binding for <literal>f3</literal> is a pattern binding, and so its type signature
5830 does not bring <literal>a</literal> into scope.   However <literal>f1</literal> is a
5831 function binding, and <literal>f2</literal> binds a bare variable; in both cases
5832 the type signature brings <literal>a</literal> into scope.
5833 </para></listitem>
5834 </itemizedlist>
5835 </para>
5836 </sect3>
5837
5838 <sect3 id="exp-type-sigs">
5839 <title>Expression type signatures</title>
5840
5841 <para>An expression type signature that has <emphasis>explicit</emphasis>
5842 quantification (using <literal>forall</literal>) brings into scope the
5843 explicitly-quantified
5844 type variables, in the annotated expression.  For example:
5845 <programlisting>
5846   f = runST ( (op >>= \(x :: STRef s Int) -> g x) :: forall s. ST s Bool )
5847 </programlisting>
5848 Here, the type signature <literal>forall a. ST s Bool</literal> brings the 
5849 type variable <literal>s</literal> into scope, in the annotated expression 
5850 <literal>(op >>= \(x :: STRef s Int) -> g x)</literal>.
5851 </para>
5852
5853 </sect3>
5854
5855 <sect3 id="pattern-type-sigs">
5856 <title>Pattern type signatures</title>
5857 <para>
5858 A type signature may occur in any pattern; this is a <emphasis>pattern type
5859 signature</emphasis>. 
5860 For example:
5861 <programlisting>
5862   -- f and g assume that 'a' is already in scope
5863   f = \(x::Int, y::a) -> x
5864   g (x::a) = x
5865   h ((x,y) :: (Int,Bool)) = (y,x)
5866 </programlisting>
5867 In the case where all the type variables in the pattern type signature are
5868 already in scope (i.e. bound by the enclosing context), matters are simple: the
5869 signature simply constrains the type of the pattern in the obvious way.
5870 </para>
5871 <para>
5872 Unlike expression and declaration type signatures, pattern type signatures are not implicitly generalised.
5873 The pattern in a <emphasis>pattern binding</emphasis> may only mention type variables
5874 that are already in scope.  For example:
5875 <programlisting>
5876   f :: forall a. [a] -> (Int, [a])
5877   f xs = (n, zs)
5878     where
5879       (ys::[a], n) = (reverse xs, length xs) -- OK
5880       zs::[a] = xs ++ ys                     -- OK
5881
5882       Just (v::b) = ...  -- Not OK; b is not in scope
5883 </programlisting>
5884 Here, the pattern signatures for <literal>ys</literal> and <literal>zs</literal>
5885 are fine, but the one for <literal>v</literal> is not because <literal>b</literal> is
5886 not in scope. 
5887 </para>
5888 <para>
5889 However, in all patterns <emphasis>other</emphasis> than pattern bindings, a pattern
5890 type signature may mention a type variable that is not in scope; in this case,
5891 <emphasis>the signature brings that type variable into scope</emphasis>.
5892 This is particularly important for existential data constructors.  For example:
5893 <programlisting>
5894   data T = forall a. MkT [a]
5895
5896   k :: T -> T
5897   k (MkT [t::a]) = MkT t3
5898                  where
5899                    t3::[a] = [t,t,t]
5900 </programlisting>
5901 Here, the pattern type signature <literal>(t::a)</literal> mentions a lexical type
5902 variable that is not already in scope.  Indeed, it <emphasis>cannot</emphasis> already be in scope,
5903 because it is bound by the pattern match.  GHC's rule is that in this situation
5904 (and only then), a pattern type signature can mention a type variable that is
5905 not already in scope; the effect is to bring it into scope, standing for the
5906 existentially-bound type variable.
5907 </para>
5908 <para>
5909 When a pattern type signature binds a type variable in this way, GHC insists that the 
5910 type variable is bound to a <emphasis>rigid</emphasis>, or fully-known, type variable.
5911 This means that any user-written type signature always stands for a completely known type.
5912 </para>
5913 <para>
5914 If all this seems a little odd, we think so too.  But we must have
5915 <emphasis>some</emphasis> way to bring such type variables into scope, else we
5916 could not name existentially-bound type variables in subsequent type signatures.
5917 </para>
5918 <para>
5919 This is (now) the <emphasis>only</emphasis> situation in which a pattern type 
5920 signature is allowed to mention a lexical variable that is not already in
5921 scope.
5922 For example, both <literal>f</literal> and <literal>g</literal> would be
5923 illegal if <literal>a</literal> was not already in scope.
5924 </para>
5925
5926
5927 </sect3>
5928
5929 <!-- ==================== Commented out part about result type signatures 
5930
5931 <sect3 id="result-type-sigs">
5932 <title>Result type signatures</title>
5933
5934 <para>
5935 The result type of a function, lambda, or case expression alternative can be given a signature, thus:
5936
5937 <programlisting>
5938   {- f assumes that 'a' is already in scope -}
5939   f x y :: [a] = [x,y,x]
5940
5941   g = \ x :: [Int] -> [3,4]
5942
5943   h :: forall a. [a] -> a
5944   h xs = case xs of
5945             (y:ys) :: a -> y
5946 </programlisting>
5947 The final <literal>:: [a]</literal> after the patterns of <literal>f</literal> gives the type of 
5948 the result of the function.  Similarly, the body of the lambda in the RHS of
5949 <literal>g</literal> is <literal>[Int]</literal>, and the RHS of the case
5950 alternative in <literal>h</literal> is <literal>a</literal>.
5951 </para>
5952 <para> A result type signature never brings new type variables into scope.</para>
5953 <para>
5954 There are a couple of syntactic wrinkles.  First, notice that all three
5955 examples would parse quite differently with parentheses:
5956 <programlisting>
5957   {- f assumes that 'a' is already in scope -}
5958   f x (y :: [a]) = [x,y,x]
5959
5960   g = \ (x :: [Int]) -> [3,4]
5961
5962   h :: forall a. [a] -> a
5963   h xs = case xs of
5964             ((y:ys) :: a) -> y
5965 </programlisting>
5966 Now the signature is on the <emphasis>pattern</emphasis>; and
5967 <literal>h</literal> would certainly be ill-typed (since the pattern
5968 <literal>(y:ys)</literal> cannot have the type <literal>a</literal>.
5969
5970 Second, to avoid ambiguity, the type after the &ldquo;<literal>::</literal>&rdquo; in a result
5971 pattern signature on a lambda or <literal>case</literal> must be atomic (i.e. a single
5972 token or a parenthesised type of some sort).  To see why,
5973 consider how one would parse this:
5974 <programlisting>
5975   \ x :: a -> b -> x
5976 </programlisting>
5977 </para>
5978 </sect3>
5979
5980  -->
5981
5982 <sect3 id="cls-inst-scoped-tyvars">
5983 <title>Class and instance declarations</title>
5984 <para>
5985
5986 The type variables in the head of a <literal>class</literal> or <literal>instance</literal> declaration
5987 scope over the methods defined in the <literal>where</literal> part.  For example:
5988
5989
5990 <programlisting>
5991   class C a where
5992     op :: [a] -> a
5993
5994     op xs = let ys::[a]
5995                 ys = reverse xs
5996             in
5997             head ys
5998 </programlisting>
5999 </para>
6000 </sect3>
6001
6002 </sect2>
6003
6004
6005 <sect2 id="typing-binds">
6006 <title>Generalised typing of mutually recursive bindings</title>
6007
6008 <para>
6009 The Haskell Report specifies that a group of bindings (at top level, or in a
6010 <literal>let</literal> or <literal>where</literal>) should be sorted into
6011 strongly-connected components, and then type-checked in dependency order
6012 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.1">Haskell
6013 Report, Section 4.5.1</ulink>).  
6014 As each group is type-checked, any binders of the group that
6015 have
6016 an explicit type signature are put in the type environment with the specified
6017 polymorphic type,
6018 and all others are monomorphic until the group is generalised 
6019 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.2">Haskell Report, Section 4.5.2</ulink>).
6020 </para>
6021
6022 <para>Following a suggestion of Mark Jones, in his paper
6023 <ulink url="http://citeseer.ist.psu.edu/424440.html">Typing Haskell in
6024 Haskell</ulink>,
6025 GHC implements a more general scheme.  If <option>-XRelaxedPolyRec</option> is
6026 specified:
6027 <emphasis>the dependency analysis ignores references to variables that have an explicit
6028 type signature</emphasis>.
6029 As a result of this refined dependency analysis, the dependency groups are smaller, and more bindings will
6030 typecheck.  For example, consider:
6031 <programlisting>
6032   f :: Eq a =&gt; a -> Bool
6033   f x = (x == x) || g True || g "Yes"
6034   
6035   g y = (y &lt;= y) || f True
6036 </programlisting>
6037 This is rejected by Haskell 98, but under Jones's scheme the definition for
6038 <literal>g</literal> is typechecked first, separately from that for
6039 <literal>f</literal>,
6040 because the reference to <literal>f</literal> in <literal>g</literal>'s right
6041 hand side is ignored by the dependency analysis.  Then <literal>g</literal>'s
6042 type is generalised, to get
6043 <programlisting>
6044   g :: Ord a =&gt; a -> Bool
6045 </programlisting>
6046 Now, the definition for <literal>f</literal> is typechecked, with this type for
6047 <literal>g</literal> in the type environment.
6048 </para>
6049
6050 <para>
6051 The same refined dependency analysis also allows the type signatures of 
6052 mutually-recursive functions to have different contexts, something that is illegal in
6053 Haskell 98 (Section 4.5.2, last sentence).  With
6054 <option>-XRelaxedPolyRec</option>
6055 GHC only insists that the type signatures of a <emphasis>refined</emphasis> group have identical
6056 type signatures; in practice this means that only variables bound by the same
6057 pattern binding must have the same context.  For example, this is fine:
6058 <programlisting>
6059   f :: Eq a =&gt; a -> Bool
6060   f x = (x == x) || g True
6061   
6062   g :: Ord a =&gt; a -> Bool
6063   g y = (y &lt;= y) || f True
6064 </programlisting>
6065 </para>
6066 </sect2>
6067
6068 <sect2 id="mono-local-binds">
6069 <title>Monomorphic local bindings</title>
6070 <para>
6071 We are actively thinking of simplifying GHC's type system, by <emphasis>not generalising local bindings</emphasis>.
6072 The rationale is described in the paper 
6073 <ulink url="http://research.microsoft.com/~simonpj/papers/constraints/index.htm">Let should not be generalised</ulink>.
6074 </para>
6075 <para>
6076 The experimental new behaviour is enabled by the flag <option>-XMonoLocalBinds</option>.  The effect is
6077 that local (that is, non-top-level) bindings without a type signature are not generalised at all.  You can
6078 think of it as an extreme (but much more predictable) version of the Monomorphism Restriction.
6079 If you supply a type signature, then the flag has no effect.
6080 </para>
6081 </sect2>
6082
6083 </sect1>
6084 <!-- ==================== End of type system extensions =================  -->
6085   
6086 <!-- ====================== TEMPLATE HASKELL =======================  -->
6087
6088 <sect1 id="template-haskell">
6089 <title>Template Haskell</title>
6090
6091 <para>Template Haskell allows you to do compile-time meta-programming in
6092 Haskell.  
6093 The background to
6094 the main technical innovations is discussed in "<ulink
6095 url="http://research.microsoft.com/~simonpj/papers/meta-haskell/">
6096 Template Meta-programming for Haskell</ulink>" (Proc Haskell Workshop 2002).
6097 </para>
6098 <para>
6099 There is a Wiki page about
6100 Template Haskell at <ulink url="http://www.haskell.org/haskellwiki/Template_Haskell">
6101 http://www.haskell.org/haskellwiki/Template_Haskell</ulink>, and that is the best place to look for
6102 further details.
6103 You may also 
6104 consult the <ulink
6105 url="http://www.haskell.org/ghc/docs/latest/html/libraries/index.html">online
6106 Haskell library reference material</ulink> 
6107 (look for module <literal>Language.Haskell.TH</literal>).
6108 Many changes to the original design are described in 
6109       <ulink url="http://research.microsoft.com/~simonpj/papers/meta-haskell/notes2.ps">
6110 Notes on Template Haskell version 2</ulink>.
6111 Not all of these changes are in GHC, however.
6112 </para>
6113
6114 <para> The first example from that paper is set out below (<xref linkend="th-example"/>) 
6115 as a worked example to help get you started. 
6116 </para>
6117
6118 <para>
6119 The documentation here describes the realisation of Template Haskell in GHC.  It is not detailed enough to 
6120 understand Template Haskell; see the <ulink url="http://haskell.org/haskellwiki/Template_Haskell">
6121 Wiki page</ulink>.
6122 </para>
6123
6124     <sect2>
6125       <title>Syntax</title>
6126
6127       <para> Template Haskell has the following new syntactic
6128       constructions.  You need to use the flag
6129       <option>-XTemplateHaskell</option>
6130         <indexterm><primary><option>-XTemplateHaskell</option></primary>
6131       </indexterm>to switch these syntactic extensions on
6132       (<option>-XTemplateHaskell</option> is no longer implied by
6133       <option>-fglasgow-exts</option>).</para>
6134
6135         <itemizedlist>
6136               <listitem><para>
6137                   A splice is written <literal>$x</literal>, where <literal>x</literal> is an
6138                   identifier, or <literal>$(...)</literal>, where the "..." is an arbitrary expression.
6139                   There must be no space between the "$" and the identifier or parenthesis.  This use
6140                   of "$" overrides its meaning as an infix operator, just as "M.x" overrides the meaning
6141                   of "." as an infix operator.  If you want the infix operator, put spaces around it.
6142                   </para>
6143               <para> A splice can occur in place of 
6144                   <itemizedlist>
6145                     <listitem><para> an expression; the spliced expression must
6146                     have type <literal>Q Exp</literal></para></listitem>
6147                     <listitem><para> an type; the spliced expression must
6148                     have type <literal>Q Typ</literal></para></listitem>
6149                     <listitem><para> a list of top-level declarations; the spliced expression 
6150                     must have type <literal>Q [Dec]</literal></para></listitem>
6151                     </itemizedlist>
6152             Inside a splice you can can only call functions defined in imported modules,
6153         not functions defined elsewhere in the same module.</para></listitem>
6154
6155               <listitem><para>
6156                   A expression quotation is written in Oxford brackets, thus:
6157                   <itemizedlist>
6158                     <listitem><para> <literal>[| ... |]</literal>, where the "..." is an expression; 
6159                              the quotation has type <literal>Q Exp</literal>.</para></listitem>
6160                     <listitem><para> <literal>[d| ... |]</literal>, where the "..." is a list of top-level declarations;
6161                              the quotation has type <literal>Q [Dec]</literal>.</para></listitem>
6162                     <listitem><para> <literal>[t| ... |]</literal>, where the "..." is a type;
6163                              the quotation has type <literal>Q Typ</literal>.</para></listitem>
6164                   </itemizedlist></para></listitem>
6165
6166               <listitem><para>
6167                   A quasi-quotation can appear in either a pattern context or an
6168                   expression context and is also written in Oxford brackets:
6169                   <itemizedlist>
6170                     <listitem><para> <literal>[$<replaceable>varid</replaceable>| ... |]</literal>,
6171                         where the "..." is an arbitrary string; a full description of the
6172                         quasi-quotation facility is given in <xref linkend="th-quasiquotation"/>.</para></listitem>
6173                   </itemizedlist></para></listitem>
6174
6175               <listitem><para>
6176                   A name can be quoted with either one or two prefix single quotes:
6177                   <itemizedlist>
6178                     <listitem><para> <literal>'f</literal> has type <literal>Name</literal>, and names the function <literal>f</literal>.
6179                   Similarly <literal>'C</literal> has type <literal>Name</literal> and names the data constructor <literal>C</literal>.
6180                   In general <literal>'</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in an expression context.
6181                      </para></listitem> 
6182                     <listitem><para> <literal>''T</literal> has type <literal>Name</literal>, and names the type constructor  <literal>T</literal>.
6183                   That is, <literal>''</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in a type context.
6184                      </para></listitem> 
6185                   </itemizedlist>
6186                   These <literal>Names</literal> can be used to construct Template Haskell expressions, patterns, declarations etc.  They
6187                   may also be given as an argument to the <literal>reify</literal> function.
6188                  </para>
6189                 </listitem>
6190
6191               <listitem><para> You may omit the <literal>$(...)</literal> in a top-level declaration splice. 
6192               Simply writing an expression (rather than a declaration) implies a splice.  For example, you can write
6193 <programlisting>
6194 module Foo where
6195 import Bar
6196
6197 f x = x
6198
6199 $(deriveStuff 'f)   -- Uses the $(...) notation
6200
6201 g y = y+1
6202
6203 deriveStuff 'g      -- Omits the $(...)
6204
6205 h z = z-1
6206 </programlisting>
6207             This abbreviation makes top-level declaration slices quieter and less intimidating.
6208             </para></listitem>
6209
6210                   
6211         </itemizedlist>
6212 (Compared to the original paper, there are many differences of detail.
6213 The syntax for a declaration splice uses "<literal>$</literal>" not "<literal>splice</literal>".
6214 The type of the enclosed expression must be  <literal>Q [Dec]</literal>, not  <literal>[Q Dec]</literal>.
6215 Pattern splices and quotations are not implemented.)
6216
6217 </sect2>
6218
6219 <sect2>  <title> Using Template Haskell </title>
6220 <para>
6221 <itemizedlist>
6222     <listitem><para>
6223     The data types and monadic constructor functions for Template Haskell are in the library
6224     <literal>Language.Haskell.THSyntax</literal>.
6225     </para></listitem>
6226
6227     <listitem><para>
6228     You can only run a function at compile time if it is imported from another module.  That is,
6229             you can't define a function in a module, and call it from within a splice in the same module.
6230             (It would make sense to do so, but it's hard to implement.)
6231    </para></listitem>
6232
6233    <listitem><para>
6234    You can only run a function at compile time if it is imported
6235    from another module <emphasis>that is not part of a mutually-recursive group of modules
6236    that includes the module currently being compiled</emphasis>.  Furthermore, all of the modules of 
6237    the mutually-recursive group must be reachable by non-SOURCE imports from the module where the
6238    splice is to be run.</para>
6239    <para>
6240    For example, when compiling module A,
6241    you can only run Template Haskell functions imported from B if B does not import A (directly or indirectly).
6242    The reason should be clear: to run B we must compile and run A, but we are currently type-checking A.
6243    </para></listitem>
6244
6245     <listitem><para>
6246             The flag <literal>-ddump-splices</literal> shows the expansion of all top-level splices as they happen.
6247    </para></listitem>
6248     <listitem><para>
6249             If you are building GHC from source, you need at least a stage-2 bootstrap compiler to
6250               run Template Haskell.  A stage-1 compiler will reject the TH constructs.  Reason: TH
6251               compiles and runs a program, and then looks at the result.  So it's important that
6252               the program it compiles produces results whose representations are identical to
6253               those of the compiler itself.
6254    </para></listitem>
6255 </itemizedlist>
6256 </para>
6257 <para> Template Haskell works in any mode (<literal>--make</literal>, <literal>--interactive</literal>,
6258         or file-at-a-time).  There used to be a restriction to the former two, but that restriction 
6259         has been lifted.
6260 </para>
6261 </sect2>
6262  
6263 <sect2 id="th-example">  <title> A Template Haskell Worked Example </title>
6264 <para>To help you get over the confidence barrier, try out this skeletal worked example.
6265   First cut and paste the two modules below into "Main.hs" and "Printf.hs":</para>
6266
6267 <programlisting>
6268
6269 {- Main.hs -}
6270 module Main where
6271
6272 -- Import our template "pr"
6273 import Printf ( pr )
6274
6275 -- The splice operator $ takes the Haskell source code
6276 -- generated at compile time by "pr" and splices it into
6277 -- the argument of "putStrLn".
6278 main = putStrLn ( $(pr "Hello") )
6279
6280
6281 {- Printf.hs -}
6282 module Printf where
6283
6284 -- Skeletal printf from the paper.
6285 -- It needs to be in a separate module to the one where
6286 -- you intend to use it.
6287
6288 -- Import some Template Haskell syntax
6289 import Language.Haskell.TH
6290
6291 -- Describe a format string
6292 data Format = D | S | L String
6293
6294 -- Parse a format string.  This is left largely to you
6295 -- as we are here interested in building our first ever
6296 -- Template Haskell program and not in building printf.
6297 parse :: String -> [Format]
6298 parse s   = [ L s ]
6299
6300 -- Generate Haskell source code from a parsed representation
6301 -- of the format string.  This code will be spliced into
6302 -- the module which calls "pr", at compile time.
6303 gen :: [Format] -> Q Exp
6304 gen [D]   = [| \n -> show n |]
6305 gen [S]   = [| \s -> s |]
6306 gen [L s] = stringE s
6307
6308 -- Here we generate the Haskell code for the splice
6309 -- from an input format string.
6310 pr :: String -> Q Exp
6311 pr s = gen (parse s)
6312 </programlisting>
6313
6314 <para>Now run the compiler (here we are a Cygwin prompt on Windows):
6315 </para>
6316 <programlisting>
6317 $ ghc --make -XTemplateHaskell main.hs -o main.exe
6318 </programlisting>
6319
6320 <para>Run "main.exe" and here is your output:</para>
6321
6322 <programlisting>
6323 $ ./main
6324 Hello
6325 </programlisting>
6326
6327 </sect2>
6328
6329 <sect2>
6330 <title>Using Template Haskell with Profiling</title>
6331 <indexterm><primary>profiling</primary><secondary>with Template Haskell</secondary></indexterm>
6332  
6333 <para>Template Haskell relies on GHC's built-in bytecode compiler and
6334 interpreter to run the splice expressions.  The bytecode interpreter
6335 runs the compiled expression on top of the same runtime on which GHC
6336 itself is running; this means that the compiled code referred to by
6337 the interpreted expression must be compatible with this runtime, and
6338 in particular this means that object code that is compiled for
6339 profiling <emphasis>cannot</emphasis> be loaded and used by a splice
6340 expression, because profiled object code is only compatible with the
6341 profiling version of the runtime.</para>
6342
6343 <para>This causes difficulties if you have a multi-module program
6344 containing Template Haskell code and you need to compile it for
6345 profiling, because GHC cannot load the profiled object code and use it
6346 when executing the splices.  Fortunately GHC provides a workaround.
6347 The basic idea is to compile the program twice:</para>
6348
6349 <orderedlist>
6350 <listitem>
6351   <para>Compile the program or library first the normal way, without
6352   <option>-prof</option><indexterm><primary><option>-prof</option></primary></indexterm>.</para>
6353 </listitem>
6354 <listitem>
6355   <para>Then compile it again with <option>-prof</option>, and
6356   additionally use <option>-osuf
6357   p_o</option><indexterm><primary><option>-osuf</option></primary></indexterm>
6358   to name the object files differently (you can choose any suffix
6359   that isn't the normal object suffix here).  GHC will automatically
6360   load the object files built in the first step when executing splice
6361   expressions.  If you omit the <option>-osuf</option> flag when
6362   building with <option>-prof</option> and Template Haskell is used,
6363   GHC will emit an error message. </para>
6364 </listitem>
6365 </orderedlist>
6366 </sect2>
6367
6368 <sect2 id="th-quasiquotation">  <title> Template Haskell Quasi-quotation </title>
6369 <para>Quasi-quotation allows patterns and expressions to be written using
6370 programmer-defined concrete syntax; the motivation behind the extension and
6371 several examples are documented in
6372 "<ulink url="http://www.eecs.harvard.edu/~mainland/ghc-quasiquoting/">Why It's
6373 Nice to be Quoted: Quasiquoting for Haskell</ulink>" (Proc Haskell Workshop
6374 2007). The example below shows how to write a quasiquoter for a simple
6375 expression language.</para>
6376
6377 <para>
6378 In the example, the quasiquoter <literal>expr</literal> is bound to a value of
6379 type <literal>Language.Haskell.TH.Quote.QuasiQuoter</literal> which contains two
6380 functions for quoting expressions and patterns, respectively. The first argument
6381 to each quoter is the (arbitrary) string enclosed in the Oxford brackets. The
6382 context of the quasi-quotation statement determines which of the two parsers is
6383 called: if the quasi-quotation occurs in an expression context, the expression
6384 parser is called, and if it occurs in a pattern context, the pattern parser is
6385 called.</para>
6386
6387 <para>
6388 Note that in the example we make use of an antiquoted
6389 variable <literal>n</literal>, indicated by the syntax <literal>'int:n</literal>
6390 (this syntax for anti-quotation was defined by the parser's
6391 author, <emphasis>not</emphasis> by GHC). This binds <literal>n</literal> to the
6392 integer value argument of the constructor <literal>IntExpr</literal> when
6393 pattern matching. Please see the referenced paper for further details regarding
6394 anti-quotation as well as the description of a technique that uses SYB to
6395 leverage a single parser of type <literal>String -> a</literal> to generate both
6396 an expression parser that returns a value of type <literal>Q Exp</literal> and a
6397 pattern parser that returns a value of type <literal>Q Pat</literal>.
6398 </para>
6399
6400 <para>In general, a quasi-quote has the form
6401 <literal>[$<replaceable>quoter</replaceable>| <replaceable>string</replaceable> |]</literal>.
6402 The <replaceable>quoter</replaceable> must be the name of an imported quoter; it
6403 cannot be an arbitrary expression.  The quoted <replaceable>string</replaceable> 
6404 can be arbitrary, and may contain newlines.
6405 </para>
6406 <para>
6407 Quasiquoters must obey the same stage restrictions as Template Haskell, e.g., in
6408 the example, <literal>expr</literal> cannot be defined
6409 in <literal>Main.hs</literal> where it is used, but must be imported.
6410 </para>
6411
6412 <programlisting>
6413
6414 {- Main.hs -}
6415 module Main where
6416
6417 import Expr
6418
6419 main :: IO ()
6420 main = do { print $ eval [$expr|1 + 2|]
6421           ; case IntExpr 1 of
6422               { [$expr|'int:n|] -> print n
6423               ;  _              -> return ()
6424               }
6425           }
6426
6427
6428 {- Expr.hs -}
6429 module Expr where
6430
6431 import qualified Language.Haskell.TH as TH
6432 import Language.Haskell.TH.Quote
6433
6434 data Expr  =  IntExpr Integer
6435            |  AntiIntExpr String
6436            |  BinopExpr BinOp Expr Expr
6437            |  AntiExpr String
6438     deriving(Show, Typeable, Data)
6439
6440 data BinOp  =  AddOp
6441             |  SubOp
6442             |  MulOp
6443             |  DivOp
6444     deriving(Show, Typeable, Data)
6445
6446 eval :: Expr -> Integer
6447 eval (IntExpr n)        = n
6448 eval (BinopExpr op x y) = (opToFun op) (eval x) (eval y)
6449   where
6450     opToFun AddOp = (+)
6451     opToFun SubOp = (-)
6452     opToFun MulOp = (*)
6453     opToFun DivOp = div
6454
6455 expr = QuasiQuoter parseExprExp parseExprPat
6456
6457 -- Parse an Expr, returning its representation as
6458 -- either a Q Exp or a Q Pat. See the referenced paper
6459 -- for how to use SYB to do this by writing a single
6460 -- parser of type String -> Expr instead of two
6461 -- separate parsers.
6462
6463 parseExprExp :: String -> Q Exp
6464 parseExprExp ...
6465
6466 parseExprPat :: String -> Q Pat
6467 parseExprPat ...
6468 </programlisting>
6469
6470 <para>Now run the compiler:
6471 </para>
6472 <programlisting>
6473 $ ghc --make -XQuasiQuotes Main.hs -o main
6474 </programlisting>
6475
6476 <para>Run "main" and here is your output:</para>
6477
6478 <programlisting>
6479 $ ./main
6480 3
6481 1
6482 </programlisting>
6483
6484 </sect2>
6485
6486 </sect1>
6487
6488 <!-- ===================== Arrow notation ===================  -->
6489
6490 <sect1 id="arrow-notation">
6491 <title>Arrow notation
6492 </title>
6493
6494 <para>Arrows are a generalization of monads introduced by John Hughes.
6495 For more details, see
6496 <itemizedlist>
6497
6498 <listitem>
6499 <para>
6500 &ldquo;Generalising Monads to Arrows&rdquo;,
6501 John Hughes, in <citetitle>Science of Computer Programming</citetitle> 37,
6502 pp67&ndash;111, May 2000.
6503 The paper that introduced arrows: a friendly introduction, motivated with
6504 programming examples.
6505 </para>
6506 </listitem>
6507
6508 <listitem>
6509 <para>
6510 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/notation.html">A New Notation for Arrows</ulink>&rdquo;,
6511 Ross Paterson, in <citetitle>ICFP</citetitle>, Sep 2001.
6512 Introduced the notation described here.
6513 </para>
6514 </listitem>
6515
6516 <listitem>
6517 <para>
6518 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/fop.html">Arrows and Computation</ulink>&rdquo;,
6519 Ross Paterson, in <citetitle>The Fun of Programming</citetitle>,
6520 Palgrave, 2003.
6521 </para>
6522 </listitem>
6523
6524 <listitem>
6525 <para>
6526 &ldquo;<ulink url="http://www.cs.chalmers.se/~rjmh/afp-arrows.pdf">Programming with Arrows</ulink>&rdquo;,
6527 John Hughes, in <citetitle>5th International Summer School on
6528 Advanced Functional Programming</citetitle>,
6529 <citetitle>Lecture Notes in Computer Science</citetitle> vol. 3622,
6530 Springer, 2004.
6531 This paper includes another introduction to the notation,
6532 with practical examples.
6533 </para>
6534 </listitem>
6535
6536 <listitem>
6537 <para>
6538 &ldquo;<ulink url="http://www.haskell.org/ghc/docs/papers/arrow-rules.pdf">Type and Translation Rules for Arrow Notation in GHC</ulink>&rdquo;,
6539 Ross Paterson and Simon Peyton Jones, September 16, 2004.
6540 A terse enumeration of the formal rules used
6541 (extracted from comments in the source code).
6542 </para>
6543 </listitem>
6544
6545 <listitem>
6546 <para>
6547 The arrows web page at
6548 <ulink url="http://www.haskell.org/arrows/"><literal>http://www.haskell.org/arrows/</literal></ulink>.
6549 </para>
6550 </listitem>
6551
6552 </itemizedlist>
6553 With the <option>-XArrows</option> flag, GHC supports the arrow
6554 notation described in the second of these papers,
6555 translating it using combinators from the
6556 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6557 module.
6558 What follows is a brief introduction to the notation;
6559 it won't make much sense unless you've read Hughes's paper.
6560 </para>
6561
6562 <para>The extension adds a new kind of expression for defining arrows:
6563 <screen>
6564 <replaceable>exp</replaceable><superscript>10</superscript> ::= ...
6565        |  proc <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
6566 </screen>
6567 where <literal>proc</literal> is a new keyword.
6568 The variables of the pattern are bound in the body of the 
6569 <literal>proc</literal>-expression,
6570 which is a new sort of thing called a <firstterm>command</firstterm>.
6571 The syntax of commands is as follows:
6572 <screen>
6573 <replaceable>cmd</replaceable>   ::= <replaceable>exp</replaceable><superscript>10</superscript> -&lt;  <replaceable>exp</replaceable>
6574        |  <replaceable>exp</replaceable><superscript>10</superscript> -&lt;&lt; <replaceable>exp</replaceable>
6575        |  <replaceable>cmd</replaceable><superscript>0</superscript>
6576 </screen>
6577 with <replaceable>cmd</replaceable><superscript>0</superscript> up to
6578 <replaceable>cmd</replaceable><superscript>9</superscript> defined using
6579 infix operators as for expressions, and
6580 <screen>
6581 <replaceable>cmd</replaceable><superscript>10</superscript> ::= \ <replaceable>apat</replaceable> ... <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
6582        |  let <replaceable>decls</replaceable> in <replaceable>cmd</replaceable>
6583        |  if <replaceable>exp</replaceable> then <replaceable>cmd</replaceable> else <replaceable>cmd</replaceable>
6584        |  case <replaceable>exp</replaceable> of { <replaceable>calts</replaceable> }
6585        |  do { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> ; <replaceable>cmd</replaceable> }
6586        |  <replaceable>fcmd</replaceable>
6587
6588 <replaceable>fcmd</replaceable>  ::= <replaceable>fcmd</replaceable> <replaceable>aexp</replaceable>
6589        |  ( <replaceable>cmd</replaceable> )
6590        |  (| <replaceable>aexp</replaceable> <replaceable>cmd</replaceable> ... <replaceable>cmd</replaceable> |)
6591
6592 <replaceable>cstmt</replaceable> ::= let <replaceable>decls</replaceable>
6593        |  <replaceable>pat</replaceable> &lt;- <replaceable>cmd</replaceable>
6594        |  rec { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> [;] }
6595        |  <replaceable>cmd</replaceable>
6596 </screen>
6597 where <replaceable>calts</replaceable> are like <replaceable>alts</replaceable>
6598 except that the bodies are commands instead of expressions.
6599 </para>
6600
6601 <para>
6602 Commands produce values, but (like monadic computations)
6603 may yield more than one value,
6604 or none, and may do other things as well.
6605 For the most part, familiarity with monadic notation is a good guide to
6606 using commands.
6607 However the values of expressions, even monadic ones,
6608 are determined by the values of the variables they contain;
6609 this is not necessarily the case for commands.
6610 </para>
6611
6612 <para>
6613 A simple example of the new notation is the expression
6614 <screen>
6615 proc x -> f -&lt; x+1
6616 </screen>
6617 We call this a <firstterm>procedure</firstterm> or
6618 <firstterm>arrow abstraction</firstterm>.
6619 As with a lambda expression, the variable <literal>x</literal>
6620 is a new variable bound within the <literal>proc</literal>-expression.
6621 It refers to the input to the arrow.
6622 In the above example, <literal>-&lt;</literal> is not an identifier but an
6623 new reserved symbol used for building commands from an expression of arrow
6624 type and an expression to be fed as input to that arrow.
6625 (The weird look will make more sense later.)
6626 It may be read as analogue of application for arrows.
6627 The above example is equivalent to the Haskell expression
6628 <screen>
6629 arr (\ x -> x+1) >>> f
6630 </screen>
6631 That would make no sense if the expression to the left of
6632 <literal>-&lt;</literal> involves the bound variable <literal>x</literal>.
6633 More generally, the expression to the left of <literal>-&lt;</literal>
6634 may not involve any <firstterm>local variable</firstterm>,
6635 i.e. a variable bound in the current arrow abstraction.
6636 For such a situation there is a variant <literal>-&lt;&lt;</literal>, as in
6637 <screen>
6638 proc x -> f x -&lt;&lt; x+1
6639 </screen>
6640 which is equivalent to
6641 <screen>
6642 arr (\ x -> (f x, x+1)) >>> app
6643 </screen>
6644 so in this case the arrow must belong to the <literal>ArrowApply</literal>
6645 class.
6646 Such an arrow is equivalent to a monad, so if you're using this form
6647 you may find a monadic formulation more convenient.
6648 </para>
6649
6650 <sect2>
6651 <title>do-notation for commands</title>
6652
6653 <para>
6654 Another form of command is a form of <literal>do</literal>-notation.
6655 For example, you can write
6656 <screen>
6657 proc x -> do
6658         y &lt;- f -&lt; x+1
6659         g -&lt; 2*y
6660         let z = x+y
6661         t &lt;- h -&lt; x*z
6662         returnA -&lt; t+z
6663 </screen>
6664 You can read this much like ordinary <literal>do</literal>-notation,
6665 but with commands in place of monadic expressions.
6666 The first line sends the value of <literal>x+1</literal> as an input to
6667 the arrow <literal>f</literal>, and matches its output against
6668 <literal>y</literal>.
6669 In the next line, the output is discarded.
6670 The arrow <function>returnA</function> is defined in the
6671 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6672 module as <literal>arr id</literal>.
6673 The above example is treated as an abbreviation for
6674 <screen>
6675 arr (\ x -> (x, x)) >>>
6676         first (arr (\ x -> x+1) >>> f) >>>
6677         arr (\ (y, x) -> (y, (x, y))) >>>
6678         first (arr (\ y -> 2*y) >>> g) >>>
6679         arr snd >>>
6680         arr (\ (x, y) -> let z = x+y in ((x, z), z)) >>>
6681         first (arr (\ (x, z) -> x*z) >>> h) >>>
6682         arr (\ (t, z) -> t+z) >>>
6683         returnA
6684 </screen>
6685 Note that variables not used later in the composition are projected out.
6686 After simplification using rewrite rules (see <xref linkend="rewrite-rules"/>)
6687 defined in the
6688 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6689 module, this reduces to
6690 <screen>
6691 arr (\ x -> (x+1, x)) >>>
6692         first f >>>
6693         arr (\ (y, x) -> (2*y, (x, y))) >>>
6694         first g >>>
6695         arr (\ (_, (x, y)) -> let z = x+y in (x*z, z)) >>>
6696         first h >>>
6697         arr (\ (t, z) -> t+z)
6698 </screen>
6699 which is what you might have written by hand.
6700 With arrow notation, GHC keeps track of all those tuples of variables for you.
6701 </para>
6702
6703 <para>
6704 Note that although the above translation suggests that
6705 <literal>let</literal>-bound variables like <literal>z</literal> must be
6706 monomorphic, the actual translation produces Core,
6707 so polymorphic variables are allowed.
6708 </para>
6709
6710 <para>
6711 It's also possible to have mutually recursive bindings,
6712 using the new <literal>rec</literal> keyword, as in the following example:
6713 <programlisting>
6714 counter :: ArrowCircuit a => a Bool Int
6715 counter = proc reset -> do
6716         rec     output &lt;- returnA -&lt; if reset then 0 else next
6717                 next &lt;- delay 0 -&lt; output+1
6718         returnA -&lt; output
6719 </programlisting>
6720 The translation of such forms uses the <function>loop</function> combinator,
6721 so the arrow concerned must belong to the <literal>ArrowLoop</literal> class.
6722 </para>
6723
6724 </sect2>
6725
6726 <sect2>
6727 <title>Conditional commands</title>
6728
6729 <para>
6730 In the previous example, we used a conditional expression to construct the
6731 input for an arrow.
6732 Sometimes we want to conditionally execute different commands, as in
6733 <screen>
6734 proc (x,y) ->
6735         if f x y
6736         then g -&lt; x+1
6737         else h -&lt; y+2
6738 </screen>
6739 which is translated to
6740 <screen>
6741 arr (\ (x,y) -> if f x y then Left x else Right y) >>>
6742         (arr (\x -> x+1) >>> f) ||| (arr (\y -> y+2) >>> g)
6743 </screen>
6744 Since the translation uses <function>|||</function>,
6745 the arrow concerned must belong to the <literal>ArrowChoice</literal> class.
6746 </para>
6747
6748 <para>
6749 There are also <literal>case</literal> commands, like
6750 <screen>
6751 case input of
6752     [] -> f -&lt; ()
6753     [x] -> g -&lt; x+1
6754     x1:x2:xs -> do
6755         y &lt;- h -&lt; (x1, x2)
6756         ys &lt;- k -&lt; xs
6757         returnA -&lt; y:ys
6758 </screen>
6759 The syntax is the same as for <literal>case</literal> expressions,
6760 except that the bodies of the alternatives are commands rather than expressions.
6761 The translation is similar to that of <literal>if</literal> commands.
6762 </para>
6763
6764 </sect2>
6765
6766 <sect2>
6767 <title>Defining your own control structures</title>
6768
6769 <para>
6770 As we're seen, arrow notation provides constructs,
6771 modelled on those for expressions,
6772 for sequencing, value recursion and conditionals.
6773 But suitable combinators,
6774 which you can define in ordinary Haskell,
6775 may also be used to build new commands out of existing ones.
6776 The basic idea is that a command defines an arrow from environments to values.
6777 These environments assign values to the free local variables of the command.
6778 Thus combinators that produce arrows from arrows
6779 may also be used to build commands from commands.
6780 For example, the <literal>ArrowChoice</literal> class includes a combinator
6781 <programlisting>
6782 ArrowChoice a => (&lt;+>) :: a e c -> a e c -> a e c
6783 </programlisting>
6784 so we can use it to build commands:
6785 <programlisting>
6786 expr' = proc x -> do
6787                 returnA -&lt; x
6788         &lt;+> do
6789                 symbol Plus -&lt; ()
6790                 y &lt;- term -&lt; ()
6791                 expr' -&lt; x + y
6792         &lt;+> do
6793                 symbol Minus -&lt; ()
6794                 y &lt;- term -&lt; ()
6795                 expr' -&lt; x - y
6796 </programlisting>
6797 (The <literal>do</literal> on the first line is needed to prevent the first
6798 <literal>&lt;+> ...</literal> from being interpreted as part of the
6799 expression on the previous line.)
6800 This is equivalent to
6801 <programlisting>
6802 expr' = (proc x -> returnA -&lt; x)
6803         &lt;+> (proc x -> do
6804                 symbol Plus -&lt; ()
6805                 y &lt;- term -&lt; ()
6806                 expr' -&lt; x + y)
6807         &lt;+> (proc x -> do
6808                 symbol Minus -&lt; ()
6809                 y &lt;- term -&lt; ()
6810                 expr' -&lt; x - y)
6811 </programlisting>
6812 It is essential that this operator be polymorphic in <literal>e</literal>
6813 (representing the environment input to the command
6814 and thence to its subcommands)
6815 and satisfy the corresponding naturality property
6816 <screen>
6817 arr k >>> (f &lt;+> g) = (arr k >>> f) &lt;+> (arr k >>> g)
6818 </screen>
6819 at least for strict <literal>k</literal>.
6820 (This should be automatic if you're not using <function>seq</function>.)
6821 This ensures that environments seen by the subcommands are environments
6822 of the whole command,
6823 and also allows the translation to safely trim these environments.
6824 The operator must also not use any variable defined within the current
6825 arrow abstraction.
6826 </para>
6827
6828 <para>
6829 We could define our own operator
6830 <programlisting>
6831 untilA :: ArrowChoice a => a e () -> a e Bool -> a e ()
6832 untilA body cond = proc x ->
6833         b &lt;- cond -&lt; x
6834         if b then returnA -&lt; ()
6835         else do
6836                 body -&lt; x
6837                 untilA body cond -&lt; x
6838 </programlisting>
6839 and use it in the same way.
6840 Of course this infix syntax only makes sense for binary operators;
6841 there is also a more general syntax involving special brackets:
6842 <screen>
6843 proc x -> do
6844         y &lt;- f -&lt; x+1
6845         (|untilA (increment -&lt; x+y) (within 0.5 -&lt; x)|)
6846 </screen>
6847 </para>
6848
6849 </sect2>
6850
6851 <sect2>
6852 <title>Primitive constructs</title>
6853
6854 <para>
6855 Some operators will need to pass additional inputs to their subcommands.
6856 For example, in an arrow type supporting exceptions,
6857 the operator that attaches an exception handler will wish to pass the
6858 exception that occurred to the handler.
6859 Such an operator might have a type
6860 <screen>
6861 handleA :: ... => a e c -> a (e,Ex) c -> a e c
6862 </screen>
6863 where <literal>Ex</literal> is the type of exceptions handled.
6864 You could then use this with arrow notation by writing a command
6865 <screen>
6866 body `handleA` \ ex -> handler
6867 </screen>
6868 so that if an exception is raised in the command <literal>body</literal>,
6869 the variable <literal>ex</literal> is bound to the value of the exception
6870 and the command <literal>handler</literal>,
6871 which typically refers to <literal>ex</literal>, is entered.
6872 Though the syntax here looks like a functional lambda,
6873 we are talking about commands, and something different is going on.
6874 The input to the arrow represented by a command consists of values for
6875 the free local variables in the command, plus a stack of anonymous values.
6876 In all the prior examples, this stack was empty.
6877 In the second argument to <function>handleA</function>,
6878 this stack consists of one value, the value of the exception.
6879 The command form of lambda merely gives this value a name.
6880 </para>
6881
6882 <para>
6883 More concretely,
6884 the values on the stack are paired to the right of the environment.
6885 So operators like <function>handleA</function> that pass
6886 extra inputs to their subcommands can be designed for use with the notation
6887 by pairing the values with the environment in this way.
6888 More precisely, the type of each argument of the operator (and its result)
6889 should have the form
6890 <screen>
6891 a (...(e,t1), ... tn) t
6892 </screen>
6893 where <replaceable>e</replaceable> is a polymorphic variable
6894 (representing the environment)
6895 and <replaceable>ti</replaceable> are the types of the values on the stack,
6896 with <replaceable>t1</replaceable> being the <quote>top</quote>.
6897 The polymorphic variable <replaceable>e</replaceable> must not occur in
6898 <replaceable>a</replaceable>, <replaceable>ti</replaceable> or
6899 <replaceable>t</replaceable>.
6900 However the arrows involved need not be the same.
6901 Here are some more examples of suitable operators:
6902 <screen>
6903 bracketA :: ... => a e b -> a (e,b) c -> a (e,c) d -> a e d
6904 runReader :: ... => a e c -> a' (e,State) c
6905 runState :: ... => a e c -> a' (e,State) (c,State)
6906 </screen>
6907 We can supply the extra input required by commands built with the last two
6908 by applying them to ordinary expressions, as in
6909 <screen>
6910 proc x -> do
6911         s &lt;- ...
6912         (|runReader (do { ... })|) s
6913 </screen>
6914 which adds <literal>s</literal> to the stack of inputs to the command
6915 built using <function>runReader</function>.
6916 </para>
6917
6918 <para>
6919 The command versions of lambda abstraction and application are analogous to
6920 the expression versions.
6921 In particular, the beta and eta rules describe equivalences of commands.
6922 These three features (operators, lambda abstraction and application)
6923 are the core of the notation; everything else can be built using them,
6924 though the results would be somewhat clumsy.
6925 For example, we could simulate <literal>do</literal>-notation by defining
6926 <programlisting>
6927 bind :: Arrow a => a e b -> a (e,b) c -> a e c
6928 u `bind` f = returnA &amp;&amp;&amp; u >>> f
6929
6930 bind_ :: Arrow a => a e b -> a e c -> a e c
6931 u `bind_` f = u `bind` (arr fst >>> f)
6932 </programlisting>
6933 We could simulate <literal>if</literal> by defining
6934 <programlisting>
6935 cond :: ArrowChoice a => a e b -> a e b -> a (e,Bool) b
6936 cond f g = arr (\ (e,b) -> if b then Left e else Right e) >>> f ||| g
6937 </programlisting>
6938 </para>
6939
6940 </sect2>
6941
6942 <sect2>
6943 <title>Differences with the paper</title>
6944
6945 <itemizedlist>
6946
6947 <listitem>
6948 <para>Instead of a single form of arrow application (arrow tail) with two
6949 translations, the implementation provides two forms
6950 <quote><literal>-&lt;</literal></quote> (first-order)
6951 and <quote><literal>-&lt;&lt;</literal></quote> (higher-order).
6952 </para>
6953 </listitem>
6954
6955 <listitem>
6956 <para>User-defined operators are flagged with banana brackets instead of
6957 a new <literal>form</literal> keyword.
6958 </para>
6959 </listitem>
6960
6961 </itemizedlist>
6962
6963 </sect2>
6964
6965 <sect2>
6966 <title>Portability</title>
6967
6968 <para>
6969 Although only GHC implements arrow notation directly,
6970 there is also a preprocessor
6971 (available from the 
6972 <ulink url="http://www.haskell.org/arrows/">arrows web page</ulink>)
6973 that translates arrow notation into Haskell 98
6974 for use with other Haskell systems.
6975 You would still want to check arrow programs with GHC;
6976 tracing type errors in the preprocessor output is not easy.
6977 Modules intended for both GHC and the preprocessor must observe some
6978 additional restrictions:
6979 <itemizedlist>
6980
6981 <listitem>
6982 <para>
6983 The module must import
6984 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>.
6985 </para>
6986 </listitem>
6987
6988 <listitem>
6989 <para>
6990 The preprocessor cannot cope with other Haskell extensions.
6991 These would have to go in separate modules.
6992 </para>
6993 </listitem>
6994
6995 <listitem>
6996 <para>
6997 Because the preprocessor targets Haskell (rather than Core),
6998 <literal>let</literal>-bound variables are monomorphic.
6999 </para>
7000 </listitem>
7001
7002 </itemizedlist>
7003 </para>
7004
7005 </sect2>
7006
7007 </sect1>
7008
7009 <!-- ==================== BANG PATTERNS =================  -->
7010
7011 <sect1 id="bang-patterns">
7012 <title>Bang patterns
7013 <indexterm><primary>Bang patterns</primary></indexterm>
7014 </title>
7015 <para>GHC supports an extension of pattern matching called <emphasis>bang
7016 patterns</emphasis>, written <literal>!<replaceable>pat</replaceable></literal>.   
7017 Bang patterns are under consideration for Haskell Prime.
7018 The <ulink
7019 url="http://hackage.haskell.org/trac/haskell-prime/wiki/BangPatterns">Haskell
7020 prime feature description</ulink> contains more discussion and examples
7021 than the material below.
7022 </para>
7023 <para>
7024 The key change is the addition of a new rule to the 
7025 <ulink url="http://haskell.org/onlinereport/exps.html#sect3.17.2">semantics of pattern matching in the Haskell 98 report</ulink>.
7026 Add new bullet 10, saying: Matching the pattern <literal>!</literal><replaceable>pat</replaceable> 
7027 against a value <replaceable>v</replaceable> behaves as follows:
7028 <itemizedlist>
7029 <listitem><para>if <replaceable>v</replaceable> is bottom, the match diverges</para></listitem>
7030 <listitem><para>otherwise, <replaceable>pat</replaceable> is matched against <replaceable>v</replaceable>  </para></listitem>
7031 </itemizedlist>
7032 </para>
7033 <para>
7034 Bang patterns are enabled by the flag <option>-XBangPatterns</option>.
7035 </para>
7036
7037 <sect2 id="bang-patterns-informal">
7038 <title>Informal description of bang patterns
7039 </title>
7040 <para>
7041 The main idea is to add a single new production to the syntax of patterns:
7042 <programlisting>
7043   pat ::= !pat
7044 </programlisting>
7045 Matching an expression <literal>e</literal> against a pattern <literal>!p</literal> is done by first
7046 evaluating <literal>e</literal> (to WHNF) and then matching the result against <literal>p</literal>.
7047 Example:
7048 <programlisting>
7049 f1 !x = True
7050 </programlisting>
7051 This definition makes <literal>f1</literal> is strict in <literal>x</literal>,
7052 whereas without the bang it would be lazy.
7053 Bang patterns can be nested of course:
7054 <programlisting>
7055 f2 (!x, y) = [x,y]
7056 </programlisting>
7057 Here, <literal>f2</literal> is strict in <literal>x</literal> but not in
7058 <literal>y</literal>.  
7059 A bang only really has an effect if it precedes a variable or wild-card pattern:
7060 <programlisting>
7061 f3 !(x,y) = [x,y]
7062 f4 (x,y)  = [x,y]
7063 </programlisting>
7064 Here, <literal>f3</literal> and <literal>f4</literal> are identical; 
7065 putting a bang before a pattern that
7066 forces evaluation anyway does nothing.
7067 </para>
7068 <para>
7069 There is one (apparent) exception to this general rule that a bang only
7070 makes a difference when it precedes a variable or wild-card: a bang at the
7071 top level of a <literal>let</literal> or <literal>where</literal>
7072 binding makes the binding strict, regardless of the pattern. For example:
7073 <programlisting>
7074 let ![x,y] = e in b
7075 </programlisting>
7076 is a strict binding: operationally, it evaluates <literal>e</literal>, matches
7077 it against the pattern <literal>[x,y]</literal>, and then evaluates <literal>b</literal>.
7078 (We say "apparent" exception because the Right Way to think of it is that the bang
7079 at the top of a binding is not part of the <emphasis>pattern</emphasis>; rather it
7080 is part of the syntax of the <emphasis>binding</emphasis>.)
7081 Nested bangs in a pattern binding behave uniformly with all other forms of 
7082 pattern matching.  For example
7083 <programlisting>
7084 let (!x,[y]) = e in b
7085 </programlisting>
7086 is equivalent to this:
7087 <programlisting>
7088 let { t = case e of (x,[y]) -> x `seq` (x,y)
7089       x = fst t
7090       y = snd t }
7091 in b
7092 </programlisting>
7093 The binding is lazy, but when either <literal>x</literal> or <literal>y</literal> is
7094 evaluated by <literal>b</literal> the entire pattern is matched, including forcing the
7095 evaluation of <literal>x</literal>.
7096 </para>
7097 <para>
7098 Bang patterns work in <literal>case</literal> expressions too, of course:
7099 <programlisting>
7100 g5 x = let y = f x in body
7101 g6 x = case f x of { y -&gt; body }
7102 g7 x = case f x of { !y -&gt; body }
7103 </programlisting>
7104 The functions <literal>g5</literal> and <literal>g6</literal> mean exactly the same thing.  
7105 But <literal>g7</literal> evaluates <literal>(f x)</literal>, binds <literal>y</literal> to the
7106 result, and then evaluates <literal>body</literal>.
7107 </para>
7108 </sect2>
7109
7110
7111 <sect2 id="bang-patterns-sem">
7112 <title>Syntax and semantics
7113 </title>
7114 <para>
7115
7116 We add a single new production to the syntax of patterns:
7117 <programlisting>
7118   pat ::= !pat
7119 </programlisting>
7120 There is one problem with syntactic ambiguity.  Consider:
7121 <programlisting>
7122 f !x = 3
7123 </programlisting>
7124 Is this a definition of the infix function "<literal>(!)</literal>",
7125 or of the "<literal>f</literal>" with a bang pattern? GHC resolves this
7126 ambiguity in favour of the latter.  If you want to define
7127 <literal>(!)</literal> with bang-patterns enabled, you have to do so using
7128 prefix notation:
7129 <programlisting>
7130 (!) f x = 3
7131 </programlisting>
7132 The semantics of Haskell pattern matching is described in <ulink
7133 url="http://www.haskell.org/onlinereport/exps.html#sect3.17.2">
7134 Section 3.17.2</ulink> of the Haskell Report.  To this description add 
7135 one extra item 10, saying:
7136 <itemizedlist><listitem><para>Matching
7137 the pattern <literal>!pat</literal> against a value <literal>v</literal> behaves as follows:
7138 <itemizedlist><listitem><para>if <literal>v</literal> is bottom, the match diverges</para></listitem>
7139                 <listitem><para>otherwise, <literal>pat</literal> is matched against
7140                 <literal>v</literal></para></listitem>
7141 </itemizedlist>
7142 </para></listitem></itemizedlist>
7143 Similarly, in Figure 4 of  <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.17.3">
7144 Section 3.17.3</ulink>, add a new case (t):
7145 <programlisting>
7146 case v of { !pat -> e; _ -> e' }
7147    = v `seq` case v of { pat -> e; _ -> e' }
7148 </programlisting>
7149 </para><para>
7150 That leaves let expressions, whose translation is given in 
7151 <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.12">Section
7152 3.12</ulink>
7153 of the Haskell Report.
7154 In the translation box, first apply 
7155 the following transformation:  for each pattern <literal>pi</literal> that is of 
7156 form <literal>!qi = ei</literal>, transform it to <literal>(xi,!qi) = ((),ei)</literal>, and and replace <literal>e0</literal> 
7157 by <literal>(xi `seq` e0)</literal>.  Then, when none of the left-hand-side patterns
7158 have a bang at the top, apply the rules in the existing box.
7159 </para>
7160 <para>The effect of the let rule is to force complete matching of the pattern
7161 <literal>qi</literal> before evaluation of the body is begun.  The bang is
7162 retained in the translated form in case <literal>qi</literal> is a variable,
7163 thus:
7164 <programlisting>
7165   let !y = f x in b
7166 </programlisting>
7167
7168 </para>
7169 <para>
7170 The let-binding can be recursive.  However, it is much more common for
7171 the let-binding to be non-recursive, in which case the following law holds:
7172 <literal>(let !p = rhs in body)</literal>
7173      is equivalent to
7174 <literal>(case rhs of !p -> body)</literal>
7175 </para>
7176 <para>
7177 A pattern with a bang at the outermost level is not allowed at the top level of
7178 a module.
7179 </para>
7180 </sect2>
7181 </sect1>
7182
7183 <!-- ==================== ASSERTIONS =================  -->
7184
7185 <sect1 id="assertions">
7186 <title>Assertions
7187 <indexterm><primary>Assertions</primary></indexterm>
7188 </title>
7189
7190 <para>
7191 If you want to make use of assertions in your standard Haskell code, you
7192 could define a function like the following:
7193 </para>
7194
7195 <para>
7196
7197 <programlisting>
7198 assert :: Bool -> a -> a
7199 assert False x = error "assertion failed!"
7200 assert _     x = x
7201 </programlisting>
7202
7203 </para>
7204
7205 <para>
7206 which works, but gives you back a less than useful error message --
7207 an assertion failed, but which and where?
7208 </para>
7209
7210 <para>
7211 One way out is to define an extended <function>assert</function> function which also
7212 takes a descriptive string to include in the error message and
7213 perhaps combine this with the use of a pre-processor which inserts
7214 the source location where <function>assert</function> was used.
7215 </para>
7216
7217 <para>
7218 Ghc offers a helping hand here, doing all of this for you. For every
7219 use of <function>assert</function> in the user's source:
7220 </para>
7221
7222 <para>
7223
7224 <programlisting>
7225 kelvinToC :: Double -> Double
7226 kelvinToC k = assert (k &gt;= 0.0) (k+273.15)
7227 </programlisting>
7228
7229 </para>
7230
7231 <para>
7232 Ghc will rewrite this to also include the source location where the
7233 assertion was made,
7234 </para>
7235
7236 <para>
7237
7238 <programlisting>
7239 assert pred val ==> assertError "Main.hs|15" pred val
7240 </programlisting>
7241
7242 </para>
7243
7244 <para>
7245 The rewrite is only performed by the compiler when it spots
7246 applications of <function>Control.Exception.assert</function>, so you
7247 can still define and use your own versions of
7248 <function>assert</function>, should you so wish. If not, import
7249 <literal>Control.Exception</literal> to make use
7250 <function>assert</function> in your code.
7251 </para>
7252
7253 <para>
7254 GHC ignores assertions when optimisation is turned on with the
7255       <option>-O</option><indexterm><primary><option>-O</option></primary></indexterm> flag.  That is, expressions of the form
7256 <literal>assert pred e</literal> will be rewritten to
7257 <literal>e</literal>.  You can also disable assertions using the
7258       <option>-fignore-asserts</option>
7259       option<indexterm><primary><option>-fignore-asserts</option></primary>
7260       </indexterm>.</para>
7261
7262 <para>
7263 Assertion failures can be caught, see the documentation for the
7264 <literal>Control.Exception</literal> library for the details.
7265 </para>
7266
7267 </sect1>
7268
7269
7270 <!-- =============================== PRAGMAS ===========================  -->
7271
7272   <sect1 id="pragmas">
7273     <title>Pragmas</title>
7274
7275     <indexterm><primary>pragma</primary></indexterm>
7276
7277     <para>GHC supports several pragmas, or instructions to the
7278     compiler placed in the source code.  Pragmas don't normally affect
7279     the meaning of the program, but they might affect the efficiency
7280     of the generated code.</para>
7281
7282     <para>Pragmas all take the form
7283
7284 <literal>{-# <replaceable>word</replaceable> ... #-}</literal>  
7285
7286     where <replaceable>word</replaceable> indicates the type of
7287     pragma, and is followed optionally by information specific to that
7288     type of pragma.  Case is ignored in
7289     <replaceable>word</replaceable>.  The various values for
7290     <replaceable>word</replaceable> that GHC understands are described
7291     in the following sections; any pragma encountered with an
7292     unrecognised <replaceable>word</replaceable> is
7293     ignored. The layout rule applies in pragmas, so the closing <literal>#-}</literal>
7294     should start in a column to the right of the opening <literal>{-#</literal>. </para> 
7295
7296     <para>Certain pragmas are <emphasis>file-header pragmas</emphasis>:
7297       <itemizedlist>
7298       <listitem><para>
7299           A file-header
7300           pragma must precede the <literal>module</literal> keyword in the file.
7301           </para></listitem>
7302       <listitem><para>
7303       There can be as many file-header pragmas as you please, and they can be
7304       preceded or followed by comments.  
7305           </para></listitem>
7306       <listitem><para>
7307       File-header pragmas are read once only, before
7308       pre-processing the file (e.g. with cpp).
7309           </para></listitem>
7310       <listitem><para>
7311          The file-header pragmas are: <literal>{-# LANGUAGE #-}</literal>,
7312         <literal>{-# OPTIONS_GHC #-}</literal>, and
7313         <literal>{-# INCLUDE #-}</literal>.
7314           </para></listitem>
7315       </itemizedlist>
7316       </para>
7317
7318     <sect2 id="language-pragma">
7319       <title>LANGUAGE pragma</title>
7320
7321       <indexterm><primary>LANGUAGE</primary><secondary>pragma</secondary></indexterm>
7322       <indexterm><primary>pragma</primary><secondary>LANGUAGE</secondary></indexterm>
7323
7324       <para>The <literal>LANGUAGE</literal> pragma allows language extensions to be enabled 
7325         in a portable way.
7326         It is the intention that all Haskell compilers support the
7327         <literal>LANGUAGE</literal> pragma with the same syntax, although not
7328         all extensions are supported by all compilers, of
7329         course.  The <literal>LANGUAGE</literal> pragma should be used instead
7330         of <literal>OPTIONS_GHC</literal>, if possible.</para>
7331
7332       <para>For example, to enable the FFI and preprocessing with CPP:</para>
7333
7334 <programlisting>{-# LANGUAGE ForeignFunctionInterface, CPP #-}</programlisting>
7335
7336         <para><literal>LANGUAGE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
7337
7338       <para>Every language extension can also be turned into a command-line flag
7339         by prefixing it with "<literal>-X</literal>"; for example <option>-XForeignFunctionInterface</option>.
7340         (Similarly, all "<literal>-X</literal>" flags can be written as <literal>LANGUAGE</literal> pragmas.
7341       </para>
7342
7343       <para>A list of all supported language extensions can be obtained by invoking
7344         <literal>ghc --supported-languages</literal> (see <xref linkend="modes"/>).</para>
7345
7346       <para>Any extension from the <literal>Extension</literal> type defined in
7347         <ulink
7348           url="../libraries/Cabal/Language-Haskell-Extension.html"><literal>Language.Haskell.Extension</literal></ulink>
7349         may be used.  GHC will report an error if any of the requested extensions are not supported.</para>
7350     </sect2>
7351
7352
7353     <sect2 id="options-pragma">
7354       <title>OPTIONS_GHC pragma</title>
7355       <indexterm><primary>OPTIONS_GHC</primary>
7356       </indexterm>
7357       <indexterm><primary>pragma</primary><secondary>OPTIONS_GHC</secondary>
7358       </indexterm>
7359
7360       <para>The <literal>OPTIONS_GHC</literal> pragma is used to specify
7361       additional options that are given to the compiler when compiling
7362       this source file.  See <xref linkend="source-file-options"/> for
7363       details.</para>
7364
7365       <para>Previous versions of GHC accepted <literal>OPTIONS</literal> rather
7366         than <literal>OPTIONS_GHC</literal>, but that is now deprecated.</para>
7367     </sect2>
7368
7369         <para><literal>OPTIONS_GHC</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
7370
7371     <sect2 id="include-pragma">
7372       <title>INCLUDE pragma</title>
7373
7374       <para>The <literal>INCLUDE</literal> used to be necessary for
7375         specifying header files to be included when using the FFI and
7376         compiling via C.  It is no longer required for GHC, but is
7377         accepted (and ignored) for compatibility with other
7378         compilers.</para>
7379     </sect2>
7380
7381     <sect2 id="warning-deprecated-pragma">
7382       <title>WARNING and DEPRECATED pragmas</title>
7383       <indexterm><primary>WARNING</primary></indexterm>
7384       <indexterm><primary>DEPRECATED</primary></indexterm>
7385
7386       <para>The WARNING pragma allows you to attach an arbitrary warning
7387       to a particular function, class, or type.
7388       A DEPRECATED pragma lets you specify that
7389       a particular function, class, or type is deprecated.
7390       There are two ways of using these pragmas.
7391
7392       <itemizedlist>
7393         <listitem>
7394           <para>You can work on an entire module thus:</para>
7395 <programlisting>
7396    module Wibble {-# DEPRECATED "Use Wobble instead" #-} where
7397      ...
7398 </programlisting>
7399       <para>Or:</para>
7400 <programlisting>
7401    module Wibble {-# WARNING "This is an unstable interface." #-} where
7402      ...
7403 </programlisting>
7404           <para>When you compile any module that import
7405           <literal>Wibble</literal>, GHC will print the specified
7406           message.</para>
7407         </listitem>
7408
7409         <listitem>
7410           <para>You can attach a warning to a function, class, type, or data constructor, with the
7411           following top-level declarations:</para>
7412 <programlisting>
7413    {-# DEPRECATED f, C, T "Don't use these" #-}
7414    {-# WARNING unsafePerformIO "This is unsafe; I hope you know what you're doing" #-}
7415 </programlisting>
7416           <para>When you compile any module that imports and uses any
7417           of the specified entities, GHC will print the specified
7418           message.</para>
7419           <para> You can only attach to entities declared at top level in the module
7420           being compiled, and you can only use unqualified names in the list of
7421           entities. A capitalised name, such as <literal>T</literal>
7422           refers to <emphasis>either</emphasis> the type constructor <literal>T</literal>
7423           <emphasis>or</emphasis> the data constructor <literal>T</literal>, or both if
7424           both are in scope.  If both are in scope, there is currently no way to
7425       specify one without the other (c.f. fixities
7426       <xref linkend="infix-tycons"/>).</para>
7427         </listitem>
7428       </itemizedlist>
7429       Warnings and deprecations are not reported for
7430       (a) uses within the defining module, and
7431       (b) uses in an export list.
7432       The latter reduces spurious complaints within a library
7433       in which one module gathers together and re-exports 
7434       the exports of several others.
7435       </para>
7436       <para>You can suppress the warnings with the flag
7437       <option>-fno-warn-warnings-deprecations</option>.</para>
7438     </sect2>
7439
7440     <sect2 id="inline-noinline-pragma">
7441       <title>INLINE and NOINLINE pragmas</title>
7442
7443       <para>These pragmas control the inlining of function
7444       definitions.</para>
7445
7446       <sect3 id="inline-pragma">
7447         <title>INLINE pragma</title>
7448         <indexterm><primary>INLINE</primary></indexterm>
7449
7450         <para>GHC (with <option>-O</option>, as always) tries to
7451         inline (or &ldquo;unfold&rdquo;) functions/values that are
7452         &ldquo;small enough,&rdquo; thus avoiding the call overhead
7453         and possibly exposing other more-wonderful optimisations.
7454         Normally, if GHC decides a function is &ldquo;too
7455         expensive&rdquo; to inline, it will not do so, nor will it
7456         export that unfolding for other modules to use.</para>
7457
7458         <para>The sledgehammer you can bring to bear is the
7459         <literal>INLINE</literal><indexterm><primary>INLINE
7460         pragma</primary></indexterm> pragma, used thusly:</para>
7461
7462 <programlisting>
7463 key_function :: Int -> String -> (Bool, Double)
7464 {-# INLINE key_function #-}
7465 </programlisting>
7466
7467         <para>The major effect of an <literal>INLINE</literal> pragma
7468         is to declare a function's &ldquo;cost&rdquo; to be very low.
7469         The normal unfolding machinery will then be very keen to
7470         inline it.  However, an <literal>INLINE</literal> pragma for a 
7471         function "<literal>f</literal>" has a number of other effects:
7472 <itemizedlist>
7473 <listitem><para>
7474 No functions are inlined into <literal>f</literal>.  Otherwise
7475 GHC might inline a big function into <literal>f</literal>'s right hand side, 
7476 making <literal>f</literal> big; and then inline <literal>f</literal> blindly.
7477 </para></listitem>
7478 <listitem><para>
7479 The float-in, float-out, and common-sub-expression transformations are not 
7480 applied to the body of <literal>f</literal>.  
7481 </para></listitem>
7482 <listitem><para>
7483 An INLINE function is not worker/wrappered by strictness analysis.
7484 It's going to be inlined wholesale instead.
7485 </para></listitem>
7486 </itemizedlist>
7487 All of these effects are aimed at ensuring that what gets inlined is
7488 exactly what you asked for, no more and no less.
7489 </para>
7490 <para>GHC ensures that inlining cannot go on forever: every mutually-recursive
7491 group is cut by one or more <emphasis>loop breakers</emphasis> that is never inlined
7492 (see <ulink url="http://research.microsoft.com/%7Esimonpj/Papers/inlining/index.htm">
7493 Secrets of the GHC inliner, JFP 12(4) July 2002</ulink>).
7494 GHC tries not to select a function with an INLINE pragma as a loop breaker, but
7495 when there is no choice even an INLINE function can be selected, in which case
7496 the INLINE pragma is ignored.
7497 For example, for a self-recursive function, the loop breaker can only be the function
7498 itself, so an INLINE pragma is always ignored.</para>
7499
7500         <para>Syntactically, an <literal>INLINE</literal> pragma for a
7501         function can be put anywhere its type signature could be
7502         put.</para>
7503
7504         <para><literal>INLINE</literal> pragmas are a particularly
7505         good idea for the
7506         <literal>then</literal>/<literal>return</literal> (or
7507         <literal>bind</literal>/<literal>unit</literal>) functions in
7508         a monad.  For example, in GHC's own
7509         <literal>UniqueSupply</literal> monad code, we have:</para>
7510
7511 <programlisting>
7512 {-# INLINE thenUs #-}
7513 {-# INLINE returnUs #-}
7514 </programlisting>
7515
7516         <para>See also the <literal>NOINLINE</literal> pragma (<xref
7517         linkend="noinline-pragma"/>).</para>
7518
7519         <para>Note: the HBC compiler doesn't like <literal>INLINE</literal> pragmas,
7520           so if you want your code to be HBC-compatible you'll have to surround
7521           the pragma with C pre-processor directives 
7522           <literal>#ifdef __GLASGOW_HASKELL__</literal>...<literal>#endif</literal>.</para>
7523
7524       </sect3>
7525
7526       <sect3 id="noinline-pragma">
7527         <title>NOINLINE pragma</title>
7528         
7529         <indexterm><primary>NOINLINE</primary></indexterm>
7530         <indexterm><primary>NOTINLINE</primary></indexterm>
7531
7532         <para>The <literal>NOINLINE</literal> pragma does exactly what
7533         you'd expect: it stops the named function from being inlined
7534         by the compiler.  You shouldn't ever need to do this, unless
7535         you're very cautious about code size.</para>
7536
7537         <para><literal>NOTINLINE</literal> is a synonym for
7538         <literal>NOINLINE</literal> (<literal>NOINLINE</literal> is
7539         specified by Haskell 98 as the standard way to disable
7540         inlining, so it should be used if you want your code to be
7541         portable).</para>
7542       </sect3>
7543
7544       <sect3 id="phase-control">
7545         <title>Phase control</title>
7546
7547         <para> Sometimes you want to control exactly when in GHC's
7548         pipeline the INLINE pragma is switched on.  Inlining happens
7549         only during runs of the <emphasis>simplifier</emphasis>.  Each
7550         run of the simplifier has a different <emphasis>phase
7551         number</emphasis>; the phase number decreases towards zero.
7552         If you use <option>-dverbose-core2core</option> you'll see the
7553         sequence of phase numbers for successive runs of the
7554         simplifier.  In an INLINE pragma you can optionally specify a
7555         phase number, thus:
7556         <itemizedlist>
7557           <listitem>
7558             <para>"<literal>INLINE[k] f</literal>" means: do not inline
7559             <literal>f</literal>
7560               until phase <literal>k</literal>, but from phase
7561               <literal>k</literal> onwards be very keen to inline it.
7562             </para></listitem>
7563           <listitem>
7564             <para>"<literal>INLINE[~k] f</literal>" means: be very keen to inline
7565             <literal>f</literal>
7566               until phase <literal>k</literal>, but from phase
7567               <literal>k</literal> onwards do not inline it.
7568             </para></listitem>
7569           <listitem>
7570             <para>"<literal>NOINLINE[k] f</literal>" means: do not inline
7571             <literal>f</literal>
7572               until phase <literal>k</literal>, but from phase
7573               <literal>k</literal> onwards be willing to inline it (as if
7574               there was no pragma).
7575             </para></listitem>
7576             <listitem>
7577             <para>"<literal>NOINLINE[~k] f</literal>" means: be willing to inline
7578             <literal>f</literal>
7579               until phase <literal>k</literal>, but from phase
7580               <literal>k</literal> onwards do not inline it.
7581             </para></listitem>
7582         </itemizedlist>
7583 The same information is summarised here:
7584 <programlisting>
7585                            -- Before phase 2     Phase 2 and later
7586   {-# INLINE   [2]  f #-}  --      No                 Yes
7587   {-# INLINE   [~2] f #-}  --      Yes                No
7588   {-# NOINLINE [2]  f #-}  --      No                 Maybe
7589   {-# NOINLINE [~2] f #-}  --      Maybe              No
7590
7591   {-# INLINE   f #-}       --      Yes                Yes
7592   {-# NOINLINE f #-}       --      No                 No
7593 </programlisting>
7594 By "Maybe" we mean that the usual heuristic inlining rules apply (if the
7595 function body is small, or it is applied to interesting-looking arguments etc).
7596 Another way to understand the semantics is this:
7597 <itemizedlist>
7598 <listitem><para>For both INLINE and NOINLINE, the phase number says
7599 when inlining is allowed at all.</para></listitem>
7600 <listitem><para>The INLINE pragma has the additional effect of making the
7601 function body look small, so that when inlining is allowed it is very likely to
7602 happen.
7603 </para></listitem>
7604 </itemizedlist>
7605 </para>
7606 <para>The same phase-numbering control is available for RULES
7607         (<xref linkend="rewrite-rules"/>).</para>
7608       </sect3>
7609     </sect2>
7610
7611     <sect2 id="annotation-pragmas">
7612       <title>ANN pragmas</title>
7613       
7614       <para>GHC offers the ability to annotate various code constructs with additional
7615       data by using three pragmas.  This data can then be inspected at a later date by
7616       using GHC-as-a-library.</para>
7617             
7618       <sect3 id="ann-pragma">
7619         <title>Annotating values</title>
7620         
7621         <indexterm><primary>ANN</primary></indexterm>
7622         
7623         <para>Any expression that has both <literal>Typeable</literal> and <literal>Data</literal> instances may be attached to a top-level value
7624         binding using an <literal>ANN</literal> pragma. In particular, this means you can use <literal>ANN</literal>
7625         to annotate data constructors (e.g. <literal>Just</literal>) as well as normal values (e.g. <literal>take</literal>).
7626         By way of example, to annotate the function <literal>foo</literal> with the annotation <literal>Just "Hello"</literal>
7627         you would do this:</para>
7628         
7629 <programlisting>
7630 {-# ANN foo (Just "Hello") #-}
7631 foo = ...
7632 </programlisting>
7633         
7634         <para>
7635           A number of restrictions apply to use of annotations:
7636           <itemizedlist>
7637             <listitem><para>The binder being annotated must be at the top level (i.e. no nested binders)</para></listitem>
7638             <listitem><para>The binder being annotated must be declared in the current module</para></listitem>
7639             <listitem><para>The expression you are annotating with must have a type with <literal>Typeable</literal> and <literal>Data</literal> instances</para></listitem>
7640             <listitem><para>The <ulink linkend="using-template-haskell">Template Haskell staging restrictions</ulink> apply to the
7641             expression being annotated with, so for example you cannot run a function from the module being compiled.</para>
7642             
7643             <para>To be precise, the annotation <literal>{-# ANN x e #-}</literal> is well staged if and only if <literal>$(e)</literal> would be 
7644             (disregarding the usual type restrictions of the splice syntax, and the usual restriction on splicing inside a splice - <literal>$([|1|])</literal> is fine as an annotation, albeit redundant).</para></listitem>
7645           </itemizedlist>
7646           
7647           If you feel strongly that any of these restrictions are too onerous, <ulink url="http://hackage.haskell.org/trac/ghc/wiki/MailingListsAndIRC">
7648           please give the GHC team a shout</ulink>.
7649         </para>
7650         
7651         <para>However, apart from these restrictions, many things are allowed, including expressions which are not fully evaluated!
7652         Annotation expressions will be evaluated by the compiler just like Template Haskell splices are. So, this annotation is fine:</para>
7653         
7654 <programlisting>
7655 {-# ANN f SillyAnnotation { foo = (id 10) + $([| 20 |]), bar = 'f } #-}
7656 f = ...
7657 </programlisting>
7658       </sect3>
7659       
7660       <sect3 id="typeann-pragma">
7661         <title>Annotating types</title>
7662         
7663         <indexterm><primary>ANN type</primary></indexterm>
7664         <indexterm><primary>ANN</primary></indexterm>
7665         
7666         <para>You can annotate types with the <literal>ANN</literal> pragma by using the <literal>type</literal> keyword. For example:</para>
7667         
7668 <programlisting>
7669 {-# ANN type Foo (Just "A `Maybe String' annotation") #-}
7670 data Foo = ...
7671 </programlisting>
7672       </sect3>
7673       
7674       <sect3 id="modann-pragma">
7675         <title>Annotating modules</title>
7676         
7677         <indexterm><primary>ANN module</primary></indexterm>
7678         <indexterm><primary>ANN</primary></indexterm>
7679         
7680         <para>You can annotate modules with the <literal>ANN</literal> pragma by using the <literal>module</literal> keyword. For example:</para>
7681         
7682 <programlisting>
7683 {-# ANN module (Just "A `Maybe String' annotation") #-}
7684 </programlisting>
7685       </sect3>
7686     </sect2>
7687
7688     <sect2 id="line-pragma">
7689       <title>LINE pragma</title>
7690
7691       <indexterm><primary>LINE</primary><secondary>pragma</secondary></indexterm>
7692       <indexterm><primary>pragma</primary><secondary>LINE</secondary></indexterm>
7693       <para>This pragma is similar to C's <literal>&num;line</literal>
7694       pragma, and is mainly for use in automatically generated Haskell
7695       code.  It lets you specify the line number and filename of the
7696       original code; for example</para>
7697
7698 <programlisting>{-# LINE 42 "Foo.vhs" #-}</programlisting>
7699
7700       <para>if you'd generated the current file from something called
7701       <filename>Foo.vhs</filename> and this line corresponds to line
7702       42 in the original.  GHC will adjust its error messages to refer
7703       to the line/file named in the <literal>LINE</literal>
7704       pragma.</para>
7705     </sect2>
7706
7707     <sect2 id="rules">
7708       <title>RULES pragma</title>
7709
7710       <para>The RULES pragma lets you specify rewrite rules.  It is
7711       described in <xref linkend="rewrite-rules"/>.</para>
7712     </sect2>
7713
7714     <sect2 id="specialize-pragma">
7715       <title>SPECIALIZE pragma</title>
7716
7717       <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
7718       <indexterm><primary>pragma, SPECIALIZE</primary></indexterm>
7719       <indexterm><primary>overloading, death to</primary></indexterm>
7720
7721       <para>(UK spelling also accepted.)  For key overloaded
7722       functions, you can create extra versions (NB: more code space)
7723       specialised to particular types.  Thus, if you have an
7724       overloaded function:</para>
7725
7726 <programlisting>
7727   hammeredLookup :: Ord key => [(key, value)] -> key -> value
7728 </programlisting>
7729
7730       <para>If it is heavily used on lists with
7731       <literal>Widget</literal> keys, you could specialise it as
7732       follows:</para>
7733
7734 <programlisting>
7735   {-# SPECIALIZE hammeredLookup :: [(Widget, value)] -> Widget -> value #-}
7736 </programlisting>
7737
7738       <para>A <literal>SPECIALIZE</literal> pragma for a function can
7739       be put anywhere its type signature could be put.</para>
7740
7741       <para>A <literal>SPECIALIZE</literal> has the effect of generating
7742       (a) a specialised version of the function and (b) a rewrite rule
7743       (see <xref linkend="rewrite-rules"/>) that rewrites a call to the
7744       un-specialised function into a call to the specialised one.</para>
7745
7746       <para>The type in a SPECIALIZE pragma can be any type that is less
7747         polymorphic than the type of the original function.  In concrete terms,
7748         if the original function is <literal>f</literal> then the pragma
7749 <programlisting>
7750   {-# SPECIALIZE f :: &lt;type&gt; #-}
7751 </programlisting>
7752       is valid if and only if the definition
7753 <programlisting>
7754   f_spec :: &lt;type&gt;
7755   f_spec = f
7756 </programlisting>
7757       is valid.  Here are some examples (where we only give the type signature
7758       for the original function, not its code):
7759 <programlisting>
7760   f :: Eq a => a -> b -> b
7761   {-# SPECIALISE f :: Int -> b -> b #-}
7762
7763   g :: (Eq a, Ix b) => a -> b -> b
7764   {-# SPECIALISE g :: (Eq a) => a -> Int -> Int #-}
7765
7766   h :: Eq a => a -> a -> a
7767   {-# SPECIALISE h :: (Eq a) => [a] -> [a] -> [a] #-}
7768 </programlisting>
7769 The last of these examples will generate a 
7770 RULE with a somewhat-complex left-hand side (try it yourself), so it might not fire very
7771 well.  If you use this kind of specialisation, let us know how well it works.
7772 </para>
7773
7774 <para>A <literal>SPECIALIZE</literal> pragma can optionally be followed with a
7775 <literal>INLINE</literal> or <literal>NOINLINE</literal> pragma, optionally 
7776 followed by a phase, as described in <xref linkend="inline-noinline-pragma"/>.
7777 The <literal>INLINE</literal> pragma affects the specialised version of the
7778 function (only), and applies even if the function is recursive.  The motivating
7779 example is this:
7780 <programlisting>
7781 -- A GADT for arrays with type-indexed representation
7782 data Arr e where
7783   ArrInt :: !Int -> ByteArray# -> Arr Int
7784   ArrPair :: !Int -> Arr e1 -> Arr e2 -> Arr (e1, e2)
7785
7786 (!:) :: Arr e -> Int -> e
7787 {-# SPECIALISE INLINE (!:) :: Arr Int -> Int -> Int #-}
7788 {-# SPECIALISE INLINE (!:) :: Arr (a, b) -> Int -> (a, b) #-}
7789 (ArrInt _ ba)     !: (I# i) = I# (indexIntArray# ba i)
7790 (ArrPair _ a1 a2) !: i      = (a1 !: i, a2 !: i)
7791 </programlisting>
7792 Here, <literal>(!:)</literal> is a recursive function that indexes arrays
7793 of type <literal>Arr e</literal>.  Consider a call to  <literal>(!:)</literal>
7794 at type <literal>(Int,Int)</literal>.  The second specialisation will fire, and
7795 the specialised function will be inlined.  It has two calls to
7796 <literal>(!:)</literal>,
7797 both at type <literal>Int</literal>.  Both these calls fire the first
7798 specialisation, whose body is also inlined.  The result is a type-based
7799 unrolling of the indexing function.</para>
7800 <para>Warning: you can make GHC diverge by using <literal>SPECIALISE INLINE</literal>
7801 on an ordinarily-recursive function.</para>
7802
7803       <para>Note: In earlier versions of GHC, it was possible to provide your own
7804       specialised function for a given type:
7805
7806 <programlisting>
7807 {-# SPECIALIZE hammeredLookup :: [(Int, value)] -> Int -> value = intLookup #-}
7808 </programlisting>
7809
7810       This feature has been removed, as it is now subsumed by the
7811       <literal>RULES</literal> pragma (see <xref linkend="rule-spec"/>).</para>
7812
7813     </sect2>
7814
7815 <sect2 id="specialize-instance-pragma">
7816 <title>SPECIALIZE instance pragma
7817 </title>
7818
7819 <para>
7820 <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
7821 <indexterm><primary>overloading, death to</primary></indexterm>
7822 Same idea, except for instance declarations.  For example:
7823
7824 <programlisting>
7825 instance (Eq a) => Eq (Foo a) where { 
7826    {-# SPECIALIZE instance Eq (Foo [(Int, Bar)]) #-}
7827    ... usual stuff ...
7828  }
7829 </programlisting>
7830 The pragma must occur inside the <literal>where</literal> part
7831 of the instance declaration.
7832 </para>
7833 <para>
7834 Compatible with HBC, by the way, except perhaps in the placement
7835 of the pragma.
7836 </para>
7837
7838 </sect2>
7839
7840     <sect2 id="unpack-pragma">
7841       <title>UNPACK pragma</title>
7842
7843       <indexterm><primary>UNPACK</primary></indexterm>
7844       
7845       <para>The <literal>UNPACK</literal> indicates to the compiler
7846       that it should unpack the contents of a constructor field into
7847       the constructor itself, removing a level of indirection.  For
7848       example:</para>
7849
7850 <programlisting>
7851 data T = T {-# UNPACK #-} !Float
7852            {-# UNPACK #-} !Float
7853 </programlisting>
7854
7855       <para>will create a constructor <literal>T</literal> containing
7856       two unboxed floats.  This may not always be an optimisation: if
7857       the <function>T</function> constructor is scrutinised and the
7858       floats passed to a non-strict function for example, they will
7859       have to be reboxed (this is done automatically by the
7860       compiler).</para>
7861
7862       <para>Unpacking constructor fields should only be used in
7863       conjunction with <option>-O</option>, in order to expose
7864       unfoldings to the compiler so the reboxing can be removed as
7865       often as possible.  For example:</para>
7866
7867 <programlisting>
7868 f :: T -&#62; Float
7869 f (T f1 f2) = f1 + f2
7870 </programlisting>
7871
7872       <para>The compiler will avoid reboxing <function>f1</function>
7873       and <function>f2</function> by inlining <function>+</function>
7874       on floats, but only when <option>-O</option> is on.</para>
7875
7876       <para>Any single-constructor data is eligible for unpacking; for
7877       example</para>
7878
7879 <programlisting>
7880 data T = T {-# UNPACK #-} !(Int,Int)
7881 </programlisting>
7882
7883       <para>will store the two <literal>Int</literal>s directly in the
7884       <function>T</function> constructor, by flattening the pair.
7885       Multi-level unpacking is also supported:
7886
7887 <programlisting>
7888 data T = T {-# UNPACK #-} !S
7889 data S = S {-# UNPACK #-} !Int {-# UNPACK #-} !Int
7890 </programlisting>
7891
7892       will store two unboxed <literal>Int&num;</literal>s
7893       directly in the <function>T</function> constructor.  The
7894       unpacker can see through newtypes, too.</para>
7895
7896       <para>If a field cannot be unpacked, you will not get a warning,
7897       so it might be an idea to check the generated code with
7898       <option>-ddump-simpl</option>.</para>
7899
7900       <para>See also the <option>-funbox-strict-fields</option> flag,
7901       which essentially has the effect of adding
7902       <literal>{-#&nbsp;UNPACK&nbsp;#-}</literal> to every strict
7903       constructor field.</para>
7904     </sect2>
7905
7906     <sect2 id="source-pragma">
7907       <title>SOURCE pragma</title>
7908
7909       <indexterm><primary>SOURCE</primary></indexterm>
7910      <para>The <literal>{-# SOURCE #-}</literal> pragma is used only in <literal>import</literal> declarations,
7911      to break a module loop.  It is described in detail in <xref linkend="mutual-recursion"/>.
7912      </para>
7913 </sect2>
7914
7915 </sect1>
7916
7917 <!--  ======================= REWRITE RULES ======================== -->
7918
7919 <sect1 id="rewrite-rules">
7920 <title>Rewrite rules
7921
7922 <indexterm><primary>RULES pragma</primary></indexterm>
7923 <indexterm><primary>pragma, RULES</primary></indexterm>
7924 <indexterm><primary>rewrite rules</primary></indexterm></title>
7925
7926 <para>
7927 The programmer can specify rewrite rules as part of the source program
7928 (in a pragma).  
7929 Here is an example:
7930
7931 <programlisting>
7932   {-# RULES
7933   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
7934     #-}
7935 </programlisting>
7936 </para>
7937 <para>
7938 Use the debug flag <option>-ddump-simpl-stats</option> to see what rules fired.
7939 If you need more information, then <option>-ddump-rule-firings</option> shows you
7940 each individual rule firing in detail.
7941 </para>
7942
7943 <sect2>
7944 <title>Syntax</title>
7945
7946 <para>
7947 From a syntactic point of view:
7948
7949 <itemizedlist>
7950
7951 <listitem>
7952 <para>
7953  There may be zero or more rules in a <literal>RULES</literal> pragma, separated by semicolons (which
7954  may be generated by the layout rule).
7955 </para>
7956 </listitem>
7957
7958 <listitem>
7959 <para>
7960 The layout rule applies in a pragma.
7961 Currently no new indentation level
7962 is set, so if you put several rules in single RULES pragma and wish to use layout to separate them,
7963 you must lay out the starting in the same column as the enclosing definitions.
7964 <programlisting>
7965   {-# RULES
7966   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
7967   "map/append" forall f xs ys. map f (xs ++ ys) = map f xs ++ map f ys
7968     #-}
7969 </programlisting>
7970 Furthermore, the closing <literal>#-}</literal>
7971 should start in a column to the right of the opening <literal>{-#</literal>.
7972 </para>
7973 </listitem>
7974
7975 <listitem>
7976 <para>
7977  Each rule has a name, enclosed in double quotes.  The name itself has
7978 no significance at all.  It is only used when reporting how many times the rule fired.
7979 </para>
7980 </listitem>
7981
7982 <listitem>
7983 <para>
7984 A rule may optionally have a phase-control number (see <xref linkend="phase-control"/>),
7985 immediately after the name of the rule.  Thus:
7986 <programlisting>
7987   {-# RULES
7988         "map/map" [2]  forall f g xs. map f (map g xs) = map (f.g) xs
7989     #-}
7990 </programlisting>
7991 The "[2]" means that the rule is active in Phase 2 and subsequent phases.  The inverse
7992 notation "[~2]" is also accepted, meaning that the rule is active up to, but not including,
7993 Phase 2.
7994 </para>
7995 </listitem>
7996
7997
7998
7999 <listitem>
8000 <para>
8001  Each variable mentioned in a rule must either be in scope (e.g. <function>map</function>),
8002 or bound by the <literal>forall</literal> (e.g. <function>f</function>, <function>g</function>, <function>xs</function>).  The variables bound by
8003 the <literal>forall</literal> are called the <emphasis>pattern</emphasis> variables.  They are separated
8004 by spaces, just like in a type <literal>forall</literal>.
8005 </para>
8006 </listitem>
8007 <listitem>
8008
8009 <para>
8010  A pattern variable may optionally have a type signature.
8011 If the type of the pattern variable is polymorphic, it <emphasis>must</emphasis> have a type signature.
8012 For example, here is the <literal>foldr/build</literal> rule:
8013
8014 <programlisting>
8015 "fold/build"  forall k z (g::forall b. (a->b->b) -> b -> b) .
8016               foldr k z (build g) = g k z
8017 </programlisting>
8018
8019 Since <function>g</function> has a polymorphic type, it must have a type signature.
8020
8021 </para>
8022 </listitem>
8023 <listitem>
8024
8025 <para>
8026 The left hand side of a rule must consist of a top-level variable applied
8027 to arbitrary expressions.  For example, this is <emphasis>not</emphasis> OK:
8028
8029 <programlisting>
8030 "wrong1"   forall e1 e2.  case True of { True -> e1; False -> e2 } = e1
8031 "wrong2"   forall f.      f True = True
8032 </programlisting>
8033
8034 In <literal>"wrong1"</literal>, the LHS is not an application; in <literal>"wrong2"</literal>, the LHS has a pattern variable
8035 in the head.
8036 </para>
8037 </listitem>
8038 <listitem>
8039
8040 <para>
8041  A rule does not need to be in the same module as (any of) the
8042 variables it mentions, though of course they need to be in scope.
8043 </para>
8044 </listitem>
8045 <listitem>
8046
8047 <para>
8048  All rules are implicitly exported from the module, and are therefore
8049 in force in any module that imports the module that defined the rule, directly
8050 or indirectly.  (That is, if A imports B, which imports C, then C's rules are
8051 in force when compiling A.)  The situation is very similar to that for instance
8052 declarations.
8053 </para>
8054 </listitem>
8055
8056 <listitem>
8057
8058 <para>
8059 Inside a RULE "<literal>forall</literal>" is treated as a keyword, regardless of
8060 any other flag settings.  Furthermore, inside a RULE, the language extension
8061 <option>-XScopedTypeVariables</option> is automatically enabled; see 
8062 <xref linkend="scoped-type-variables"/>.
8063 </para>
8064 </listitem>
8065 <listitem>
8066
8067 <para>
8068 Like other pragmas, RULE pragmas are always checked for scope errors, and
8069 are typechecked. Typechecking means that the LHS and RHS of a rule are typechecked, 
8070 and must have the same type.  However, rules are only <emphasis>enabled</emphasis>
8071 if the <option>-fenable-rewrite-rules</option> flag is 
8072 on (see <xref linkend="rule-semantics"/>).
8073 </para>
8074 </listitem>
8075 </itemizedlist>
8076
8077 </para>
8078
8079 </sect2>
8080
8081 <sect2 id="rule-semantics">
8082 <title>Semantics</title>
8083
8084 <para>
8085 From a semantic point of view:
8086
8087 <itemizedlist>
8088 <listitem>
8089 <para>
8090 Rules are enabled (that is, used during optimisation)
8091 by the <option>-fenable-rewrite-rules</option> flag.
8092 This flag is implied by <option>-O</option>, and may be switched
8093 off (as usual) by <option>-fno-enable-rewrite-rules</option>.
8094 (NB: enabling <option>-fenable-rewrite-rules</option> without <option>-O</option> 
8095 may not do what you expect, though, because without <option>-O</option> GHC 
8096 ignores all optimisation information in interface files;
8097 see <option>-fignore-interface-pragmas</option>, <xref linkend="options-f"/>.)
8098 Note that <option>-fenable-rewrite-rules</option> is an <emphasis>optimisation</emphasis> flag, and
8099 has no effect on parsing or typechecking.
8100 </para>
8101 </listitem>
8102
8103 <listitem>
8104 <para>
8105  Rules are regarded as left-to-right rewrite rules.
8106 When GHC finds an expression that is a substitution instance of the LHS
8107 of a rule, it replaces the expression by the (appropriately-substituted) RHS.
8108 By "a substitution instance" we mean that the LHS can be made equal to the
8109 expression by substituting for the pattern variables.
8110
8111 </para>
8112 </listitem>
8113 <listitem>
8114
8115 <para>
8116  GHC makes absolutely no attempt to verify that the LHS and RHS
8117 of a rule have the same meaning.  That is undecidable in general, and
8118 infeasible in most interesting cases.  The responsibility is entirely the programmer's!
8119
8120 </para>
8121 </listitem>
8122 <listitem>
8123
8124 <para>
8125  GHC makes no attempt to make sure that the rules are confluent or
8126 terminating.  For example:
8127
8128 <programlisting>
8129   "loop"        forall x y.  f x y = f y x
8130 </programlisting>
8131
8132 This rule will cause the compiler to go into an infinite loop.
8133
8134 </para>
8135 </listitem>
8136 <listitem>
8137
8138 <para>
8139  If more than one rule matches a call, GHC will choose one arbitrarily to apply.
8140
8141 </para>
8142 </listitem>
8143 <listitem>
8144 <para>
8145  GHC currently uses a very simple, syntactic, matching algorithm
8146 for matching a rule LHS with an expression.  It seeks a substitution
8147 which makes the LHS and expression syntactically equal modulo alpha
8148 conversion.  The pattern (rule), but not the expression, is eta-expanded if
8149 necessary.  (Eta-expanding the expression can lead to laziness bugs.)
8150 But not beta conversion (that's called higher-order matching).
8151 </para>
8152
8153 <para>
8154 Matching is carried out on GHC's intermediate language, which includes
8155 type abstractions and applications.  So a rule only matches if the
8156 types match too.  See <xref linkend="rule-spec"/> below.
8157 </para>
8158 </listitem>
8159 <listitem>
8160
8161 <para>
8162  GHC keeps trying to apply the rules as it optimises the program.
8163 For example, consider:
8164
8165 <programlisting>
8166   let s = map f
8167       t = map g
8168   in
8169   s (t xs)
8170 </programlisting>
8171
8172 The expression <literal>s (t xs)</literal> does not match the rule <literal>"map/map"</literal>, but GHC
8173 will substitute for <varname>s</varname> and <varname>t</varname>, giving an expression which does match.
8174 If <varname>s</varname> or <varname>t</varname> was (a) used more than once, and (b) large or a redex, then it would
8175 not be substituted, and the rule would not fire.
8176
8177 </para>
8178 </listitem>
8179 <listitem>
8180
8181 <para>
8182 Ordinary inlining happens at the same time as rule rewriting, which may lead to unexpected
8183 results.  Consider this (artificial) example
8184 <programlisting>
8185 f x = x
8186 {-# RULES "f" f True = False #-}
8187
8188 g y = f y
8189
8190 h z = g True
8191 </programlisting>
8192 Since <literal>f</literal>'s right-hand side is small, it is inlined into <literal>g</literal>,
8193 to give
8194 <programlisting>
8195 g y = y
8196 </programlisting>
8197 Now <literal>g</literal> is inlined into <literal>h</literal>, but <literal>f</literal>'s RULE has
8198 no chance to fire.  
8199 If instead GHC had first inlined <literal>g</literal> into <literal>h</literal> then there
8200 would have been a better chance that <literal>f</literal>'s RULE might fire.  
8201 </para>
8202 <para>
8203 The way to get predictable behaviour is to use a NOINLINE 
8204 pragma on <literal>f</literal>, to ensure
8205 that it is not inlined until its RULEs have had a chance to fire.
8206 </para>
8207 </listitem>
8208 </itemizedlist>
8209
8210 </para>
8211
8212 </sect2>
8213
8214 <sect2>
8215 <title>List fusion</title>
8216
8217 <para>
8218 The RULES mechanism is used to implement fusion (deforestation) of common list functions.
8219 If a "good consumer" consumes an intermediate list constructed by a "good producer", the
8220 intermediate list should be eliminated entirely.
8221 </para>
8222
8223 <para>
8224 The following are good producers:
8225
8226 <itemizedlist>
8227 <listitem>
8228
8229 <para>
8230  List comprehensions
8231 </para>
8232 </listitem>
8233 <listitem>
8234
8235 <para>
8236  Enumerations of <literal>Int</literal> and <literal>Char</literal> (e.g. <literal>['a'..'z']</literal>).
8237 </para>
8238 </listitem>
8239 <listitem>
8240
8241 <para>
8242  Explicit lists (e.g. <literal>[True, False]</literal>)
8243 </para>
8244 </listitem>
8245 <listitem>
8246
8247 <para>
8248  The cons constructor (e.g <literal>3:4:[]</literal>)
8249 </para>
8250 </listitem>
8251 <listitem>
8252
8253 <para>
8254  <function>++</function>
8255 </para>
8256 </listitem>
8257
8258 <listitem>
8259 <para>
8260  <function>map</function>
8261 </para>
8262 </listitem>
8263
8264 <listitem>
8265 <para>
8266 <function>take</function>, <function>filter</function>
8267 </para>
8268 </listitem>
8269 <listitem>
8270
8271 <para>
8272  <function>iterate</function>, <function>repeat</function>
8273 </para>
8274 </listitem>
8275 <listitem>
8276
8277 <para>
8278  <function>zip</function>, <function>zipWith</function>
8279 </para>
8280 </listitem>
8281
8282 </itemizedlist>
8283
8284 </para>
8285
8286 <para>
8287 The following are good consumers:
8288
8289 <itemizedlist>
8290 <listitem>
8291
8292 <para>
8293  List comprehensions
8294 </para>
8295 </listitem>
8296 <listitem>
8297
8298 <para>
8299  <function>array</function> (on its second argument)
8300 </para>
8301 </listitem>
8302 <listitem>
8303
8304 <para>
8305  <function>++</function> (on its first argument)
8306 </para>
8307 </listitem>
8308
8309 <listitem>
8310 <para>
8311  <function>foldr</function>
8312 </para>
8313 </listitem>
8314
8315 <listitem>
8316 <para>
8317  <function>map</function>
8318 </para>
8319 </listitem>
8320 <listitem>
8321
8322 <para>
8323 <function>take</function>, <function>filter</function>
8324 </para>
8325 </listitem>
8326 <listitem>
8327
8328 <para>
8329  <function>concat</function>
8330 </para>
8331 </listitem>
8332 <listitem>
8333
8334 <para>
8335  <function>unzip</function>, <function>unzip2</function>, <function>unzip3</function>, <function>unzip4</function>
8336 </para>
8337 </listitem>
8338 <listitem>
8339
8340 <para>
8341  <function>zip</function>, <function>zipWith</function> (but on one argument only; if both are good producers, <function>zip</function>
8342 will fuse with one but not the other)
8343 </para>
8344 </listitem>
8345 <listitem>
8346
8347 <para>
8348  <function>partition</function>
8349 </para>
8350 </listitem>
8351 <listitem>
8352
8353 <para>
8354  <function>head</function>
8355 </para>
8356 </listitem>
8357 <listitem>
8358
8359 <para>
8360  <function>and</function>, <function>or</function>, <function>any</function>, <function>all</function>
8361 </para>
8362 </listitem>
8363 <listitem>
8364
8365 <para>
8366  <function>sequence&lowbar;</function>
8367 </para>
8368 </listitem>
8369 <listitem>
8370
8371 <para>
8372  <function>msum</function>
8373 </para>
8374 </listitem>
8375 <listitem>
8376
8377 <para>
8378  <function>sortBy</function>
8379 </para>
8380 </listitem>
8381
8382 </itemizedlist>
8383
8384 </para>
8385
8386  <para>
8387 So, for example, the following should generate no intermediate lists:
8388
8389 <programlisting>
8390 array (1,10) [(i,i*i) | i &#60;- map (+ 1) [0..9]]
8391 </programlisting>
8392
8393 </para>
8394
8395 <para>
8396 This list could readily be extended; if there are Prelude functions that you use
8397 a lot which are not included, please tell us.
8398 </para>
8399
8400 <para>
8401 If you want to write your own good consumers or producers, look at the
8402 Prelude definitions of the above functions to see how to do so.
8403 </para>
8404
8405 </sect2>
8406
8407 <sect2 id="rule-spec">
8408 <title>Specialisation
8409 </title>
8410
8411 <para>
8412 Rewrite rules can be used to get the same effect as a feature
8413 present in earlier versions of GHC.
8414 For example, suppose that:
8415
8416 <programlisting>
8417 genericLookup :: Ord a => Table a b   -> a   -> b
8418 intLookup     ::          Table Int b -> Int -> b
8419 </programlisting>
8420
8421 where <function>intLookup</function> is an implementation of
8422 <function>genericLookup</function> that works very fast for
8423 keys of type <literal>Int</literal>.  You might wish
8424 to tell GHC to use <function>intLookup</function> instead of
8425 <function>genericLookup</function> whenever the latter was called with
8426 type <literal>Table Int b -&gt; Int -&gt; b</literal>.
8427 It used to be possible to write
8428
8429 <programlisting>
8430 {-# SPECIALIZE genericLookup :: Table Int b -> Int -> b = intLookup #-}
8431 </programlisting>
8432
8433 This feature is no longer in GHC, but rewrite rules let you do the same thing:
8434
8435 <programlisting>
8436 {-# RULES "genericLookup/Int" genericLookup = intLookup #-}
8437 </programlisting>
8438
8439 This slightly odd-looking rule instructs GHC to replace
8440 <function>genericLookup</function> by <function>intLookup</function>
8441 <emphasis>whenever the types match</emphasis>.
8442 What is more, this rule does not need to be in the same
8443 file as <function>genericLookup</function>, unlike the
8444 <literal>SPECIALIZE</literal> pragmas which currently do (so that they
8445 have an original definition available to specialise).
8446 </para>
8447
8448 <para>It is <emphasis>Your Responsibility</emphasis> to make sure that
8449 <function>intLookup</function> really behaves as a specialised version
8450 of <function>genericLookup</function>!!!</para>
8451
8452 <para>An example in which using <literal>RULES</literal> for
8453 specialisation will Win Big:
8454
8455 <programlisting>
8456 toDouble :: Real a => a -> Double
8457 toDouble = fromRational . toRational
8458
8459 {-# RULES "toDouble/Int" toDouble = i2d #-}
8460 i2d (I# i) = D# (int2Double# i) -- uses Glasgow prim-op directly
8461 </programlisting>
8462
8463 The <function>i2d</function> function is virtually one machine
8464 instruction; the default conversion&mdash;via an intermediate
8465 <literal>Rational</literal>&mdash;is obscenely expensive by
8466 comparison.
8467 </para>
8468
8469 </sect2>
8470
8471 <sect2>
8472 <title>Controlling what's going on</title>
8473
8474 <para>
8475
8476 <itemizedlist>
8477 <listitem>
8478
8479 <para>
8480  Use <option>-ddump-rules</option> to see what transformation rules GHC is using.
8481 </para>
8482 </listitem>
8483 <listitem>
8484
8485 <para>
8486  Use <option>-ddump-simpl-stats</option> to see what rules are being fired.
8487 If you add <option>-dppr-debug</option> you get a more detailed listing.
8488 </para>
8489 </listitem>
8490 <listitem>
8491
8492 <para>
8493  The definition of (say) <function>build</function> in <filename>GHC/Base.lhs</filename> looks like this:
8494
8495 <programlisting>
8496         build   :: forall a. (forall b. (a -> b -> b) -> b -> b) -> [a]
8497         {-# INLINE build #-}
8498         build g = g (:) []
8499 </programlisting>
8500
8501 Notice the <literal>INLINE</literal>!  That prevents <literal>(:)</literal> from being inlined when compiling
8502 <literal>PrelBase</literal>, so that an importing module will &ldquo;see&rdquo; the <literal>(:)</literal>, and can
8503 match it on the LHS of a rule.  <literal>INLINE</literal> prevents any inlining happening
8504 in the RHS of the <literal>INLINE</literal> thing.  I regret the delicacy of this.
8505
8506 </para>
8507 </listitem>
8508 <listitem>
8509
8510 <para>
8511  In <filename>libraries/base/GHC/Base.lhs</filename> look at the rules for <function>map</function> to
8512 see how to write rules that will do fusion and yet give an efficient
8513 program even if fusion doesn't happen.  More rules in <filename>GHC/List.lhs</filename>.
8514 </para>
8515 </listitem>
8516
8517 </itemizedlist>
8518
8519 </para>
8520
8521 </sect2>
8522
8523 <sect2 id="core-pragma">
8524   <title>CORE pragma</title>
8525
8526   <indexterm><primary>CORE pragma</primary></indexterm>
8527   <indexterm><primary>pragma, CORE</primary></indexterm>
8528   <indexterm><primary>core, annotation</primary></indexterm>
8529
8530 <para>
8531   The external core format supports <quote>Note</quote> annotations;
8532   the <literal>CORE</literal> pragma gives a way to specify what these
8533   should be in your Haskell source code.  Syntactically, core
8534   annotations are attached to expressions and take a Haskell string
8535   literal as an argument.  The following function definition shows an
8536   example:
8537
8538 <programlisting>
8539 f x = ({-# CORE "foo" #-} show) ({-# CORE "bar" #-} x)
8540 </programlisting>
8541
8542   Semantically, this is equivalent to:
8543
8544 <programlisting>
8545 g x = show x
8546 </programlisting>
8547 </para>
8548
8549 <para>
8550   However, when external core is generated (via
8551   <option>-fext-core</option>), there will be Notes attached to the
8552   expressions <function>show</function> and <varname>x</varname>.
8553   The core function declaration for <function>f</function> is:
8554 </para>
8555
8556 <programlisting>
8557   f :: %forall a . GHCziShow.ZCTShow a ->
8558                    a -> GHCziBase.ZMZN GHCziBase.Char =
8559     \ @ a (zddShow::GHCziShow.ZCTShow a) (eta::a) ->
8560         (%note "foo"
8561          %case zddShow %of (tpl::GHCziShow.ZCTShow a)
8562            {GHCziShow.ZCDShow
8563             (tpl1::GHCziBase.Int ->
8564                    a ->
8565                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
8566 r)
8567             (tpl2::a -> GHCziBase.ZMZN GHCziBase.Char)
8568             (tpl3::GHCziBase.ZMZN a ->
8569                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
8570 r) ->
8571               tpl2})
8572         (%note "bar"
8573          eta);
8574 </programlisting>
8575
8576 <para>
8577   Here, we can see that the function <function>show</function> (which
8578   has been expanded out to a case expression over the Show dictionary)
8579   has a <literal>%note</literal> attached to it, as does the
8580   expression <varname>eta</varname> (which used to be called
8581   <varname>x</varname>).
8582 </para>
8583
8584 </sect2>
8585
8586 </sect1>
8587
8588 <sect1 id="special-ids">
8589 <title>Special built-in functions</title>
8590 <para>GHC has a few built-in functions with special behaviour.  These
8591 are now described in the module <ulink
8592 url="../libraries/ghc-prim/GHC-Prim.html"><literal>GHC.Prim</literal></ulink>
8593 in the library documentation.</para>
8594 </sect1>
8595
8596
8597 <sect1 id="generic-classes">
8598 <title>Generic classes</title>
8599
8600 <para>
8601 The ideas behind this extension are described in detail in "Derivable type classes",
8602 Ralf Hinze and Simon Peyton Jones, Haskell Workshop, Montreal Sept 2000, pp94-105.
8603 An example will give the idea:
8604 </para>
8605
8606 <programlisting>
8607   import Generics
8608
8609   class Bin a where
8610     toBin   :: a -> [Int]
8611     fromBin :: [Int] -> (a, [Int])
8612   
8613     toBin {| Unit |}    Unit      = []
8614     toBin {| a :+: b |} (Inl x)   = 0 : toBin x
8615     toBin {| a :+: b |} (Inr y)   = 1 : toBin y
8616     toBin {| a :*: b |} (x :*: y) = toBin x ++ toBin y
8617   
8618     fromBin {| Unit |}    bs      = (Unit, bs)
8619     fromBin {| a :+: b |} (0:bs)  = (Inl x, bs')    where (x,bs') = fromBin bs
8620     fromBin {| a :+: b |} (1:bs)  = (Inr y, bs')    where (y,bs') = fromBin bs
8621     fromBin {| a :*: b |} bs      = (x :*: y, bs'') where (x,bs' ) = fromBin bs
8622                                                           (y,bs'') = fromBin bs'
8623 </programlisting>
8624 <para>
8625 This class declaration explains how <literal>toBin</literal> and <literal>fromBin</literal>
8626 work for arbitrary data types.  They do so by giving cases for unit, product, and sum,
8627 which are defined thus in the library module <literal>Generics</literal>:
8628 </para>
8629 <programlisting>
8630   data Unit    = Unit
8631   data a :+: b = Inl a | Inr b
8632   data a :*: b = a :*: b
8633 </programlisting>
8634 <para>
8635 Now you can make a data type into an instance of Bin like this:
8636 <programlisting>
8637   instance (Bin a, Bin b) => Bin (a,b)
8638   instance Bin a => Bin [a]
8639 </programlisting>
8640 That is, just leave off the "where" clause.  Of course, you can put in the
8641 where clause and over-ride whichever methods you please.
8642 </para>
8643
8644     <sect2>
8645       <title> Using generics </title>
8646       <para>To use generics you need to</para>
8647       <itemizedlist>
8648         <listitem>
8649           <para>Use the flags <option>-fglasgow-exts</option> (to enable the extra syntax), 
8650                 <option>-XGenerics</option> (to generate extra per-data-type code),
8651                 and <option>-package lang</option> (to make the <literal>Generics</literal> library
8652                 available.  </para>
8653         </listitem>
8654         <listitem>
8655           <para>Import the module <literal>Generics</literal> from the
8656           <literal>lang</literal> package.  This import brings into
8657           scope the data types <literal>Unit</literal>,
8658           <literal>:*:</literal>, and <literal>:+:</literal>.  (You
8659           don't need this import if you don't mention these types
8660           explicitly; for example, if you are simply giving instance
8661           declarations.)</para>
8662         </listitem>
8663       </itemizedlist>
8664     </sect2>
8665
8666 <sect2> <title> Changes wrt the paper </title>
8667 <para>
8668 Note that the type constructors <literal>:+:</literal> and <literal>:*:</literal> 
8669 can be written infix (indeed, you can now use
8670 any operator starting in a colon as an infix type constructor).  Also note that
8671 the type constructors are not exactly as in the paper (Unit instead of 1, etc).
8672 Finally, note that the syntax of the type patterns in the class declaration
8673 uses "<literal>{|</literal>" and "<literal>|}</literal>" brackets; curly braces
8674 alone would ambiguous when they appear on right hand sides (an extension we 
8675 anticipate wanting).
8676 </para>
8677 </sect2>
8678
8679 <sect2> <title>Terminology and restrictions</title>
8680 <para>
8681 Terminology.  A "generic default method" in a class declaration
8682 is one that is defined using type patterns as above.
8683 A "polymorphic default method" is a default method defined as in Haskell 98.
8684 A "generic class declaration" is a class declaration with at least one
8685 generic default method.
8686 </para>
8687
8688 <para>
8689 Restrictions:
8690 <itemizedlist>
8691 <listitem>
8692 <para>
8693 Alas, we do not yet implement the stuff about constructor names and 
8694 field labels.
8695 </para>
8696 </listitem>
8697
8698 <listitem>
8699 <para>
8700 A generic class can have only one parameter; you can't have a generic
8701 multi-parameter class.
8702 </para>
8703 </listitem>
8704
8705 <listitem>
8706 <para>
8707 A default method must be defined entirely using type patterns, or entirely
8708 without.  So this is illegal:
8709 <programlisting>
8710   class Foo a where
8711     op :: a -> (a, Bool)
8712     op {| Unit |} Unit = (Unit, True)
8713     op x               = (x,    False)
8714 </programlisting>
8715 However it is perfectly OK for some methods of a generic class to have 
8716 generic default methods and others to have polymorphic default methods.
8717 </para>
8718 </listitem>
8719
8720 <listitem>
8721 <para>
8722 The type variable(s) in the type pattern for a generic method declaration
8723 scope over the right hand side.  So this is legal (note the use of the type variable ``p'' in a type signature on the right hand side:
8724 <programlisting>
8725   class Foo a where
8726     op :: a -> Bool
8727     op {| p :*: q |} (x :*: y) = op (x :: p)
8728     ...
8729 </programlisting>
8730 </para>
8731 </listitem>
8732
8733 <listitem>
8734 <para>
8735 The type patterns in a generic default method must take one of the forms:
8736 <programlisting>
8737        a :+: b
8738        a :*: b
8739        Unit
8740 </programlisting>
8741 where "a" and "b" are type variables.  Furthermore, all the type patterns for
8742 a single type constructor (<literal>:*:</literal>, say) must be identical; they
8743 must use the same type variables.  So this is illegal:
8744 <programlisting>
8745   class Foo a where
8746     op :: a -> Bool
8747     op {| a :+: b |} (Inl x) = True
8748     op {| p :+: q |} (Inr y) = False
8749 </programlisting>
8750 The type patterns must be identical, even in equations for different methods of the class.
8751 So this too is illegal:
8752 <programlisting>
8753   class Foo a where
8754     op1 :: a -> Bool
8755     op1 {| a :*: b |} (x :*: y) = True
8756
8757     op2 :: a -> Bool
8758     op2 {| p :*: q |} (x :*: y) = False
8759 </programlisting>
8760 (The reason for this restriction is that we gather all the equations for a particular type constructor
8761 into a single generic instance declaration.)
8762 </para>
8763 </listitem>
8764
8765 <listitem>
8766 <para>
8767 A generic method declaration must give a case for each of the three type constructors.
8768 </para>
8769 </listitem>
8770
8771 <listitem>
8772 <para>
8773 The type for a generic method can be built only from:
8774   <itemizedlist>
8775   <listitem> <para> Function arrows </para> </listitem>
8776   <listitem> <para> Type variables </para> </listitem>
8777   <listitem> <para> Tuples </para> </listitem>
8778   <listitem> <para> Arbitrary types not involving type variables </para> </listitem>
8779   </itemizedlist>
8780 Here are some example type signatures for generic methods:
8781 <programlisting>
8782     op1 :: a -> Bool
8783     op2 :: Bool -> (a,Bool)
8784     op3 :: [Int] -> a -> a
8785     op4 :: [a] -> Bool
8786 </programlisting>
8787 Here, op1, op2, op3 are OK, but op4 is rejected, because it has a type variable
8788 inside a list.  
8789 </para>
8790 <para>
8791 This restriction is an implementation restriction: we just haven't got around to
8792 implementing the necessary bidirectional maps over arbitrary type constructors.
8793 It would be relatively easy to add specific type constructors, such as Maybe and list,
8794 to the ones that are allowed.</para>
8795 </listitem>
8796
8797 <listitem>
8798 <para>
8799 In an instance declaration for a generic class, the idea is that the compiler
8800 will fill in the methods for you, based on the generic templates.  However it can only
8801 do so if
8802   <itemizedlist>
8803   <listitem>
8804   <para>
8805   The instance type is simple (a type constructor applied to type variables, as in Haskell 98).
8806   </para>
8807   </listitem>
8808   <listitem>
8809   <para>
8810   No constructor of the instance type has unboxed fields.
8811   </para>
8812   </listitem>
8813   </itemizedlist>
8814 (Of course, these things can only arise if you are already using GHC extensions.)
8815 However, you can still give an instance declarations for types which break these rules,
8816 provided you give explicit code to override any generic default methods.
8817 </para>
8818 </listitem>
8819
8820 </itemizedlist>
8821 </para>
8822
8823 <para>
8824 The option <option>-ddump-deriv</option> dumps incomprehensible stuff giving details of 
8825 what the compiler does with generic declarations.
8826 </para>
8827
8828 </sect2>
8829
8830 <sect2> <title> Another example </title>
8831 <para>
8832 Just to finish with, here's another example I rather like:
8833 <programlisting>
8834   class Tag a where
8835     nCons :: a -> Int
8836     nCons {| Unit |}    _ = 1
8837     nCons {| a :*: b |} _ = 1
8838     nCons {| a :+: b |} _ = nCons (bot::a) + nCons (bot::b)
8839   
8840     tag :: a -> Int
8841     tag {| Unit |}    _       = 1
8842     tag {| a :*: b |} _       = 1   
8843     tag {| a :+: b |} (Inl x) = tag x
8844     tag {| a :+: b |} (Inr y) = nCons (bot::a) + tag y
8845 </programlisting>
8846 </para>
8847 </sect2>
8848 </sect1>
8849
8850 <sect1 id="monomorphism">
8851 <title>Control over monomorphism</title>
8852
8853 <para>GHC supports two flags that control the way in which generalisation is
8854 carried out at let and where bindings.
8855 </para>
8856
8857 <sect2>
8858 <title>Switching off the dreaded Monomorphism Restriction</title>
8859           <indexterm><primary><option>-XNoMonomorphismRestriction</option></primary></indexterm>
8860
8861 <para>Haskell's monomorphism restriction (see 
8862 <ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.5">Section
8863 4.5.5</ulink>
8864 of the Haskell Report)
8865 can be completely switched off by
8866 <option>-XNoMonomorphismRestriction</option>.
8867 </para>
8868 </sect2>
8869
8870 <sect2>
8871 <title>Monomorphic pattern bindings</title>
8872           <indexterm><primary><option>-XNoMonoPatBinds</option></primary></indexterm>
8873           <indexterm><primary><option>-XMonoPatBinds</option></primary></indexterm>
8874
8875           <para> As an experimental change, we are exploring the possibility of
8876           making pattern bindings monomorphic; that is, not generalised at all.  
8877             A pattern binding is a binding whose LHS has no function arguments,
8878             and is not a simple variable.  For example:
8879 <programlisting>
8880   f x = x                    -- Not a pattern binding
8881   f = \x -> x                -- Not a pattern binding
8882   f :: Int -> Int = \x -> x  -- Not a pattern binding
8883
8884   (g,h) = e                  -- A pattern binding
8885   (f) = e                    -- A pattern binding
8886   [x] = e                    -- A pattern binding
8887 </programlisting>
8888 Experimentally, GHC now makes pattern bindings monomorphic <emphasis>by
8889 default</emphasis>.  Use <option>-XNoMonoPatBinds</option> to recover the
8890 standard behaviour.
8891 </para>
8892 </sect2>
8893 </sect1>
8894
8895
8896
8897 <!-- Emacs stuff:
8898      ;;; Local Variables: ***
8899      ;;; mode: xml ***
8900      ;;; sgml-parent-document: ("users_guide.xml" "book" "chapter" "sect1") ***
8901      ;;; ispell-local-dictionary: "british" ***
8902      ;;; End: ***
8903  -->
8904