Fix user guide typesetting
[ghc-hetmet.git] / docs / users_guide / glasgow_exts.xml
1 <?xml version="1.0" encoding="iso-8859-1"?>
2 <para>
3 <indexterm><primary>language, GHC</primary></indexterm>
4 <indexterm><primary>extensions, GHC</primary></indexterm>
5 As with all known Haskell systems, GHC implements some extensions to
6 the language.  They are all enabled by options; by default GHC
7 understands only plain Haskell 98.
8 </para>
9
10 <para>
11 Some of the Glasgow extensions serve to give you access to the
12 underlying facilities with which we implement Haskell.  Thus, you can
13 get at the Raw Iron, if you are willing to write some non-portable
14 code at a more primitive level.  You need not be &ldquo;stuck&rdquo;
15 on performance because of the implementation costs of Haskell's
16 &ldquo;high-level&rdquo; features&mdash;you can always code
17 &ldquo;under&rdquo; them.  In an extreme case, you can write all your
18 time-critical code in C, and then just glue it together with Haskell!
19 </para>
20
21 <para>
22 Before you get too carried away working at the lowest level (e.g.,
23 sloshing <literal>MutableByteArray&num;</literal>s around your
24 program), you may wish to check if there are libraries that provide a
25 &ldquo;Haskellised veneer&rdquo; over the features you want.  The
26 separate <ulink url="../libraries/index.html">libraries
27 documentation</ulink> describes all the libraries that come with GHC.
28 </para>
29
30 <!-- LANGUAGE OPTIONS -->
31   <sect1 id="options-language">
32     <title>Language options</title>
33
34     <indexterm><primary>language</primary><secondary>option</secondary>
35     </indexterm>
36     <indexterm><primary>options</primary><secondary>language</secondary>
37     </indexterm>
38     <indexterm><primary>extensions</primary><secondary>options controlling</secondary>
39     </indexterm>
40
41     <para>The language option flag control what variation of the language are
42     permitted.  Leaving out all of them gives you standard Haskell
43     98.</para>
44
45     <para>Generally speaking, all the language options are introduced by "<option>-X</option>", 
46     e.g. <option>-XTemplateHaskell</option>.
47     </para>
48
49    <para> All the language options can be turned off by using the prefix "<option>No</option>"; 
50       e.g. "<option>-XNoTemplateHaskell</option>".</para>
51
52    <para> Language options recognised by Cabal can also be enabled using the <literal>LANGUAGE</literal> pragma,
53    thus <literal>{-# LANGUAGE TemplateHaskell #-}</literal> (see <xref linkend="language-pragma"/>>). </para>
54
55     <para>The flag <option>-fglasgow-exts</option>
56           <indexterm><primary><option>-fglasgow-exts</option></primary></indexterm>
57           is equivalent to enabling the following extensions: 
58           <option>-XPrintExplicitForalls</option>,
59           <option>-XForeignFunctionInterface</option>,
60           <option>-XUnliftedFFITypes</option>,
61           <option>-XGADTs</option>,
62           <option>-XImplicitParams</option>,
63           <option>-XScopedTypeVariables</option>,
64           <option>-XUnboxedTuples</option>,
65           <option>-XTypeSynonymInstances</option>,
66           <option>-XStandaloneDeriving</option>,
67           <option>-XDeriveDataTypeable</option>,
68           <option>-XFlexibleContexts</option>,
69           <option>-XFlexibleInstances</option>,
70           <option>-XConstrainedClassMethods</option>,
71           <option>-XMultiParamTypeClasses</option>,
72           <option>-XFunctionalDependencies</option>,
73           <option>-XMagicHash</option>,
74           <option>-XPolymorphicComponents</option>,
75           <option>-XExistentialQuantification</option>,
76           <option>-XUnicodeSyntax</option>,
77           <option>-XPostfixOperators</option>,
78           <option>-XPatternGuards</option>,
79           <option>-XLiberalTypeSynonyms</option>,
80           <option>-XRankNTypes</option>,
81           <option>-XImpredicativeTypes</option>,
82           <option>-XTypeOperators</option>,
83           <option>-XRecursiveDo</option>,
84           <option>-XParallelListComp</option>,
85           <option>-XEmptyDataDecls</option>,
86           <option>-XKindSignatures</option>,
87           <option>-XGeneralizedNewtypeDeriving</option>,
88           <option>-XTypeFamilies</option>.
89             Enabling these options is the <emphasis>only</emphasis> 
90             effect of <option>-fglasgow-exts</option>.
91           We are trying to move away from this portmanteau flag, 
92           and towards enabling features individually.</para>
93
94   </sect1>
95
96 <!-- UNBOXED TYPES AND PRIMITIVE OPERATIONS -->
97 <sect1 id="primitives">
98   <title>Unboxed types and primitive operations</title>
99
100 <para>GHC is built on a raft of primitive data types and operations;
101 "primitive" in the sense that they cannot be defined in Haskell itself.
102 While you really can use this stuff to write fast code,
103   we generally find it a lot less painful, and more satisfying in the
104   long run, to use higher-level language features and libraries.  With
105   any luck, the code you write will be optimised to the efficient
106   unboxed version in any case.  And if it isn't, we'd like to know
107   about it.</para>
108
109 <para>All these primitive data types and operations are exported by the 
110 library <literal>GHC.Prim</literal>, for which there is 
111 <ulink url="../libraries/base/GHC.Prim.html">detailed online documentation</ulink>.
112 (This documentation is generated from the file <filename>compiler/prelude/primops.txt.pp</filename>.)
113 </para>
114 <para>
115 If you want to mention any of the primitive data types or operations in your
116 program, you must first import <literal>GHC.Prim</literal> to bring them
117 into scope.  Many of them have names ending in "&num;", and to mention such
118 names you need the <option>-XMagicHash</option> extension (<xref linkend="magic-hash"/>).
119 </para>
120
121 <para>The primops make extensive use of <link linkend="glasgow-unboxed">unboxed types</link> 
122 and <link linkend="unboxed-tuples">unboxed tuples</link>, which
123 we briefly summarise here. </para>
124   
125 <sect2 id="glasgow-unboxed">
126 <title>Unboxed types
127 </title>
128
129 <para>
130 <indexterm><primary>Unboxed types (Glasgow extension)</primary></indexterm>
131 </para>
132
133 <para>Most types in GHC are <firstterm>boxed</firstterm>, which means
134 that values of that type are represented by a pointer to a heap
135 object.  The representation of a Haskell <literal>Int</literal>, for
136 example, is a two-word heap object.  An <firstterm>unboxed</firstterm>
137 type, however, is represented by the value itself, no pointers or heap
138 allocation are involved.
139 </para>
140
141 <para>
142 Unboxed types correspond to the &ldquo;raw machine&rdquo; types you
143 would use in C: <literal>Int&num;</literal> (long int),
144 <literal>Double&num;</literal> (double), <literal>Addr&num;</literal>
145 (void *), etc.  The <emphasis>primitive operations</emphasis>
146 (PrimOps) on these types are what you might expect; e.g.,
147 <literal>(+&num;)</literal> is addition on
148 <literal>Int&num;</literal>s, and is the machine-addition that we all
149 know and love&mdash;usually one instruction.
150 </para>
151
152 <para>
153 Primitive (unboxed) types cannot be defined in Haskell, and are
154 therefore built into the language and compiler.  Primitive types are
155 always unlifted; that is, a value of a primitive type cannot be
156 bottom.  We use the convention (but it is only a convention) 
157 that primitive types, values, and
158 operations have a <literal>&num;</literal> suffix (see <xref linkend="magic-hash"/>).
159 For some primitive types we have special syntax for literals, also
160 described in the <link linkend="magic-hash">same section</link>.
161 </para>
162
163 <para>
164 Primitive values are often represented by a simple bit-pattern, such
165 as <literal>Int&num;</literal>, <literal>Float&num;</literal>,
166 <literal>Double&num;</literal>.  But this is not necessarily the case:
167 a primitive value might be represented by a pointer to a
168 heap-allocated object.  Examples include
169 <literal>Array&num;</literal>, the type of primitive arrays.  A
170 primitive array is heap-allocated because it is too big a value to fit
171 in a register, and would be too expensive to copy around; in a sense,
172 it is accidental that it is represented by a pointer.  If a pointer
173 represents a primitive value, then it really does point to that value:
174 no unevaluated thunks, no indirections&hellip;nothing can be at the
175 other end of the pointer than the primitive value.
176 A numerically-intensive program using unboxed types can
177 go a <emphasis>lot</emphasis> faster than its &ldquo;standard&rdquo;
178 counterpart&mdash;we saw a threefold speedup on one example.
179 </para>
180
181 <para>
182 There are some restrictions on the use of primitive types:
183 <itemizedlist>
184 <listitem><para>The main restriction
185 is that you can't pass a primitive value to a polymorphic
186 function or store one in a polymorphic data type.  This rules out
187 things like <literal>[Int&num;]</literal> (i.e. lists of primitive
188 integers).  The reason for this restriction is that polymorphic
189 arguments and constructor fields are assumed to be pointers: if an
190 unboxed integer is stored in one of these, the garbage collector would
191 attempt to follow it, leading to unpredictable space leaks.  Or a
192 <function>seq</function> operation on the polymorphic component may
193 attempt to dereference the pointer, with disastrous results.  Even
194 worse, the unboxed value might be larger than a pointer
195 (<literal>Double&num;</literal> for instance).
196 </para>
197 </listitem>
198 <listitem><para> You cannot define a newtype whose representation type
199 (the argument type of the data constructor) is an unboxed type.  Thus,
200 this is illegal:
201 <programlisting>
202   newtype A = MkA Int#
203 </programlisting>
204 </para></listitem>
205 <listitem><para> You cannot bind a variable with an unboxed type
206 in a <emphasis>top-level</emphasis> binding.
207 </para></listitem>
208 <listitem><para> You cannot bind a variable with an unboxed type
209 in a <emphasis>recursive</emphasis> binding.
210 </para></listitem>
211 <listitem><para> You may bind unboxed variables in a (non-recursive,
212 non-top-level) pattern binding, but any such variable causes the entire
213 pattern-match
214 to become strict.  For example:
215 <programlisting>
216   data Foo = Foo Int Int#
217
218   f x = let (Foo a b, w) = ..rhs.. in ..body..
219 </programlisting>
220 Since <literal>b</literal> has type <literal>Int#</literal>, the entire pattern
221 match
222 is strict, and the program behaves as if you had written
223 <programlisting>
224   data Foo = Foo Int Int#
225
226   f x = case ..rhs.. of { (Foo a b, w) -> ..body.. }
227 </programlisting>
228 </para>
229 </listitem>
230 </itemizedlist>
231 </para>
232
233 </sect2>
234
235 <sect2 id="unboxed-tuples">
236 <title>Unboxed Tuples
237 </title>
238
239 <para>
240 Unboxed tuples aren't really exported by <literal>GHC.Exts</literal>,
241 they're available by default with <option>-fglasgow-exts</option>.  An
242 unboxed tuple looks like this:
243 </para>
244
245 <para>
246
247 <programlisting>
248 (# e_1, ..., e_n #)
249 </programlisting>
250
251 </para>
252
253 <para>
254 where <literal>e&lowbar;1..e&lowbar;n</literal> are expressions of any
255 type (primitive or non-primitive).  The type of an unboxed tuple looks
256 the same.
257 </para>
258
259 <para>
260 Unboxed tuples are used for functions that need to return multiple
261 values, but they avoid the heap allocation normally associated with
262 using fully-fledged tuples.  When an unboxed tuple is returned, the
263 components are put directly into registers or on the stack; the
264 unboxed tuple itself does not have a composite representation.  Many
265 of the primitive operations listed in <literal>primops.txt.pp</literal> return unboxed
266 tuples.
267 In particular, the <literal>IO</literal> and <literal>ST</literal> monads use unboxed
268 tuples to avoid unnecessary allocation during sequences of operations.
269 </para>
270
271 <para>
272 There are some pretty stringent restrictions on the use of unboxed tuples:
273 <itemizedlist>
274 <listitem>
275
276 <para>
277 Values of unboxed tuple types are subject to the same restrictions as
278 other unboxed types; i.e. they may not be stored in polymorphic data
279 structures or passed to polymorphic functions.
280
281 </para>
282 </listitem>
283 <listitem>
284
285 <para>
286 No variable can have an unboxed tuple type, nor may a constructor or function
287 argument have an unboxed tuple type.  The following are all illegal:
288
289
290 <programlisting>
291   data Foo = Foo (# Int, Int #)
292
293   f :: (# Int, Int #) -&#62; (# Int, Int #)
294   f x = x
295
296   g :: (# Int, Int #) -&#62; Int
297   g (# a,b #) = a
298
299   h x = let y = (# x,x #) in ...
300 </programlisting>
301 </para>
302 </listitem>
303 </itemizedlist>
304 </para>
305 <para>
306 The typical use of unboxed tuples is simply to return multiple values,
307 binding those multiple results with a <literal>case</literal> expression, thus:
308 <programlisting>
309   f x y = (# x+1, y-1 #)
310   g x = case f x x of { (# a, b #) -&#62; a + b }
311 </programlisting>
312 You can have an unboxed tuple in a pattern binding, thus
313 <programlisting>
314   f x = let (# p,q #) = h x in ..body..
315 </programlisting>
316 If the types of <literal>p</literal> and <literal>q</literal> are not unboxed,
317 the resulting binding is lazy like any other Haskell pattern binding.  The 
318 above example desugars like this:
319 <programlisting>
320   f x = let t = case h x o f{ (# p,q #) -> (p,q)
321             p = fst t
322             q = snd t
323         in ..body..
324 </programlisting>
325 Indeed, the bindings can even be recursive.
326 </para>
327
328 </sect2>
329 </sect1>
330
331
332 <!-- ====================== SYNTACTIC EXTENSIONS =======================  -->
333
334 <sect1 id="syntax-extns">
335 <title>Syntactic extensions</title>
336  
337     <sect2 id="magic-hash">
338       <title>The magic hash</title>
339       <para>The language extension <option>-XMagicHash</option> allows "&num;" as a
340         postfix modifier to identifiers.  Thus, "x&num;" is a valid variable, and "T&num;" is
341         a valid type constructor or data constructor.</para>
342
343       <para>The hash sign does not change sematics at all.  We tend to use variable
344         names ending in "&num;" for unboxed values or types (e.g. <literal>Int&num;</literal>), 
345         but there is no requirement to do so; they are just plain ordinary variables.
346         Nor does the <option>-XMagicHash</option> extension bring anything into scope.
347         For example, to bring <literal>Int&num;</literal> into scope you must 
348         import <literal>GHC.Prim</literal> (see <xref linkend="primitives"/>); 
349         the <option>-XMagicHash</option> extension
350         then allows you to <emphasis>refer</emphasis> to the <literal>Int&num;</literal>
351         that is now in scope.</para>
352       <para> The <option>-XMagicHash</option> also enables some new forms of literals (see <xref linkend="glasgow-unboxed"/>):
353         <itemizedlist> 
354           <listitem><para> <literal>'x'&num;</literal> has type <literal>Char&num;</literal></para> </listitem>
355           <listitem><para> <literal>&quot;foo&quot;&num;</literal> has type <literal>Addr&num;</literal></para> </listitem>
356           <listitem><para> <literal>3&num;</literal> has type <literal>Int&num;</literal>. In general,
357           any Haskell 98 integer lexeme followed by a <literal>&num;</literal> is an <literal>Int&num;</literal> literal, e.g.
358             <literal>-0x3A&num;</literal> as well as <literal>32&num;</literal></para>.</listitem>
359           <listitem><para> <literal>3&num;&num;</literal> has type <literal>Word&num;</literal>. In general,
360           any non-negative Haskell 98 integer lexeme followed by <literal>&num;&num;</literal> 
361               is a <literal>Word&num;</literal>. </para> </listitem>
362           <listitem><para> <literal>3.2&num;</literal> has type <literal>Float&num;</literal>.</para> </listitem>
363           <listitem><para> <literal>3.2&num;&num;</literal> has type <literal>Double&num;</literal></para> </listitem>
364           </itemizedlist>
365       </para>
366    </sect2>
367
368     <sect2 id="new-qualified-operators">
369       <title>New qualified operator syntax</title>
370
371       <para>A new syntax for referencing qualified operators is
372         planned to be introduced by Haskell', and is enabled in GHC
373         with
374         the <option>-XNewQualifiedOperators</option><indexterm><primary><option>-XNewQualifiedOperators</option></primary></indexterm>
375         option.  In the new syntax, the prefix form of a qualified
376         operator is
377         written <literal><replaceable>module</replaceable>.(<replaceable>symbol</replaceable>)</literal>
378         (in Haskell 98 this would
379         be <literal>(<replaceable>module</replaceable>.<replaceable>symbol</replaceable>)</literal>),
380         and the infix form is
381         written <literal>`<replaceable>module</replaceable>.(<replaceable>symbol</replaceable>)`</literal>
382         (in Haskell 98 this would
383         be <literal>`<replaceable>module</replaceable>.<replaceable>symbol</replaceable>`</literal>.
384         For example:
385 <programlisting>
386   add x y = Prelude.(+) x y
387   subtract y = (`Prelude.(-)` y)
388 </programlisting>
389         The new form of qualified operators is intended to regularise
390         the syntax by eliminating odd cases
391         like <literal>Prelude..</literal>.  For example,
392         when <literal>NewQualifiedOperators</literal> is on, it is possible to
393         write the enerated sequence <literal>[Monday..]</literal>
394         without spaces, whereas in Haskell 98 this would be a
395         reference to the operator &lsquo;<literal>.</literal>&lsquo;
396         from module <literal>Monday</literal>.</para>
397
398       <para>When <option>-XNewQualifiedOperators</option> is on, the old Haskell
399         98 syntax for qualified operators is not accepted, so this
400         option may cause existing Haskell 98 code to break.</para>
401
402     </sect2>
403         
404
405     <!-- ====================== HIERARCHICAL MODULES =======================  -->
406
407
408     <sect2 id="hierarchical-modules">
409       <title>Hierarchical Modules</title>
410
411       <para>GHC supports a small extension to the syntax of module
412       names: a module name is allowed to contain a dot
413       <literal>&lsquo;.&rsquo;</literal>.  This is also known as the
414       &ldquo;hierarchical module namespace&rdquo; extension, because
415       it extends the normally flat Haskell module namespace into a
416       more flexible hierarchy of modules.</para>
417
418       <para>This extension has very little impact on the language
419       itself; modules names are <emphasis>always</emphasis> fully
420       qualified, so you can just think of the fully qualified module
421       name as <quote>the module name</quote>.  In particular, this
422       means that the full module name must be given after the
423       <literal>module</literal> keyword at the beginning of the
424       module; for example, the module <literal>A.B.C</literal> must
425       begin</para>
426
427 <programlisting>module A.B.C</programlisting>
428
429
430       <para>It is a common strategy to use the <literal>as</literal>
431       keyword to save some typing when using qualified names with
432       hierarchical modules.  For example:</para>
433
434 <programlisting>
435 import qualified Control.Monad.ST.Strict as ST
436 </programlisting>
437
438       <para>For details on how GHC searches for source and interface
439       files in the presence of hierarchical modules, see <xref
440       linkend="search-path"/>.</para>
441
442       <para>GHC comes with a large collection of libraries arranged
443       hierarchically; see the accompanying <ulink
444       url="../libraries/index.html">library
445       documentation</ulink>.  More libraries to install are available
446       from <ulink
447       url="http://hackage.haskell.org/packages/hackage.html">HackageDB</ulink>.</para>
448     </sect2>
449
450     <!-- ====================== PATTERN GUARDS =======================  -->
451
452 <sect2 id="pattern-guards">
453 <title>Pattern guards</title>
454
455 <para>
456 <indexterm><primary>Pattern guards (Glasgow extension)</primary></indexterm>
457 The discussion that follows is an abbreviated version of Simon Peyton Jones's original <ulink url="http://research.microsoft.com/~simonpj/Haskell/guards.html">proposal</ulink>. (Note that the proposal was written before pattern guards were implemented, so refers to them as unimplemented.)
458 </para>
459
460 <para>
461 Suppose we have an abstract data type of finite maps, with a
462 lookup operation:
463
464 <programlisting>
465 lookup :: FiniteMap -> Int -> Maybe Int
466 </programlisting>
467
468 The lookup returns <function>Nothing</function> if the supplied key is not in the domain of the mapping, and <function>(Just v)</function> otherwise,
469 where <varname>v</varname> is the value that the key maps to.  Now consider the following definition:
470 </para>
471
472 <programlisting>
473 clunky env var1 var2 | ok1 &amp;&amp; ok2 = val1 + val2
474 | otherwise  = var1 + var2
475 where
476   m1 = lookup env var1
477   m2 = lookup env var2
478   ok1 = maybeToBool m1
479   ok2 = maybeToBool m2
480   val1 = expectJust m1
481   val2 = expectJust m2
482 </programlisting>
483
484 <para>
485 The auxiliary functions are 
486 </para>
487
488 <programlisting>
489 maybeToBool :: Maybe a -&gt; Bool
490 maybeToBool (Just x) = True
491 maybeToBool Nothing  = False
492
493 expectJust :: Maybe a -&gt; a
494 expectJust (Just x) = x
495 expectJust Nothing  = error "Unexpected Nothing"
496 </programlisting>
497
498 <para>
499 What is <function>clunky</function> doing? The guard <literal>ok1 &amp;&amp;
500 ok2</literal> checks that both lookups succeed, using
501 <function>maybeToBool</function> to convert the <function>Maybe</function>
502 types to booleans. The (lazily evaluated) <function>expectJust</function>
503 calls extract the values from the results of the lookups, and binds the
504 returned values to <varname>val1</varname> and <varname>val2</varname>
505 respectively.  If either lookup fails, then clunky takes the
506 <literal>otherwise</literal> case and returns the sum of its arguments.
507 </para>
508
509 <para>
510 This is certainly legal Haskell, but it is a tremendously verbose and
511 un-obvious way to achieve the desired effect.  Arguably, a more direct way
512 to write clunky would be to use case expressions:
513 </para>
514
515 <programlisting>
516 clunky env var1 var2 = case lookup env var1 of
517   Nothing -&gt; fail
518   Just val1 -&gt; case lookup env var2 of
519     Nothing -&gt; fail
520     Just val2 -&gt; val1 + val2
521 where
522   fail = var1 + var2
523 </programlisting>
524
525 <para>
526 This is a bit shorter, but hardly better.  Of course, we can rewrite any set
527 of pattern-matching, guarded equations as case expressions; that is
528 precisely what the compiler does when compiling equations! The reason that
529 Haskell provides guarded equations is because they allow us to write down
530 the cases we want to consider, one at a time, independently of each other. 
531 This structure is hidden in the case version.  Two of the right-hand sides
532 are really the same (<function>fail</function>), and the whole expression
533 tends to become more and more indented. 
534 </para>
535
536 <para>
537 Here is how I would write clunky:
538 </para>
539
540 <programlisting>
541 clunky env var1 var2
542   | Just val1 &lt;- lookup env var1
543   , Just val2 &lt;- lookup env var2
544   = val1 + val2
545 ...other equations for clunky...
546 </programlisting>
547
548 <para>
549 The semantics should be clear enough.  The qualifiers are matched in order. 
550 For a <literal>&lt;-</literal> qualifier, which I call a pattern guard, the
551 right hand side is evaluated and matched against the pattern on the left. 
552 If the match fails then the whole guard fails and the next equation is
553 tried.  If it succeeds, then the appropriate binding takes place, and the
554 next qualifier is matched, in the augmented environment.  Unlike list
555 comprehensions, however, the type of the expression to the right of the
556 <literal>&lt;-</literal> is the same as the type of the pattern to its
557 left.  The bindings introduced by pattern guards scope over all the
558 remaining guard qualifiers, and over the right hand side of the equation.
559 </para>
560
561 <para>
562 Just as with list comprehensions, boolean expressions can be freely mixed
563 with among the pattern guards.  For example:
564 </para>
565
566 <programlisting>
567 f x | [y] &lt;- x
568     , y > 3
569     , Just z &lt;- h y
570     = ...
571 </programlisting>
572
573 <para>
574 Haskell's current guards therefore emerge as a special case, in which the
575 qualifier list has just one element, a boolean expression.
576 </para>
577 </sect2>
578
579     <!-- ===================== View patterns ===================  -->
580
581 <sect2 id="view-patterns">
582 <title>View patterns
583 </title>
584
585 <para>
586 View patterns are enabled by the flag <literal>-XViewPatterns</literal>.
587 More information and examples of view patterns can be found on the
588 <ulink url="http://hackage.haskell.org/trac/ghc/wiki/ViewPatterns">Wiki
589 page</ulink>.
590 </para>
591
592 <para>
593 View patterns are somewhat like pattern guards that can be nested inside
594 of other patterns.  They are a convenient way of pattern-matching
595 against values of abstract types. For example, in a programming language
596 implementation, we might represent the syntax of the types of the
597 language as follows:
598
599 <programlisting>
600 type Typ
601  
602 data TypView = Unit
603              | Arrow Typ Typ
604
605 view :: Type -> TypeView
606
607 -- additional operations for constructing Typ's ...
608 </programlisting>
609
610 The representation of Typ is held abstract, permitting implementations
611 to use a fancy representation (e.g., hash-consing to manage sharing).
612
613 Without view patterns, using this signature a little inconvenient: 
614 <programlisting>
615 size :: Typ -> Integer
616 size t = case view t of
617   Unit -> 1
618   Arrow t1 t2 -> size t1 + size t2
619 </programlisting>
620
621 It is necessary to iterate the case, rather than using an equational
622 function definition. And the situation is even worse when the matching
623 against <literal>t</literal> is buried deep inside another pattern.
624 </para>
625
626 <para>
627 View patterns permit calling the view function inside the pattern and
628 matching against the result: 
629 <programlisting>
630 size (view -> Unit) = 1
631 size (view -> Arrow t1 t2) = size t1 + size t2
632 </programlisting>
633
634 That is, we add a new form of pattern, written
635 <replaceable>expression</replaceable> <literal>-></literal>
636 <replaceable>pattern</replaceable> that means "apply the expression to
637 whatever we're trying to match against, and then match the result of
638 that application against the pattern". The expression can be any Haskell
639 expression of function type, and view patterns can be used wherever
640 patterns are used.
641 </para>
642
643 <para>
644 The semantics of a pattern <literal>(</literal>
645 <replaceable>exp</replaceable> <literal>-></literal>
646 <replaceable>pat</replaceable> <literal>)</literal> are as follows:
647
648 <itemizedlist>
649
650 <listitem> Scoping:
651
652 <para>The variables bound by the view pattern are the variables bound by
653 <replaceable>pat</replaceable>.
654 </para>
655
656 <para>
657 Any variables in <replaceable>exp</replaceable> are bound occurrences,
658 but variables bound "to the left" in a pattern are in scope.  This
659 feature permits, for example, one argument to a function to be used in
660 the view of another argument.  For example, the function
661 <literal>clunky</literal> from <xref linkend="pattern-guards" /> can be
662 written using view patterns as follows:
663
664 <programlisting>
665 clunky env (lookup env -> Just val1) (lookup env -> Just val2) = val1 + val2
666 ...other equations for clunky...
667 </programlisting>
668 </para>
669
670 <para>
671 More precisely, the scoping rules are: 
672 <itemizedlist>
673 <listitem>
674 <para>
675 In a single pattern, variables bound by patterns to the left of a view
676 pattern expression are in scope. For example:
677 <programlisting>
678 example :: Maybe ((String -> Integer,Integer), String) -> Bool
679 example Just ((f,_), f -> 4) = True
680 </programlisting>
681
682 Additionally, in function definitions, variables bound by matching earlier curried
683 arguments may be used in view pattern expressions in later arguments:
684 <programlisting>
685 example :: (String -> Integer) -> String -> Bool
686 example f (f -> 4) = True
687 </programlisting>
688 That is, the scoping is the same as it would be if the curried arguments
689 were collected into a tuple.  
690 </para>
691 </listitem>
692
693 <listitem>
694 <para>
695 In mutually recursive bindings, such as <literal>let</literal>,
696 <literal>where</literal>, or the top level, view patterns in one
697 declaration may not mention variables bound by other declarations.  That
698 is, each declaration must be self-contained.  For example, the following
699 program is not allowed:
700 <programlisting>
701 let {(x -> y) = e1 ;
702      (y -> x) = e2 } in x
703 </programlisting>
704
705 (We may lift this
706 restriction in the future; the only cost is that type checking patterns
707 would get a little more complicated.)  
708
709
710 </para>
711 </listitem>
712 </itemizedlist>
713
714 </para>
715 </listitem>
716
717 <listitem><para> Typing: If <replaceable>exp</replaceable> has type
718 <replaceable>T1</replaceable> <literal>-></literal>
719 <replaceable>T2</replaceable> and <replaceable>pat</replaceable> matches
720 a <replaceable>T2</replaceable>, then the whole view pattern matches a
721 <replaceable>T1</replaceable>.
722 </para></listitem>
723
724 <listitem><para> Matching: To the equations in Section 3.17.3 of the
725 <ulink url="http://www.haskell.org/onlinereport/">Haskell 98
726 Report</ulink>, add the following:
727 <programlisting>
728 case v of { (e -> p) -> e1 ; _ -> e2 } 
729  = 
730 case (e v) of { p -> e1 ; _ -> e2 }
731 </programlisting>
732 That is, to match a variable <replaceable>v</replaceable> against a pattern
733 <literal>(</literal> <replaceable>exp</replaceable>
734 <literal>-></literal> <replaceable>pat</replaceable>
735 <literal>)</literal>, evaluate <literal>(</literal>
736 <replaceable>exp</replaceable> <replaceable> v</replaceable>
737 <literal>)</literal> and match the result against
738 <replaceable>pat</replaceable>.  
739 </para></listitem>
740
741 <listitem><para> Efficiency: When the same view function is applied in
742 multiple branches of a function definition or a case expression (e.g.,
743 in <literal>size</literal> above), GHC makes an attempt to collect these
744 applications into a single nested case expression, so that the view
745 function is only applied once.  Pattern compilation in GHC follows the
746 matrix algorithm described in Chapter 4 of <ulink
747 url="http://research.microsoft.com/~simonpj/Papers/slpj-book-1987/">The
748 Implementation of Functional Programming Languages</ulink>.  When the
749 top rows of the first column of a matrix are all view patterns with the
750 "same" expression, these patterns are transformed into a single nested
751 case.  This includes, for example, adjacent view patterns that line up
752 in a tuple, as in
753 <programlisting>
754 f ((view -> A, p1), p2) = e1
755 f ((view -> B, p3), p4) = e2
756 </programlisting>
757 </para>
758
759 <para> The current notion of when two view pattern expressions are "the
760 same" is very restricted: it is not even full syntactic equality.
761 However, it does include variables, literals, applications, and tuples;
762 e.g., two instances of <literal>view ("hi", "there")</literal> will be
763 collected.  However, the current implementation does not compare up to
764 alpha-equivalence, so two instances of <literal>(x, view x ->
765 y)</literal> will not be coalesced.
766 </para>
767
768 </listitem>
769
770 </itemizedlist>
771 </para>
772
773 </sect2>
774
775     <!-- ===================== Recursive do-notation ===================  -->
776
777 <sect2 id="mdo-notation">
778 <title>The recursive do-notation
779 </title>
780
781 <para> The recursive do-notation (also known as mdo-notation) is implemented as described in
782 <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>,
783 by Levent Erkok, John Launchbury,
784 Haskell Workshop 2002, pages: 29-37. Pittsburgh, Pennsylvania. 
785 This paper is essential reading for anyone making non-trivial use of mdo-notation,
786 and we do not repeat it here.
787 </para>
788 <para>
789 The do-notation of Haskell does not allow <emphasis>recursive bindings</emphasis>,
790 that is, the variables bound in a do-expression are visible only in the textually following 
791 code block. Compare this to a let-expression, where bound variables are visible in the entire binding
792 group. It turns out that several applications can benefit from recursive bindings in
793 the do-notation, and this extension provides the necessary syntactic support.
794 </para>
795 <para>
796 Here is a simple (yet contrived) example:
797 </para>
798 <programlisting>
799 import Control.Monad.Fix
800
801 justOnes = mdo xs &lt;- Just (1:xs)
802                return xs
803 </programlisting>
804 <para>
805 As you can guess <literal>justOnes</literal> will evaluate to <literal>Just [1,1,1,...</literal>.
806 </para>
807
808 <para>
809 The Control.Monad.Fix library introduces the <literal>MonadFix</literal> class. It's definition is:
810 </para>
811 <programlisting>
812 class Monad m => MonadFix m where
813    mfix :: (a -> m a) -> m a
814 </programlisting>
815 <para>
816 The function <literal>mfix</literal>
817 dictates how the required recursion operation should be performed.  For example, 
818 <literal>justOnes</literal> desugars as follows:
819 <programlisting>
820 justOnes = mfix (\xs' -&gt; do { xs &lt;- Just (1:xs'); return xs }
821 </programlisting>
822 For full details of the way in which mdo is typechecked and desugared, see 
823 the paper <ulink url="http://citeseer.ist.psu.edu/erk02recursive.html">A recursive do for Haskell</ulink>.
824 In particular, GHC implements the segmentation technique described in Section 3.2 of the paper.
825 </para>
826 <para>
827 If recursive bindings are required for a monad,
828 then that monad must be declared an instance of the <literal>MonadFix</literal> class.
829 The following instances of <literal>MonadFix</literal> are automatically provided: List, Maybe, IO. 
830 Furthermore, the Control.Monad.ST and Control.Monad.ST.Lazy modules provide the instances of the MonadFix class 
831 for Haskell's internal state monad (strict and lazy, respectively).
832 </para>
833 <para>
834 Here are some important points in using the recursive-do notation:
835 <itemizedlist>
836 <listitem><para>
837 The recursive version of the do-notation uses the keyword <literal>mdo</literal> (rather
838 than <literal>do</literal>).
839 </para></listitem>
840
841 <listitem><para>
842 It is enabled with the flag <literal>-XRecursiveDo</literal>, which is in turn implied by
843 <literal>-fglasgow-exts</literal>.
844 </para></listitem>
845
846 <listitem><para>
847 Unlike ordinary do-notation, but like <literal>let</literal> and <literal>where</literal> bindings,
848 name shadowing is not allowed; that is, all the names bound in a single <literal>mdo</literal> must
849 be distinct (Section 3.3 of the paper).
850 </para></listitem>
851
852 <listitem><para>
853 Variables bound by a <literal>let</literal> statement in an <literal>mdo</literal>
854 are monomorphic in the <literal>mdo</literal> (Section 3.1 of the paper).  However
855 GHC breaks the <literal>mdo</literal> into segments to enhance polymorphism,
856 and improve termination (Section 3.2 of the paper).
857 </para></listitem>
858 </itemizedlist>
859 </para>
860
861 <para>
862 Historical note: The old implementation of the mdo-notation (and most
863 of the existing documents) used the name
864 <literal>MonadRec</literal> for the class and the corresponding library.
865 This name is not supported by GHC.
866 </para>
867
868 </sect2>
869
870
871    <!-- ===================== PARALLEL LIST COMPREHENSIONS ===================  -->
872
873   <sect2 id="parallel-list-comprehensions">
874     <title>Parallel List Comprehensions</title>
875     <indexterm><primary>list comprehensions</primary><secondary>parallel</secondary>
876     </indexterm>
877     <indexterm><primary>parallel list comprehensions</primary>
878     </indexterm>
879
880     <para>Parallel list comprehensions are a natural extension to list
881     comprehensions.  List comprehensions can be thought of as a nice
882     syntax for writing maps and filters.  Parallel comprehensions
883     extend this to include the zipWith family.</para>
884
885     <para>A parallel list comprehension has multiple independent
886     branches of qualifier lists, each separated by a `|' symbol.  For
887     example, the following zips together two lists:</para>
888
889 <programlisting>
890    [ (x, y) | x &lt;- xs | y &lt;- ys ] 
891 </programlisting>
892
893     <para>The behavior of parallel list comprehensions follows that of
894     zip, in that the resulting list will have the same length as the
895     shortest branch.</para>
896
897     <para>We can define parallel list comprehensions by translation to
898     regular comprehensions.  Here's the basic idea:</para>
899
900     <para>Given a parallel comprehension of the form: </para>
901
902 <programlisting>
903    [ e | p1 &lt;- e11, p2 &lt;- e12, ... 
904        | q1 &lt;- e21, q2 &lt;- e22, ... 
905        ... 
906    ] 
907 </programlisting>
908
909     <para>This will be translated to: </para>
910
911 <programlisting>
912    [ e | ((p1,p2), (q1,q2), ...) &lt;- zipN [(p1,p2) | p1 &lt;- e11, p2 &lt;- e12, ...] 
913                                          [(q1,q2) | q1 &lt;- e21, q2 &lt;- e22, ...] 
914                                          ... 
915    ] 
916 </programlisting>
917
918     <para>where `zipN' is the appropriate zip for the given number of
919     branches.</para>
920
921   </sect2>
922   
923   <!-- ===================== TRANSFORM LIST COMPREHENSIONS ===================  -->
924
925   <sect2 id="generalised-list-comprehensions">
926     <title>Generalised (SQL-Like) List Comprehensions</title>
927     <indexterm><primary>list comprehensions</primary><secondary>generalised</secondary>
928     </indexterm>
929     <indexterm><primary>extended list comprehensions</primary>
930     </indexterm>
931     <indexterm><primary>group</primary></indexterm>
932     <indexterm><primary>sql</primary></indexterm>
933
934
935     <para>Generalised list comprehensions are a further enhancement to the
936     list comprehension syntatic sugar to allow operations such as sorting
937     and grouping which are familiar from SQL.   They are fully described in the
938         paper <ulink url="http://research.microsoft.com/~simonpj/papers/list-comp">
939           Comprehensive comprehensions: comprehensions with "order by" and "group by"</ulink>,
940     except that the syntax we use differs slightly from the paper.</para>
941 <para>Here is an example: 
942 <programlisting>
943 employees = [ ("Simon", "MS", 80)
944 , ("Erik", "MS", 100)
945 , ("Phil", "Ed", 40)
946 , ("Gordon", "Ed", 45)
947 , ("Paul", "Yale", 60)]
948
949 output = [ (the dept, sum salary)
950 | (name, dept, salary) &lt;- employees
951 , then group by dept
952 , then sortWith by (sum salary)
953 , then take 5 ]
954 </programlisting>
955 In this example, the list <literal>output</literal> would take on 
956     the value:
957     
958 <programlisting>
959 [("Yale", 60), ("Ed", 85), ("MS", 180)]
960 </programlisting>
961 </para>
962 <para>There are three new keywords: <literal>group</literal>, <literal>by</literal>, and <literal>using</literal>.
963 (The function <literal>sortWith</literal> is not a keyword; it is an ordinary
964 function that is exported by <literal>GHC.Exts</literal>.)</para>
965
966 <para>There are five new forms of comprehension qualifier,
967 all introduced by the (existing) keyword <literal>then</literal>:
968     <itemizedlist>
969     <listitem>
970     
971 <programlisting>
972 then f
973 </programlisting>
974
975     This statement requires that <literal>f</literal> have the type <literal>
976     forall a. [a] -> [a]</literal>. You can see an example of it's use in the
977     motivating example, as this form is used to apply <literal>take 5</literal>.
978     
979     </listitem>
980     
981     
982     <listitem>
983 <para>
984 <programlisting>
985 then f by e
986 </programlisting>
987
988     This form is similar to the previous one, but allows you to create a function
989     which will be passed as the first argument to f. As a consequence f must have 
990     the type <literal>forall a. (a -> t) -> [a] -> [a]</literal>. As you can see
991     from the type, this function lets f &quot;project out&quot; some information 
992     from the elements of the list it is transforming.</para>
993
994     <para>An example is shown in the opening example, where <literal>sortWith</literal> 
995     is supplied with a function that lets it find out the <literal>sum salary</literal> 
996     for any item in the list comprehension it transforms.</para>
997
998     </listitem>
999
1000
1001     <listitem>
1002
1003 <programlisting>
1004 then group by e using f
1005 </programlisting>
1006
1007     <para>This is the most general of the grouping-type statements. In this form,
1008     f is required to have type <literal>forall a. (a -> t) -> [a] -> [[a]]</literal>.
1009     As with the <literal>then f by e</literal> case above, the first argument
1010     is a function supplied to f by the compiler which lets it compute e on every
1011     element of the list being transformed. However, unlike the non-grouping case,
1012     f additionally partitions the list into a number of sublists: this means that
1013     at every point after this statement, binders occurring before it in the comprehension
1014     refer to <emphasis>lists</emphasis> of possible values, not single values. To help understand
1015     this, let's look at an example:</para>
1016     
1017 <programlisting>
1018 -- This works similarly to groupWith in GHC.Exts, but doesn't sort its input first
1019 groupRuns :: Eq b => (a -> b) -> [a] -> [[a]]
1020 groupRuns f = groupBy (\x y -> f x == f y)
1021
1022 output = [ (the x, y)
1023 | x &lt;- ([1..3] ++ [1..2])
1024 , y &lt;- [4..6]
1025 , then group by x using groupRuns ]
1026 </programlisting>
1027
1028     <para>This results in the variable <literal>output</literal> taking on the value below:</para>
1029
1030 <programlisting>
1031 [(1, [4, 5, 6]), (2, [4, 5, 6]), (3, [4, 5, 6]), (1, [4, 5, 6]), (2, [4, 5, 6])]
1032 </programlisting>
1033
1034     <para>Note that we have used the <literal>the</literal> function to change the type 
1035     of x from a list to its original numeric type. The variable y, in contrast, is left 
1036     unchanged from the list form introduced by the grouping.</para>
1037
1038     </listitem>
1039
1040     <listitem>
1041
1042 <programlisting>
1043 then group by e
1044 </programlisting>
1045
1046     <para>This form of grouping is essentially the same as the one described above. However,
1047     since no function to use for the grouping has been supplied it will fall back on the
1048     <literal>groupWith</literal> function defined in 
1049     <ulink url="../libraries/base/GHC-Exts.html"><literal>GHC.Exts</literal></ulink>. This
1050     is the form of the group statement that we made use of in the opening example.</para>
1051
1052     </listitem>
1053     
1054     
1055     <listitem>
1056
1057 <programlisting>
1058 then group using f
1059 </programlisting>
1060
1061     <para>With this form of the group statement, f is required to simply have the type
1062     <literal>forall a. [a] -> [[a]]</literal>, which will be used to group up the
1063     comprehension so far directly. An example of this form is as follows:</para>
1064     
1065 <programlisting>
1066 output = [ x
1067 | y &lt;- [1..5]
1068 , x &lt;- "hello"
1069 , then group using inits]
1070 </programlisting>
1071
1072     <para>This will yield a list containing every prefix of the word "hello" written out 5 times:</para>
1073
1074 <programlisting>
1075 ["","h","he","hel","hell","hello","helloh","hellohe","hellohel","hellohell","hellohello","hellohelloh",...]
1076 </programlisting>
1077
1078     </listitem>
1079 </itemizedlist>
1080 </para>
1081   </sect2>
1082
1083    <!-- ===================== REBINDABLE SYNTAX ===================  -->
1084
1085 <sect2 id="rebindable-syntax">
1086 <title>Rebindable syntax and the implicit Prelude import</title>
1087
1088  <para><indexterm><primary>-XNoImplicitPrelude
1089  option</primary></indexterm> GHC normally imports
1090  <filename>Prelude.hi</filename> files for you.  If you'd
1091  rather it didn't, then give it a
1092  <option>-XNoImplicitPrelude</option> option.  The idea is
1093  that you can then import a Prelude of your own.  (But don't
1094  call it <literal>Prelude</literal>; the Haskell module
1095  namespace is flat, and you must not conflict with any
1096  Prelude module.)</para>
1097
1098             <para>Suppose you are importing a Prelude of your own
1099               in order to define your own numeric class
1100             hierarchy.  It completely defeats that purpose if the
1101             literal "1" means "<literal>Prelude.fromInteger
1102             1</literal>", which is what the Haskell Report specifies.
1103             So the <option>-XNoImplicitPrelude</option> 
1104               flag <emphasis>also</emphasis> causes
1105             the following pieces of built-in syntax to refer to
1106             <emphasis>whatever is in scope</emphasis>, not the Prelude
1107             versions:
1108             <itemizedlist>
1109               <listitem>
1110                 <para>An integer literal <literal>368</literal> means
1111                 "<literal>fromInteger (368::Integer)</literal>", rather than
1112                 "<literal>Prelude.fromInteger (368::Integer)</literal>".
1113 </para> </listitem>         
1114
1115       <listitem><para>Fractional literals are handed in just the same way,
1116           except that the translation is 
1117               <literal>fromRational (3.68::Rational)</literal>.
1118 </para> </listitem>         
1119
1120           <listitem><para>The equality test in an overloaded numeric pattern
1121               uses whatever <literal>(==)</literal> is in scope.
1122 </para> </listitem>         
1123
1124           <listitem><para>The subtraction operation, and the
1125           greater-than-or-equal test, in <literal>n+k</literal> patterns
1126               use whatever <literal>(-)</literal> and <literal>(>=)</literal> are in scope.
1127               </para></listitem>
1128
1129               <listitem>
1130                 <para>Negation (e.g. "<literal>- (f x)</literal>")
1131                 means "<literal>negate (f x)</literal>", both in numeric
1132                 patterns, and expressions.
1133               </para></listitem>
1134
1135               <listitem>
1136           <para>"Do" notation is translated using whatever
1137               functions <literal>(>>=)</literal>,
1138               <literal>(>>)</literal>, and <literal>fail</literal>,
1139               are in scope (not the Prelude
1140               versions).  List comprehensions, mdo (<xref linkend="mdo-notation"/>), and parallel array
1141               comprehensions, are unaffected.  </para></listitem>
1142
1143               <listitem>
1144                 <para>Arrow
1145                 notation (see <xref linkend="arrow-notation"/>)
1146                 uses whatever <literal>arr</literal>,
1147                 <literal>(>>>)</literal>, <literal>first</literal>,
1148                 <literal>app</literal>, <literal>(|||)</literal> and
1149                 <literal>loop</literal> functions are in scope. But unlike the
1150                 other constructs, the types of these functions must match the
1151                 Prelude types very closely.  Details are in flux; if you want
1152                 to use this, ask!
1153               </para></listitem>
1154             </itemizedlist>
1155 In all cases (apart from arrow notation), the static semantics should be that of the desugared form,
1156 even if that is a little unexpected. For example, the 
1157 static semantics of the literal <literal>368</literal>
1158 is exactly that of <literal>fromInteger (368::Integer)</literal>; it's fine for
1159 <literal>fromInteger</literal> to have any of the types:
1160 <programlisting>
1161 fromInteger :: Integer -> Integer
1162 fromInteger :: forall a. Foo a => Integer -> a
1163 fromInteger :: Num a => a -> Integer
1164 fromInteger :: Integer -> Bool -> Bool
1165 </programlisting>
1166 </para>
1167                 
1168              <para>Be warned: this is an experimental facility, with
1169              fewer checks than usual.  Use <literal>-dcore-lint</literal>
1170              to typecheck the desugared program.  If Core Lint is happy
1171              you should be all right.</para>
1172
1173 </sect2>
1174
1175 <sect2 id="postfix-operators">
1176 <title>Postfix operators</title>
1177
1178 <para>
1179   The <option>-XPostfixOperators</option> flag enables a small
1180 extension to the syntax of left operator sections, which allows you to
1181 define postfix operators.  The extension is this: the left section
1182 <programlisting>
1183   (e !)
1184 </programlisting>
1185 is equivalent (from the point of view of both type checking and execution) to the expression
1186 <programlisting>
1187   ((!) e)
1188 </programlisting>
1189 (for any expression <literal>e</literal> and operator <literal>(!)</literal>.
1190 The strict Haskell 98 interpretation is that the section is equivalent to
1191 <programlisting>
1192   (\y -> (!) e y)
1193 </programlisting>
1194 That is, the operator must be a function of two arguments.  GHC allows it to
1195 take only one argument, and that in turn allows you to write the function
1196 postfix.
1197 </para>
1198 <para>The extension does not extend to the left-hand side of function
1199 definitions; you must define such a function in prefix form.</para>
1200
1201 </sect2>
1202
1203 <sect2 id="disambiguate-fields">
1204 <title>Record field disambiguation</title>
1205 <para>
1206 In record construction and record pattern matching
1207 it is entirely unambiguous which field is referred to, even if there are two different
1208 data types in scope with a common field name.  For example:
1209 <programlisting>
1210 module M where
1211   data S = MkS { x :: Int, y :: Bool }
1212
1213 module Foo where
1214   import M
1215
1216   data T = MkT { x :: Int }
1217   
1218   ok1 (MkS { x = n }) = n+1   -- Unambiguous
1219
1220   ok2 n = MkT { x = n+1 }     -- Unambiguous
1221
1222   bad1 k = k { x = 3 }  -- Ambiguous
1223   bad2 k = x k          -- Ambiguous
1224 </programlisting>
1225 Even though there are two <literal>x</literal>'s in scope,
1226 it is clear that the <literal>x</literal> in the pattern in the
1227 definition of <literal>ok1</literal> can only mean the field
1228 <literal>x</literal> from type <literal>S</literal>. Similarly for
1229 the function <literal>ok2</literal>.  However, in the record update
1230 in <literal>bad1</literal> and the record selection in <literal>bad2</literal>
1231 it is not clear which of the two types is intended.
1232 </para>
1233 <para>
1234 Haskell 98 regards all four as ambiguous, but with the
1235 <option>-XDisambiguateRecordFields</option> flag, GHC will accept
1236 the former two.  The rules are precisely the same as those for instance
1237 declarations in Haskell 98, where the method names on the left-hand side 
1238 of the method bindings in an instance declaration refer unambiguously
1239 to the method of that class (provided they are in scope at all), even
1240 if there are other variables in scope with the same name.
1241 This reduces the clutter of qualified names when you import two
1242 records from different modules that use the same field name.
1243 </para>
1244 </sect2>
1245
1246     <!-- ===================== Record puns ===================  -->
1247
1248 <sect2 id="record-puns">
1249 <title>Record puns
1250 </title>
1251
1252 <para>
1253 Record puns are enabled by the flag <literal>-XNamedFieldPuns</literal>.
1254 </para>
1255
1256 <para>
1257 When using records, it is common to write a pattern that binds a
1258 variable with the same name as a record field, such as:
1259
1260 <programlisting>
1261 data C = C {a :: Int}
1262 f (C {a = a}) = a
1263 </programlisting>
1264 </para>
1265
1266 <para>
1267 Record punning permits the variable name to be elided, so one can simply
1268 write
1269
1270 <programlisting>
1271 f (C {a}) = a
1272 </programlisting>
1273
1274 to mean the same pattern as above.  That is, in a record pattern, the
1275 pattern <literal>a</literal> expands into the pattern <literal>a =
1276 a</literal> for the same name <literal>a</literal>.  
1277 </para>
1278
1279 <para>
1280 Note that puns and other patterns can be mixed in the same record:
1281 <programlisting>
1282 data C = C {a :: Int, b :: Int}
1283 f (C {a, b = 4}) = a
1284 </programlisting>
1285 and that puns can be used wherever record patterns occur (e.g. in
1286 <literal>let</literal> bindings or at the top-level).  
1287 </para>
1288
1289 <para>
1290 Record punning can also be used in an expression, writing, for example,
1291 <programlisting>
1292 let a = 1 in C {a}
1293 </programlisting>
1294 instead of 
1295 <programlisting>
1296 let a = 1 in C {a = a}
1297 </programlisting>
1298
1299 Note that this expansion is purely syntactic, so the record pun
1300 expression refers to the nearest enclosing variable that is spelled the
1301 same as the field name.
1302 </para>
1303
1304 </sect2>
1305
1306     <!-- ===================== Record wildcards ===================  -->
1307
1308 <sect2 id="record-wildcards">
1309 <title>Record wildcards
1310 </title>
1311
1312 <para>
1313 Record wildcards are enabled by the flag <literal>-XRecordWildCards</literal>.
1314 </para>
1315
1316 <para>
1317 For records with many fields, it can be tiresome to write out each field
1318 individually in a record pattern, as in
1319 <programlisting>
1320 data C = C {a :: Int, b :: Int, c :: Int, d :: Int}
1321 f (C {a = 1, b = b, c = c, d = d}) = b + c + d
1322 </programlisting>
1323 </para>
1324
1325 <para>
1326 Record wildcard syntax permits a (<literal>..</literal>) in a record
1327 pattern, where each elided field <literal>f</literal> is replaced by the
1328 pattern <literal>f = f</literal>.  For example, the above pattern can be
1329 written as
1330 <programlisting>
1331 f (C {a = 1, ..}) = b + c + d
1332 </programlisting>
1333 </para>
1334
1335 <para>
1336 Note that wildcards can be mixed with other patterns, including puns
1337 (<xref linkend="record-puns"/>); for example, in a pattern <literal>C {a
1338 = 1, b, ..})</literal>.  Additionally, record wildcards can be used
1339 wherever record patterns occur, including in <literal>let</literal>
1340 bindings and at the top-level.  For example, the top-level binding
1341 <programlisting>
1342 C {a = 1, ..} = e
1343 </programlisting>
1344 defines <literal>b</literal>, <literal>c</literal>, and
1345 <literal>d</literal>.
1346 </para>
1347
1348 <para>
1349 Record wildcards can also be used in expressions, writing, for example,
1350
1351 <programlisting>
1352 let {a = 1; b = 2; c = 3; d = 4} in C {..}
1353 </programlisting>
1354
1355 in place of
1356
1357 <programlisting>
1358 let {a = 1; b = 2; c = 3; d = 4} in C {a=a, b=b, c=c, d=d}
1359 </programlisting>
1360
1361 Note that this expansion is purely syntactic, so the record wildcard
1362 expression refers to the nearest enclosing variables that are spelled
1363 the same as the omitted field names.
1364 </para>
1365
1366 </sect2>
1367
1368     <!-- ===================== Local fixity declarations ===================  -->
1369
1370 <sect2 id="local-fixity-declarations">
1371 <title>Local Fixity Declarations
1372 </title>
1373
1374 <para>A careful reading of the Haskell 98 Report reveals that fixity
1375 declarations (<literal>infix</literal>, <literal>infixl</literal>, and
1376 <literal>infixr</literal>) are permitted to appear inside local bindings
1377 such those introduced by <literal>let</literal> and
1378 <literal>where</literal>.  However, the Haskell Report does not specify
1379 the semantics of such bindings very precisely.
1380 </para>
1381
1382 <para>In GHC, a fixity declaration may accompany a local binding:
1383 <programlisting>
1384 let f = ...
1385     infixr 3 `f`
1386 in 
1387     ...
1388 </programlisting>
1389 and the fixity declaration applies wherever the binding is in scope.
1390 For example, in a <literal>let</literal>, it applies in the right-hand
1391 sides of other <literal>let</literal>-bindings and the body of the
1392 <literal>let</literal>C. Or, in recursive <literal>do</literal>
1393 expressions (<xref linkend="mdo-notation"/>), the local fixity
1394 declarations of a <literal>let</literal> statement scope over other
1395 statements in the group, just as the bound name does.
1396 </para>
1397
1398 <para>
1399 Moreover, a local fixity declaration *must* accompany a local binding of
1400 that name: it is not possible to revise the fixity of name bound
1401 elsewhere, as in
1402 <programlisting>
1403 let infixr 9 $ in ...
1404 </programlisting>
1405
1406 Because local fixity declarations are technically Haskell 98, no flag is
1407 necessary to enable them.
1408 </para>
1409 </sect2>
1410
1411 <sect2 id="package-imports">
1412   <title>Package-qualified imports</title>
1413
1414   <para>With the <option>-XPackageImports</option> flag, GHC allows
1415   import declarations to be qualified by the package name that the
1416     module is intended to be imported from.  For example:</para>
1417
1418 <programlisting>
1419 import "network" Network.Socket
1420 </programlisting>
1421   
1422   <para>would import the module <literal>Network.Socket</literal> from
1423     the package <literal>network</literal> (any version).  This may
1424     be used to disambiguate an import when the same module is
1425     available from multiple packages, or is present in both the
1426     current package being built and an external package.</para>
1427
1428   <para>Note: you probably don't need to use this feature, it was
1429     added mainly so that we can build backwards-compatible versions of
1430     packages when APIs change.  It can lead to fragile dependencies in
1431     the common case: modules occasionally move from one package to
1432     another, rendering any package-qualified imports broken.</para>
1433 </sect2>
1434
1435 <sect2 id="syntax-stolen">
1436 <title>Summary of stolen syntax</title>
1437
1438     <para>Turning on an option that enables special syntax
1439     <emphasis>might</emphasis> cause working Haskell 98 code to fail
1440     to compile, perhaps because it uses a variable name which has
1441     become a reserved word.  This section lists the syntax that is
1442     "stolen" by language extensions.
1443      We use
1444     notation and nonterminal names from the Haskell 98 lexical syntax
1445     (see the Haskell 98 Report).  
1446     We only list syntax changes here that might affect
1447     existing working programs (i.e. "stolen" syntax).  Many of these
1448     extensions will also enable new context-free syntax, but in all
1449     cases programs written to use the new syntax would not be
1450     compilable without the option enabled.</para>
1451
1452 <para>There are two classes of special
1453     syntax:
1454
1455     <itemizedlist>
1456       <listitem>
1457         <para>New reserved words and symbols: character sequences
1458         which are no longer available for use as identifiers in the
1459         program.</para>
1460       </listitem>
1461       <listitem>
1462         <para>Other special syntax: sequences of characters that have
1463         a different meaning when this particular option is turned
1464         on.</para>
1465       </listitem>
1466     </itemizedlist>
1467     
1468 The following syntax is stolen:
1469
1470     <variablelist>
1471       <varlistentry>
1472         <term>
1473           <literal>forall</literal>
1474           <indexterm><primary><literal>forall</literal></primary></indexterm>
1475         </term>
1476         <listitem><para>
1477         Stolen (in types) by: <option>-XScopedTypeVariables</option>,
1478             <option>-XLiberalTypeSynonyms</option>,
1479             <option>-XRank2Types</option>,
1480             <option>-XRankNTypes</option>,
1481             <option>-XPolymorphicComponents</option>,
1482             <option>-XExistentialQuantification</option>
1483           </para></listitem>
1484       </varlistentry>
1485
1486       <varlistentry>
1487         <term>
1488           <literal>mdo</literal>
1489           <indexterm><primary><literal>mdo</literal></primary></indexterm>
1490         </term>
1491         <listitem><para>
1492         Stolen by: <option>-XRecursiveDo</option>,
1493           </para></listitem>
1494       </varlistentry>
1495
1496       <varlistentry>
1497         <term>
1498           <literal>foreign</literal>
1499           <indexterm><primary><literal>foreign</literal></primary></indexterm>
1500         </term>
1501         <listitem><para>
1502         Stolen by: <option>-XForeignFunctionInterface</option>,
1503           </para></listitem>
1504       </varlistentry>
1505
1506       <varlistentry>
1507         <term>
1508           <literal>rec</literal>,
1509           <literal>proc</literal>, <literal>-&lt;</literal>,
1510           <literal>&gt;-</literal>, <literal>-&lt;&lt;</literal>,
1511           <literal>&gt;&gt;-</literal>, and <literal>(|</literal>,
1512           <literal>|)</literal> brackets
1513           <indexterm><primary><literal>proc</literal></primary></indexterm>
1514         </term>
1515         <listitem><para>
1516         Stolen by: <option>-XArrows</option>,
1517           </para></listitem>
1518       </varlistentry>
1519
1520       <varlistentry>
1521         <term>
1522           <literal>?<replaceable>varid</replaceable></literal>,
1523           <literal>%<replaceable>varid</replaceable></literal>
1524           <indexterm><primary>implicit parameters</primary></indexterm>
1525         </term>
1526         <listitem><para>
1527         Stolen by: <option>-XImplicitParams</option>,
1528           </para></listitem>
1529       </varlistentry>
1530
1531       <varlistentry>
1532         <term>
1533           <literal>[|</literal>,
1534           <literal>[e|</literal>, <literal>[p|</literal>,
1535           <literal>[d|</literal>, <literal>[t|</literal>,
1536           <literal>$(</literal>,
1537           <literal>$<replaceable>varid</replaceable></literal>
1538           <indexterm><primary>Template Haskell</primary></indexterm>
1539         </term>
1540         <listitem><para>
1541         Stolen by: <option>-XTemplateHaskell</option>,
1542           </para></listitem>
1543       </varlistentry>
1544
1545       <varlistentry>
1546         <term>
1547           <literal>[:<replaceable>varid</replaceable>|</literal>
1548           <indexterm><primary>quasi-quotation</primary></indexterm>
1549         </term>
1550         <listitem><para>
1551         Stolen by: <option>-XQuasiQuotes</option>,
1552           </para></listitem>
1553       </varlistentry>
1554
1555       <varlistentry>
1556         <term>
1557               <replaceable>varid</replaceable>{<literal>&num;</literal>},
1558               <replaceable>char</replaceable><literal>&num;</literal>,      
1559               <replaceable>string</replaceable><literal>&num;</literal>,    
1560               <replaceable>integer</replaceable><literal>&num;</literal>,    
1561               <replaceable>float</replaceable><literal>&num;</literal>,    
1562               <replaceable>float</replaceable><literal>&num;&num;</literal>,    
1563               <literal>(&num;</literal>, <literal>&num;)</literal>,         
1564         </term>
1565         <listitem><para>
1566         Stolen by: <option>-XMagicHash</option>,
1567           </para></listitem>
1568       </varlistentry>
1569     </variablelist>
1570 </para>
1571 </sect2>
1572 </sect1>
1573
1574
1575 <!-- TYPE SYSTEM EXTENSIONS -->
1576 <sect1 id="data-type-extensions">
1577 <title>Extensions to data types and type synonyms</title>
1578
1579 <sect2 id="nullary-types">
1580 <title>Data types with no constructors</title>
1581
1582 <para>With the <option>-fglasgow-exts</option> flag, GHC lets you declare
1583 a data type with no constructors.  For example:</para>
1584
1585 <programlisting>
1586   data S      -- S :: *
1587   data T a    -- T :: * -> *
1588 </programlisting>
1589
1590 <para>Syntactically, the declaration lacks the "= constrs" part.  The 
1591 type can be parameterised over types of any kind, but if the kind is
1592 not <literal>*</literal> then an explicit kind annotation must be used
1593 (see <xref linkend="kinding"/>).</para>
1594
1595 <para>Such data types have only one value, namely bottom.
1596 Nevertheless, they can be useful when defining "phantom types".</para>
1597 </sect2>
1598
1599 <sect2 id="infix-tycons">
1600 <title>Infix type constructors, classes, and type variables</title>
1601
1602 <para>
1603 GHC allows type constructors, classes, and type variables to be operators, and
1604 to be written infix, very much like expressions.  More specifically:
1605 <itemizedlist>
1606 <listitem><para>
1607   A type constructor or class can be an operator, beginning with a colon; e.g. <literal>:*:</literal>.
1608   The lexical syntax is the same as that for data constructors.
1609   </para></listitem>
1610 <listitem><para>
1611   Data type and type-synonym declarations can be written infix, parenthesised
1612   if you want further arguments.  E.g.
1613 <screen>
1614   data a :*: b = Foo a b
1615   type a :+: b = Either a b
1616   class a :=: b where ...
1617
1618   data (a :**: b) x = Baz a b x
1619   type (a :++: b) y = Either (a,b) y
1620 </screen>
1621   </para></listitem>
1622 <listitem><para>
1623   Types, and class constraints, can be written infix.  For example
1624   <screen>
1625         x :: Int :*: Bool
1626         f :: (a :=: b) => a -> b
1627   </screen>
1628   </para></listitem>
1629 <listitem><para>
1630   A type variable can be an (unqualified) operator e.g. <literal>+</literal>.
1631   The lexical syntax is the same as that for variable operators, excluding "(.)",
1632   "(!)", and "(*)".  In a binding position, the operator must be
1633   parenthesised.  For example:
1634 <programlisting>
1635    type T (+) = Int + Int
1636    f :: T Either
1637    f = Left 3
1638  
1639    liftA2 :: Arrow (~>)
1640           => (a -> b -> c) -> (e ~> a) -> (e ~> b) -> (e ~> c)
1641    liftA2 = ...
1642 </programlisting>
1643   </para></listitem>
1644 <listitem><para>
1645   Back-quotes work
1646   as for expressions, both for type constructors and type variables;  e.g. <literal>Int `Either` Bool</literal>, or
1647   <literal>Int `a` Bool</literal>.  Similarly, parentheses work the same; e.g.  <literal>(:*:) Int Bool</literal>.
1648   </para></listitem>
1649 <listitem><para>
1650   Fixities may be declared for type constructors, or classes, just as for data constructors.  However,
1651   one cannot distinguish between the two in a fixity declaration; a fixity declaration
1652   sets the fixity for a data constructor and the corresponding type constructor.  For example:
1653 <screen>
1654   infixl 7 T, :*:
1655 </screen>
1656   sets the fixity for both type constructor <literal>T</literal> and data constructor <literal>T</literal>,
1657   and similarly for <literal>:*:</literal>.
1658   <literal>Int `a` Bool</literal>.
1659   </para></listitem>
1660 <listitem><para>
1661   Function arrow is <literal>infixr</literal> with fixity 0.  (This might change; I'm not sure what it should be.)
1662   </para></listitem>
1663
1664 </itemizedlist>
1665 </para>
1666 </sect2>
1667
1668 <sect2 id="type-synonyms">
1669 <title>Liberalised type synonyms</title>
1670
1671 <para>
1672 Type synonyms are like macros at the type level, but Haskell 98 imposes many rules
1673 on individual synonym declarations.
1674 With the <option>-XLiberalTypeSynonyms</option> extension,
1675 GHC does validity checking on types <emphasis>only after expanding type synonyms</emphasis>.
1676 That means that GHC can be very much more liberal about type synonyms than Haskell 98. 
1677
1678 <itemizedlist>
1679 <listitem> <para>You can write a <literal>forall</literal> (including overloading)
1680 in a type synonym, thus:
1681 <programlisting>
1682   type Discard a = forall b. Show b => a -> b -> (a, String)
1683
1684   f :: Discard a
1685   f x y = (x, show y)
1686
1687   g :: Discard Int -> (Int,String)    -- A rank-2 type
1688   g f = f 3 True
1689 </programlisting>
1690 </para>
1691 </listitem>
1692
1693 <listitem><para>
1694 If you also use <option>-XUnboxedTuples</option>, 
1695 you can write an unboxed tuple in a type synonym:
1696 <programlisting>
1697   type Pr = (# Int, Int #)
1698
1699   h :: Int -> Pr
1700   h x = (# x, x #)
1701 </programlisting>
1702 </para></listitem>
1703
1704 <listitem><para>
1705 You can apply a type synonym to a forall type:
1706 <programlisting>
1707   type Foo a = a -> a -> Bool
1708  
1709   f :: Foo (forall b. b->b)
1710 </programlisting>
1711 After expanding the synonym, <literal>f</literal> has the legal (in GHC) type:
1712 <programlisting>
1713   f :: (forall b. b->b) -> (forall b. b->b) -> Bool
1714 </programlisting>
1715 </para></listitem>
1716
1717 <listitem><para>
1718 You can apply a type synonym to a partially applied type synonym:
1719 <programlisting>
1720   type Generic i o = forall x. i x -> o x
1721   type Id x = x
1722   
1723   foo :: Generic Id []
1724 </programlisting>
1725 After expanding the synonym, <literal>foo</literal> has the legal (in GHC) type:
1726 <programlisting>
1727   foo :: forall x. x -> [x]
1728 </programlisting>
1729 </para></listitem>
1730
1731 </itemizedlist>
1732 </para>
1733
1734 <para>
1735 GHC currently does kind checking before expanding synonyms (though even that
1736 could be changed.)
1737 </para>
1738 <para>
1739 After expanding type synonyms, GHC does validity checking on types, looking for
1740 the following mal-formedness which isn't detected simply by kind checking:
1741 <itemizedlist>
1742 <listitem><para>
1743 Type constructor applied to a type involving for-alls.
1744 </para></listitem>
1745 <listitem><para>
1746 Unboxed tuple on left of an arrow.
1747 </para></listitem>
1748 <listitem><para>
1749 Partially-applied type synonym.
1750 </para></listitem>
1751 </itemizedlist>
1752 So, for example,
1753 this will be rejected:
1754 <programlisting>
1755   type Pr = (# Int, Int #)
1756
1757   h :: Pr -> Int
1758   h x = ...
1759 </programlisting>
1760 because GHC does not allow  unboxed tuples on the left of a function arrow.
1761 </para>
1762 </sect2>
1763
1764
1765 <sect2 id="existential-quantification">
1766 <title>Existentially quantified data constructors
1767 </title>
1768
1769 <para>
1770 The idea of using existential quantification in data type declarations
1771 was suggested by Perry, and implemented in Hope+ (Nigel Perry, <emphasis>The Implementation
1772 of Practical Functional Programming Languages</emphasis>, PhD Thesis, University of
1773 London, 1991). It was later formalised by Laufer and Odersky
1774 (<emphasis>Polymorphic type inference and abstract data types</emphasis>,
1775 TOPLAS, 16(5), pp1411-1430, 1994).
1776 It's been in Lennart
1777 Augustsson's <command>hbc</command> Haskell compiler for several years, and
1778 proved very useful.  Here's the idea.  Consider the declaration:
1779 </para>
1780
1781 <para>
1782
1783 <programlisting>
1784   data Foo = forall a. MkFoo a (a -> Bool)
1785            | Nil
1786 </programlisting>
1787
1788 </para>
1789
1790 <para>
1791 The data type <literal>Foo</literal> has two constructors with types:
1792 </para>
1793
1794 <para>
1795
1796 <programlisting>
1797   MkFoo :: forall a. a -> (a -> Bool) -> Foo
1798   Nil   :: Foo
1799 </programlisting>
1800
1801 </para>
1802
1803 <para>
1804 Notice that the type variable <literal>a</literal> in the type of <function>MkFoo</function>
1805 does not appear in the data type itself, which is plain <literal>Foo</literal>.
1806 For example, the following expression is fine:
1807 </para>
1808
1809 <para>
1810
1811 <programlisting>
1812   [MkFoo 3 even, MkFoo 'c' isUpper] :: [Foo]
1813 </programlisting>
1814
1815 </para>
1816
1817 <para>
1818 Here, <literal>(MkFoo 3 even)</literal> packages an integer with a function
1819 <function>even</function> that maps an integer to <literal>Bool</literal>; and <function>MkFoo 'c'
1820 isUpper</function> packages a character with a compatible function.  These
1821 two things are each of type <literal>Foo</literal> and can be put in a list.
1822 </para>
1823
1824 <para>
1825 What can we do with a value of type <literal>Foo</literal>?.  In particular,
1826 what happens when we pattern-match on <function>MkFoo</function>?
1827 </para>
1828
1829 <para>
1830
1831 <programlisting>
1832   f (MkFoo val fn) = ???
1833 </programlisting>
1834
1835 </para>
1836
1837 <para>
1838 Since all we know about <literal>val</literal> and <function>fn</function> is that they
1839 are compatible, the only (useful) thing we can do with them is to
1840 apply <function>fn</function> to <literal>val</literal> to get a boolean.  For example:
1841 </para>
1842
1843 <para>
1844
1845 <programlisting>
1846   f :: Foo -> Bool
1847   f (MkFoo val fn) = fn val
1848 </programlisting>
1849
1850 </para>
1851
1852 <para>
1853 What this allows us to do is to package heterogeneous values
1854 together with a bunch of functions that manipulate them, and then treat
1855 that collection of packages in a uniform manner.  You can express
1856 quite a bit of object-oriented-like programming this way.
1857 </para>
1858
1859 <sect3 id="existential">
1860 <title>Why existential?
1861 </title>
1862
1863 <para>
1864 What has this to do with <emphasis>existential</emphasis> quantification?
1865 Simply that <function>MkFoo</function> has the (nearly) isomorphic type
1866 </para>
1867
1868 <para>
1869
1870 <programlisting>
1871   MkFoo :: (exists a . (a, a -> Bool)) -> Foo
1872 </programlisting>
1873
1874 </para>
1875
1876 <para>
1877 But Haskell programmers can safely think of the ordinary
1878 <emphasis>universally</emphasis> quantified type given above, thereby avoiding
1879 adding a new existential quantification construct.
1880 </para>
1881
1882 </sect3>
1883
1884 <sect3 id="existential-with-context">
1885 <title>Existentials and type classes</title>
1886
1887 <para>
1888 An easy extension is to allow
1889 arbitrary contexts before the constructor.  For example:
1890 </para>
1891
1892 <para>
1893
1894 <programlisting>
1895 data Baz = forall a. Eq a => Baz1 a a
1896          | forall b. Show b => Baz2 b (b -> b)
1897 </programlisting>
1898
1899 </para>
1900
1901 <para>
1902 The two constructors have the types you'd expect:
1903 </para>
1904
1905 <para>
1906
1907 <programlisting>
1908 Baz1 :: forall a. Eq a => a -> a -> Baz
1909 Baz2 :: forall b. Show b => b -> (b -> b) -> Baz
1910 </programlisting>
1911
1912 </para>
1913
1914 <para>
1915 But when pattern matching on <function>Baz1</function> the matched values can be compared
1916 for equality, and when pattern matching on <function>Baz2</function> the first matched
1917 value can be converted to a string (as well as applying the function to it).
1918 So this program is legal:
1919 </para>
1920
1921 <para>
1922
1923 <programlisting>
1924   f :: Baz -> String
1925   f (Baz1 p q) | p == q    = "Yes"
1926                | otherwise = "No"
1927   f (Baz2 v fn)            = show (fn v)
1928 </programlisting>
1929
1930 </para>
1931
1932 <para>
1933 Operationally, in a dictionary-passing implementation, the
1934 constructors <function>Baz1</function> and <function>Baz2</function> must store the
1935 dictionaries for <literal>Eq</literal> and <literal>Show</literal> respectively, and
1936 extract it on pattern matching.
1937 </para>
1938
1939 </sect3>
1940
1941 <sect3 id="existential-records">
1942 <title>Record Constructors</title>
1943
1944 <para>
1945 GHC allows existentials to be used with records syntax as well.  For example:
1946
1947 <programlisting>
1948 data Counter a = forall self. NewCounter
1949     { _this    :: self
1950     , _inc     :: self -> self
1951     , _display :: self -> IO ()
1952     , tag      :: a
1953     }
1954 </programlisting>
1955 Here <literal>tag</literal> is a public field, with a well-typed selector
1956 function <literal>tag :: Counter a -> a</literal>.  The <literal>self</literal>
1957 type is hidden from the outside; any attempt to apply <literal>_this</literal>,
1958 <literal>_inc</literal> or <literal>_display</literal> as functions will raise a
1959 compile-time error.  In other words, <emphasis>GHC defines a record selector function
1960 only for fields whose type does not mention the existentially-quantified variables</emphasis>.
1961 (This example used an underscore in the fields for which record selectors
1962 will not be defined, but that is only programming style; GHC ignores them.)
1963 </para>
1964
1965 <para>
1966 To make use of these hidden fields, we need to create some helper functions:
1967
1968 <programlisting>
1969 inc :: Counter a -> Counter a
1970 inc (NewCounter x i d t) = NewCounter
1971     { _this = i x, _inc = i, _display = d, tag = t } 
1972
1973 display :: Counter a -> IO ()
1974 display NewCounter{ _this = x, _display = d } = d x
1975 </programlisting>
1976
1977 Now we can define counters with different underlying implementations:
1978
1979 <programlisting>
1980 counterA :: Counter String 
1981 counterA = NewCounter
1982     { _this = 0, _inc = (1+), _display = print, tag = "A" }
1983
1984 counterB :: Counter String 
1985 counterB = NewCounter
1986     { _this = "", _inc = ('#':), _display = putStrLn, tag = "B" }
1987
1988 main = do
1989     display (inc counterA)         -- prints "1"
1990     display (inc (inc counterB))   -- prints "##"
1991 </programlisting>
1992
1993 Record update syntax is supported for existentials (and GADTs):
1994 <programlisting>
1995 setTag :: Counter a -> a -> Counter a
1996 setTag obj t = obj{ tag = t }
1997 </programlisting>
1998 The rule for record update is this: <emphasis>
1999 the types of the updated fields may
2000 mention only the universally-quantified type variables
2001 of the data constructor.  For GADTs, the field may mention only types
2002 that appear as a simple type-variable argument in the constructor's result
2003 type</emphasis>.  For example:
2004 <programlisting>
2005 data T a b where { T1 { f1::a, f2::b, f3::(b,c) } :: T a b } -- c is existential
2006 upd1 t x = t { f1=x }   -- OK:   upd1 :: T a b -> a' -> T a' b
2007 upd2 t x = t { f3=x }   -- BAD   (f3's type mentions c, which is
2008                         --        existentially quantified)
2009
2010 data G a b where { G1 { g1::a, g2::c } :: G a [c] }
2011 upd3 g x = g { g1=x }   -- OK:   upd3 :: G a b -> c -> G c b
2012 upd4 g x = g { g2=x }   -- BAD (f2's type mentions c, which is not a simple
2013                         --      type-variable argument in G1's result type)
2014 </programlisting>
2015 </para>
2016
2017 </sect3>
2018
2019
2020 <sect3>
2021 <title>Restrictions</title>
2022
2023 <para>
2024 There are several restrictions on the ways in which existentially-quantified
2025 constructors can be use.
2026 </para>
2027
2028 <para>
2029
2030 <itemizedlist>
2031 <listitem>
2032
2033 <para>
2034  When pattern matching, each pattern match introduces a new,
2035 distinct, type for each existential type variable.  These types cannot
2036 be unified with any other type, nor can they escape from the scope of
2037 the pattern match.  For example, these fragments are incorrect:
2038
2039
2040 <programlisting>
2041 f1 (MkFoo a f) = a
2042 </programlisting>
2043
2044
2045 Here, the type bound by <function>MkFoo</function> "escapes", because <literal>a</literal>
2046 is the result of <function>f1</function>.  One way to see why this is wrong is to
2047 ask what type <function>f1</function> has:
2048
2049
2050 <programlisting>
2051   f1 :: Foo -> a             -- Weird!
2052 </programlisting>
2053
2054
2055 What is this "<literal>a</literal>" in the result type? Clearly we don't mean
2056 this:
2057
2058
2059 <programlisting>
2060   f1 :: forall a. Foo -> a   -- Wrong!
2061 </programlisting>
2062
2063
2064 The original program is just plain wrong.  Here's another sort of error
2065
2066
2067 <programlisting>
2068   f2 (Baz1 a b) (Baz1 p q) = a==q
2069 </programlisting>
2070
2071
2072 It's ok to say <literal>a==b</literal> or <literal>p==q</literal>, but
2073 <literal>a==q</literal> is wrong because it equates the two distinct types arising
2074 from the two <function>Baz1</function> constructors.
2075
2076
2077 </para>
2078 </listitem>
2079 <listitem>
2080
2081 <para>
2082 You can't pattern-match on an existentially quantified
2083 constructor in a <literal>let</literal> or <literal>where</literal> group of
2084 bindings. So this is illegal:
2085
2086
2087 <programlisting>
2088   f3 x = a==b where { Baz1 a b = x }
2089 </programlisting>
2090
2091 Instead, use a <literal>case</literal> expression:
2092
2093 <programlisting>
2094   f3 x = case x of Baz1 a b -> a==b
2095 </programlisting>
2096
2097 In general, you can only pattern-match
2098 on an existentially-quantified constructor in a <literal>case</literal> expression or
2099 in the patterns of a function definition.
2100
2101 The reason for this restriction is really an implementation one.
2102 Type-checking binding groups is already a nightmare without
2103 existentials complicating the picture.  Also an existential pattern
2104 binding at the top level of a module doesn't make sense, because it's
2105 not clear how to prevent the existentially-quantified type "escaping".
2106 So for now, there's a simple-to-state restriction.  We'll see how
2107 annoying it is.
2108
2109 </para>
2110 </listitem>
2111 <listitem>
2112
2113 <para>
2114 You can't use existential quantification for <literal>newtype</literal>
2115 declarations.  So this is illegal:
2116
2117
2118 <programlisting>
2119   newtype T = forall a. Ord a => MkT a
2120 </programlisting>
2121
2122
2123 Reason: a value of type <literal>T</literal> must be represented as a
2124 pair of a dictionary for <literal>Ord t</literal> and a value of type
2125 <literal>t</literal>.  That contradicts the idea that
2126 <literal>newtype</literal> should have no concrete representation.
2127 You can get just the same efficiency and effect by using
2128 <literal>data</literal> instead of <literal>newtype</literal>.  If
2129 there is no overloading involved, then there is more of a case for
2130 allowing an existentially-quantified <literal>newtype</literal>,
2131 because the <literal>data</literal> version does carry an
2132 implementation cost, but single-field existentially quantified
2133 constructors aren't much use.  So the simple restriction (no
2134 existential stuff on <literal>newtype</literal>) stands, unless there
2135 are convincing reasons to change it.
2136
2137
2138 </para>
2139 </listitem>
2140 <listitem>
2141
2142 <para>
2143  You can't use <literal>deriving</literal> to define instances of a
2144 data type with existentially quantified data constructors.
2145
2146 Reason: in most cases it would not make sense. For example:;
2147
2148 <programlisting>
2149 data T = forall a. MkT [a] deriving( Eq )
2150 </programlisting>
2151
2152 To derive <literal>Eq</literal> in the standard way we would need to have equality
2153 between the single component of two <function>MkT</function> constructors:
2154
2155 <programlisting>
2156 instance Eq T where
2157   (MkT a) == (MkT b) = ???
2158 </programlisting>
2159
2160 But <varname>a</varname> and <varname>b</varname> have distinct types, and so can't be compared.
2161 It's just about possible to imagine examples in which the derived instance
2162 would make sense, but it seems altogether simpler simply to prohibit such
2163 declarations.  Define your own instances!
2164 </para>
2165 </listitem>
2166
2167 </itemizedlist>
2168
2169 </para>
2170
2171 </sect3>
2172 </sect2>
2173
2174 <!-- ====================== Generalised algebraic data types =======================  -->
2175
2176 <sect2 id="gadt-style">
2177 <title>Declaring data types with explicit constructor signatures</title>
2178
2179 <para>GHC allows you to declare an algebraic data type by 
2180 giving the type signatures of constructors explicitly.  For example:
2181 <programlisting>
2182   data Maybe a where
2183       Nothing :: Maybe a
2184       Just    :: a -> Maybe a
2185 </programlisting>
2186 The form is called a "GADT-style declaration"
2187 because Generalised Algebraic Data Types, described in <xref linkend="gadt"/>, 
2188 can only be declared using this form.</para>
2189 <para>Notice that GADT-style syntax generalises existential types (<xref linkend="existential-quantification"/>).  
2190 For example, these two declarations are equivalent:
2191 <programlisting>
2192   data Foo = forall a. MkFoo a (a -> Bool)
2193   data Foo' where { MKFoo :: a -> (a->Bool) -> Foo' }
2194 </programlisting>
2195 </para>
2196 <para>Any data type that can be declared in standard Haskell-98 syntax 
2197 can also be declared using GADT-style syntax.
2198 The choice is largely stylistic, but GADT-style declarations differ in one important respect:
2199 they treat class constraints on the data constructors differently.
2200 Specifically, if the constructor is given a type-class context, that
2201 context is made available by pattern matching.  For example:
2202 <programlisting>
2203   data Set a where
2204     MkSet :: Eq a => [a] -> Set a
2205
2206   makeSet :: Eq a => [a] -> Set a
2207   makeSet xs = MkSet (nub xs)
2208
2209   insert :: a -> Set a -> Set a
2210   insert a (MkSet as) | a `elem` as = MkSet as
2211                       | otherwise   = MkSet (a:as)
2212 </programlisting>
2213 A use of <literal>MkSet</literal> as a constructor (e.g. in the definition of <literal>makeSet</literal>) 
2214 gives rise to a <literal>(Eq a)</literal>
2215 constraint, as you would expect.  The new feature is that pattern-matching on <literal>MkSet</literal>
2216 (as in the definition of <literal>insert</literal>) makes <emphasis>available</emphasis> an <literal>(Eq a)</literal>
2217 context.  In implementation terms, the <literal>MkSet</literal> constructor has a hidden field that stores
2218 the <literal>(Eq a)</literal> dictionary that is passed to <literal>MkSet</literal>; so
2219 when pattern-matching that dictionary becomes available for the right-hand side of the match.
2220 In the example, the equality dictionary is used to satisfy the equality constraint 
2221 generated by the call to <literal>elem</literal>, so that the type of
2222 <literal>insert</literal> itself has no <literal>Eq</literal> constraint.
2223 </para>
2224 <para>
2225 For example, one possible application is to reify dictionaries:
2226 <programlisting>
2227    data NumInst a where
2228      MkNumInst :: Num a => NumInst a
2229
2230    intInst :: NumInst Int
2231    intInst = MkNumInst
2232
2233    plus :: NumInst a -> a -> a -> a
2234    plus MkNumInst p q = p + q
2235 </programlisting>
2236 Here, a value of type <literal>NumInst a</literal> is equivalent 
2237 to an explicit <literal>(Num a)</literal> dictionary.
2238 </para>
2239 <para>
2240 All this applies to constructors declared using the syntax of <xref linkend="existential-with-context"/>.
2241 For example, the <literal>NumInst</literal> data type above could equivalently be declared 
2242 like this:
2243 <programlisting>
2244    data NumInst a 
2245       = Num a => MkNumInst (NumInst a)
2246 </programlisting>
2247 Notice that, unlike the situation when declaring an existential, there is 
2248 no <literal>forall</literal>, because the <literal>Num</literal> constrains the
2249 data type's universally quantified type variable <literal>a</literal>.  
2250 A constructor may have both universal and existential type variables: for example,
2251 the following two declarations are equivalent:
2252 <programlisting>
2253    data T1 a 
2254         = forall b. (Num a, Eq b) => MkT1 a b
2255    data T2 a where
2256         MkT2 :: (Num a, Eq b) => a -> b -> T2 a
2257 </programlisting>
2258 </para>
2259 <para>All this behaviour contrasts with Haskell 98's peculiar treatment of 
2260 contexts on a data type declaration (Section 4.2.1 of the Haskell 98 Report).
2261 In Haskell 98 the definition
2262 <programlisting>
2263   data Eq a => Set' a = MkSet' [a]
2264 </programlisting>
2265 gives <literal>MkSet'</literal> the same type as <literal>MkSet</literal> above.  But instead of 
2266 <emphasis>making available</emphasis> an <literal>(Eq a)</literal> constraint, pattern-matching
2267 on <literal>MkSet'</literal> <emphasis>requires</emphasis> an <literal>(Eq a)</literal> constraint!
2268 GHC faithfully implements this behaviour, odd though it is.  But for GADT-style declarations,
2269 GHC's behaviour is much more useful, as well as much more intuitive.
2270 </para>
2271
2272 <para>
2273 The rest of this section gives further details about GADT-style data
2274 type declarations.
2275
2276 <itemizedlist>
2277 <listitem><para>
2278 The result type of each data constructor must begin with the type constructor being defined.
2279 If the result type of all constructors 
2280 has the form <literal>T a1 ... an</literal>, where <literal>a1 ... an</literal>
2281 are distinct type variables, then the data type is <emphasis>ordinary</emphasis>;
2282 otherwise is a <emphasis>generalised</emphasis> data type (<xref linkend="gadt"/>).
2283 </para></listitem>
2284
2285 <listitem><para>
2286 The type signature of
2287 each constructor is independent, and is implicitly universally quantified as usual. 
2288 Different constructors may have different universally-quantified type variables
2289 and different type-class constraints.  
2290 For example, this is fine:
2291 <programlisting>
2292   data T a where
2293     T1 :: Eq b => b -> T b
2294     T2 :: (Show c, Ix c) => c -> [c] -> T c
2295 </programlisting>
2296 </para></listitem>
2297
2298 <listitem><para>
2299 Unlike a Haskell-98-style 
2300 data type declaration, the type variable(s) in the "<literal>data Set a where</literal>" header 
2301 have no scope.  Indeed, one can write a kind signature instead:
2302 <programlisting>
2303   data Set :: * -> * where ...
2304 </programlisting>
2305 or even a mixture of the two:
2306 <programlisting>
2307   data Foo a :: (* -> *) -> * where ...
2308 </programlisting>
2309 The type variables (if given) may be explicitly kinded, so we could also write the header for <literal>Foo</literal>
2310 like this:
2311 <programlisting>
2312   data Foo a (b :: * -> *) where ...
2313 </programlisting>
2314 </para></listitem>
2315
2316
2317 <listitem><para>
2318 You can use strictness annotations, in the obvious places
2319 in the constructor type:
2320 <programlisting>
2321   data Term a where
2322       Lit    :: !Int -> Term Int
2323       If     :: Term Bool -> !(Term a) -> !(Term a) -> Term a
2324       Pair   :: Term a -> Term b -> Term (a,b)
2325 </programlisting>
2326 </para></listitem>
2327
2328 <listitem><para>
2329 You can use a <literal>deriving</literal> clause on a GADT-style data type
2330 declaration.   For example, these two declarations are equivalent
2331 <programlisting>
2332   data Maybe1 a where {
2333       Nothing1 :: Maybe1 a ;
2334       Just1    :: a -> Maybe1 a
2335     } deriving( Eq, Ord )
2336
2337   data Maybe2 a = Nothing2 | Just2 a 
2338        deriving( Eq, Ord )
2339 </programlisting>
2340 </para></listitem>
2341
2342 <listitem><para>
2343 You can use record syntax on a GADT-style data type declaration:
2344
2345 <programlisting>
2346   data Person where
2347       Adult { name :: String, children :: [Person] } :: Person
2348       Child { name :: String } :: Person
2349 </programlisting>
2350 As usual, for every constructor that has a field <literal>f</literal>, the type of
2351 field <literal>f</literal> must be the same (modulo alpha conversion).
2352 </para>
2353 <para>
2354 At the moment, record updates are not yet possible with GADT-style declarations, 
2355 so support is limited to record construction, selection and pattern matching.
2356 For example
2357 <programlisting>
2358   aPerson = Adult { name = "Fred", children = [] }
2359
2360   shortName :: Person -> Bool
2361   hasChildren (Adult { children = kids }) = not (null kids)
2362   hasChildren (Child {})                  = False
2363 </programlisting>
2364 </para></listitem>
2365
2366 <listitem><para> 
2367 As in the case of existentials declared using the Haskell-98-like record syntax 
2368 (<xref linkend="existential-records"/>),
2369 record-selector functions are generated only for those fields that have well-typed
2370 selectors.  
2371 Here is the example of that section, in GADT-style syntax:
2372 <programlisting>
2373 data Counter a where
2374     NewCounter { _this    :: self
2375                , _inc     :: self -> self
2376                , _display :: self -> IO ()
2377                , tag      :: a
2378                }
2379         :: Counter a
2380 </programlisting>
2381 As before, only one selector function is generated here, that for <literal>tag</literal>.
2382 Nevertheless, you can still use all the field names in pattern matching and record construction.
2383 </para></listitem>
2384 </itemizedlist></para>
2385 </sect2>
2386
2387 <sect2 id="gadt">
2388 <title>Generalised Algebraic Data Types (GADTs)</title>
2389
2390 <para>Generalised Algebraic Data Types generalise ordinary algebraic data types 
2391 by allowing constructors to have richer return types.  Here is an example:
2392 <programlisting>
2393   data Term a where
2394       Lit    :: Int -> Term Int
2395       Succ   :: Term Int -> Term Int
2396       IsZero :: Term Int -> Term Bool   
2397       If     :: Term Bool -> Term a -> Term a -> Term a
2398       Pair   :: Term a -> Term b -> Term (a,b)
2399 </programlisting>
2400 Notice that the return type of the constructors is not always <literal>Term a</literal>, as is the
2401 case with ordinary data types.  This generality allows us to 
2402 write a well-typed <literal>eval</literal> function
2403 for these <literal>Terms</literal>:
2404 <programlisting>
2405   eval :: Term a -> a
2406   eval (Lit i)      = i
2407   eval (Succ t)     = 1 + eval t
2408   eval (IsZero t)   = eval t == 0
2409   eval (If b e1 e2) = if eval b then eval e1 else eval e2
2410   eval (Pair e1 e2) = (eval e1, eval e2)
2411 </programlisting>
2412 The key point about GADTs is that <emphasis>pattern matching causes type refinement</emphasis>.  
2413 For example, in the right hand side of the equation
2414 <programlisting>
2415   eval :: Term a -> a
2416   eval (Lit i) =  ...
2417 </programlisting>
2418 the type <literal>a</literal> is refined to <literal>Int</literal>.  That's the whole point!
2419 A precise specification of the type rules is beyond what this user manual aspires to, 
2420 but the design closely follows that described in
2421 the paper <ulink
2422 url="http://research.microsoft.com/%7Esimonpj/papers/gadt/">Simple
2423 unification-based type inference for GADTs</ulink>,
2424 (ICFP 2006).
2425 The general principle is this: <emphasis>type refinement is only carried out 
2426 based on user-supplied type annotations</emphasis>.
2427 So if no type signature is supplied for <literal>eval</literal>, no type refinement happens, 
2428 and lots of obscure error messages will
2429 occur.  However, the refinement is quite general.  For example, if we had:
2430 <programlisting>
2431   eval :: Term a -> a -> a
2432   eval (Lit i) j =  i+j
2433 </programlisting>
2434 the pattern match causes the type <literal>a</literal> to be refined to <literal>Int</literal> (because of the type
2435 of the constructor <literal>Lit</literal>), and that refinement also applies to the type of <literal>j</literal>, and
2436 the result type of the <literal>case</literal> expression.  Hence the addition <literal>i+j</literal> is legal.
2437 </para>
2438 <para>
2439 These and many other examples are given in papers by Hongwei Xi, and
2440 Tim Sheard. There is a longer introduction
2441 <ulink url="http://www.haskell.org/haskellwiki/GADT">on the wiki</ulink>,
2442 and Ralf Hinze's
2443 <ulink url="http://www.informatik.uni-bonn.de/~ralf/publications/With.pdf">Fun with phantom types</ulink> also has a number of examples. Note that papers
2444 may use different notation to that implemented in GHC.
2445 </para>
2446 <para>
2447 The rest of this section outlines the extensions to GHC that support GADTs.   The extension is enabled with 
2448 <option>-XGADTs</option>.  The <option>-XGADTs</option> flag also sets <option>-XRelaxedPolyRec</option>.
2449 <itemizedlist>
2450 <listitem><para>
2451 A GADT can only be declared using GADT-style syntax (<xref linkend="gadt-style"/>); 
2452 the old Haskell-98 syntax for data declarations always declares an ordinary data type.
2453 The result type of each constructor must begin with the type constructor being defined,
2454 but for a GADT the arguments to the type constructor can be arbitrary monotypes.  
2455 For example, in the <literal>Term</literal> data
2456 type above, the type of each constructor must end with <literal>Term ty</literal>, but
2457 the <literal>ty</literal> need not be a type variable (e.g. the <literal>Lit</literal>
2458 constructor).
2459 </para></listitem>
2460
2461 <listitem><para>
2462 It's is permitted to declare an ordinary algebraic data type using GADT-style syntax.
2463 What makes a GADT into a GADT is not the syntax, but rather the presence of data constructors
2464 whose result type is not just <literal>T a b</literal>.
2465 </para></listitem>
2466
2467 <listitem><para>
2468 You cannot use a <literal>deriving</literal> clause for a GADT; only for
2469 an ordinary data type.
2470 </para></listitem>
2471
2472 <listitem><para>
2473 As mentioned in <xref linkend="gadt-style"/>, record syntax is supported.
2474 For example:
2475 <programlisting>
2476   data Term a where
2477       Lit    { val  :: Int }      :: Term Int
2478       Succ   { num  :: Term Int } :: Term Int
2479       Pred   { num  :: Term Int } :: Term Int
2480       IsZero { arg  :: Term Int } :: Term Bool  
2481       Pair   { arg1 :: Term a
2482              , arg2 :: Term b
2483              }                    :: Term (a,b)
2484       If     { cnd  :: Term Bool
2485              , tru  :: Term a
2486              , fls  :: Term a
2487              }                    :: Term a
2488 </programlisting>
2489 However, for GADTs there is the following additional constraint: 
2490 every constructor that has a field <literal>f</literal> must have
2491 the same result type (modulo alpha conversion)
2492 Hence, in the above example, we cannot merge the <literal>num</literal> 
2493 and <literal>arg</literal> fields above into a 
2494 single name.  Although their field types are both <literal>Term Int</literal>,
2495 their selector functions actually have different types:
2496
2497 <programlisting>
2498   num :: Term Int -> Term Int
2499   arg :: Term Bool -> Term Int
2500 </programlisting>
2501 </para></listitem>
2502
2503 <listitem><para>
2504 When pattern-matching against data constructors drawn from a GADT, 
2505 for example in a <literal>case</literal> expression, the following rules apply:
2506 <itemizedlist>
2507 <listitem><para>The type of the scrutinee must be rigid.</para></listitem>
2508 <listitem><para>The type of the entire <literal>case</literal> expression must be rigid.</para></listitem>
2509 <listitem><para>The type of any free variable mentioned in any of
2510 the <literal>case</literal> alternatives must be rigid.</para></listitem>
2511 </itemizedlist>
2512 A type is "rigid" if it is completely known to the compiler at its binding site.  The easiest
2513 way to ensure that a variable a rigid type is to give it a type signature.
2514 For more precise details see <ulink url="http://research.microsoft.com/%7Esimonpj/papers/gadt">
2515 Simple unification-based type inference for GADTs
2516 </ulink>. The criteria implemented by GHC are given in the Appendix.
2517
2518 </para></listitem>
2519
2520 </itemizedlist>
2521 </para>
2522
2523 </sect2>
2524 </sect1>
2525
2526 <!-- ====================== End of Generalised algebraic data types =======================  -->
2527
2528 <sect1 id="deriving">
2529 <title>Extensions to the "deriving" mechanism</title>
2530
2531 <sect2 id="deriving-inferred">
2532 <title>Inferred context for deriving clauses</title>
2533
2534 <para>
2535 The Haskell Report is vague about exactly when a <literal>deriving</literal> clause is
2536 legal.  For example:
2537 <programlisting>
2538   data T0 f a = MkT0 a         deriving( Eq )
2539   data T1 f a = MkT1 (f a)     deriving( Eq )
2540   data T2 f a = MkT2 (f (f a)) deriving( Eq )
2541 </programlisting>
2542 The natural generated <literal>Eq</literal> code would result in these instance declarations:
2543 <programlisting>
2544   instance Eq a         => Eq (T0 f a) where ...
2545   instance Eq (f a)     => Eq (T1 f a) where ...
2546   instance Eq (f (f a)) => Eq (T2 f a) where ...
2547 </programlisting>
2548 The first of these is obviously fine. The second is still fine, although less obviously. 
2549 The third is not Haskell 98, and risks losing termination of instances.
2550 </para>
2551 <para>
2552 GHC takes a conservative position: it accepts the first two, but not the third.  The  rule is this:
2553 each constraint in the inferred instance context must consist only of type variables, 
2554 with no repetitions.
2555 </para>
2556 <para>
2557 This rule is applied regardless of flags.  If you want a more exotic context, you can write
2558 it yourself, using the <link linkend="stand-alone-deriving">standalone deriving mechanism</link>.
2559 </para>
2560 </sect2>
2561
2562 <sect2 id="stand-alone-deriving">
2563 <title>Stand-alone deriving declarations</title>
2564
2565 <para>
2566 GHC now allows stand-alone <literal>deriving</literal> declarations, enabled by <literal>-XStandaloneDeriving</literal>:
2567 <programlisting>
2568   data Foo a = Bar a | Baz String
2569
2570   deriving instance Eq a => Eq (Foo a)
2571 </programlisting>
2572 The syntax is identical to that of an ordinary instance declaration apart from (a) the keyword
2573 <literal>deriving</literal>, and (b) the absence of the <literal>where</literal> part.
2574 You must supply a context (in the example the context is <literal>(Eq a)</literal>), 
2575 exactly as you would in an ordinary instance declaration.
2576 (In contrast the context is inferred in a <literal>deriving</literal> clause 
2577 attached to a data type declaration.) 
2578
2579 A <literal>deriving instance</literal> declaration
2580 must obey the same rules concerning form and termination as ordinary instance declarations,
2581 controlled by the same flags; see <xref linkend="instance-decls"/>.
2582 </para>
2583 <para>
2584 Unlike a <literal>deriving</literal>
2585 declaration attached to a <literal>data</literal> declaration, the instance can be more specific
2586 than the data type (assuming you also use 
2587 <literal>-XFlexibleInstances</literal>, <xref linkend="instance-rules"/>).  Consider
2588 for example
2589 <programlisting>
2590   data Foo a = Bar a | Baz String
2591
2592   deriving instance Eq a => Eq (Foo [a])
2593   deriving instance Eq a => Eq (Foo (Maybe a))
2594 </programlisting>
2595 This will generate a derived instance for <literal>(Foo [a])</literal> and <literal>(Foo (Maybe a))</literal>,
2596 but other types such as <literal>(Foo (Int,Bool))</literal> will not be an instance of <literal>Eq</literal>.
2597 </para>
2598
2599 <para>The stand-alone syntax is generalised for newtypes in exactly the same
2600 way that ordinary <literal>deriving</literal> clauses are generalised (<xref linkend="newtype-deriving"/>).
2601 For example:
2602 <programlisting>
2603   newtype Foo a = MkFoo (State Int a)
2604
2605   deriving instance MonadState Int Foo
2606 </programlisting>
2607 GHC always treats the <emphasis>last</emphasis> parameter of the instance
2608 (<literal>Foo</literal> in this example) as the type whose instance is being derived.
2609 </para>
2610
2611 </sect2>
2612
2613
2614 <sect2 id="deriving-typeable">
2615 <title>Deriving clause for classes <literal>Typeable</literal> and <literal>Data</literal></title>
2616
2617 <para>
2618 Haskell 98 allows the programmer to add "<literal>deriving( Eq, Ord )</literal>" to a data type 
2619 declaration, to generate a standard instance declaration for classes specified in the <literal>deriving</literal> clause.  
2620 In Haskell 98, the only classes that may appear in the <literal>deriving</literal> clause are the standard
2621 classes <literal>Eq</literal>, <literal>Ord</literal>, 
2622 <literal>Enum</literal>, <literal>Ix</literal>, <literal>Bounded</literal>, <literal>Read</literal>, and <literal>Show</literal>.
2623 </para>
2624 <para>
2625 GHC extends this list with two more classes that may be automatically derived 
2626 (provided the <option>-XDeriveDataTypeable</option> flag is specified):
2627 <literal>Typeable</literal>, and <literal>Data</literal>.  These classes are defined in the library
2628 modules <literal>Data.Typeable</literal> and <literal>Data.Generics</literal> respectively, and the
2629 appropriate class must be in scope before it can be mentioned in the <literal>deriving</literal> clause.
2630 </para>
2631 <para>An instance of <literal>Typeable</literal> can only be derived if the
2632 data type has seven or fewer type parameters, all of kind <literal>*</literal>.
2633 The reason for this is that the <literal>Typeable</literal> class is derived using the scheme
2634 described in
2635 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/hmap/gmap2.ps">
2636 Scrap More Boilerplate: Reflection, Zips, and Generalised Casts
2637 </ulink>.
2638 (Section 7.4 of the paper describes the multiple <literal>Typeable</literal> classes that
2639 are used, and only <literal>Typeable1</literal> up to
2640 <literal>Typeable7</literal> are provided in the library.)
2641 In other cases, there is nothing to stop the programmer writing a <literal>TypableX</literal>
2642 class, whose kind suits that of the data type constructor, and
2643 then writing the data type instance by hand.
2644 </para>
2645 </sect2>
2646
2647 <sect2 id="newtype-deriving">
2648 <title>Generalised derived instances for newtypes</title>
2649
2650 <para>
2651 When you define an abstract type using <literal>newtype</literal>, you may want
2652 the new type to inherit some instances from its representation. In
2653 Haskell 98, you can inherit instances of <literal>Eq</literal>, <literal>Ord</literal>,
2654 <literal>Enum</literal> and <literal>Bounded</literal> by deriving them, but for any
2655 other classes you have to write an explicit instance declaration. For
2656 example, if you define
2657
2658 <programlisting>
2659   newtype Dollars = Dollars Int 
2660 </programlisting>
2661
2662 and you want to use arithmetic on <literal>Dollars</literal>, you have to
2663 explicitly define an instance of <literal>Num</literal>:
2664
2665 <programlisting>
2666   instance Num Dollars where
2667     Dollars a + Dollars b = Dollars (a+b)
2668     ...
2669 </programlisting>
2670 All the instance does is apply and remove the <literal>newtype</literal>
2671 constructor. It is particularly galling that, since the constructor
2672 doesn't appear at run-time, this instance declaration defines a
2673 dictionary which is <emphasis>wholly equivalent</emphasis> to the <literal>Int</literal>
2674 dictionary, only slower!
2675 </para>
2676
2677
2678 <sect3> <title> Generalising the deriving clause </title>
2679 <para>
2680 GHC now permits such instances to be derived instead, 
2681 using the flag <option>-XGeneralizedNewtypeDeriving</option>,
2682 so one can write 
2683 <programlisting>
2684   newtype Dollars = Dollars Int deriving (Eq,Show,Num)
2685 </programlisting>
2686
2687 and the implementation uses the <emphasis>same</emphasis> <literal>Num</literal> dictionary
2688 for <literal>Dollars</literal> as for <literal>Int</literal>. Notionally, the compiler
2689 derives an instance declaration of the form
2690
2691 <programlisting>
2692   instance Num Int => Num Dollars
2693 </programlisting>
2694
2695 which just adds or removes the <literal>newtype</literal> constructor according to the type.
2696 </para>
2697 <para>
2698
2699 We can also derive instances of constructor classes in a similar
2700 way. For example, suppose we have implemented state and failure monad
2701 transformers, such that
2702
2703 <programlisting>
2704   instance Monad m => Monad (State s m) 
2705   instance Monad m => Monad (Failure m)
2706 </programlisting>
2707 In Haskell 98, we can define a parsing monad by 
2708 <programlisting>
2709   type Parser tok m a = State [tok] (Failure m) a
2710 </programlisting>
2711
2712 which is automatically a monad thanks to the instance declarations
2713 above. With the extension, we can make the parser type abstract,
2714 without needing to write an instance of class <literal>Monad</literal>, via
2715
2716 <programlisting>
2717   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2718                          deriving Monad
2719 </programlisting>
2720 In this case the derived instance declaration is of the form 
2721 <programlisting>
2722   instance Monad (State [tok] (Failure m)) => Monad (Parser tok m) 
2723 </programlisting>
2724
2725 Notice that, since <literal>Monad</literal> is a constructor class, the
2726 instance is a <emphasis>partial application</emphasis> of the new type, not the
2727 entire left hand side. We can imagine that the type declaration is
2728 "eta-converted" to generate the context of the instance
2729 declaration.
2730 </para>
2731 <para>
2732
2733 We can even derive instances of multi-parameter classes, provided the
2734 newtype is the last class parameter. In this case, a ``partial
2735 application'' of the class appears in the <literal>deriving</literal>
2736 clause. For example, given the class
2737
2738 <programlisting>
2739   class StateMonad s m | m -> s where ... 
2740   instance Monad m => StateMonad s (State s m) where ... 
2741 </programlisting>
2742 then we can derive an instance of <literal>StateMonad</literal> for <literal>Parser</literal>s by 
2743 <programlisting>
2744   newtype Parser tok m a = Parser (State [tok] (Failure m) a)
2745                          deriving (Monad, StateMonad [tok])
2746 </programlisting>
2747
2748 The derived instance is obtained by completing the application of the
2749 class to the new type:
2750
2751 <programlisting>
2752   instance StateMonad [tok] (State [tok] (Failure m)) =>
2753            StateMonad [tok] (Parser tok m)
2754 </programlisting>
2755 </para>
2756 <para>
2757
2758 As a result of this extension, all derived instances in newtype
2759  declarations are treated uniformly (and implemented just by reusing
2760 the dictionary for the representation type), <emphasis>except</emphasis>
2761 <literal>Show</literal> and <literal>Read</literal>, which really behave differently for
2762 the newtype and its representation.
2763 </para>
2764 </sect3>
2765
2766 <sect3> <title> A more precise specification </title>
2767 <para>
2768 Derived instance declarations are constructed as follows. Consider the
2769 declaration (after expansion of any type synonyms)
2770
2771 <programlisting>
2772   newtype T v1...vn = T' (t vk+1...vn) deriving (c1...cm) 
2773 </programlisting>
2774
2775 where 
2776  <itemizedlist>
2777 <listitem><para>
2778   The <literal>ci</literal> are partial applications of
2779   classes of the form <literal>C t1'...tj'</literal>, where the arity of <literal>C</literal>
2780   is exactly <literal>j+1</literal>.  That is, <literal>C</literal> lacks exactly one type argument.
2781 </para></listitem>
2782 <listitem><para>
2783   The <literal>k</literal> is chosen so that <literal>ci (T v1...vk)</literal> is well-kinded.
2784 </para></listitem>
2785 <listitem><para>
2786   The type <literal>t</literal> is an arbitrary type.
2787 </para></listitem>
2788 <listitem><para>
2789   The type variables <literal>vk+1...vn</literal> do not occur in <literal>t</literal>, 
2790   nor in the <literal>ci</literal>, and
2791 </para></listitem>
2792 <listitem><para>
2793   None of the <literal>ci</literal> is <literal>Read</literal>, <literal>Show</literal>, 
2794                 <literal>Typeable</literal>, or <literal>Data</literal>.  These classes
2795                 should not "look through" the type or its constructor.  You can still
2796                 derive these classes for a newtype, but it happens in the usual way, not 
2797                 via this new mechanism.  
2798 </para></listitem>
2799 </itemizedlist>
2800 Then, for each <literal>ci</literal>, the derived instance
2801 declaration is:
2802 <programlisting>
2803   instance ci t => ci (T v1...vk)
2804 </programlisting>
2805 As an example which does <emphasis>not</emphasis> work, consider 
2806 <programlisting>
2807   newtype NonMonad m s = NonMonad (State s m s) deriving Monad 
2808 </programlisting>
2809 Here we cannot derive the instance 
2810 <programlisting>
2811   instance Monad (State s m) => Monad (NonMonad m) 
2812 </programlisting>
2813
2814 because the type variable <literal>s</literal> occurs in <literal>State s m</literal>,
2815 and so cannot be "eta-converted" away. It is a good thing that this
2816 <literal>deriving</literal> clause is rejected, because <literal>NonMonad m</literal> is
2817 not, in fact, a monad --- for the same reason. Try defining
2818 <literal>>>=</literal> with the correct type: you won't be able to.
2819 </para>
2820 <para>
2821
2822 Notice also that the <emphasis>order</emphasis> of class parameters becomes
2823 important, since we can only derive instances for the last one. If the
2824 <literal>StateMonad</literal> class above were instead defined as
2825
2826 <programlisting>
2827   class StateMonad m s | m -> s where ... 
2828 </programlisting>
2829
2830 then we would not have been able to derive an instance for the
2831 <literal>Parser</literal> type above. We hypothesise that multi-parameter
2832 classes usually have one "main" parameter for which deriving new
2833 instances is most interesting.
2834 </para>
2835 <para>Lastly, all of this applies only for classes other than
2836 <literal>Read</literal>, <literal>Show</literal>, <literal>Typeable</literal>, 
2837 and <literal>Data</literal>, for which the built-in derivation applies (section
2838 4.3.3. of the Haskell Report).
2839 (For the standard classes <literal>Eq</literal>, <literal>Ord</literal>,
2840 <literal>Ix</literal>, and <literal>Bounded</literal> it is immaterial whether
2841 the standard method is used or the one described here.)
2842 </para>
2843 </sect3>
2844 </sect2>
2845 </sect1>
2846
2847
2848 <!-- TYPE SYSTEM EXTENSIONS -->
2849 <sect1 id="type-class-extensions">
2850 <title>Class and instances declarations</title>
2851
2852 <sect2 id="multi-param-type-classes">
2853 <title>Class declarations</title>
2854
2855 <para>
2856 This section, and the next one, documents GHC's type-class extensions.
2857 There's lots of background in the paper <ulink
2858 url="http://research.microsoft.com/~simonpj/Papers/type-class-design-space/">Type
2859 classes: exploring the design space</ulink> (Simon Peyton Jones, Mark
2860 Jones, Erik Meijer).
2861 </para>
2862 <para>
2863 All the extensions are enabled by the <option>-fglasgow-exts</option> flag.
2864 </para>
2865
2866 <sect3>
2867 <title>Multi-parameter type classes</title>
2868 <para>
2869 Multi-parameter type classes are permitted. For example:
2870
2871
2872 <programlisting>
2873   class Collection c a where
2874     union :: c a -> c a -> c a
2875     ...etc.
2876 </programlisting>
2877
2878 </para>
2879 </sect3>
2880
2881 <sect3>
2882 <title>The superclasses of a class declaration</title>
2883
2884 <para>
2885 There are no restrictions on the context in a class declaration
2886 (which introduces superclasses), except that the class hierarchy must
2887 be acyclic.  So these class declarations are OK:
2888
2889
2890 <programlisting>
2891   class Functor (m k) => FiniteMap m k where
2892     ...
2893
2894   class (Monad m, Monad (t m)) => Transform t m where
2895     lift :: m a -> (t m) a
2896 </programlisting>
2897
2898
2899 </para>
2900 <para>
2901 As in Haskell 98, The class hierarchy must be acyclic.  However, the definition
2902 of "acyclic" involves only the superclass relationships.  For example,
2903 this is OK:
2904
2905
2906 <programlisting>
2907   class C a where {
2908     op :: D b => a -> b -> b
2909   }
2910
2911   class C a => D a where { ... }
2912 </programlisting>
2913
2914
2915 Here, <literal>C</literal> is a superclass of <literal>D</literal>, but it's OK for a
2916 class operation <literal>op</literal> of <literal>C</literal> to mention <literal>D</literal>.  (It
2917 would not be OK for <literal>D</literal> to be a superclass of <literal>C</literal>.)
2918 </para>
2919 </sect3>
2920
2921
2922
2923
2924 <sect3 id="class-method-types">
2925 <title>Class method types</title>
2926
2927 <para>
2928 Haskell 98 prohibits class method types to mention constraints on the
2929 class type variable, thus:
2930 <programlisting>
2931   class Seq s a where
2932     fromList :: [a] -> s a
2933     elem     :: Eq a => a -> s a -> Bool
2934 </programlisting>
2935 The type of <literal>elem</literal> is illegal in Haskell 98, because it
2936 contains the constraint <literal>Eq a</literal>, constrains only the 
2937 class type variable (in this case <literal>a</literal>).
2938 GHC lifts this restriction (flag <option>-XConstrainedClassMethods</option>).
2939 </para>
2940
2941
2942 </sect3>
2943 </sect2>
2944
2945 <sect2 id="functional-dependencies">
2946 <title>Functional dependencies
2947 </title>
2948
2949 <para> Functional dependencies are implemented as described by Mark Jones
2950 in &ldquo;<ulink url="http://citeseer.ist.psu.edu/jones00type.html">Type Classes with Functional Dependencies</ulink>&rdquo;, Mark P. Jones, 
2951 In Proceedings of the 9th European Symposium on Programming, 
2952 ESOP 2000, Berlin, Germany, March 2000, Springer-Verlag LNCS 1782,
2953 .
2954 </para>
2955 <para>
2956 Functional dependencies are introduced by a vertical bar in the syntax of a 
2957 class declaration;  e.g. 
2958 <programlisting>
2959   class (Monad m) => MonadState s m | m -> s where ...
2960
2961   class Foo a b c | a b -> c where ...
2962 </programlisting>
2963 There should be more documentation, but there isn't (yet).  Yell if you need it.
2964 </para>
2965
2966 <sect3><title>Rules for functional dependencies </title>
2967 <para>
2968 In a class declaration, all of the class type variables must be reachable (in the sense 
2969 mentioned in <xref linkend="type-restrictions"/>)
2970 from the free variables of each method type.
2971 For example:
2972
2973 <programlisting>
2974   class Coll s a where
2975     empty  :: s
2976     insert :: s -> a -> s
2977 </programlisting>
2978
2979 is not OK, because the type of <literal>empty</literal> doesn't mention
2980 <literal>a</literal>.  Functional dependencies can make the type variable
2981 reachable:
2982 <programlisting>
2983   class Coll s a | s -> a where
2984     empty  :: s
2985     insert :: s -> a -> s
2986 </programlisting>
2987
2988 Alternatively <literal>Coll</literal> might be rewritten
2989
2990 <programlisting>
2991   class Coll s a where
2992     empty  :: s a
2993     insert :: s a -> a -> s a
2994 </programlisting>
2995
2996
2997 which makes the connection between the type of a collection of
2998 <literal>a</literal>'s (namely <literal>(s a)</literal>) and the element type <literal>a</literal>.
2999 Occasionally this really doesn't work, in which case you can split the
3000 class like this:
3001
3002
3003 <programlisting>
3004   class CollE s where
3005     empty  :: s
3006
3007   class CollE s => Coll s a where
3008     insert :: s -> a -> s
3009 </programlisting>
3010 </para>
3011 </sect3>
3012
3013
3014 <sect3>
3015 <title>Background on functional dependencies</title>
3016
3017 <para>The following description of the motivation and use of functional dependencies is taken
3018 from the Hugs user manual, reproduced here (with minor changes) by kind
3019 permission of Mark Jones.
3020 </para>
3021 <para> 
3022 Consider the following class, intended as part of a
3023 library for collection types:
3024 <programlisting>
3025    class Collects e ce where
3026        empty  :: ce
3027        insert :: e -> ce -> ce
3028        member :: e -> ce -> Bool
3029 </programlisting>
3030 The type variable e used here represents the element type, while ce is the type
3031 of the container itself. Within this framework, we might want to define
3032 instances of this class for lists or characteristic functions (both of which
3033 can be used to represent collections of any equality type), bit sets (which can
3034 be used to represent collections of characters), or hash tables (which can be
3035 used to represent any collection whose elements have a hash function). Omitting
3036 standard implementation details, this would lead to the following declarations: 
3037 <programlisting>
3038    instance Eq e => Collects e [e] where ...
3039    instance Eq e => Collects e (e -> Bool) where ...
3040    instance Collects Char BitSet where ...
3041    instance (Hashable e, Collects a ce)
3042               => Collects e (Array Int ce) where ...
3043 </programlisting>
3044 All this looks quite promising; we have a class and a range of interesting
3045 implementations. Unfortunately, there are some serious problems with the class
3046 declaration. First, the empty function has an ambiguous type: 
3047 <programlisting>
3048    empty :: Collects e ce => ce
3049 </programlisting>
3050 By "ambiguous" we mean that there is a type variable e that appears on the left
3051 of the <literal>=&gt;</literal> symbol, but not on the right. The problem with
3052 this is that, according to the theoretical foundations of Haskell overloading,
3053 we cannot guarantee a well-defined semantics for any term with an ambiguous
3054 type.
3055 </para>
3056 <para>
3057 We can sidestep this specific problem by removing the empty member from the
3058 class declaration. However, although the remaining members, insert and member,
3059 do not have ambiguous types, we still run into problems when we try to use
3060 them. For example, consider the following two functions: 
3061 <programlisting>
3062    f x y = insert x . insert y
3063    g     = f True 'a'
3064 </programlisting>
3065 for which GHC infers the following types: 
3066 <programlisting>
3067    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3068    g :: (Collects Bool c, Collects Char c) => c -> c
3069 </programlisting>
3070 Notice that the type for f allows the two parameters x and y to be assigned
3071 different types, even though it attempts to insert each of the two values, one
3072 after the other, into the same collection. If we're trying to model collections
3073 that contain only one type of value, then this is clearly an inaccurate
3074 type. Worse still, the definition for g is accepted, without causing a type
3075 error. As a result, the error in this code will not be flagged at the point
3076 where it appears. Instead, it will show up only when we try to use g, which
3077 might even be in a different module.
3078 </para>
3079
3080 <sect4><title>An attempt to use constructor classes</title>
3081
3082 <para>
3083 Faced with the problems described above, some Haskell programmers might be
3084 tempted to use something like the following version of the class declaration: 
3085 <programlisting>
3086    class Collects e c where
3087       empty  :: c e
3088       insert :: e -> c e -> c e
3089       member :: e -> c e -> Bool
3090 </programlisting>
3091 The key difference here is that we abstract over the type constructor c that is
3092 used to form the collection type c e, and not over that collection type itself,
3093 represented by ce in the original class declaration. This avoids the immediate
3094 problems that we mentioned above: empty has type <literal>Collects e c => c
3095 e</literal>, which is not ambiguous. 
3096 </para>
3097 <para>
3098 The function f from the previous section has a more accurate type: 
3099 <programlisting>
3100    f :: (Collects e c) => e -> e -> c e -> c e
3101 </programlisting>
3102 The function g from the previous section is now rejected with a type error as
3103 we would hope because the type of f does not allow the two arguments to have
3104 different types. 
3105 This, then, is an example of a multiple parameter class that does actually work
3106 quite well in practice, without ambiguity problems.
3107 There is, however, a catch. This version of the Collects class is nowhere near
3108 as general as the original class seemed to be: only one of the four instances
3109 for <literal>Collects</literal>
3110 given above can be used with this version of Collects because only one of
3111 them---the instance for lists---has a collection type that can be written in
3112 the form c e, for some type constructor c, and element type e.
3113 </para>
3114 </sect4>
3115
3116 <sect4><title>Adding functional dependencies</title>
3117
3118 <para>
3119 To get a more useful version of the Collects class, Hugs provides a mechanism
3120 that allows programmers to specify dependencies between the parameters of a
3121 multiple parameter class (For readers with an interest in theoretical
3122 foundations and previous work: The use of dependency information can be seen
3123 both as a generalization of the proposal for `parametric type classes' that was
3124 put forward by Chen, Hudak, and Odersky, or as a special case of Mark Jones's
3125 later framework for "improvement" of qualified types. The
3126 underlying ideas are also discussed in a more theoretical and abstract setting
3127 in a manuscript [implparam], where they are identified as one point in a
3128 general design space for systems of implicit parameterization.).
3129
3130 To start with an abstract example, consider a declaration such as: 
3131 <programlisting>
3132    class C a b where ...
3133 </programlisting>
3134 which tells us simply that C can be thought of as a binary relation on types
3135 (or type constructors, depending on the kinds of a and b). Extra clauses can be
3136 included in the definition of classes to add information about dependencies
3137 between parameters, as in the following examples: 
3138 <programlisting>
3139    class D a b | a -> b where ...
3140    class E a b | a -> b, b -> a where ...
3141 </programlisting>
3142 The notation <literal>a -&gt; b</literal> used here between the | and where
3143 symbols --- not to be
3144 confused with a function type --- indicates that the a parameter uniquely
3145 determines the b parameter, and might be read as "a determines b." Thus D is
3146 not just a relation, but actually a (partial) function. Similarly, from the two
3147 dependencies that are included in the definition of E, we can see that E
3148 represents a (partial) one-one mapping between types.
3149 </para>
3150 <para>
3151 More generally, dependencies take the form <literal>x1 ... xn -&gt; y1 ... ym</literal>,
3152 where x1, ..., xn, and y1, ..., yn are type variables with n&gt;0 and
3153 m&gt;=0, meaning that the y parameters are uniquely determined by the x
3154 parameters. Spaces can be used as separators if more than one variable appears
3155 on any single side of a dependency, as in <literal>t -&gt; a b</literal>. Note that a class may be
3156 annotated with multiple dependencies using commas as separators, as in the
3157 definition of E above. Some dependencies that we can write in this notation are
3158 redundant, and will be rejected because they don't serve any useful
3159 purpose, and may instead indicate an error in the program. Examples of
3160 dependencies like this include  <literal>a -&gt; a </literal>,  
3161 <literal>a -&gt; a a </literal>,  
3162 <literal>a -&gt; </literal>, etc. There can also be
3163 some redundancy if multiple dependencies are given, as in  
3164 <literal>a-&gt;b</literal>, 
3165  <literal>b-&gt;c </literal>,  <literal>a-&gt;c </literal>, and
3166 in which some subset implies the remaining dependencies. Examples like this are
3167 not treated as errors. Note that dependencies appear only in class
3168 declarations, and not in any other part of the language. In particular, the
3169 syntax for instance declarations, class constraints, and types is completely
3170 unchanged.
3171 </para>
3172 <para>
3173 By including dependencies in a class declaration, we provide a mechanism for
3174 the programmer to specify each multiple parameter class more precisely. The
3175 compiler, on the other hand, is responsible for ensuring that the set of
3176 instances that are in scope at any given point in the program is consistent
3177 with any declared dependencies. For example, the following pair of instance
3178 declarations cannot appear together in the same scope because they violate the
3179 dependency for D, even though either one on its own would be acceptable: 
3180 <programlisting>
3181    instance D Bool Int where ...
3182    instance D Bool Char where ...
3183 </programlisting>
3184 Note also that the following declaration is not allowed, even by itself: 
3185 <programlisting>
3186    instance D [a] b where ...
3187 </programlisting>
3188 The problem here is that this instance would allow one particular choice of [a]
3189 to be associated with more than one choice for b, which contradicts the
3190 dependency specified in the definition of D. More generally, this means that,
3191 in any instance of the form: 
3192 <programlisting>
3193    instance D t s where ...
3194 </programlisting>
3195 for some particular types t and s, the only variables that can appear in s are
3196 the ones that appear in t, and hence, if the type t is known, then s will be
3197 uniquely determined.
3198 </para>
3199 <para>
3200 The benefit of including dependency information is that it allows us to define
3201 more general multiple parameter classes, without ambiguity problems, and with
3202 the benefit of more accurate types. To illustrate this, we return to the
3203 collection class example, and annotate the original definition of <literal>Collects</literal>
3204 with a simple dependency: 
3205 <programlisting>
3206    class Collects e ce | ce -> e where
3207       empty  :: ce
3208       insert :: e -> ce -> ce
3209       member :: e -> ce -> Bool
3210 </programlisting>
3211 The dependency <literal>ce -&gt; e</literal> here specifies that the type e of elements is uniquely
3212 determined by the type of the collection ce. Note that both parameters of
3213 Collects are of kind *; there are no constructor classes here. Note too that
3214 all of the instances of Collects that we gave earlier can be used
3215 together with this new definition.
3216 </para>
3217 <para>
3218 What about the ambiguity problems that we encountered with the original
3219 definition? The empty function still has type Collects e ce => ce, but it is no
3220 longer necessary to regard that as an ambiguous type: Although the variable e
3221 does not appear on the right of the => symbol, the dependency for class
3222 Collects tells us that it is uniquely determined by ce, which does appear on
3223 the right of the => symbol. Hence the context in which empty is used can still
3224 give enough information to determine types for both ce and e, without
3225 ambiguity. More generally, we need only regard a type as ambiguous if it
3226 contains a variable on the left of the => that is not uniquely determined
3227 (either directly or indirectly) by the variables on the right.
3228 </para>
3229 <para>
3230 Dependencies also help to produce more accurate types for user defined
3231 functions, and hence to provide earlier detection of errors, and less cluttered
3232 types for programmers to work with. Recall the previous definition for a
3233 function f: 
3234 <programlisting>
3235    f x y = insert x y = insert x . insert y
3236 </programlisting>
3237 for which we originally obtained a type: 
3238 <programlisting>
3239    f :: (Collects a c, Collects b c) => a -> b -> c -> c
3240 </programlisting>
3241 Given the dependency information that we have for Collects, however, we can
3242 deduce that a and b must be equal because they both appear as the second
3243 parameter in a Collects constraint with the same first parameter c. Hence we
3244 can infer a shorter and more accurate type for f: 
3245 <programlisting>
3246    f :: (Collects a c) => a -> a -> c -> c
3247 </programlisting>
3248 In a similar way, the earlier definition of g will now be flagged as a type error.
3249 </para>
3250 <para>
3251 Although we have given only a few examples here, it should be clear that the
3252 addition of dependency information can help to make multiple parameter classes
3253 more useful in practice, avoiding ambiguity problems, and allowing more general
3254 sets of instance declarations.
3255 </para>
3256 </sect4>
3257 </sect3>
3258 </sect2>
3259
3260 <sect2 id="instance-decls">
3261 <title>Instance declarations</title>
3262
3263 <para>An instance declaration has the form
3264 <screen>
3265   instance ( <replaceable>assertion</replaceable><subscript>1</subscript>, ..., <replaceable>assertion</replaceable><subscript>n</subscript>) =&gt; <replaceable>class</replaceable> <replaceable>type</replaceable><subscript>1</subscript> ... <replaceable>type</replaceable><subscript>m</subscript> where ...
3266 </screen>
3267 The part before the "<literal>=&gt;</literal>" is the
3268 <emphasis>context</emphasis>, while the part after the
3269 "<literal>=&gt;</literal>" is the <emphasis>head</emphasis> of the instance declaration.
3270 </para>
3271
3272 <sect3 id="flexible-instance-head">
3273 <title>Relaxed rules for the instance head</title>
3274
3275 <para>
3276 In Haskell 98 the head of an instance declaration
3277 must be of the form <literal>C (T a1 ... an)</literal>, where
3278 <literal>C</literal> is the class, <literal>T</literal> is a data type constructor,
3279 and the <literal>a1 ... an</literal> are distinct type variables.
3280 GHC relaxes these rules in two ways.
3281 <itemizedlist>
3282 <listitem>
3283 <para>
3284 The <option>-XFlexibleInstances</option> flag allows the head of the instance
3285 declaration to mention arbitrary nested types.
3286 For example, this becomes a legal instance declaration
3287 <programlisting>
3288   instance C (Maybe Int) where ...
3289 </programlisting>
3290 See also the <link linkend="instance-overlap">rules on overlap</link>.
3291 </para></listitem>
3292 <listitem><para>
3293 With the <option>-XTypeSynonymInstances</option> flag, instance heads may use type
3294 synonyms. As always, using a type synonym is just shorthand for
3295 writing the RHS of the type synonym definition.  For example:
3296
3297
3298 <programlisting>
3299   type Point = (Int,Int)
3300   instance C Point   where ...
3301   instance C [Point] where ...
3302 </programlisting>
3303
3304
3305 is legal.  However, if you added
3306
3307
3308 <programlisting>
3309   instance C (Int,Int) where ...
3310 </programlisting>
3311
3312
3313 as well, then the compiler will complain about the overlapping
3314 (actually, identical) instance declarations.  As always, type synonyms
3315 must be fully applied.  You cannot, for example, write:
3316
3317 <programlisting>
3318   type P a = [[a]]
3319   instance Monad P where ...
3320 </programlisting>
3321
3322 </para></listitem>
3323 </itemizedlist>
3324 </para>
3325 </sect3>
3326
3327 <sect3 id="instance-rules">
3328 <title>Relaxed rules for instance contexts</title>
3329
3330 <para>In Haskell 98, the assertions in the context of the instance declaration
3331 must be of the form <literal>C a</literal> where <literal>a</literal>
3332 is a type variable that occurs in the head.
3333 </para>
3334
3335 <para>
3336 The <option>-XFlexibleContexts</option> flag relaxes this rule, as well
3337 as the corresponding rule for type signatures (see <xref linkend="flexible-contexts"/>).
3338 With this flag the context of the instance declaration can each consist of arbitrary
3339 (well-kinded) assertions <literal>(C t1 ... tn)</literal> subject only to the
3340 following rules:
3341 <orderedlist>
3342 <listitem><para>
3343 The Paterson Conditions: for each assertion in the context
3344 <orderedlist>
3345 <listitem><para>No type variable has more occurrences in the assertion than in the head</para></listitem>
3346 <listitem><para>The assertion has fewer constructors and variables (taken together
3347       and counting repetitions) than the head</para></listitem>
3348 </orderedlist>
3349 </para></listitem>
3350
3351 <listitem><para>The Coverage Condition.  For each functional dependency,
3352 <replaceable>tvs</replaceable><subscript>left</subscript> <literal>-&gt;</literal>
3353 <replaceable>tvs</replaceable><subscript>right</subscript>,  of the class,
3354 every type variable in
3355 S(<replaceable>tvs</replaceable><subscript>right</subscript>) must appear in 
3356 S(<replaceable>tvs</replaceable><subscript>left</subscript>), where S is the
3357 substitution mapping each type variable in the class declaration to the
3358 corresponding type in the instance declaration.
3359 </para></listitem>
3360 </orderedlist>
3361 These restrictions ensure that context reduction terminates: each reduction
3362 step makes the problem smaller by at least one
3363 constructor.  Both the Paterson Conditions and the Coverage Condition are lifted 
3364 if you give the <option>-XUndecidableInstances</option> 
3365 flag (<xref linkend="undecidable-instances"/>).
3366 You can find lots of background material about the reason for these
3367 restrictions in the paper <ulink
3368 url="http://research.microsoft.com/%7Esimonpj/papers/fd%2Dchr/">
3369 Understanding functional dependencies via Constraint Handling Rules</ulink>.
3370 </para>
3371 <para>
3372 For example, these are OK:
3373 <programlisting>
3374   instance C Int [a]          -- Multiple parameters
3375   instance Eq (S [a])         -- Structured type in head
3376
3377       -- Repeated type variable in head
3378   instance C4 a a => C4 [a] [a] 
3379   instance Stateful (ST s) (MutVar s)
3380
3381       -- Head can consist of type variables only
3382   instance C a
3383   instance (Eq a, Show b) => C2 a b
3384
3385       -- Non-type variables in context
3386   instance Show (s a) => Show (Sized s a)
3387   instance C2 Int a => C3 Bool [a]
3388   instance C2 Int a => C3 [a] b
3389 </programlisting>
3390 But these are not:
3391 <programlisting>
3392       -- Context assertion no smaller than head
3393   instance C a => C a where ...
3394       -- (C b b) has more more occurrences of b than the head
3395   instance C b b => Foo [b] where ...
3396 </programlisting>
3397 </para>
3398
3399 <para>
3400 The same restrictions apply to instances generated by
3401 <literal>deriving</literal> clauses.  Thus the following is accepted:
3402 <programlisting>
3403   data MinHeap h a = H a (h a)
3404     deriving (Show)
3405 </programlisting>
3406 because the derived instance
3407 <programlisting>
3408   instance (Show a, Show (h a)) => Show (MinHeap h a)
3409 </programlisting>
3410 conforms to the above rules.
3411 </para>
3412
3413 <para>
3414 A useful idiom permitted by the above rules is as follows.
3415 If one allows overlapping instance declarations then it's quite
3416 convenient to have a "default instance" declaration that applies if
3417 something more specific does not:
3418 <programlisting>
3419   instance C a where
3420     op = ... -- Default
3421 </programlisting>
3422 </para>
3423 </sect3>
3424
3425 <sect3 id="undecidable-instances">
3426 <title>Undecidable instances</title>
3427
3428 <para>
3429 Sometimes even the rules of <xref linkend="instance-rules"/> are too onerous.
3430 For example, sometimes you might want to use the following to get the
3431 effect of a "class synonym":
3432 <programlisting>
3433   class (C1 a, C2 a, C3 a) => C a where { }
3434
3435   instance (C1 a, C2 a, C3 a) => C a where { }
3436 </programlisting>
3437 This allows you to write shorter signatures:
3438 <programlisting>
3439   f :: C a => ...
3440 </programlisting>
3441 instead of
3442 <programlisting>
3443   f :: (C1 a, C2 a, C3 a) => ...
3444 </programlisting>
3445 The restrictions on functional dependencies (<xref
3446 linkend="functional-dependencies"/>) are particularly troublesome.
3447 It is tempting to introduce type variables in the context that do not appear in
3448 the head, something that is excluded by the normal rules. For example:
3449 <programlisting>
3450   class HasConverter a b | a -> b where
3451      convert :: a -> b
3452    
3453   data Foo a = MkFoo a
3454
3455   instance (HasConverter a b,Show b) => Show (Foo a) where
3456      show (MkFoo value) = show (convert value)
3457 </programlisting>
3458 This is dangerous territory, however. Here, for example, is a program that would make the
3459 typechecker loop:
3460 <programlisting>
3461   class D a
3462   class F a b | a->b
3463   instance F [a] [[a]]
3464   instance (D c, F a c) => D [a]   -- 'c' is not mentioned in the head
3465 </programlisting>
3466 Similarly, it can be tempting to lift the coverage condition:
3467 <programlisting>
3468   class Mul a b c | a b -> c where
3469         (.*.) :: a -> b -> c
3470
3471   instance Mul Int Int Int where (.*.) = (*)
3472   instance Mul Int Float Float where x .*. y = fromIntegral x * y
3473   instance Mul a b c => Mul a [b] [c] where x .*. v = map (x.*.) v
3474 </programlisting>
3475 The third instance declaration does not obey the coverage condition;
3476 and indeed the (somewhat strange) definition:
3477 <programlisting>
3478   f = \ b x y -> if b then x .*. [y] else y
3479 </programlisting>
3480 makes instance inference go into a loop, because it requires the constraint
3481 <literal>(Mul a [b] b)</literal>.
3482 </para>
3483 <para>
3484 Nevertheless, GHC allows you to experiment with more liberal rules.  If you use
3485 the experimental flag <option>-XUndecidableInstances</option>
3486 <indexterm><primary>-XUndecidableInstances</primary></indexterm>, 
3487 both the Paterson Conditions and the Coverage Condition
3488 (described in <xref linkend="instance-rules"/>) are lifted.  Termination is ensured by having a
3489 fixed-depth recursion stack.  If you exceed the stack depth you get a
3490 sort of backtrace, and the opportunity to increase the stack depth
3491 with <option>-fcontext-stack=</option><emphasis>N</emphasis>.
3492 </para>
3493
3494 </sect3>
3495
3496
3497 <sect3 id="instance-overlap">
3498 <title>Overlapping instances</title>
3499 <para>
3500 In general, <emphasis>GHC requires that that it be unambiguous which instance
3501 declaration
3502 should be used to resolve a type-class constraint</emphasis>. This behaviour
3503 can be modified by two flags: <option>-XOverlappingInstances</option>
3504 <indexterm><primary>-XOverlappingInstances
3505 </primary></indexterm> 
3506 and <option>-XIncoherentInstances</option>
3507 <indexterm><primary>-XIncoherentInstances
3508 </primary></indexterm>, as this section discusses.  Both these
3509 flags are dynamic flags, and can be set on a per-module basis, using 
3510 an <literal>OPTIONS_GHC</literal> pragma if desired (<xref linkend="source-file-options"/>).</para>
3511 <para>
3512 When GHC tries to resolve, say, the constraint <literal>C Int Bool</literal>,
3513 it tries to match every instance declaration against the
3514 constraint,
3515 by instantiating the head of the instance declaration.  For example, consider
3516 these declarations:
3517 <programlisting>
3518   instance context1 => C Int a     where ...  -- (A)
3519   instance context2 => C a   Bool  where ...  -- (B)
3520   instance context3 => C Int [a]   where ...  -- (C)
3521   instance context4 => C Int [Int] where ...  -- (D)
3522 </programlisting>
3523 The instances (A) and (B) match the constraint <literal>C Int Bool</literal>, 
3524 but (C) and (D) do not.  When matching, GHC takes
3525 no account of the context of the instance declaration
3526 (<literal>context1</literal> etc).
3527 GHC's default behaviour is that <emphasis>exactly one instance must match the
3528 constraint it is trying to resolve</emphasis>.  
3529 It is fine for there to be a <emphasis>potential</emphasis> of overlap (by
3530 including both declarations (A) and (B), say); an error is only reported if a 
3531 particular constraint matches more than one.
3532 </para>
3533
3534 <para>
3535 The <option>-XOverlappingInstances</option> flag instructs GHC to allow
3536 more than one instance to match, provided there is a most specific one.  For
3537 example, the constraint <literal>C Int [Int]</literal> matches instances (A),
3538 (C) and (D), but the last is more specific, and hence is chosen.  If there is no
3539 most-specific match, the program is rejected.
3540 </para>
3541 <para>
3542 However, GHC is conservative about committing to an overlapping instance.  For example:
3543 <programlisting>
3544   f :: [b] -> [b]
3545   f x = ...
3546 </programlisting>
3547 Suppose that from the RHS of <literal>f</literal> we get the constraint
3548 <literal>C Int [b]</literal>.  But
3549 GHC does not commit to instance (C), because in a particular
3550 call of <literal>f</literal>, <literal>b</literal> might be instantiate 
3551 to <literal>Int</literal>, in which case instance (D) would be more specific still.
3552 So GHC rejects the program.  
3553 (If you add the flag <option>-XIncoherentInstances</option>,
3554 GHC will instead pick (C), without complaining about 
3555 the problem of subsequent instantiations.)
3556 </para>
3557 <para>
3558 Notice that we gave a type signature to <literal>f</literal>, so GHC had to
3559 <emphasis>check</emphasis> that <literal>f</literal> has the specified type.  
3560 Suppose instead we do not give a type signature, asking GHC to <emphasis>infer</emphasis>
3561 it instead.  In this case, GHC will refrain from
3562 simplifying the constraint <literal>C Int [b]</literal> (for the same reason
3563 as before) but, rather than rejecting the program, it will infer the type
3564 <programlisting>
3565   f :: C Int [b] => [b] -> [b]
3566 </programlisting>
3567 That postpones the question of which instance to pick to the 
3568 call site for <literal>f</literal>
3569 by which time more is known about the type <literal>b</literal>.
3570 You can write this type signature yourself if you use the 
3571 <link linkend="flexible-contexts"><option>-XFlexibleContexts</option></link>
3572 flag.
3573 </para>
3574 <para>
3575 Exactly the same situation can arise in instance declarations themselves.  Suppose we have
3576 <programlisting>
3577   class Foo a where
3578      f :: a -> a
3579   instance Foo [b] where
3580      f x = ...
3581 </programlisting>
3582 and, as before, the constraint <literal>C Int [b]</literal> arises from <literal>f</literal>'s
3583 right hand side.  GHC will reject the instance, complaining as before that it does not know how to resolve
3584 the constraint <literal>C Int [b]</literal>, because it matches more than one instance
3585 declaration.  The solution is to postpone the choice by adding the constraint to the context
3586 of the instance declaration, thus:
3587 <programlisting>
3588   instance C Int [b] => Foo [b] where
3589      f x = ...
3590 </programlisting>
3591 (You need <link linkend="instance-rules"><option>-XFlexibleInstances</option></link> to do this.)
3592 </para>
3593 <para>
3594 The willingness to be overlapped or incoherent is a property of 
3595 the <emphasis>instance declaration</emphasis> itself, controlled by the
3596 presence or otherwise of the <option>-XOverlappingInstances</option> 
3597 and <option>-XIncoherentInstances</option> flags when that module is
3598 being defined.  Neither flag is required in a module that imports and uses the
3599 instance declaration.  Specifically, during the lookup process:
3600 <itemizedlist>
3601 <listitem><para>
3602 An instance declaration is ignored during the lookup process if (a) a more specific
3603 match is found, and (b) the instance declaration was compiled with 
3604 <option>-XOverlappingInstances</option>.  The flag setting for the
3605 more-specific instance does not matter.
3606 </para></listitem>
3607 <listitem><para>
3608 Suppose an instance declaration does not match the constraint being looked up, but
3609 does unify with it, so that it might match when the constraint is further 
3610 instantiated.  Usually GHC will regard this as a reason for not committing to
3611 some other constraint.  But if the instance declaration was compiled with
3612 <option>-XIncoherentInstances</option>, GHC will skip the "does-it-unify?" 
3613 check for that declaration.
3614 </para></listitem>
3615 </itemizedlist>
3616 These rules make it possible for a library author to design a library that relies on 
3617 overlapping instances without the library client having to know.  
3618 </para>
3619 <para>
3620 If an instance declaration is compiled without
3621 <option>-XOverlappingInstances</option>,
3622 then that instance can never be overlapped.  This could perhaps be
3623 inconvenient.  Perhaps the rule should instead say that the
3624 <emphasis>overlapping</emphasis> instance declaration should be compiled in
3625 this way, rather than the <emphasis>overlapped</emphasis> one.  Perhaps overlap
3626 at a usage site should be permitted regardless of how the instance declarations
3627 are compiled, if the <option>-XOverlappingInstances</option> flag is
3628 used at the usage site.  (Mind you, the exact usage site can occasionally be
3629 hard to pin down.)  We are interested to receive feedback on these points.
3630 </para>
3631 <para>The <option>-XIncoherentInstances</option> flag implies the
3632 <option>-XOverlappingInstances</option> flag, but not vice versa.
3633 </para>
3634 </sect3>
3635
3636
3637
3638 </sect2>
3639
3640 <sect2 id="overloaded-strings">
3641 <title>Overloaded string literals
3642 </title>
3643
3644 <para>
3645 GHC supports <emphasis>overloaded string literals</emphasis>.  Normally a
3646 string literal has type <literal>String</literal>, but with overloaded string
3647 literals enabled (with <literal>-XOverloadedStrings</literal>)
3648  a string literal has type <literal>(IsString a) => a</literal>.
3649 </para>
3650 <para>
3651 This means that the usual string syntax can be used, e.g., for packed strings
3652 and other variations of string like types.  String literals behave very much
3653 like integer literals, i.e., they can be used in both expressions and patterns.
3654 If used in a pattern the literal with be replaced by an equality test, in the same
3655 way as an integer literal is.
3656 </para>
3657 <para>
3658 The class <literal>IsString</literal> is defined as:
3659 <programlisting>
3660 class IsString a where
3661     fromString :: String -> a
3662 </programlisting>
3663 The only predefined instance is the obvious one to make strings work as usual:
3664 <programlisting>
3665 instance IsString [Char] where
3666     fromString cs = cs
3667 </programlisting>
3668 The class <literal>IsString</literal> is not in scope by default.  If you want to mention
3669 it explicitly (for example, to give an instance declaration for it), you can import it
3670 from module <literal>GHC.Exts</literal>.
3671 </para>
3672 <para>
3673 Haskell's defaulting mechanism is extended to cover string literals, when <option>-XOverloadedStrings</option> is specified.
3674 Specifically:
3675 <itemizedlist>
3676 <listitem><para>
3677 Each type in a default declaration must be an 
3678 instance of <literal>Num</literal> <emphasis>or</emphasis> of <literal>IsString</literal>.
3679 </para></listitem>
3680
3681 <listitem><para>
3682 The standard defaulting rule (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.3.4">Haskell Report, Section 4.3.4</ulink>)
3683 is extended thus: defaulting applies when all the unresolved constraints involve standard classes
3684 <emphasis>or</emphasis> <literal>IsString</literal>; and at least one is a numeric class
3685 <emphasis>or</emphasis> <literal>IsString</literal>.
3686 </para></listitem>
3687 </itemizedlist>
3688 </para>
3689 <para>
3690 A small example:
3691 <programlisting>
3692 module Main where
3693
3694 import GHC.Exts( IsString(..) )
3695
3696 newtype MyString = MyString String deriving (Eq, Show)
3697 instance IsString MyString where
3698     fromString = MyString
3699
3700 greet :: MyString -> MyString
3701 greet "hello" = "world"
3702 greet other = other
3703
3704 main = do
3705     print $ greet "hello"
3706     print $ greet "fool"
3707 </programlisting>
3708 </para>
3709 <para>
3710 Note that deriving <literal>Eq</literal> is necessary for the pattern matching
3711 to work since it gets translated into an equality comparison.
3712 </para>
3713 </sect2>
3714
3715 </sect1>
3716
3717 <sect1 id="type-families">
3718 <title>Type families</title>
3719
3720 <para>
3721   <firstterm>Indexed type families</firstterm> are a new GHC extension to
3722   facilitate type-level 
3723   programming. Type families are a generalisation of <firstterm>associated
3724   data types</firstterm> 
3725   (&ldquo;<ulink url="http://www.cse.unsw.edu.au/~chak/papers/CKPM05.html">Associated 
3726   Types with Class</ulink>&rdquo;, M. Chakravarty, G. Keller, S. Peyton Jones,
3727   and S. Marlow. In Proceedings of &ldquo;The 32nd Annual ACM SIGPLAN-SIGACT
3728      Symposium on Principles of Programming Languages (POPL'05)&rdquo;, pages
3729   1-13, ACM Press, 2005) and <firstterm>associated type synonyms</firstterm>
3730   (&ldquo;<ulink url="http://www.cse.unsw.edu.au/~chak/papers/CKP05.html">Type  
3731   Associated Type Synonyms</ulink>&rdquo;. M. Chakravarty, G. Keller, and
3732   S. Peyton Jones. 
3733   In Proceedings of &ldquo;The Tenth ACM SIGPLAN International Conference on
3734   Functional Programming&rdquo;, ACM Press, pages 241-253, 2005).  Type families
3735   themselves are described in the paper &ldquo;<ulink 
3736   url="http://www.cse.unsw.edu.au/~chak/papers/SPCS08.html">Type
3737   Checking with Open Type Functions</ulink>&rdquo;, T. Schrijvers,
3738   S. Peyton-Jones, 
3739   M. Chakravarty, and M. Sulzmann, in Proceedings of &ldquo;ICFP 2008: The
3740   13th ACM SIGPLAN International Conference on Functional
3741   Programming&rdquo;, ACM Press, pages 51-62, 2008. Type families
3742   essentially provide type-indexed data types and named functions on types,
3743   which are useful for generic programming and highly parameterised library
3744   interfaces as well as interfaces with enhanced static information, much like
3745   dependent types. They might also be regarded as an alternative to functional
3746   dependencies, but provide a more functional style of type-level programming
3747   than the relational style of functional dependencies. 
3748 </para>
3749 <para>
3750   Indexed type families, or type families for short, are type constructors that
3751   represent sets of types. Set members are denoted by supplying the type family
3752   constructor with type parameters, which are called <firstterm>type
3753   indices</firstterm>. The 
3754   difference between vanilla parametrised type constructors and family
3755   constructors is much like between parametrically polymorphic functions and
3756   (ad-hoc polymorphic) methods of type classes. Parametric polymorphic functions
3757   behave the same at all type instances, whereas class methods can change their
3758   behaviour in dependence on the class type parameters. Similarly, vanilla type
3759   constructors imply the same data representation for all type instances, but
3760   family constructors can have varying representation types for varying type
3761   indices. 
3762 </para>
3763 <para>
3764   Indexed type families come in two flavours: <firstterm>data
3765     families</firstterm> and <firstterm>type synonym 
3766     families</firstterm>. They are the indexed family variants of algebraic
3767   data types and type synonyms, respectively. The instances of data families
3768   can be data types and newtypes. 
3769 </para>
3770 <para>
3771   Type families are enabled by the flag <option>-XTypeFamilies</option>.
3772   Additional information on the use of type families in GHC is available on
3773   <ulink url="http://www.haskell.org/haskellwiki/GHC/Indexed_types">the
3774   Haskell wiki page on type families</ulink>.
3775 </para>
3776
3777 <sect2 id="data-families">
3778   <title>Data families</title>
3779
3780   <para>
3781     Data families appear in two flavours: (1) they can be defined on the
3782     toplevel 
3783     or (2) they can appear inside type classes (in which case they are known as
3784     associated types). The former is the more general variant, as it lacks the
3785     requirement for the type-indexes to coincide with the class
3786     parameters. However, the latter can lead to more clearly structured code and
3787     compiler warnings if some type instances were - possibly accidentally -
3788     omitted. In the following, we always discuss the general toplevel form first
3789     and then cover the additional constraints placed on associated types.
3790   </para>
3791
3792   <sect3 id="data-family-declarations"> 
3793     <title>Data family declarations</title>
3794
3795     <para>
3796       Indexed data families are introduced by a signature, such as 
3797 <programlisting>
3798 data family GMap k :: * -> *
3799 </programlisting>
3800       The special <literal>family</literal> distinguishes family from standard
3801       data declarations.  The result kind annotation is optional and, as
3802       usual, defaults to <literal>*</literal> if omitted.  An example is
3803 <programlisting>
3804 data family Array e
3805 </programlisting>
3806       Named arguments can also be given explicit kind signatures if needed.
3807       Just as with
3808       [http://www.haskell.org/ghc/docs/latest/html/users_guide/gadt.html GADT
3809       declarations] named arguments are entirely optional, so that we can
3810       declare <literal>Array</literal> alternatively with 
3811 <programlisting>
3812 data family Array :: * -> *
3813 </programlisting>
3814     </para>
3815
3816     <sect4 id="assoc-data-family-decl">
3817       <title>Associated data family declarations</title>
3818       <para>
3819         When a data family is declared as part of a type class, we drop
3820         the <literal>family</literal> special.  The <literal>GMap</literal>
3821         declaration takes the following form 
3822 <programlisting>
3823 class GMapKey k where
3824   data GMap k :: * -> *
3825   ...
3826 </programlisting>
3827         In contrast to toplevel declarations, named arguments must be used for
3828         all type parameters that are to be used as type-indexes.  Moreover,
3829         the argument names must be class parameters.  Each class parameter may
3830         only be used at most once per associated type, but some may be omitted
3831         and they may be in an order other than in the class head.  Hence, the
3832         following contrived example is admissible: 
3833 <programlisting>
3834   class C a b c where
3835   data T c a :: *
3836 </programlisting>
3837       </para>
3838     </sect4>
3839   </sect3>
3840
3841   <sect3 id="data-instance-declarations"> 
3842     <title>Data instance declarations</title>
3843
3844     <para>
3845       Instance declarations of data and newtype families are very similar to
3846       standard data and newtype declarations.  The only two differences are
3847       that the keyword <literal>data</literal> or <literal>newtype</literal>
3848       is followed by <literal>instance</literal> and that some or all of the
3849       type arguments can be non-variable types, but may not contain forall
3850       types or type synonym families.  However, data families are generally
3851       allowed in type parameters, and type synonyms are allowed as long as
3852       they are fully applied and expand to a type that is itself admissible -
3853       exactly as this is required for occurrences of type synonyms in class
3854       instance parameters.  For example, the <literal>Either</literal>
3855       instance for <literal>GMap</literal> is 
3856 <programlisting>
3857 data instance GMap (Either a b) v = GMapEither (GMap a v) (GMap b v)
3858 </programlisting>
3859       In this example, the declaration has only one variant.  In general, it
3860       can be any number.
3861     </para>
3862     <para>
3863       Data and newtype instance declarations are only permitted when an
3864       appropriate family declaration is in scope - just as a class instance declaratoin
3865       requires the class declaration to be visible.  Moreover, each instance
3866       declaration has to conform to the kind determined by its family
3867       declaration.  This implies that the number of parameters of an instance
3868       declaration matches the arity determined by the kind of the family.
3869     </para>
3870     <para>
3871       A data family instance declaration can use the full exprssiveness of
3872       ordinary <literal>data</literal> or <literal>newtype</literal> declarations:
3873       <itemizedlist>
3874       <listitem><para> Although, a data family is <emphasis>introduced</emphasis> with
3875       the keyword "<literal>data</literal>", a data family <emphasis>instance</emphasis> can 
3876       use either <literal>data</literal> or <literal>newtype</literal>. For example:
3877 <programlisting>
3878 data family T a
3879 data    instance T Int  = T1 Int | T2 Bool
3880 newtype instance T Char = TC Bool
3881 </programlisting>
3882       </para></listitem>
3883       <listitem><para> A <literal>data instance</literal> can use GADT syntax for the data constructors,
3884       and indeed can define a GADT.  For example:
3885 <programlisting>
3886 data family G a b
3887 data instance G [a] b where
3888    G1 :: c -> G [Int] b
3889    G2 :: G [a] Bool
3890 </programlisting>
3891       </para></listitem>
3892       <listitem><para> You can use a <literal>deriving</literal> clause on a
3893       <literal>data instance</literal> or <literal>newtype instance</literal>
3894       declaration.
3895       </para></listitem>
3896       </itemizedlist>
3897     </para>
3898
3899     <para>
3900       Even if type families are defined as toplevel declarations, functions
3901       that perform different computations for different family instances may still
3902       need to be defined as methods of type classes.  In particular, the
3903       following is not possible: 
3904 <programlisting>
3905 data family T a
3906 data instance T Int  = A
3907 data instance T Char = B
3908 foo :: T a -> Int
3909 foo A = 1             -- WRONG: These two equations together...
3910 foo B = 2             -- ...will produce a type error.
3911 </programlisting>
3912 Instead, you would have to write <literal>foo</literal> as a class operation, thus:
3913 <programlisting>
3914 class C a where 
3915   foo :: T a -> Int
3916 instance Foo Int where
3917   foo A = 1
3918 instance Foo Char where
3919   foo B = 2
3920 </programlisting>
3921       (Given the functionality provided by GADTs (Generalised Algebraic Data
3922       Types), it might seem as if a definition, such as the above, should be
3923       feasible.  However, type families are - in contrast to GADTs - are
3924       <emphasis>open;</emphasis> i.e., new instances can always be added,
3925       possibly in other 
3926       modules.  Supporting pattern matching across different data instances
3927       would require a form of extensible case construct.)
3928     </para>
3929
3930     <sect4 id="assoc-data-inst">
3931       <title>Associated data instances</title>
3932       <para>
3933         When an associated data family instance is declared within a type
3934         class instance, we drop the <literal>instance</literal> keyword in the
3935         family instance.  So, the <literal>Either</literal> instance
3936         for <literal>GMap</literal> becomes: 
3937 <programlisting>
3938 instance (GMapKey a, GMapKey b) => GMapKey (Either a b) where
3939   data GMap (Either a b) v = GMapEither (GMap a v) (GMap b v)
3940   ...
3941 </programlisting>
3942         The most important point about associated family instances is that the
3943         type indexes corresponding to class parameters must be identical to
3944         the type given in the instance head; here this is the first argument
3945         of <literal>GMap</literal>, namely <literal>Either a b</literal>,
3946         which coincides with the only class parameter.  Any parameters to the
3947         family constructor that do not correspond to class parameters, need to
3948         be variables in every instance; here this is the
3949         variable <literal>v</literal>. 
3950       </para>
3951       <para>
3952         Instances for an associated family can only appear as part of
3953         instances declarations of the class in which the family was declared -
3954         just as with the equations of the methods of a class.  Also in
3955         correspondence to how methods are handled, declarations of associated
3956         types can be omitted in class instances.  If an associated family
3957         instance is omitted, the corresponding instance type is not inhabited;
3958         i.e., only diverging expressions, such
3959         as <literal>undefined</literal>, can assume the type. 
3960       </para>
3961     </sect4>
3962
3963     <sect4 id="scoping-class-params">
3964       <title>Scoping of class parameters</title>
3965       <para>
3966         In the case of multi-parameter type classes, the visibility of class
3967         parameters in the right-hand side of associated family instances
3968         depends <emphasis>solely</emphasis> on the parameters of the data
3969         family.  As an example, consider the simple class declaration 
3970 <programlisting>
3971 class C a b where
3972   data T a
3973 </programlisting>
3974         Only one of the two class parameters is a parameter to the data
3975         family.  Hence, the following instance declaration is invalid: 
3976 <programlisting>
3977 instance C [c] d where
3978   data T [c] = MkT (c, d)    -- WRONG!!  'd' is not in scope
3979 </programlisting>
3980         Here, the right-hand side of the data instance mentions the type
3981         variable <literal>d</literal> that does not occur in its left-hand
3982         side.  We cannot admit such data instances as they would compromise
3983         type safety. 
3984       </para>
3985     </sect4>
3986
3987     <sect4 id="family-class-inst">
3988       <title>Type class instances of family instances</title>
3989       <para>
3990         Type class instances of instances of data families can be defined as
3991         usual, and in particular data instance declarations can
3992         have <literal>deriving</literal> clauses.  For example, we can write 
3993 <programlisting>
3994 data GMap () v = GMapUnit (Maybe v)
3995                deriving Show
3996 </programlisting>
3997         which implicitly defines an instance of the form
3998 <programlisting>
3999 instance Show v => Show (GMap () v) where ...
4000 </programlisting>
4001       </para>
4002       <para>
4003         Note that class instances are always for
4004         particular <emphasis>instances</emphasis> of a data family and never
4005         for an entire family as a whole.  This is for essentially the same
4006         reasons that we cannot define a toplevel function that performs
4007         pattern matching on the data constructors
4008         of <emphasis>different</emphasis> instances of a single type family.
4009         It would require a form of extensible case construct. 
4010       </para>
4011     </sect4>
4012
4013     <sect4 id="data-family-overlap">
4014       <title>Overlap of data instances</title>
4015       <para>
4016         The instance declarations of a data family used in a single program
4017         may not overlap at all, independent of whether they are associated or
4018         not.  In contrast to type class instances, this is not only a matter
4019         of consistency, but one of type safety. 
4020       </para>
4021     </sect4>
4022
4023   </sect3>
4024
4025   <sect3 id="data-family-import-export">
4026     <title>Import and export</title>
4027
4028     <para>
4029       The association of data constructors with type families is more dynamic
4030       than that is the case with standard data and newtype declarations.  In
4031       the standard case, the notation <literal>T(..)</literal> in an import or
4032       export list denotes the type constructor and all the data constructors
4033       introduced in its declaration.  However, a family declaration never
4034       introduces any data constructors; instead, data constructors are
4035       introduced by family instances.  As a result, which data constructors
4036       are associated with a type family depends on the currently visible
4037       instance declarations for that family.  Consequently, an import or
4038       export item of the form <literal>T(..)</literal> denotes the family
4039       constructor and all currently visible data constructors - in the case of
4040       an export item, these may be either imported or defined in the current
4041       module.  The treatment of import and export items that explicitly list
4042       data constructors, such as <literal>GMap(GMapEither)</literal>, is
4043       analogous. 
4044     </para>
4045
4046     <sect4 id="data-family-impexp-assoc">
4047       <title>Associated families</title>
4048       <para>
4049         As expected, an import or export item of the
4050         form <literal>C(..)</literal> denotes all of the class' methods and
4051         associated types.  However, when associated types are explicitly
4052         listed as subitems of a class, we need some new syntax, as uppercase
4053         identifiers as subitems are usually data constructors, not type
4054         constructors.  To clarify that we denote types here, each associated
4055         type name needs to be prefixed by the keyword <literal>type</literal>.
4056         So for example, when explicitly listing the components of
4057         the <literal>GMapKey</literal> class, we write <literal>GMapKey(type
4058         GMap, empty, lookup, insert)</literal>. 
4059       </para>
4060     </sect4>
4061
4062     <sect4 id="data-family-impexp-examples">
4063       <title>Examples</title>
4064       <para>
4065         Assuming our running <literal>GMapKey</literal> class example, let us
4066         look at some export lists and their meaning: 
4067         <itemizedlist>
4068           <listitem>
4069             <para><literal>module GMap (GMapKey) where...</literal>: Exports
4070               just the class name.</para>
4071           </listitem>
4072           <listitem>
4073             <para><literal>module GMap (GMapKey(..)) where...</literal>:
4074               Exports the class, the associated type <literal>GMap</literal>
4075               and the member
4076               functions <literal>empty</literal>, <literal>lookup</literal>,
4077               and <literal>insert</literal>.  None of the data constructors is 
4078               exported.</para>
4079           </listitem> 
4080           <listitem>
4081             <para><literal>module GMap (GMapKey(..), GMap(..))
4082                 where...</literal>: As before, but also exports all the data
4083               constructors <literal>GMapInt</literal>, 
4084               <literal>GMapChar</literal>,  
4085               <literal>GMapUnit</literal>, <literal>GMapPair</literal>,
4086               and <literal>GMapUnit</literal>.</para>
4087           </listitem>
4088           <listitem>
4089             <para><literal>module GMap (GMapKey(empty, lookup, insert),
4090             GMap(..)) where...</literal>: As before.</para>
4091           </listitem>
4092           <listitem>
4093             <para><literal>module GMap (GMapKey, empty, lookup, insert, GMap(..))
4094                 where...</literal>: As before.</para>
4095           </listitem>
4096         </itemizedlist>
4097       </para>
4098       <para>
4099         Finally, you can write <literal>GMapKey(type GMap)</literal> to denote
4100         both the class <literal>GMapKey</literal> as well as its associated
4101         type <literal>GMap</literal>.  However, you cannot
4102         write <literal>GMapKey(type GMap(..))</literal> &mdash; i.e.,
4103         sub-component specifications cannot be nested.  To
4104         specify <literal>GMap</literal>'s data constructors, you have to list
4105         it separately. 
4106       </para>
4107     </sect4>
4108
4109     <sect4 id="data-family-impexp-instances">
4110       <title>Instances</title>
4111       <para>
4112         Family instances are implicitly exported, just like class instances.
4113         However, this applies only to the heads of instances, not to the data
4114         constructors an instance defines. 
4115       </para>
4116     </sect4>
4117
4118   </sect3>
4119
4120 </sect2>
4121
4122 <sect2 id="synonym-families">
4123   <title>Synonym families</title>
4124
4125   <para>
4126     Type families appear in two flavours: (1) they can be defined on the
4127     toplevel or (2) they can appear inside type classes (in which case they
4128     are known as associated type synonyms).  The former is the more general
4129     variant, as it lacks the requirement for the type-indexes to coincide with
4130     the class parameters.  However, the latter can lead to more clearly
4131     structured code and compiler warnings if some type instances were -
4132     possibly accidentally - omitted.  In the following, we always discuss the
4133     general toplevel form first and then cover the additional constraints
4134     placed on associated types.
4135   </para>
4136
4137   <sect3 id="type-family-declarations">
4138     <title>Type family declarations</title>
4139
4140     <para>
4141       Indexed type families are introduced by a signature, such as 
4142 <programlisting>
4143 type family Elem c :: *
4144 </programlisting>
4145       The special <literal>family</literal> distinguishes family from standard
4146       type declarations.  The result kind annotation is optional and, as
4147       usual, defaults to <literal>*</literal> if omitted.  An example is 
4148 <programlisting>
4149 type family Elem c
4150 </programlisting>
4151       Parameters can also be given explicit kind signatures if needed.  We
4152       call the number of parameters in a type family declaration, the family's
4153       arity, and all applications of a type family must be fully saturated
4154       w.r.t. to that arity.  This requirement is unlike ordinary type synonyms
4155       and it implies that the kind of a type family is not sufficient to
4156       determine a family's arity, and hence in general, also insufficient to
4157       determine whether a type family application is well formed.  As an
4158       example, consider the following declaration: 
4159 <programlisting>
4160 type family F a b :: * -> *   -- F's arity is 2, 
4161                               -- although it's overall kind is * -> * -> * -> *
4162 </programlisting>
4163       Given this declaration the following are examples of well-formed and
4164       malformed types: 
4165 <programlisting>
4166 F Char [Int]       -- OK!  Kind: * -> *
4167 F Char [Int] Bool  -- OK!  Kind: *
4168 F IO Bool          -- WRONG: kind mismatch in the first argument
4169 F Bool             -- WRONG: unsaturated application
4170 </programlisting>
4171       </para>
4172
4173     <sect4 id="assoc-type-family-decl">
4174       <title>Associated type family declarations</title>
4175       <para>
4176         When a type family is declared as part of a type class, we drop
4177         the <literal>family</literal> special.  The <literal>Elem</literal>
4178         declaration takes the following form 
4179 <programlisting>
4180 class Collects ce where
4181   type Elem ce :: *
4182   ...
4183 </programlisting>
4184         The argument names of the type family must be class parameters.  Each
4185         class parameter may only be used at most once per associated type, but
4186         some may be omitted and they may be in an order other than in the
4187         class head.  Hence, the following contrived example is admissible: 
4188 <programlisting>
4189 class C a b c where
4190   type T c a :: *
4191 </programlisting>
4192         These rules are exactly as for associated data families.
4193       </para>
4194     </sect4>
4195   </sect3>
4196
4197   <sect3 id="type-instance-declarations">
4198     <title>Type instance declarations</title>
4199     <para>
4200       Instance declarations of type families are very similar to standard type
4201       synonym declarations.  The only two differences are that the
4202       keyword <literal>type</literal> is followed
4203       by <literal>instance</literal> and that some or all of the type
4204       arguments can be non-variable types, but may not contain forall types or
4205       type synonym families. However, data families are generally allowed, and
4206       type synonyms are allowed as long as they are fully applied and expand
4207       to a type that is admissible - these are the exact same requirements as
4208       for data instances.  For example, the <literal>[e]</literal> instance
4209       for <literal>Elem</literal> is 
4210 <programlisting>
4211 type instance Elem [e] = e
4212 </programlisting>
4213     </para>
4214     <para>
4215       Type family instance declarations are only legitimate when an
4216       appropriate family declaration is in scope - just like class instances
4217       require the class declaration to be visible.  Moreover, each instance
4218       declaration has to conform to the kind determined by its family
4219       declaration, and the number of type parameters in an instance
4220       declaration must match the number of type parameters in the family
4221       declaration.   Finally, the right-hand side of a type instance must be a
4222       monotype (i.e., it may not include foralls) and after the expansion of
4223       all saturated vanilla type synonyms, no synonyms, except family synonyms
4224       may remain.  Here are some examples of admissible and illegal type
4225       instances: 
4226 <programlisting>
4227 type family F a :: *
4228 type instance F [Int]              = Int         -- OK!
4229 type instance F String             = Char        -- OK!
4230 type instance F (F a)              = a           -- WRONG: type parameter mentions a type family
4231 type instance F (forall a. (a, b)) = b           -- WRONG: a forall type appears in a type parameter
4232 type instance F Float              = forall a.a  -- WRONG: right-hand side may not be a forall type
4233
4234 type family G a b :: * -> *
4235 type instance G Int            = (,)     -- WRONG: must be two type parameters
4236 type instance G Int Char Float = Double  -- WRONG: must be two type parameters
4237 </programlisting>
4238     </para>
4239
4240     <sect4 id="assoc-type-instance">
4241       <title>Associated type instance declarations</title>
4242       <para>
4243         When an associated family instance is declared within a type class
4244         instance, we drop the <literal>instance</literal> keyword in the family
4245         instance.  So, the <literal>[e]</literal> instance
4246         for <literal>Elem</literal> becomes: 
4247 <programlisting>
4248 instance (Eq (Elem [e])) => Collects ([e]) where
4249   type Elem [e] = e
4250   ...
4251 </programlisting>
4252         The most important point about associated family instances is that the
4253         type indexes corresponding to class parameters must be identical to the
4254         type given in the instance head; here this is <literal>[e]</literal>,
4255         which coincides with the only class parameter. 
4256       </para>
4257       <para>
4258         Instances for an associated family can only appear as part of  instances
4259         declarations of the class in which the family was declared - just as
4260         with the equations of the methods of a class.  Also in correspondence to
4261         how methods are handled, declarations of associated types can be omitted
4262         in class instances.  If an associated family instance is omitted, the
4263         corresponding instance type is not inhabited; i.e., only diverging
4264         expressions, such as <literal>undefined</literal>, can assume the type. 
4265       </para>
4266     </sect4>
4267
4268     <sect4 id="type-family-overlap">
4269       <title>Overlap of type synonym instances</title>
4270       <para>
4271         The instance declarations of a type family used in a single program
4272         may only overlap if the right-hand sides of the overlapping instances
4273         coincide for the overlapping types.  More formally, two instance
4274         declarations overlap if there is a substitution that makes the
4275         left-hand sides of the instances syntactically the same.  Whenever
4276         that is the case, the right-hand sides of the instances must also be
4277         syntactically equal under the same substitution.  This condition is
4278         independent of whether the type family is associated or not, and it is
4279         not only a matter of consistency, but one of type safety. 
4280       </para>
4281       <para>
4282         Here are two example to illustrate the condition under which overlap
4283         is permitted. 
4284 <programlisting>
4285 type instance F (a, Int) = [a]
4286 type instance F (Int, b) = [b]   -- overlap permitted
4287
4288 type instance G (a, Int)  = [a]
4289 type instance G (Char, a) = [a]  -- ILLEGAL overlap, as [Char] /= [Int]
4290 </programlisting>
4291       </para>
4292     </sect4>
4293
4294     <sect4 id="type-family-decidability">
4295       <title>Decidability of type synonym instances</title>
4296       <para>
4297         In order to guarantee that type inference in the presence of type
4298         families decidable, we need to place a number of additional
4299         restrictions on the formation of type instance declarations (c.f.,
4300         Definition 5 (Relaxed Conditions) of &ldquo;<ulink 
4301         url="http://www.cse.unsw.edu.au/~chak/papers/SPCS08.html">Type
4302           Checking with Open Type Functions</ulink>&rdquo;).  Instance
4303           declarations have the general form 
4304 <programlisting>
4305 type instance F t1 .. tn = t
4306 </programlisting>
4307         where we require that for every type family application <literal>(G s1
4308         .. sm)</literal> in <literal>t</literal>,  
4309         <orderedlist>
4310           <listitem>
4311             <para><literal>s1 .. sm</literal> do not contain any type family
4312             constructors,</para>
4313           </listitem>
4314           <listitem>
4315             <para>the total number of symbols (data type constructors and type
4316             variables) in <literal>s1 .. sm</literal> is strictly smaller than
4317             in <literal>t1 .. tn</literal>, and</para> 
4318           </listitem>
4319           <listitem>
4320             <para>for every type
4321             variable <literal>a</literal>, <literal>a</literal> occurs
4322             in <literal>s1 .. sm</literal> at most as often as in <literal>t1
4323             .. tn</literal>.</para>
4324           </listitem>
4325         </orderedlist>
4326         These restrictions are easily verified and ensure termination of type
4327         inference.  However, they are not sufficient to guarantee completeness
4328         of type inference in the presence of, so called, ''loopy equalities'',
4329         such as <literal>a ~ [F a]</literal>, where a recursive occurrence of
4330         a type variable is underneath a family application and data
4331         constructor application - see the above mentioned paper for details.   
4332       </para>
4333       <para>
4334         If the option <option>-XUndecidableInstances</option> is passed to the
4335         compiler, the above restrictions are not enforced and it is on the
4336         programmer to ensure termination of the normalisation of type families
4337         during type inference. 
4338       </para>
4339     </sect4>
4340   </sect3>
4341
4342   <sect3 id-="equality-constraints">
4343     <title>Equality constraints</title>
4344     <para>
4345       Type context can include equality constraints of the form <literal>t1 ~
4346       t2</literal>, which denote that the types <literal>t1</literal>
4347       and <literal>t2</literal> need to be the same.  In the presence of type
4348       families, whether two types are equal cannot generally be decided
4349       locally.  Hence, the contexts of function signatures may include
4350       equality constraints, as in the following example: 
4351 <programlisting>
4352 sumCollects :: (Collects c1, Collects c2, Elem c1 ~ Elem c2) => c1 -> c2 -> c2
4353 </programlisting>
4354       where we require that the element type of <literal>c1</literal>
4355       and <literal>c2</literal> are the same.  In general, the
4356       types <literal>t1</literal> and <literal>t2</literal> of an equality
4357       constraint may be arbitrary monotypes; i.e., they may not contain any
4358       quantifiers, independent of whether higher-rank types are otherwise
4359       enabled. 
4360     </para>
4361     <para>
4362       Equality constraints can also appear in class and instance contexts.
4363       The former enable a simple translation of programs using functional
4364       dependencies into programs using family synonyms instead.  The general
4365       idea is to rewrite a class declaration of the form 
4366 <programlisting>
4367 class C a b | a -> b
4368 </programlisting>
4369       to
4370 <programlisting>
4371 class (F a ~ b) => C a b where
4372   type F a
4373 </programlisting>
4374       That is, we represent every functional dependency (FD) <literal>a1 .. an
4375       -> b</literal> by an FD type family <literal>F a1 .. an</literal> and a
4376       superclass context equality <literal>F a1 .. an ~ b</literal>,
4377       essentially giving a name to the functional dependency.  In class
4378       instances, we define the type instances of FD families in accordance
4379       with the class head.  Method signatures are not affected by that
4380       process. 
4381     </para>
4382     <para>
4383       NB: Equalities in superclass contexts are not fully implemented in
4384       GHC 6.10. 
4385     </para>
4386   </sect3>
4387
4388   <sect3 id-="ty-fams-in-instances">
4389     <title>Type families and instance declarations</title>
4390     <para>Type families require us to extend the rules for 
4391       the form of instance heads, which are given 
4392       in <xref linkend="flexible-instance-head"/>.
4393       Specifically:
4394 <itemizedlist>
4395  <listitem><para>Data type families may appear in an instance head</para></listitem>
4396  <listitem><para>Type synonym families may not appear (at all) in an instance head</para></listitem>
4397 </itemizedlist>
4398 The reason for the latter restriction is that there is no way to check for. Consider
4399 <programlisting>
4400    type family F a
4401    type instance F Bool = Int
4402
4403    class C a
4404
4405    instance C Int
4406    instance C (F a)
4407 </programlisting>
4408 Now a constraint <literal>(C (F Bool))</literal> would match both instances.
4409 The situation is especially bad because the type instance for <literal>F Bool</literal>
4410 might be in another module, or even in a module that is not yet written.
4411 </para>
4412 </sect3>
4413 </sect2>
4414
4415 </sect1>
4416
4417 <sect1 id="other-type-extensions">
4418 <title>Other type system extensions</title>
4419
4420 <sect2 id="type-restrictions">
4421 <title>Type signatures</title>
4422
4423 <sect3 id="flexible-contexts"><title>The context of a type signature</title>
4424 <para>
4425 The <option>-XFlexibleContexts</option> flag lifts the Haskell 98 restriction
4426 that the type-class constraints in a type signature must have the 
4427 form <emphasis>(class type-variable)</emphasis> or
4428 <emphasis>(class (type-variable type-variable ...))</emphasis>. 
4429 With <option>-XFlexibleContexts</option>
4430 these type signatures are perfectly OK
4431 <programlisting>
4432   g :: Eq [a] => ...
4433   g :: Ord (T a ()) => ...
4434 </programlisting>
4435 </para>
4436 <para>
4437 GHC imposes the following restrictions on the constraints in a type signature.
4438 Consider the type:
4439
4440 <programlisting>
4441   forall tv1..tvn (c1, ...,cn) => type
4442 </programlisting>
4443
4444 (Here, we write the "foralls" explicitly, although the Haskell source
4445 language omits them; in Haskell 98, all the free type variables of an
4446 explicit source-language type signature are universally quantified,
4447 except for the class type variables in a class declaration.  However,
4448 in GHC, you can give the foralls if you want.  See <xref linkend="universal-quantification"/>).
4449 </para>
4450
4451 <para>
4452
4453 <orderedlist>
4454 <listitem>
4455
4456 <para>
4457  <emphasis>Each universally quantified type variable
4458 <literal>tvi</literal> must be reachable from <literal>type</literal></emphasis>.
4459
4460 A type variable <literal>a</literal> is "reachable" if it appears
4461 in the same constraint as either a type variable free in
4462 <literal>type</literal>, or another reachable type variable.  
4463 A value with a type that does not obey 
4464 this reachability restriction cannot be used without introducing
4465 ambiguity; that is why the type is rejected.
4466 Here, for example, is an illegal type:
4467
4468
4469 <programlisting>
4470   forall a. Eq a => Int
4471 </programlisting>
4472
4473
4474 When a value with this type was used, the constraint <literal>Eq tv</literal>
4475 would be introduced where <literal>tv</literal> is a fresh type variable, and
4476 (in the dictionary-translation implementation) the value would be
4477 applied to a dictionary for <literal>Eq tv</literal>.  The difficulty is that we
4478 can never know which instance of <literal>Eq</literal> to use because we never
4479 get any more information about <literal>tv</literal>.
4480 </para>
4481 <para>
4482 Note
4483 that the reachability condition is weaker than saying that <literal>a</literal> is
4484 functionally dependent on a type variable free in
4485 <literal>type</literal> (see <xref
4486 linkend="functional-dependencies"/>).  The reason for this is there
4487 might be a "hidden" dependency, in a superclass perhaps.  So
4488 "reachable" is a conservative approximation to "functionally dependent".
4489 For example, consider:
4490 <programlisting>
4491   class C a b | a -> b where ...
4492   class C a b => D a b where ...
4493   f :: forall a b. D a b => a -> a
4494 </programlisting>
4495 This is fine, because in fact <literal>a</literal> does functionally determine <literal>b</literal>
4496 but that is not immediately apparent from <literal>f</literal>'s type.
4497 </para>
4498 </listitem>
4499 <listitem>
4500
4501 <para>
4502  <emphasis>Every constraint <literal>ci</literal> must mention at least one of the
4503 universally quantified type variables <literal>tvi</literal></emphasis>.
4504
4505 For example, this type is OK because <literal>C a b</literal> mentions the
4506 universally quantified type variable <literal>b</literal>:
4507
4508
4509 <programlisting>
4510   forall a. C a b => burble
4511 </programlisting>
4512
4513
4514 The next type is illegal because the constraint <literal>Eq b</literal> does not
4515 mention <literal>a</literal>:
4516
4517
4518 <programlisting>
4519   forall a. Eq b => burble
4520 </programlisting>
4521
4522
4523 The reason for this restriction is milder than the other one.  The
4524 excluded types are never useful or necessary (because the offending
4525 context doesn't need to be witnessed at this point; it can be floated
4526 out).  Furthermore, floating them out increases sharing. Lastly,
4527 excluding them is a conservative choice; it leaves a patch of
4528 territory free in case we need it later.
4529
4530 </para>
4531 </listitem>
4532
4533 </orderedlist>
4534
4535 </para>
4536 </sect3>
4537
4538
4539
4540 </sect2>
4541
4542 <sect2 id="implicit-parameters">
4543 <title>Implicit parameters</title>
4544
4545 <para> Implicit parameters are implemented as described in 
4546 "Implicit parameters: dynamic scoping with static types", 
4547 J Lewis, MB Shields, E Meijer, J Launchbury,
4548 27th ACM Symposium on Principles of Programming Languages (POPL'00),
4549 Boston, Jan 2000.
4550 </para>
4551
4552 <para>(Most of the following, still rather incomplete, documentation is
4553 due to Jeff Lewis.)</para>
4554
4555 <para>Implicit parameter support is enabled with the option
4556 <option>-XImplicitParams</option>.</para>
4557
4558 <para>
4559 A variable is called <emphasis>dynamically bound</emphasis> when it is bound by the calling
4560 context of a function and <emphasis>statically bound</emphasis> when bound by the callee's
4561 context. In Haskell, all variables are statically bound. Dynamic
4562 binding of variables is a notion that goes back to Lisp, but was later
4563 discarded in more modern incarnations, such as Scheme. Dynamic binding
4564 can be very confusing in an untyped language, and unfortunately, typed
4565 languages, in particular Hindley-Milner typed languages like Haskell,
4566 only support static scoping of variables.
4567 </para>
4568 <para>
4569 However, by a simple extension to the type class system of Haskell, we
4570 can support dynamic binding. Basically, we express the use of a
4571 dynamically bound variable as a constraint on the type. These
4572 constraints lead to types of the form <literal>(?x::t') => t</literal>, which says "this
4573 function uses a dynamically-bound variable <literal>?x</literal> 
4574 of type <literal>t'</literal>". For
4575 example, the following expresses the type of a sort function,
4576 implicitly parameterized by a comparison function named <literal>cmp</literal>.
4577 <programlisting>
4578   sort :: (?cmp :: a -> a -> Bool) => [a] -> [a]
4579 </programlisting>
4580 The dynamic binding constraints are just a new form of predicate in the type class system.
4581 </para>
4582 <para>
4583 An implicit parameter occurs in an expression using the special form <literal>?x</literal>, 
4584 where <literal>x</literal> is
4585 any valid identifier (e.g. <literal>ord ?x</literal> is a valid expression). 
4586 Use of this construct also introduces a new
4587 dynamic-binding constraint in the type of the expression. 
4588 For example, the following definition
4589 shows how we can define an implicitly parameterized sort function in
4590 terms of an explicitly parameterized <literal>sortBy</literal> function:
4591 <programlisting>
4592   sortBy :: (a -> a -> Bool) -> [a] -> [a]
4593
4594   sort   :: (?cmp :: a -> a -> Bool) => [a] -> [a]
4595   sort    = sortBy ?cmp
4596 </programlisting>
4597 </para>
4598
4599 <sect3>
4600 <title>Implicit-parameter type constraints</title>
4601 <para>
4602 Dynamic binding constraints behave just like other type class
4603 constraints in that they are automatically propagated. Thus, when a
4604 function is used, its implicit parameters are inherited by the
4605 function that called it. For example, our <literal>sort</literal> function might be used
4606 to pick out the least value in a list:
4607 <programlisting>
4608   least   :: (?cmp :: a -> a -> Bool) => [a] -> a
4609   least xs = head (sort xs)
4610 </programlisting>
4611 Without lifting a finger, the <literal>?cmp</literal> parameter is
4612 propagated to become a parameter of <literal>least</literal> as well. With explicit
4613 parameters, the default is that parameters must always be explicit
4614 propagated. With implicit parameters, the default is to always
4615 propagate them.
4616 </para>
4617 <para>
4618 An implicit-parameter type constraint differs from other type class constraints in the
4619 following way: All uses of a particular implicit parameter must have
4620 the same type. This means that the type of <literal>(?x, ?x)</literal> 
4621 is <literal>(?x::a) => (a,a)</literal>, and not 
4622 <literal>(?x::a, ?x::b) => (a, b)</literal>, as would be the case for type
4623 class constraints.
4624 </para>
4625
4626 <para> You can't have an implicit parameter in the context of a class or instance
4627 declaration.  For example, both these declarations are illegal:
4628 <programlisting>
4629   class (?x::Int) => C a where ...
4630   instance (?x::a) => Foo [a] where ...
4631 </programlisting>
4632 Reason: exactly which implicit parameter you pick up depends on exactly where
4633 you invoke a function. But the ``invocation'' of instance declarations is done
4634 behind the scenes by the compiler, so it's hard to figure out exactly where it is done.
4635 Easiest thing is to outlaw the offending types.</para>
4636 <para>
4637 Implicit-parameter constraints do not cause ambiguity.  For example, consider:
4638 <programlisting>
4639    f :: (?x :: [a]) => Int -> Int
4640    f n = n + length ?x
4641
4642    g :: (Read a, Show a) => String -> String
4643    g s = show (read s)
4644 </programlisting>
4645 Here, <literal>g</literal> has an ambiguous type, and is rejected, but <literal>f</literal>
4646 is fine.  The binding for <literal>?x</literal> at <literal>f</literal>'s call site is 
4647 quite unambiguous, and fixes the type <literal>a</literal>.
4648 </para>
4649 </sect3>
4650
4651 <sect3>
4652 <title>Implicit-parameter bindings</title>
4653
4654 <para>
4655 An implicit parameter is <emphasis>bound</emphasis> using the standard
4656 <literal>let</literal> or <literal>where</literal> binding forms.
4657 For example, we define the <literal>min</literal> function by binding
4658 <literal>cmp</literal>.
4659 <programlisting>
4660   min :: [a] -> a
4661   min  = let ?cmp = (&lt;=) in least
4662 </programlisting>
4663 </para>
4664 <para>
4665 A group of implicit-parameter bindings may occur anywhere a normal group of Haskell
4666 bindings can occur, except at top level.  That is, they can occur in a <literal>let</literal> 
4667 (including in a list comprehension, or do-notation, or pattern guards), 
4668 or a <literal>where</literal> clause.
4669 Note the following points:
4670 <itemizedlist>
4671 <listitem><para>
4672 An implicit-parameter binding group must be a
4673 collection of simple bindings to implicit-style variables (no
4674 function-style bindings, and no type signatures); these bindings are
4675 neither polymorphic or recursive.  
4676 </para></listitem>
4677 <listitem><para>
4678 You may not mix implicit-parameter bindings with ordinary bindings in a 
4679 single <literal>let</literal>
4680 expression; use two nested <literal>let</literal>s instead.
4681 (In the case of <literal>where</literal> you are stuck, since you can't nest <literal>where</literal> clauses.)
4682 </para></listitem>
4683
4684 <listitem><para>
4685 You may put multiple implicit-parameter bindings in a
4686 single binding group; but they are <emphasis>not</emphasis> treated
4687 as a mutually recursive group (as ordinary <literal>let</literal> bindings are).
4688 Instead they are treated as a non-recursive group, simultaneously binding all the implicit
4689 parameter.  The bindings are not nested, and may be re-ordered without changing
4690 the meaning of the program.
4691 For example, consider:
4692 <programlisting>
4693   f t = let { ?x = t; ?y = ?x+(1::Int) } in ?x + ?y
4694 </programlisting>
4695 The use of <literal>?x</literal> in the binding for <literal>?y</literal> does not "see"
4696 the binding for <literal>?x</literal>, so the type of <literal>f</literal> is
4697 <programlisting>
4698   f :: (?x::Int) => Int -> Int
4699 </programlisting>
4700 </para></listitem>
4701 </itemizedlist>
4702 </para>
4703
4704 </sect3>
4705
4706 <sect3><title>Implicit parameters and polymorphic recursion</title>
4707
4708 <para>
4709 Consider these two definitions:
4710 <programlisting>
4711   len1 :: [a] -> Int
4712   len1 xs = let ?acc = 0 in len_acc1 xs
4713
4714   len_acc1 [] = ?acc
4715   len_acc1 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc1 xs
4716
4717   ------------
4718
4719   len2 :: [a] -> Int
4720   len2 xs = let ?acc = 0 in len_acc2 xs
4721
4722   len_acc2 :: (?acc :: Int) => [a] -> Int
4723   len_acc2 [] = ?acc
4724   len_acc2 (x:xs) = let ?acc = ?acc + (1::Int) in len_acc2 xs
4725 </programlisting>
4726 The only difference between the two groups is that in the second group
4727 <literal>len_acc</literal> is given a type signature.
4728 In the former case, <literal>len_acc1</literal> is monomorphic in its own
4729 right-hand side, so the implicit parameter <literal>?acc</literal> is not
4730 passed to the recursive call.  In the latter case, because <literal>len_acc2</literal>
4731 has a type signature, the recursive call is made to the
4732 <emphasis>polymorphic</emphasis> version, which takes <literal>?acc</literal>
4733 as an implicit parameter.  So we get the following results in GHCi:
4734 <programlisting>
4735   Prog> len1 "hello"
4736   0
4737   Prog> len2 "hello"
4738   5
4739 </programlisting>
4740 Adding a type signature dramatically changes the result!  This is a rather
4741 counter-intuitive phenomenon, worth watching out for.
4742 </para>
4743 </sect3>
4744
4745 <sect3><title>Implicit parameters and monomorphism</title>
4746
4747 <para>GHC applies the dreaded Monomorphism Restriction (section 4.5.5 of the
4748 Haskell Report) to implicit parameters.  For example, consider:
4749 <programlisting>
4750  f :: Int -> Int
4751   f v = let ?x = 0     in
4752         let y = ?x + v in
4753         let ?x = 5     in
4754         y
4755 </programlisting>
4756 Since the binding for <literal>y</literal> falls under the Monomorphism
4757 Restriction it is not generalised, so the type of <literal>y</literal> is
4758 simply <literal>Int</literal>, not <literal>(?x::Int) => Int</literal>.
4759 Hence, <literal>(f 9)</literal> returns result <literal>9</literal>.
4760 If you add a type signature for <literal>y</literal>, then <literal>y</literal>
4761 will get type <literal>(?x::Int) => Int</literal>, so the occurrence of
4762 <literal>y</literal> in the body of the <literal>let</literal> will see the
4763 inner binding of <literal>?x</literal>, so <literal>(f 9)</literal> will return
4764 <literal>14</literal>.
4765 </para>
4766 </sect3>
4767 </sect2>
4768
4769     <!--   ======================= COMMENTED OUT ========================
4770
4771     We intend to remove linear implicit parameters, so I'm at least removing
4772     them from the 6.6 user manual
4773
4774 <sect2 id="linear-implicit-parameters">
4775 <title>Linear implicit parameters</title>
4776 <para>
4777 Linear implicit parameters are an idea developed by Koen Claessen,
4778 Mark Shields, and Simon PJ.  They address the long-standing
4779 problem that monads seem over-kill for certain sorts of problem, notably:
4780 </para>
4781 <itemizedlist>
4782 <listitem> <para> distributing a supply of unique names </para> </listitem>
4783 <listitem> <para> distributing a supply of random numbers </para> </listitem>
4784 <listitem> <para> distributing an oracle (as in QuickCheck) </para> </listitem>
4785 </itemizedlist>
4786
4787 <para>
4788 Linear implicit parameters are just like ordinary implicit parameters,
4789 except that they are "linear"; that is, they cannot be copied, and
4790 must be explicitly "split" instead.  Linear implicit parameters are
4791 written '<literal>%x</literal>' instead of '<literal>?x</literal>'.  
4792 (The '/' in the '%' suggests the split!)
4793 </para>
4794 <para>
4795 For example:
4796 <programlisting>
4797     import GHC.Exts( Splittable )
4798
4799     data NameSupply = ...
4800     
4801     splitNS :: NameSupply -> (NameSupply, NameSupply)
4802     newName :: NameSupply -> Name
4803
4804     instance Splittable NameSupply where
4805         split = splitNS
4806
4807
4808     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4809     f env (Lam x e) = Lam x' (f env e)
4810                     where
4811                       x'   = newName %ns
4812                       env' = extend env x x'
4813     ...more equations for f...
4814 </programlisting>
4815 Notice that the implicit parameter %ns is consumed 
4816 <itemizedlist>
4817 <listitem> <para> once by the call to <literal>newName</literal> </para> </listitem>
4818 <listitem> <para> once by the recursive call to <literal>f</literal> </para></listitem>
4819 </itemizedlist>
4820 </para>
4821 <para>
4822 So the translation done by the type checker makes
4823 the parameter explicit:
4824 <programlisting>
4825     f :: NameSupply -> Env -> Expr -> Expr
4826     f ns env (Lam x e) = Lam x' (f ns1 env e)
4827                        where
4828                          (ns1,ns2) = splitNS ns
4829                          x' = newName ns2
4830                          env = extend env x x'
4831 </programlisting>
4832 Notice the call to 'split' introduced by the type checker.
4833 How did it know to use 'splitNS'?  Because what it really did
4834 was to introduce a call to the overloaded function 'split',
4835 defined by the class <literal>Splittable</literal>:
4836 <programlisting>
4837         class Splittable a where
4838           split :: a -> (a,a)
4839 </programlisting>
4840 The instance for <literal>Splittable NameSupply</literal> tells GHC how to implement
4841 split for name supplies.  But we can simply write
4842 <programlisting>
4843         g x = (x, %ns, %ns)
4844 </programlisting>
4845 and GHC will infer
4846 <programlisting>
4847         g :: (Splittable a, %ns :: a) => b -> (b,a,a)
4848 </programlisting>
4849 The <literal>Splittable</literal> class is built into GHC.  It's exported by module 
4850 <literal>GHC.Exts</literal>.
4851 </para>
4852 <para>
4853 Other points:
4854 <itemizedlist>
4855 <listitem> <para> '<literal>?x</literal>' and '<literal>%x</literal>' 
4856 are entirely distinct implicit parameters: you 
4857   can use them together and they won't interfere with each other. </para>
4858 </listitem>
4859
4860 <listitem> <para> You can bind linear implicit parameters in 'with' clauses. </para> </listitem>
4861
4862 <listitem> <para>You cannot have implicit parameters (whether linear or not)
4863   in the context of a class or instance declaration. </para></listitem>
4864 </itemizedlist>
4865 </para>
4866
4867 <sect3><title>Warnings</title>
4868
4869 <para>
4870 The monomorphism restriction is even more important than usual.
4871 Consider the example above:
4872 <programlisting>
4873     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4874     f env (Lam x e) = Lam x' (f env e)
4875                     where
4876                       x'   = newName %ns
4877                       env' = extend env x x'
4878 </programlisting>
4879 If we replaced the two occurrences of x' by (newName %ns), which is
4880 usually a harmless thing to do, we get:
4881 <programlisting>
4882     f :: (%ns :: NameSupply) => Env -> Expr -> Expr
4883     f env (Lam x e) = Lam (newName %ns) (f env e)
4884                     where
4885                       env' = extend env x (newName %ns)
4886 </programlisting>
4887 But now the name supply is consumed in <emphasis>three</emphasis> places
4888 (the two calls to newName,and the recursive call to f), so
4889 the result is utterly different.  Urk!  We don't even have 
4890 the beta rule.
4891 </para>
4892 <para>
4893 Well, this is an experimental change.  With implicit
4894 parameters we have already lost beta reduction anyway, and
4895 (as John Launchbury puts it) we can't sensibly reason about
4896 Haskell programs without knowing their typing.
4897 </para>
4898
4899 </sect3>
4900
4901 <sect3><title>Recursive functions</title>
4902 <para>Linear implicit parameters can be particularly tricky when you have a recursive function
4903 Consider
4904 <programlisting>
4905         foo :: %x::T => Int -> [Int]
4906         foo 0 = []
4907         foo n = %x : foo (n-1)
4908 </programlisting>
4909 where T is some type in class Splittable.</para>
4910 <para>
4911 Do you get a list of all the same T's or all different T's
4912 (assuming that split gives two distinct T's back)?
4913 </para><para>
4914 If you supply the type signature, taking advantage of polymorphic
4915 recursion, you get what you'd probably expect.  Here's the
4916 translated term, where the implicit param is made explicit:
4917 <programlisting>
4918         foo x 0 = []
4919         foo x n = let (x1,x2) = split x
4920                   in x1 : foo x2 (n-1)
4921 </programlisting>
4922 But if you don't supply a type signature, GHC uses the Hindley
4923 Milner trick of using a single monomorphic instance of the function
4924 for the recursive calls. That is what makes Hindley Milner type inference
4925 work.  So the translation becomes
4926 <programlisting>
4927         foo x = let
4928                   foom 0 = []
4929                   foom n = x : foom (n-1)
4930                 in
4931                 foom
4932 </programlisting>
4933 Result: 'x' is not split, and you get a list of identical T's.  So the
4934 semantics of the program depends on whether or not foo has a type signature.
4935 Yikes!
4936 </para><para>
4937 You may say that this is a good reason to dislike linear implicit parameters
4938 and you'd be right.  That is why they are an experimental feature. 
4939 </para>
4940 </sect3>
4941
4942 </sect2>
4943
4944 ================ END OF Linear Implicit Parameters commented out -->
4945
4946 <sect2 id="kinding">
4947 <title>Explicitly-kinded quantification</title>
4948
4949 <para>
4950 Haskell infers the kind of each type variable.  Sometimes it is nice to be able
4951 to give the kind explicitly as (machine-checked) documentation, 
4952 just as it is nice to give a type signature for a function.  On some occasions,
4953 it is essential to do so.  For example, in his paper "Restricted Data Types in Haskell" (Haskell Workshop 1999)
4954 John Hughes had to define the data type:
4955 <screen>
4956      data Set cxt a = Set [a]
4957                     | Unused (cxt a -> ())
4958 </screen>
4959 The only use for the <literal>Unused</literal> constructor was to force the correct
4960 kind for the type variable <literal>cxt</literal>.
4961 </para>
4962 <para>
4963 GHC now instead allows you to specify the kind of a type variable directly, wherever
4964 a type variable is explicitly bound, with the flag <option>-XKindSignatures</option>.
4965 </para>
4966 <para>
4967 This flag enables kind signatures in the following places:
4968 <itemizedlist>
4969 <listitem><para><literal>data</literal> declarations:
4970 <screen>
4971   data Set (cxt :: * -> *) a = Set [a]
4972 </screen></para></listitem>
4973 <listitem><para><literal>type</literal> declarations:
4974 <screen>
4975   type T (f :: * -> *) = f Int
4976 </screen></para></listitem>
4977 <listitem><para><literal>class</literal> declarations:
4978 <screen>
4979   class (Eq a) => C (f :: * -> *) a where ...
4980 </screen></para></listitem>
4981 <listitem><para><literal>forall</literal>'s in type signatures:
4982 <screen>
4983   f :: forall (cxt :: * -> *). Set cxt Int
4984 </screen></para></listitem>
4985 </itemizedlist>
4986 </para>
4987
4988 <para>
4989 The parentheses are required.  Some of the spaces are required too, to
4990 separate the lexemes.  If you write <literal>(f::*->*)</literal> you
4991 will get a parse error, because "<literal>::*->*</literal>" is a
4992 single lexeme in Haskell.
4993 </para>
4994
4995 <para>
4996 As part of the same extension, you can put kind annotations in types
4997 as well.  Thus:
4998 <screen>
4999    f :: (Int :: *) -> Int
5000    g :: forall a. a -> (a :: *)
5001 </screen>
5002 The syntax is
5003 <screen>
5004    atype ::= '(' ctype '::' kind ')
5005 </screen>
5006 The parentheses are required.
5007 </para>
5008 </sect2>
5009
5010
5011 <sect2 id="universal-quantification">
5012 <title>Arbitrary-rank polymorphism
5013 </title>
5014
5015 <para>
5016 Haskell type signatures are implicitly quantified.  The new keyword <literal>forall</literal>
5017 allows us to say exactly what this means.  For example:
5018 </para>
5019 <para>
5020 <programlisting>
5021         g :: b -> b
5022 </programlisting>
5023 means this:
5024 <programlisting>
5025         g :: forall b. (b -> b)
5026 </programlisting>
5027 The two are treated identically.
5028 </para>
5029
5030 <para>
5031 However, GHC's type system supports <emphasis>arbitrary-rank</emphasis> 
5032 explicit universal quantification in
5033 types. 
5034 For example, all the following types are legal:
5035 <programlisting>
5036     f1 :: forall a b. a -> b -> a
5037     g1 :: forall a b. (Ord a, Eq  b) => a -> b -> a
5038
5039     f2 :: (forall a. a->a) -> Int -> Int
5040     g2 :: (forall a. Eq a => [a] -> a -> Bool) -> Int -> Int
5041
5042     f3 :: ((forall a. a->a) -> Int) -> Bool -> Bool
5043
5044     f4 :: Int -> (forall a. a -> a)
5045 </programlisting>
5046 Here, <literal>f1</literal> and <literal>g1</literal> are rank-1 types, and
5047 can be written in standard Haskell (e.g. <literal>f1 :: a->b->a</literal>).
5048 The <literal>forall</literal> makes explicit the universal quantification that
5049 is implicitly added by Haskell.
5050 </para>
5051 <para>
5052 The functions <literal>f2</literal> and <literal>g2</literal> have rank-2 types;
5053 the <literal>forall</literal> is on the left of a function arrow.  As <literal>g2</literal>
5054 shows, the polymorphic type on the left of the function arrow can be overloaded.
5055 </para>
5056 <para>
5057 The function <literal>f3</literal> has a rank-3 type;
5058 it has rank-2 types on the left of a function arrow.
5059 </para>
5060 <para>
5061 GHC has three flags to control higher-rank types:
5062 <itemizedlist>
5063 <listitem><para>
5064  <option>-XPolymorphicComponents</option>: data constructors (only) can have polymorphic argument types.
5065 </para></listitem>
5066 <listitem><para>
5067  <option>-XRank2Types</option>: any function (including data constructors) can have a rank-2 type.
5068 </para></listitem>
5069 <listitem><para>
5070  <option>-XRankNTypes</option>: any function (including data constructors) can have an arbitrary-rank type.
5071 That is,  you can nest <literal>forall</literal>s
5072 arbitrarily deep in function arrows.
5073 In particular, a forall-type (also called a "type scheme"),
5074 including an operational type class context, is legal:
5075 <itemizedlist>
5076 <listitem> <para> On the left or right (see <literal>f4</literal>, for example)
5077 of a function arrow </para> </listitem>
5078 <listitem> <para> As the argument of a constructor, or type of a field, in a data type declaration. For
5079 example, any of the <literal>f1,f2,f3,g1,g2</literal> above would be valid
5080 field type signatures.</para> </listitem>
5081 <listitem> <para> As the type of an implicit parameter </para> </listitem>
5082 <listitem> <para> In a pattern type signature (see <xref linkend="scoped-type-variables"/>) </para> </listitem>
5083 </itemizedlist>
5084 </para></listitem>
5085 </itemizedlist>
5086 Of course <literal>forall</literal> becomes a keyword; you can't use <literal>forall</literal> as
5087 a type variable any more!
5088 </para>
5089
5090
5091 <sect3 id="univ">
5092 <title>Examples
5093 </title>
5094
5095 <para>
5096 In a <literal>data</literal> or <literal>newtype</literal> declaration one can quantify
5097 the types of the constructor arguments.  Here are several examples:
5098 </para>
5099
5100 <para>
5101
5102 <programlisting>
5103 data T a = T1 (forall b. b -> b -> b) a
5104
5105 data MonadT m = MkMonad { return :: forall a. a -> m a,
5106                           bind   :: forall a b. m a -> (a -> m b) -> m b
5107                         }
5108
5109 newtype Swizzle = MkSwizzle (Ord a => [a] -> [a])
5110 </programlisting>
5111
5112 </para>
5113
5114 <para>
5115 The constructors have rank-2 types:
5116 </para>
5117
5118 <para>
5119
5120 <programlisting>
5121 T1 :: forall a. (forall b. b -> b -> b) -> a -> T a
5122 MkMonad :: forall m. (forall a. a -> m a)
5123                   -> (forall a b. m a -> (a -> m b) -> m b)
5124                   -> MonadT m
5125 MkSwizzle :: (Ord a => [a] -> [a]) -> Swizzle
5126 </programlisting>
5127
5128 </para>
5129
5130 <para>
5131 Notice that you don't need to use a <literal>forall</literal> if there's an
5132 explicit context.  For example in the first argument of the
5133 constructor <function>MkSwizzle</function>, an implicit "<literal>forall a.</literal>" is
5134 prefixed to the argument type.  The implicit <literal>forall</literal>
5135 quantifies all type variables that are not already in scope, and are
5136 mentioned in the type quantified over.
5137 </para>
5138
5139 <para>
5140 As for type signatures, implicit quantification happens for non-overloaded
5141 types too.  So if you write this:
5142
5143 <programlisting>
5144   data T a = MkT (Either a b) (b -> b)
5145 </programlisting>
5146
5147 it's just as if you had written this:
5148
5149 <programlisting>
5150   data T a = MkT (forall b. Either a b) (forall b. b -> b)
5151 </programlisting>
5152
5153 That is, since the type variable <literal>b</literal> isn't in scope, it's
5154 implicitly universally quantified.  (Arguably, it would be better
5155 to <emphasis>require</emphasis> explicit quantification on constructor arguments
5156 where that is what is wanted.  Feedback welcomed.)
5157 </para>
5158
5159 <para>
5160 You construct values of types <literal>T1, MonadT, Swizzle</literal> by applying
5161 the constructor to suitable values, just as usual.  For example,
5162 </para>
5163
5164 <para>
5165
5166 <programlisting>
5167     a1 :: T Int
5168     a1 = T1 (\xy->x) 3
5169     
5170     a2, a3 :: Swizzle
5171     a2 = MkSwizzle sort
5172     a3 = MkSwizzle reverse
5173     
5174     a4 :: MonadT Maybe
5175     a4 = let r x = Just x
5176              b m k = case m of
5177                        Just y -> k y
5178                        Nothing -> Nothing
5179          in
5180          MkMonad r b
5181
5182     mkTs :: (forall b. b -> b -> b) -> a -> [T a]
5183     mkTs f x y = [T1 f x, T1 f y]
5184 </programlisting>
5185
5186 </para>
5187
5188 <para>
5189 The type of the argument can, as usual, be more general than the type
5190 required, as <literal>(MkSwizzle reverse)</literal> shows.  (<function>reverse</function>
5191 does not need the <literal>Ord</literal> constraint.)
5192 </para>
5193
5194 <para>
5195 When you use pattern matching, the bound variables may now have
5196 polymorphic types.  For example:
5197 </para>
5198
5199 <para>
5200
5201 <programlisting>
5202     f :: T a -> a -> (a, Char)
5203     f (T1 w k) x = (w k x, w 'c' 'd')
5204
5205     g :: (Ord a, Ord b) => Swizzle -> [a] -> (a -> b) -> [b]
5206     g (MkSwizzle s) xs f = s (map f (s xs))
5207
5208     h :: MonadT m -> [m a] -> m [a]
5209     h m [] = return m []
5210     h m (x:xs) = bind m x          $ \y ->
5211                  bind m (h m xs)   $ \ys ->
5212                  return m (y:ys)
5213 </programlisting>
5214
5215 </para>
5216
5217 <para>
5218 In the function <function>h</function> we use the record selectors <literal>return</literal>
5219 and <literal>bind</literal> to extract the polymorphic bind and return functions
5220 from the <literal>MonadT</literal> data structure, rather than using pattern
5221 matching.
5222 </para>
5223 </sect3>
5224
5225 <sect3>
5226 <title>Type inference</title>
5227
5228 <para>
5229 In general, type inference for arbitrary-rank types is undecidable.
5230 GHC uses an algorithm proposed by Odersky and Laufer ("Putting type annotations to work", POPL'96)
5231 to get a decidable algorithm by requiring some help from the programmer.
5232 We do not yet have a formal specification of "some help" but the rule is this:
5233 </para>
5234 <para>
5235 <emphasis>For a lambda-bound or case-bound variable, x, either the programmer
5236 provides an explicit polymorphic type for x, or GHC's type inference will assume
5237 that x's type has no foralls in it</emphasis>.
5238 </para>
5239 <para>
5240 What does it mean to "provide" an explicit type for x?  You can do that by 
5241 giving a type signature for x directly, using a pattern type signature
5242 (<xref linkend="scoped-type-variables"/>), thus:
5243 <programlisting>
5244      \ f :: (forall a. a->a) -> (f True, f 'c')
5245 </programlisting>
5246 Alternatively, you can give a type signature to the enclosing
5247 context, which GHC can "push down" to find the type for the variable:
5248 <programlisting>
5249      (\ f -> (f True, f 'c')) :: (forall a. a->a) -> (Bool,Char)
5250 </programlisting>
5251 Here the type signature on the expression can be pushed inwards
5252 to give a type signature for f.  Similarly, and more commonly,
5253 one can give a type signature for the function itself:
5254 <programlisting>
5255      h :: (forall a. a->a) -> (Bool,Char)
5256      h f = (f True, f 'c')
5257 </programlisting>
5258 You don't need to give a type signature if the lambda bound variable
5259 is a constructor argument.  Here is an example we saw earlier:
5260 <programlisting>
5261     f :: T a -> a -> (a, Char)
5262     f (T1 w k) x = (w k x, w 'c' 'd')
5263 </programlisting>
5264 Here we do not need to give a type signature to <literal>w</literal>, because
5265 it is an argument of constructor <literal>T1</literal> and that tells GHC all
5266 it needs to know.
5267 </para>
5268
5269 </sect3>
5270
5271
5272 <sect3 id="implicit-quant">
5273 <title>Implicit quantification</title>
5274
5275 <para>
5276 GHC performs implicit quantification as follows.  <emphasis>At the top level (only) of 
5277 user-written types, if and only if there is no explicit <literal>forall</literal>,
5278 GHC finds all the type variables mentioned in the type that are not already
5279 in scope, and universally quantifies them.</emphasis>  For example, the following pairs are 
5280 equivalent:
5281 <programlisting>
5282   f :: a -> a
5283   f :: forall a. a -> a
5284
5285   g (x::a) = let
5286                 h :: a -> b -> b
5287                 h x y = y
5288              in ...
5289   g (x::a) = let
5290                 h :: forall b. a -> b -> b
5291                 h x y = y
5292              in ...
5293 </programlisting>
5294 </para>
5295 <para>
5296 Notice that GHC does <emphasis>not</emphasis> find the innermost possible quantification
5297 point.  For example:
5298 <programlisting>
5299   f :: (a -> a) -> Int
5300            -- MEANS
5301   f :: forall a. (a -> a) -> Int
5302            -- NOT
5303   f :: (forall a. a -> a) -> Int
5304
5305
5306   g :: (Ord a => a -> a) -> Int
5307            -- MEANS the illegal type
5308   g :: forall a. (Ord a => a -> a) -> Int
5309            -- NOT
5310   g :: (forall a. Ord a => a -> a) -> Int
5311 </programlisting>
5312 The latter produces an illegal type, which you might think is silly,
5313 but at least the rule is simple.  If you want the latter type, you
5314 can write your for-alls explicitly.  Indeed, doing so is strongly advised
5315 for rank-2 types.
5316 </para>
5317 </sect3>
5318 </sect2>
5319
5320
5321 <sect2 id="impredicative-polymorphism">
5322 <title>Impredicative polymorphism
5323 </title>
5324 <para>GHC supports <emphasis>impredicative polymorphism</emphasis>, 
5325 enabled with <option>-XImpredicativeTypes</option>.  
5326 This means
5327 that you can call a polymorphic function at a polymorphic type, and
5328 parameterise data structures over polymorphic types.  For example:
5329 <programlisting>
5330   f :: Maybe (forall a. [a] -> [a]) -> Maybe ([Int], [Char])
5331   f (Just g) = Just (g [3], g "hello")
5332   f Nothing  = Nothing
5333 </programlisting>
5334 Notice here that the <literal>Maybe</literal> type is parameterised by the
5335 <emphasis>polymorphic</emphasis> type <literal>(forall a. [a] ->
5336 [a])</literal>.
5337 </para>
5338 <para>The technical details of this extension are described in the paper
5339 <ulink url="http://research.microsoft.com/%7Esimonpj/papers/boxy/">Boxy types:
5340 type inference for higher-rank types and impredicativity</ulink>,
5341 which appeared at ICFP 2006.  
5342 </para>
5343 </sect2>
5344
5345 <sect2 id="scoped-type-variables">
5346 <title>Lexically scoped type variables
5347 </title>
5348
5349 <para>
5350 GHC supports <emphasis>lexically scoped type variables</emphasis>, without
5351 which some type signatures are simply impossible to write. For example:
5352 <programlisting>
5353 f :: forall a. [a] -> [a]
5354 f xs = ys ++ ys
5355      where
5356        ys :: [a]
5357        ys = reverse xs
5358 </programlisting>
5359 The type signature for <literal>f</literal> brings the type variable <literal>a</literal> into scope,
5360 because of the explicit <literal>forall</literal> (<xref linkend="decl-type-sigs"/>).
5361 The type variables bound by a <literal>forall</literal> scope over
5362 the entire definition of the accompanying value declaration.
5363 In this example, the type variable <literal>a</literal> scopes over the whole 
5364 definition of <literal>f</literal>, including over
5365 the type signature for <varname>ys</varname>. 
5366 In Haskell 98 it is not possible to declare
5367 a type for <varname>ys</varname>; a major benefit of scoped type variables is that
5368 it becomes possible to do so.
5369 </para>
5370 <para>Lexically-scoped type variables are enabled by
5371 <option>-XScopedTypeVariables</option>.  This flag implies <option>-XRelaxedPolyRec</option>.
5372 </para>
5373 <para>Note: GHC 6.6 contains substantial changes to the way that scoped type
5374 variables work, compared to earlier releases.  Read this section
5375 carefully!</para>
5376
5377 <sect3>
5378 <title>Overview</title>
5379
5380 <para>The design follows the following principles
5381 <itemizedlist>
5382 <listitem><para>A scoped type variable stands for a type <emphasis>variable</emphasis>, and not for
5383 a <emphasis>type</emphasis>. (This is a change from GHC's earlier
5384 design.)</para></listitem>
5385 <listitem><para>Furthermore, distinct lexical type variables stand for distinct
5386 type variables.  This means that every programmer-written type signature
5387 (including one that contains free scoped type variables) denotes a
5388 <emphasis>rigid</emphasis> type; that is, the type is fully known to the type
5389 checker, and no inference is involved.</para></listitem>
5390 <listitem><para>Lexical type variables may be alpha-renamed freely, without
5391 changing the program.</para></listitem>
5392 </itemizedlist>
5393 </para>
5394 <para>
5395 A <emphasis>lexically scoped type variable</emphasis> can be bound by:
5396 <itemizedlist>
5397 <listitem><para>A declaration type signature (<xref linkend="decl-type-sigs"/>)</para></listitem>
5398 <listitem><para>An expression type signature (<xref linkend="exp-type-sigs"/>)</para></listitem>
5399 <listitem><para>A pattern type signature (<xref linkend="pattern-type-sigs"/>)</para></listitem>
5400 <listitem><para>Class and instance declarations (<xref linkend="cls-inst-scoped-tyvars"/>)</para></listitem>
5401 </itemizedlist>
5402 </para>
5403 <para>
5404 In Haskell, a programmer-written type signature is implicitly quantified over
5405 its free type variables (<ulink
5406 url="http://www.haskell.org/onlinereport/decls.html#sect4.1.2">Section
5407 4.1.2</ulink> 
5408 of the Haskell Report).
5409 Lexically scoped type variables affect this implicit quantification rules
5410 as follows: any type variable that is in scope is <emphasis>not</emphasis> universally
5411 quantified. For example, if type variable <literal>a</literal> is in scope,
5412 then
5413 <programlisting>
5414   (e :: a -> a)     means     (e :: a -> a)
5415   (e :: b -> b)     means     (e :: forall b. b->b)
5416   (e :: a -> b)     means     (e :: forall b. a->b)
5417 </programlisting>
5418 </para>
5419
5420
5421 </sect3>
5422
5423
5424 <sect3 id="decl-type-sigs">
5425 <title>Declaration type signatures</title>
5426 <para>A declaration type signature that has <emphasis>explicit</emphasis>
5427 quantification (using <literal>forall</literal>) brings into scope the
5428 explicitly-quantified
5429 type variables, in the definition of the named function.  For example:
5430 <programlisting>
5431   f :: forall a. [a] -> [a]
5432   f (x:xs) = xs ++ [ x :: a ]
5433 </programlisting>
5434 The "<literal>forall a</literal>" brings "<literal>a</literal>" into scope in
5435 the definition of "<literal>f</literal>".
5436 </para>
5437 <para>This only happens if:
5438 <itemizedlist>
5439 <listitem><para> The quantification in <literal>f</literal>'s type
5440 signature is explicit.  For example:
5441 <programlisting>
5442   g :: [a] -> [a]
5443   g (x:xs) = xs ++ [ x :: a ]
5444 </programlisting>
5445 This program will be rejected, because "<literal>a</literal>" does not scope
5446 over the definition of "<literal>f</literal>", so "<literal>x::a</literal>"
5447 means "<literal>x::forall a. a</literal>" by Haskell's usual implicit
5448 quantification rules.
5449 </para></listitem>
5450 <listitem><para> The signature gives a type for a function binding or a bare variable binding, 
5451 not a pattern binding.
5452 For example:
5453 <programlisting>
5454   f1 :: forall a. [a] -> [a]
5455   f1 (x:xs) = xs ++ [ x :: a ]   -- OK
5456
5457   f2 :: forall a. [a] -> [a]
5458   f2 = \(x:xs) -> xs ++ [ x :: a ]   -- OK
5459
5460   f3 :: forall a. [a] -> [a] 
5461   Just f3 = Just (\(x:xs) -> xs ++ [ x :: a ])   -- Not OK!
5462 </programlisting>
5463 The binding for <literal>f3</literal> is a pattern binding, and so its type signature
5464 does not bring <literal>a</literal> into scope.   However <literal>f1</literal> is a
5465 function binding, and <literal>f2</literal> binds a bare variable; in both cases
5466 the type signature brings <literal>a</literal> into scope.
5467 </para></listitem>
5468 </itemizedlist>
5469 </para>
5470 </sect3>
5471
5472 <sect3 id="exp-type-sigs">
5473 <title>Expression type signatures</title>
5474
5475 <para>An expression type signature that has <emphasis>explicit</emphasis>
5476 quantification (using <literal>forall</literal>) brings into scope the
5477 explicitly-quantified
5478 type variables, in the annotated expression.  For example:
5479 <programlisting>
5480   f = runST ( (op >>= \(x :: STRef s Int) -> g x) :: forall s. ST s Bool )
5481 </programlisting>
5482 Here, the type signature <literal>forall a. ST s Bool</literal> brings the 
5483 type variable <literal>s</literal> into scope, in the annotated expression 
5484 <literal>(op >>= \(x :: STRef s Int) -> g x)</literal>.
5485 </para>
5486
5487 </sect3>
5488
5489 <sect3 id="pattern-type-sigs">
5490 <title>Pattern type signatures</title>
5491 <para>
5492 A type signature may occur in any pattern; this is a <emphasis>pattern type
5493 signature</emphasis>. 
5494 For example:
5495 <programlisting>
5496   -- f and g assume that 'a' is already in scope
5497   f = \(x::Int, y::a) -> x
5498   g (x::a) = x
5499   h ((x,y) :: (Int,Bool)) = (y,x)
5500 </programlisting>
5501 In the case where all the type variables in the pattern type signature are
5502 already in scope (i.e. bound by the enclosing context), matters are simple: the
5503 signature simply constrains the type of the pattern in the obvious way.
5504 </para>
5505 <para>
5506 Unlike expression and declaration type signatures, pattern type signatures are not implicitly generalised.
5507 The pattern in a <emphasis>pattern binding</emphasis> may only mention type variables
5508 that are already in scope.  For example:
5509 <programlisting>
5510   f :: forall a. [a] -> (Int, [a])
5511   f xs = (n, zs)
5512     where
5513       (ys::[a], n) = (reverse xs, length xs) -- OK
5514       zs::[a] = xs ++ ys                     -- OK
5515
5516       Just (v::b) = ...  -- Not OK; b is not in scope
5517 </programlisting>
5518 Here, the pattern signatures for <literal>ys</literal> and <literal>zs</literal>
5519 are fine, but the one for <literal>v</literal> is not because <literal>b</literal> is
5520 not in scope. 
5521 </para>
5522 <para>
5523 However, in all patterns <emphasis>other</emphasis> than pattern bindings, a pattern
5524 type signature may mention a type variable that is not in scope; in this case,
5525 <emphasis>the signature brings that type variable into scope</emphasis>.
5526 This is particularly important for existential data constructors.  For example:
5527 <programlisting>
5528   data T = forall a. MkT [a]
5529
5530   k :: T -> T
5531   k (MkT [t::a]) = MkT t3
5532                  where
5533                    t3::[a] = [t,t,t]
5534 </programlisting>
5535 Here, the pattern type signature <literal>(t::a)</literal> mentions a lexical type
5536 variable that is not already in scope.  Indeed, it <emphasis>cannot</emphasis> already be in scope,
5537 because it is bound by the pattern match.  GHC's rule is that in this situation
5538 (and only then), a pattern type signature can mention a type variable that is
5539 not already in scope; the effect is to bring it into scope, standing for the
5540 existentially-bound type variable.
5541 </para>
5542 <para>
5543 When a pattern type signature binds a type variable in this way, GHC insists that the 
5544 type variable is bound to a <emphasis>rigid</emphasis>, or fully-known, type variable.
5545 This means that any user-written type signature always stands for a completely known type.
5546 </para>
5547 <para>
5548 If all this seems a little odd, we think so too.  But we must have
5549 <emphasis>some</emphasis> way to bring such type variables into scope, else we
5550 could not name existentially-bound type variables in subsequent type signatures.
5551 </para>
5552 <para>
5553 This is (now) the <emphasis>only</emphasis> situation in which a pattern type 
5554 signature is allowed to mention a lexical variable that is not already in
5555 scope.
5556 For example, both <literal>f</literal> and <literal>g</literal> would be
5557 illegal if <literal>a</literal> was not already in scope.
5558 </para>
5559
5560
5561 </sect3>
5562
5563 <!-- ==================== Commented out part about result type signatures 
5564
5565 <sect3 id="result-type-sigs">
5566 <title>Result type signatures</title>
5567
5568 <para>
5569 The result type of a function, lambda, or case expression alternative can be given a signature, thus:
5570
5571 <programlisting>
5572   {- f assumes that 'a' is already in scope -}
5573   f x y :: [a] = [x,y,x]
5574
5575   g = \ x :: [Int] -> [3,4]
5576
5577   h :: forall a. [a] -> a
5578   h xs = case xs of
5579             (y:ys) :: a -> y
5580 </programlisting>
5581 The final <literal>:: [a]</literal> after the patterns of <literal>f</literal> gives the type of 
5582 the result of the function.  Similarly, the body of the lambda in the RHS of
5583 <literal>g</literal> is <literal>[Int]</literal>, and the RHS of the case
5584 alternative in <literal>h</literal> is <literal>a</literal>.
5585 </para>
5586 <para> A result type signature never brings new type variables into scope.</para>
5587 <para>
5588 There are a couple of syntactic wrinkles.  First, notice that all three
5589 examples would parse quite differently with parentheses:
5590 <programlisting>
5591   {- f assumes that 'a' is already in scope -}
5592   f x (y :: [a]) = [x,y,x]
5593
5594   g = \ (x :: [Int]) -> [3,4]
5595
5596   h :: forall a. [a] -> a
5597   h xs = case xs of
5598             ((y:ys) :: a) -> y
5599 </programlisting>
5600 Now the signature is on the <emphasis>pattern</emphasis>; and
5601 <literal>h</literal> would certainly be ill-typed (since the pattern
5602 <literal>(y:ys)</literal> cannot have the type <literal>a</literal>.
5603
5604 Second, to avoid ambiguity, the type after the &ldquo;<literal>::</literal>&rdquo; in a result
5605 pattern signature on a lambda or <literal>case</literal> must be atomic (i.e. a single
5606 token or a parenthesised type of some sort).  To see why,
5607 consider how one would parse this:
5608 <programlisting>
5609   \ x :: a -> b -> x
5610 </programlisting>
5611 </para>
5612 </sect3>
5613
5614  -->
5615
5616 <sect3 id="cls-inst-scoped-tyvars">
5617 <title>Class and instance declarations</title>
5618 <para>
5619
5620 The type variables in the head of a <literal>class</literal> or <literal>instance</literal> declaration
5621 scope over the methods defined in the <literal>where</literal> part.  For example:
5622
5623
5624 <programlisting>
5625   class C a where
5626     op :: [a] -> a
5627
5628     op xs = let ys::[a]
5629                 ys = reverse xs
5630             in
5631             head ys
5632 </programlisting>
5633 </para>
5634 </sect3>
5635
5636 </sect2>
5637
5638
5639 <sect2 id="typing-binds">
5640 <title>Generalised typing of mutually recursive bindings</title>
5641
5642 <para>
5643 The Haskell Report specifies that a group of bindings (at top level, or in a
5644 <literal>let</literal> or <literal>where</literal>) should be sorted into
5645 strongly-connected components, and then type-checked in dependency order
5646 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.1">Haskell
5647 Report, Section 4.5.1</ulink>).  
5648 As each group is type-checked, any binders of the group that
5649 have
5650 an explicit type signature are put in the type environment with the specified
5651 polymorphic type,
5652 and all others are monomorphic until the group is generalised 
5653 (<ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.2">Haskell Report, Section 4.5.2</ulink>).
5654 </para>
5655
5656 <para>Following a suggestion of Mark Jones, in his paper
5657 <ulink url="http://citeseer.ist.psu.edu/424440.html">Typing Haskell in
5658 Haskell</ulink>,
5659 GHC implements a more general scheme.  If <option>-XRelaxedPolyRec</option> is
5660 specified:
5661 <emphasis>the dependency analysis ignores references to variables that have an explicit
5662 type signature</emphasis>.
5663 As a result of this refined dependency analysis, the dependency groups are smaller, and more bindings will
5664 typecheck.  For example, consider:
5665 <programlisting>
5666   f :: Eq a =&gt; a -> Bool
5667   f x = (x == x) || g True || g "Yes"
5668   
5669   g y = (y &lt;= y) || f True
5670 </programlisting>
5671 This is rejected by Haskell 98, but under Jones's scheme the definition for
5672 <literal>g</literal> is typechecked first, separately from that for
5673 <literal>f</literal>,
5674 because the reference to <literal>f</literal> in <literal>g</literal>'s right
5675 hand side is ignored by the dependency analysis.  Then <literal>g</literal>'s
5676 type is generalised, to get
5677 <programlisting>
5678   g :: Ord a =&gt; a -> Bool
5679 </programlisting>
5680 Now, the definition for <literal>f</literal> is typechecked, with this type for
5681 <literal>g</literal> in the type environment.
5682 </para>
5683
5684 <para>
5685 The same refined dependency analysis also allows the type signatures of 
5686 mutually-recursive functions to have different contexts, something that is illegal in
5687 Haskell 98 (Section 4.5.2, last sentence).  With
5688 <option>-XRelaxedPolyRec</option>
5689 GHC only insists that the type signatures of a <emphasis>refined</emphasis> group have identical
5690 type signatures; in practice this means that only variables bound by the same
5691 pattern binding must have the same context.  For example, this is fine:
5692 <programlisting>
5693   f :: Eq a =&gt; a -> Bool
5694   f x = (x == x) || g True
5695   
5696   g :: Ord a =&gt; a -> Bool
5697   g y = (y &lt;= y) || f True
5698 </programlisting>
5699 </para>
5700 </sect2>
5701
5702 </sect1>
5703 <!-- ==================== End of type system extensions =================  -->
5704   
5705 <!-- ====================== TEMPLATE HASKELL =======================  -->
5706
5707 <sect1 id="template-haskell">
5708 <title>Template Haskell</title>
5709
5710 <para>Template Haskell allows you to do compile-time meta-programming in
5711 Haskell.  
5712 The background to
5713 the main technical innovations is discussed in "<ulink
5714 url="http://research.microsoft.com/~simonpj/papers/meta-haskell/">
5715 Template Meta-programming for Haskell</ulink>" (Proc Haskell Workshop 2002).
5716 </para>
5717 <para>
5718 There is a Wiki page about
5719 Template Haskell at <ulink url="http://www.haskell.org/haskellwiki/Template_Haskell">
5720 http://www.haskell.org/haskellwiki/Template_Haskell</ulink>, and that is the best place to look for
5721 further details.
5722 You may also 
5723 consult the <ulink
5724 url="http://www.haskell.org/ghc/docs/latest/html/libraries/index.html">online
5725 Haskell library reference material</ulink> 
5726 (look for module <literal>Language.Haskell.TH</literal>).
5727 Many changes to the original design are described in 
5728       <ulink url="http://research.microsoft.com/~simonpj/papers/meta-haskell/notes2.ps">
5729 Notes on Template Haskell version 2</ulink>.
5730 Not all of these changes are in GHC, however.
5731 </para>
5732
5733 <para> The first example from that paper is set out below (<xref linkend="th-example"/>) 
5734 as a worked example to help get you started. 
5735 </para>
5736
5737 <para>
5738 The documentation here describes the realisation of Template Haskell in GHC.  It is not detailed enough to 
5739 understand Template Haskell; see the <ulink url="http://haskell.org/haskellwiki/Template_Haskell">
5740 Wiki page</ulink>.
5741 </para>
5742
5743     <sect2>
5744       <title>Syntax</title>
5745
5746       <para> Template Haskell has the following new syntactic
5747       constructions.  You need to use the flag
5748       <option>-XTemplateHaskell</option>
5749         <indexterm><primary><option>-XTemplateHaskell</option></primary>
5750       </indexterm>to switch these syntactic extensions on
5751       (<option>-XTemplateHaskell</option> is no longer implied by
5752       <option>-fglasgow-exts</option>).</para>
5753
5754         <itemizedlist>
5755               <listitem><para>
5756                   A splice is written <literal>$x</literal>, where <literal>x</literal> is an
5757                   identifier, or <literal>$(...)</literal>, where the "..." is an arbitrary expression.
5758                   There must be no space between the "$" and the identifier or parenthesis.  This use
5759                   of "$" overrides its meaning as an infix operator, just as "M.x" overrides the meaning
5760                   of "." as an infix operator.  If you want the infix operator, put spaces around it.
5761                   </para>
5762               <para> A splice can occur in place of 
5763                   <itemizedlist>
5764                     <listitem><para> an expression; the spliced expression must
5765                     have type <literal>Q Exp</literal></para></listitem>
5766                     <listitem><para> a list of top-level declarations; the spliced expression must have type <literal>Q [Dec]</literal></para></listitem>
5767                     </itemizedlist>
5768                 </para>
5769             Inside a splice you can can only call functions defined in imported modules,
5770         not functions defined elsewhere in the same module.</listitem>
5771
5772
5773               <listitem><para>
5774                   A expression quotation is written in Oxford brackets, thus:
5775                   <itemizedlist>
5776                     <listitem><para> <literal>[| ... |]</literal>, where the "..." is an expression; 
5777                              the quotation has type <literal>Q Exp</literal>.</para></listitem>
5778                     <listitem><para> <literal>[d| ... |]</literal>, where the "..." is a list of top-level declarations;
5779                              the quotation has type <literal>Q [Dec]</literal>.</para></listitem>
5780                     <listitem><para> <literal>[t| ... |]</literal>, where the "..." is a type;
5781                              the quotation has type <literal>Q Typ</literal>.</para></listitem>
5782                   </itemizedlist></para></listitem>
5783
5784               <listitem><para>
5785                   A quasi-quotation can appear in either a pattern context or an
5786                   expression context and is also written in Oxford brackets:
5787                   <itemizedlist>
5788                     <listitem><para> <literal>[:<replaceable>varid</replaceable>| ... |]</literal>,
5789                         where the "..." is an arbitrary string; a full description of the
5790                         quasi-quotation facility is given in <xref linkend="th-quasiquotation"/>.</para></listitem>
5791                   </itemizedlist></para></listitem>
5792
5793               <listitem><para>
5794                   A name can be quoted with either one or two prefix single quotes:
5795                   <itemizedlist>
5796                     <listitem><para> <literal>'f</literal> has type <literal>Name</literal>, and names the function <literal>f</literal>.
5797                   Similarly <literal>'C</literal> has type <literal>Name</literal> and names the data constructor <literal>C</literal>.
5798                   In general <literal>'</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in an expression context.
5799                      </para></listitem> 
5800                     <listitem><para> <literal>''T</literal> has type <literal>Name</literal>, and names the type constructor  <literal>T</literal>.
5801                   That is, <literal>''</literal><replaceable>thing</replaceable> interprets <replaceable>thing</replaceable> in a type context.
5802                      </para></listitem> 
5803                   </itemizedlist>
5804                   These <literal>Names</literal> can be used to construct Template Haskell expressions, patterns, declarations etc.  They
5805                   may also be given as an argument to the <literal>reify</literal> function.
5806                  </para>
5807                 </listitem>
5808
5809                   
5810         </itemizedlist>
5811 (Compared to the original paper, there are many differences of detail.
5812 The syntax for a declaration splice uses "<literal>$</literal>" not "<literal>splice</literal>".
5813 The type of the enclosed expression must be  <literal>Q [Dec]</literal>, not  <literal>[Q Dec]</literal>.
5814 Type splices are not implemented, and neither are pattern splices or quotations.
5815
5816 </sect2>
5817
5818 <sect2>  <title> Using Template Haskell </title>
5819 <para>
5820 <itemizedlist>
5821     <listitem><para>
5822     The data types and monadic constructor functions for Template Haskell are in the library
5823     <literal>Language.Haskell.THSyntax</literal>.
5824     </para></listitem>
5825
5826     <listitem><para>
5827     You can only run a function at compile time if it is imported from another module.  That is,
5828             you can't define a function in a module, and call it from within a splice in the same module.
5829             (It would make sense to do so, but it's hard to implement.)
5830    </para></listitem>
5831
5832    <listitem><para>
5833    You can only run a function at compile time if it is imported
5834    from another module <emphasis>that is not part of a mutually-recursive group of modules
5835    that includes the module currently being compiled</emphasis>.  Furthermore, all of the modules of 
5836    the mutually-recursive group must be reachable by non-SOURCE imports from the module where the
5837    splice is to be run.</para>
5838    <para>
5839    For example, when compiling module A,
5840    you can only run Template Haskell functions imported from B if B does not import A (directly or indirectly).
5841    The reason should be clear: to run B we must compile and run A, but we are currently type-checking A.
5842    </para></listitem>
5843
5844     <listitem><para>
5845             The flag <literal>-ddump-splices</literal> shows the expansion of all top-level splices as they happen.
5846    </para></listitem>
5847     <listitem><para>
5848             If you are building GHC from source, you need at least a stage-2 bootstrap compiler to
5849               run Template Haskell.  A stage-1 compiler will reject the TH constructs.  Reason: TH
5850               compiles and runs a program, and then looks at the result.  So it's important that
5851               the program it compiles produces results whose representations are identical to
5852               those of the compiler itself.
5853    </para></listitem>
5854 </itemizedlist>
5855 </para>
5856 <para> Template Haskell works in any mode (<literal>--make</literal>, <literal>--interactive</literal>,
5857         or file-at-a-time).  There used to be a restriction to the former two, but that restriction 
5858         has been lifted.
5859 </para>
5860 </sect2>
5861  
5862 <sect2 id="th-example">  <title> A Template Haskell Worked Example </title>
5863 <para>To help you get over the confidence barrier, try out this skeletal worked example.
5864   First cut and paste the two modules below into "Main.hs" and "Printf.hs":</para>
5865
5866 <programlisting>
5867
5868 {- Main.hs -}
5869 module Main where
5870
5871 -- Import our template "pr"
5872 import Printf ( pr )
5873
5874 -- The splice operator $ takes the Haskell source code
5875 -- generated at compile time by "pr" and splices it into
5876 -- the argument of "putStrLn".
5877 main = putStrLn ( $(pr "Hello") )
5878
5879
5880 {- Printf.hs -}
5881 module Printf where
5882
5883 -- Skeletal printf from the paper.
5884 -- It needs to be in a separate module to the one where
5885 -- you intend to use it.
5886
5887 -- Import some Template Haskell syntax
5888 import Language.Haskell.TH
5889
5890 -- Describe a format string
5891 data Format = D | S | L String
5892
5893 -- Parse a format string.  This is left largely to you
5894 -- as we are here interested in building our first ever
5895 -- Template Haskell program and not in building printf.
5896 parse :: String -> [Format]
5897 parse s   = [ L s ]
5898
5899 -- Generate Haskell source code from a parsed representation
5900 -- of the format string.  This code will be spliced into
5901 -- the module which calls "pr", at compile time.
5902 gen :: [Format] -> Q Exp
5903 gen [D]   = [| \n -> show n |]
5904 gen [S]   = [| \s -> s |]
5905 gen [L s] = stringE s
5906
5907 -- Here we generate the Haskell code for the splice
5908 -- from an input format string.
5909 pr :: String -> Q Exp
5910 pr s = gen (parse s)
5911 </programlisting>
5912
5913 <para>Now run the compiler (here we are a Cygwin prompt on Windows):
5914 </para>
5915 <programlisting>
5916 $ ghc --make -XTemplateHaskell main.hs -o main.exe
5917 </programlisting>
5918
5919 <para>Run "main.exe" and here is your output:</para>
5920
5921 <programlisting>
5922 $ ./main
5923 Hello
5924 </programlisting>
5925
5926 </sect2>
5927
5928 <sect2>
5929 <title>Using Template Haskell with Profiling</title>
5930 <indexterm><primary>profiling</primary><secondary>with Template Haskell</secondary></indexterm>
5931  
5932 <para>Template Haskell relies on GHC's built-in bytecode compiler and
5933 interpreter to run the splice expressions.  The bytecode interpreter
5934 runs the compiled expression on top of the same runtime on which GHC
5935 itself is running; this means that the compiled code referred to by
5936 the interpreted expression must be compatible with this runtime, and
5937 in particular this means that object code that is compiled for
5938 profiling <emphasis>cannot</emphasis> be loaded and used by a splice
5939 expression, because profiled object code is only compatible with the
5940 profiling version of the runtime.</para>
5941
5942 <para>This causes difficulties if you have a multi-module program
5943 containing Template Haskell code and you need to compile it for
5944 profiling, because GHC cannot load the profiled object code and use it
5945 when executing the splices.  Fortunately GHC provides a workaround.
5946 The basic idea is to compile the program twice:</para>
5947
5948 <orderedlist>
5949 <listitem>
5950   <para>Compile the program or library first the normal way, without
5951   <option>-prof</option><indexterm><primary><option>-prof</option></primary></indexterm>.</para>
5952 </listitem>
5953 <listitem>
5954   <para>Then compile it again with <option>-prof</option>, and
5955   additionally use <option>-osuf
5956   p_o</option><indexterm><primary><option>-osuf</option></primary></indexterm>
5957   to name the object files differently (you can choose any suffix
5958   that isn't the normal object suffix here).  GHC will automatically
5959   load the object files built in the first step when executing splice
5960   expressions.  If you omit the <option>-osuf</option> flag when
5961   building with <option>-prof</option> and Template Haskell is used,
5962   GHC will emit an error message. </para>
5963 </listitem>
5964 </orderedlist>
5965 </sect2>
5966
5967 <sect2 id="th-quasiquotation">  <title> Template Haskell Quasi-quotation </title>
5968 <para>Quasi-quotation allows patterns and expressions to be written using
5969 programmer-defined concrete syntax; the motivation behind the extension and
5970 several examples are documented in
5971 "<ulink url="http://www.eecs.harvard.edu/~mainland/ghc-quasiquoting/">Why It's
5972 Nice to be Quoted: Quasiquoting for Haskell</ulink>" (Proc Haskell Workshop
5973 2007). The example below shows how to write a quasiquoter for a simple
5974 expression language.</para>
5975
5976 <para>
5977 In the example, the quasiquoter <literal>expr</literal> is bound to a value of
5978 type <literal>Language.Haskell.TH.Quote.QuasiQuoter</literal> which contains two
5979 functions for quoting expressions and patterns, respectively. The first argument
5980 to each quoter is the (arbitrary) string enclosed in the Oxford brackets. The
5981 context of the quasi-quotation statement determines which of the two parsers is
5982 called: if the quasi-quotation occurs in an expression context, the expression
5983 parser is called, and if it occurs in a pattern context, the pattern parser is
5984 called.</para>
5985
5986 <para>
5987 Note that in the example we make use of an antiquoted
5988 variable <literal>n</literal>, indicated by the syntax <literal>'int:n</literal>
5989 (this syntax for anti-quotation was defined by the parser's
5990 author, <emphasis>not</emphasis> by GHC). This binds <literal>n</literal> to the
5991 integer value argument of the constructor <literal>IntExpr</literal> when
5992 pattern matching. Please see the referenced paper for further details regarding
5993 anti-quotation as well as the description of a technique that uses SYB to
5994 leverage a single parser of type <literal>String -> a</literal> to generate both
5995 an expression parser that returns a value of type <literal>Q Exp</literal> and a
5996 pattern parser that returns a value of type <literal>Q Pat</literal>.
5997 </para>
5998
5999 <para>In general, a quasi-quote has the form
6000 <literal>[$<replaceable>quoter</replaceable>| <replaceable>string</replaceable> |]</literal>.
6001 The <replaceable>quoter</replaceable> must be the name of an imported quoter; it
6002 cannot be an arbitrary expression.  The quoted <replaceable>string</replaceable> 
6003 can be arbitrary, and may contain newlines.
6004 </para>
6005 <para>
6006 Quasiquoters must obey the same stage restrictions as Template Haskell, e.g., in
6007 the example, <literal>expr</literal> cannot be defined
6008 in <literal>Main.hs</literal> where it is used, but must be imported.
6009 </para>
6010
6011 <programlisting>
6012
6013 {- Main.hs -}
6014 module Main where
6015
6016 import Expr
6017
6018 main :: IO ()
6019 main = do { print $ eval [$expr|1 + 2|]
6020           ; case IntExpr 1 of
6021               { [$expr|'int:n|] -> print n
6022               ;  _              -> return ()
6023               }
6024           }
6025
6026
6027 {- Expr.hs -}
6028 module Expr where
6029
6030 import qualified Language.Haskell.TH as TH
6031 import Language.Haskell.TH.Quote
6032
6033 data Expr  =  IntExpr Integer
6034            |  AntiIntExpr String
6035            |  BinopExpr BinOp Expr Expr
6036            |  AntiExpr String
6037     deriving(Show, Typeable, Data)
6038
6039 data BinOp  =  AddOp
6040             |  SubOp
6041             |  MulOp
6042             |  DivOp
6043     deriving(Show, Typeable, Data)
6044
6045 eval :: Expr -> Integer
6046 eval (IntExpr n)        = n
6047 eval (BinopExpr op x y) = (opToFun op) (eval x) (eval y)
6048   where
6049     opToFun AddOp = (+)
6050     opToFun SubOp = (-)
6051     opToFun MulOp = (*)
6052     opToFun DivOp = div
6053
6054 expr = QuasiQuoter parseExprExp parseExprPat
6055
6056 -- Parse an Expr, returning its representation as
6057 -- either a Q Exp or a Q Pat. See the referenced paper
6058 -- for how to use SYB to do this by writing a single
6059 -- parser of type String -> Expr instead of two
6060 -- separate parsers.
6061
6062 parseExprExp :: String -> Q Exp
6063 parseExprExp ...
6064
6065 parseExprPat :: String -> Q Pat
6066 parseExprPat ...
6067 </programlisting>
6068
6069 <para>Now run the compiler:
6070 </para>
6071 <programlisting>
6072 $ ghc --make -XQuasiQuotes Main.hs -o main
6073 </programlisting>
6074
6075 <para>Run "main" and here is your output:</para>
6076
6077 <programlisting>
6078 $ ./main
6079 3
6080 1
6081 </programlisting>
6082
6083 </sect2>
6084
6085 </sect1>
6086
6087 <!-- ===================== Arrow notation ===================  -->
6088
6089 <sect1 id="arrow-notation">
6090 <title>Arrow notation
6091 </title>
6092
6093 <para>Arrows are a generalization of monads introduced by John Hughes.
6094 For more details, see
6095 <itemizedlist>
6096
6097 <listitem>
6098 <para>
6099 &ldquo;Generalising Monads to Arrows&rdquo;,
6100 John Hughes, in <citetitle>Science of Computer Programming</citetitle> 37,
6101 pp67&ndash;111, May 2000.
6102 The paper that introduced arrows: a friendly introduction, motivated with
6103 programming examples.
6104 </para>
6105 </listitem>
6106
6107 <listitem>
6108 <para>
6109 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/notation.html">A New Notation for Arrows</ulink>&rdquo;,
6110 Ross Paterson, in <citetitle>ICFP</citetitle>, Sep 2001.
6111 Introduced the notation described here.
6112 </para>
6113 </listitem>
6114
6115 <listitem>
6116 <para>
6117 &ldquo;<ulink url="http://www.soi.city.ac.uk/~ross/papers/fop.html">Arrows and Computation</ulink>&rdquo;,
6118 Ross Paterson, in <citetitle>The Fun of Programming</citetitle>,
6119 Palgrave, 2003.
6120 </para>
6121 </listitem>
6122
6123 <listitem>
6124 <para>
6125 &ldquo;<ulink url="http://www.cs.chalmers.se/~rjmh/afp-arrows.pdf">Programming with Arrows</ulink>&rdquo;,
6126 John Hughes, in <citetitle>5th International Summer School on
6127 Advanced Functional Programming</citetitle>,
6128 <citetitle>Lecture Notes in Computer Science</citetitle> vol. 3622,
6129 Springer, 2004.
6130 This paper includes another introduction to the notation,
6131 with practical examples.
6132 </para>
6133 </listitem>
6134
6135 <listitem>
6136 <para>
6137 &ldquo;<ulink url="http://www.haskell.org/ghc/docs/papers/arrow-rules.pdf">Type and Translation Rules for Arrow Notation in GHC</ulink>&rdquo;,
6138 Ross Paterson and Simon Peyton Jones, September 16, 2004.
6139 A terse enumeration of the formal rules used
6140 (extracted from comments in the source code).
6141 </para>
6142 </listitem>
6143
6144 <listitem>
6145 <para>
6146 The arrows web page at
6147 <ulink url="http://www.haskell.org/arrows/"><literal>http://www.haskell.org/arrows/</literal></ulink>.
6148 </para>
6149 </listitem>
6150
6151 </itemizedlist>
6152 With the <option>-XArrows</option> flag, GHC supports the arrow
6153 notation described in the second of these papers,
6154 translating it using combinators from the
6155 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6156 module.
6157 What follows is a brief introduction to the notation;
6158 it won't make much sense unless you've read Hughes's paper.
6159 </para>
6160
6161 <para>The extension adds a new kind of expression for defining arrows:
6162 <screen>
6163 <replaceable>exp</replaceable><superscript>10</superscript> ::= ...
6164        |  proc <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
6165 </screen>
6166 where <literal>proc</literal> is a new keyword.
6167 The variables of the pattern are bound in the body of the 
6168 <literal>proc</literal>-expression,
6169 which is a new sort of thing called a <firstterm>command</firstterm>.
6170 The syntax of commands is as follows:
6171 <screen>
6172 <replaceable>cmd</replaceable>   ::= <replaceable>exp</replaceable><superscript>10</superscript> -&lt;  <replaceable>exp</replaceable>
6173        |  <replaceable>exp</replaceable><superscript>10</superscript> -&lt;&lt; <replaceable>exp</replaceable>
6174        |  <replaceable>cmd</replaceable><superscript>0</superscript>
6175 </screen>
6176 with <replaceable>cmd</replaceable><superscript>0</superscript> up to
6177 <replaceable>cmd</replaceable><superscript>9</superscript> defined using
6178 infix operators as for expressions, and
6179 <screen>
6180 <replaceable>cmd</replaceable><superscript>10</superscript> ::= \ <replaceable>apat</replaceable> ... <replaceable>apat</replaceable> -> <replaceable>cmd</replaceable>
6181        |  let <replaceable>decls</replaceable> in <replaceable>cmd</replaceable>
6182        |  if <replaceable>exp</replaceable> then <replaceable>cmd</replaceable> else <replaceable>cmd</replaceable>
6183        |  case <replaceable>exp</replaceable> of { <replaceable>calts</replaceable> }
6184        |  do { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> ; <replaceable>cmd</replaceable> }
6185        |  <replaceable>fcmd</replaceable>
6186
6187 <replaceable>fcmd</replaceable>  ::= <replaceable>fcmd</replaceable> <replaceable>aexp</replaceable>
6188        |  ( <replaceable>cmd</replaceable> )
6189        |  (| <replaceable>aexp</replaceable> <replaceable>cmd</replaceable> ... <replaceable>cmd</replaceable> |)
6190
6191 <replaceable>cstmt</replaceable> ::= let <replaceable>decls</replaceable>
6192        |  <replaceable>pat</replaceable> &lt;- <replaceable>cmd</replaceable>
6193        |  rec { <replaceable>cstmt</replaceable> ; ... <replaceable>cstmt</replaceable> [;] }
6194        |  <replaceable>cmd</replaceable>
6195 </screen>
6196 where <replaceable>calts</replaceable> are like <replaceable>alts</replaceable>
6197 except that the bodies are commands instead of expressions.
6198 </para>
6199
6200 <para>
6201 Commands produce values, but (like monadic computations)
6202 may yield more than one value,
6203 or none, and may do other things as well.
6204 For the most part, familiarity with monadic notation is a good guide to
6205 using commands.
6206 However the values of expressions, even monadic ones,
6207 are determined by the values of the variables they contain;
6208 this is not necessarily the case for commands.
6209 </para>
6210
6211 <para>
6212 A simple example of the new notation is the expression
6213 <screen>
6214 proc x -> f -&lt; x+1
6215 </screen>
6216 We call this a <firstterm>procedure</firstterm> or
6217 <firstterm>arrow abstraction</firstterm>.
6218 As with a lambda expression, the variable <literal>x</literal>
6219 is a new variable bound within the <literal>proc</literal>-expression.
6220 It refers to the input to the arrow.
6221 In the above example, <literal>-&lt;</literal> is not an identifier but an
6222 new reserved symbol used for building commands from an expression of arrow
6223 type and an expression to be fed as input to that arrow.
6224 (The weird look will make more sense later.)
6225 It may be read as analogue of application for arrows.
6226 The above example is equivalent to the Haskell expression
6227 <screen>
6228 arr (\ x -> x+1) >>> f
6229 </screen>
6230 That would make no sense if the expression to the left of
6231 <literal>-&lt;</literal> involves the bound variable <literal>x</literal>.
6232 More generally, the expression to the left of <literal>-&lt;</literal>
6233 may not involve any <firstterm>local variable</firstterm>,
6234 i.e. a variable bound in the current arrow abstraction.
6235 For such a situation there is a variant <literal>-&lt;&lt;</literal>, as in
6236 <screen>
6237 proc x -> f x -&lt;&lt; x+1
6238 </screen>
6239 which is equivalent to
6240 <screen>
6241 arr (\ x -> (f x, x+1)) >>> app
6242 </screen>
6243 so in this case the arrow must belong to the <literal>ArrowApply</literal>
6244 class.
6245 Such an arrow is equivalent to a monad, so if you're using this form
6246 you may find a monadic formulation more convenient.
6247 </para>
6248
6249 <sect2>
6250 <title>do-notation for commands</title>
6251
6252 <para>
6253 Another form of command is a form of <literal>do</literal>-notation.
6254 For example, you can write
6255 <screen>
6256 proc x -> do
6257         y &lt;- f -&lt; x+1
6258         g -&lt; 2*y
6259         let z = x+y
6260         t &lt;- h -&lt; x*z
6261         returnA -&lt; t+z
6262 </screen>
6263 You can read this much like ordinary <literal>do</literal>-notation,
6264 but with commands in place of monadic expressions.
6265 The first line sends the value of <literal>x+1</literal> as an input to
6266 the arrow <literal>f</literal>, and matches its output against
6267 <literal>y</literal>.
6268 In the next line, the output is discarded.
6269 The arrow <function>returnA</function> is defined in the
6270 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6271 module as <literal>arr id</literal>.
6272 The above example is treated as an abbreviation for
6273 <screen>
6274 arr (\ x -> (x, x)) >>>
6275         first (arr (\ x -> x+1) >>> f) >>>
6276         arr (\ (y, x) -> (y, (x, y))) >>>
6277         first (arr (\ y -> 2*y) >>> g) >>>
6278         arr snd >>>
6279         arr (\ (x, y) -> let z = x+y in ((x, z), z)) >>>
6280         first (arr (\ (x, z) -> x*z) >>> h) >>>
6281         arr (\ (t, z) -> t+z) >>>
6282         returnA
6283 </screen>
6284 Note that variables not used later in the composition are projected out.
6285 After simplification using rewrite rules (see <xref linkend="rewrite-rules"/>)
6286 defined in the
6287 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>
6288 module, this reduces to
6289 <screen>
6290 arr (\ x -> (x+1, x)) >>>
6291         first f >>>
6292         arr (\ (y, x) -> (2*y, (x, y))) >>>
6293         first g >>>
6294         arr (\ (_, (x, y)) -> let z = x+y in (x*z, z)) >>>
6295         first h >>>
6296         arr (\ (t, z) -> t+z)
6297 </screen>
6298 which is what you might have written by hand.
6299 With arrow notation, GHC keeps track of all those tuples of variables for you.
6300 </para>
6301
6302 <para>
6303 Note that although the above translation suggests that
6304 <literal>let</literal>-bound variables like <literal>z</literal> must be
6305 monomorphic, the actual translation produces Core,
6306 so polymorphic variables are allowed.
6307 </para>
6308
6309 <para>
6310 It's also possible to have mutually recursive bindings,
6311 using the new <literal>rec</literal> keyword, as in the following example:
6312 <programlisting>
6313 counter :: ArrowCircuit a => a Bool Int
6314 counter = proc reset -> do
6315         rec     output &lt;- returnA -&lt; if reset then 0 else next
6316                 next &lt;- delay 0 -&lt; output+1
6317         returnA -&lt; output
6318 </programlisting>
6319 The translation of such forms uses the <function>loop</function> combinator,
6320 so the arrow concerned must belong to the <literal>ArrowLoop</literal> class.
6321 </para>
6322
6323 </sect2>
6324
6325 <sect2>
6326 <title>Conditional commands</title>
6327
6328 <para>
6329 In the previous example, we used a conditional expression to construct the
6330 input for an arrow.
6331 Sometimes we want to conditionally execute different commands, as in
6332 <screen>
6333 proc (x,y) ->
6334         if f x y
6335         then g -&lt; x+1
6336         else h -&lt; y+2
6337 </screen>
6338 which is translated to
6339 <screen>
6340 arr (\ (x,y) -> if f x y then Left x else Right y) >>>
6341         (arr (\x -> x+1) >>> f) ||| (arr (\y -> y+2) >>> g)
6342 </screen>
6343 Since the translation uses <function>|||</function>,
6344 the arrow concerned must belong to the <literal>ArrowChoice</literal> class.
6345 </para>
6346
6347 <para>
6348 There are also <literal>case</literal> commands, like
6349 <screen>
6350 case input of
6351     [] -> f -&lt; ()
6352     [x] -> g -&lt; x+1
6353     x1:x2:xs -> do
6354         y &lt;- h -&lt; (x1, x2)
6355         ys &lt;- k -&lt; xs
6356         returnA -&lt; y:ys
6357 </screen>
6358 The syntax is the same as for <literal>case</literal> expressions,
6359 except that the bodies of the alternatives are commands rather than expressions.
6360 The translation is similar to that of <literal>if</literal> commands.
6361 </para>
6362
6363 </sect2>
6364
6365 <sect2>
6366 <title>Defining your own control structures</title>
6367
6368 <para>
6369 As we're seen, arrow notation provides constructs,
6370 modelled on those for expressions,
6371 for sequencing, value recursion and conditionals.
6372 But suitable combinators,
6373 which you can define in ordinary Haskell,
6374 may also be used to build new commands out of existing ones.
6375 The basic idea is that a command defines an arrow from environments to values.
6376 These environments assign values to the free local variables of the command.
6377 Thus combinators that produce arrows from arrows
6378 may also be used to build commands from commands.
6379 For example, the <literal>ArrowChoice</literal> class includes a combinator
6380 <programlisting>
6381 ArrowChoice a => (&lt;+>) :: a e c -> a e c -> a e c
6382 </programlisting>
6383 so we can use it to build commands:
6384 <programlisting>
6385 expr' = proc x -> do
6386                 returnA -&lt; x
6387         &lt;+> do
6388                 symbol Plus -&lt; ()
6389                 y &lt;- term -&lt; ()
6390                 expr' -&lt; x + y
6391         &lt;+> do
6392                 symbol Minus -&lt; ()
6393                 y &lt;- term -&lt; ()
6394                 expr' -&lt; x - y
6395 </programlisting>
6396 (The <literal>do</literal> on the first line is needed to prevent the first
6397 <literal>&lt;+> ...</literal> from being interpreted as part of the
6398 expression on the previous line.)
6399 This is equivalent to
6400 <programlisting>
6401 expr' = (proc x -> returnA -&lt; x)
6402         &lt;+> (proc x -> do
6403                 symbol Plus -&lt; ()
6404                 y &lt;- term -&lt; ()
6405                 expr' -&lt; x + y)
6406         &lt;+> (proc x -> do
6407                 symbol Minus -&lt; ()
6408                 y &lt;- term -&lt; ()
6409                 expr' -&lt; x - y)
6410 </programlisting>
6411 It is essential that this operator be polymorphic in <literal>e</literal>
6412 (representing the environment input to the command
6413 and thence to its subcommands)
6414 and satisfy the corresponding naturality property
6415 <screen>
6416 arr k >>> (f &lt;+> g) = (arr k >>> f) &lt;+> (arr k >>> g)
6417 </screen>
6418 at least for strict <literal>k</literal>.
6419 (This should be automatic if you're not using <function>seq</function>.)
6420 This ensures that environments seen by the subcommands are environments
6421 of the whole command,
6422 and also allows the translation to safely trim these environments.
6423 The operator must also not use any variable defined within the current
6424 arrow abstraction.
6425 </para>
6426
6427 <para>
6428 We could define our own operator
6429 <programlisting>
6430 untilA :: ArrowChoice a => a e () -> a e Bool -> a e ()
6431 untilA body cond = proc x ->
6432         b &lt;- cond -&lt; x
6433         if b then returnA -&lt; ()
6434         else do
6435                 body -&lt; x
6436                 untilA body cond -&lt; x
6437 </programlisting>
6438 and use it in the same way.
6439 Of course this infix syntax only makes sense for binary operators;
6440 there is also a more general syntax involving special brackets:
6441 <screen>
6442 proc x -> do
6443         y &lt;- f -&lt; x+1
6444         (|untilA (increment -&lt; x+y) (within 0.5 -&lt; x)|)
6445 </screen>
6446 </para>
6447
6448 </sect2>
6449
6450 <sect2>
6451 <title>Primitive constructs</title>
6452
6453 <para>
6454 Some operators will need to pass additional inputs to their subcommands.
6455 For example, in an arrow type supporting exceptions,
6456 the operator that attaches an exception handler will wish to pass the
6457 exception that occurred to the handler.
6458 Such an operator might have a type
6459 <screen>
6460 handleA :: ... => a e c -> a (e,Ex) c -> a e c
6461 </screen>
6462 where <literal>Ex</literal> is the type of exceptions handled.
6463 You could then use this with arrow notation by writing a command
6464 <screen>
6465 body `handleA` \ ex -> handler
6466 </screen>
6467 so that if an exception is raised in the command <literal>body</literal>,
6468 the variable <literal>ex</literal> is bound to the value of the exception
6469 and the command <literal>handler</literal>,
6470 which typically refers to <literal>ex</literal>, is entered.
6471 Though the syntax here looks like a functional lambda,
6472 we are talking about commands, and something different is going on.
6473 The input to the arrow represented by a command consists of values for
6474 the free local variables in the command, plus a stack of anonymous values.
6475 In all the prior examples, this stack was empty.
6476 In the second argument to <function>handleA</function>,
6477 this stack consists of one value, the value of the exception.
6478 The command form of lambda merely gives this value a name.
6479 </para>
6480
6481 <para>
6482 More concretely,
6483 the values on the stack are paired to the right of the environment.
6484 So operators like <function>handleA</function> that pass
6485 extra inputs to their subcommands can be designed for use with the notation
6486 by pairing the values with the environment in this way.
6487 More precisely, the type of each argument of the operator (and its result)
6488 should have the form
6489 <screen>
6490 a (...(e,t1), ... tn) t
6491 </screen>
6492 where <replaceable>e</replaceable> is a polymorphic variable
6493 (representing the environment)
6494 and <replaceable>ti</replaceable> are the types of the values on the stack,
6495 with <replaceable>t1</replaceable> being the <quote>top</quote>.
6496 The polymorphic variable <replaceable>e</replaceable> must not occur in
6497 <replaceable>a</replaceable>, <replaceable>ti</replaceable> or
6498 <replaceable>t</replaceable>.
6499 However the arrows involved need not be the same.
6500 Here are some more examples of suitable operators:
6501 <screen>
6502 bracketA :: ... => a e b -> a (e,b) c -> a (e,c) d -> a e d
6503 runReader :: ... => a e c -> a' (e,State) c
6504 runState :: ... => a e c -> a' (e,State) (c,State)
6505 </screen>
6506 We can supply the extra input required by commands built with the last two
6507 by applying them to ordinary expressions, as in
6508 <screen>
6509 proc x -> do
6510         s &lt;- ...
6511         (|runReader (do { ... })|) s
6512 </screen>
6513 which adds <literal>s</literal> to the stack of inputs to the command
6514 built using <function>runReader</function>.
6515 </para>
6516
6517 <para>
6518 The command versions of lambda abstraction and application are analogous to
6519 the expression versions.
6520 In particular, the beta and eta rules describe equivalences of commands.
6521 These three features (operators, lambda abstraction and application)
6522 are the core of the notation; everything else can be built using them,
6523 though the results would be somewhat clumsy.
6524 For example, we could simulate <literal>do</literal>-notation by defining
6525 <programlisting>
6526 bind :: Arrow a => a e b -> a (e,b) c -> a e c
6527 u `bind` f = returnA &amp;&amp;&amp; u >>> f
6528
6529 bind_ :: Arrow a => a e b -> a e c -> a e c
6530 u `bind_` f = u `bind` (arr fst >>> f)
6531 </programlisting>
6532 We could simulate <literal>if</literal> by defining
6533 <programlisting>
6534 cond :: ArrowChoice a => a e b -> a e b -> a (e,Bool) b
6535 cond f g = arr (\ (e,b) -> if b then Left e else Right e) >>> f ||| g
6536 </programlisting>
6537 </para>
6538
6539 </sect2>
6540
6541 <sect2>
6542 <title>Differences with the paper</title>
6543
6544 <itemizedlist>
6545
6546 <listitem>
6547 <para>Instead of a single form of arrow application (arrow tail) with two
6548 translations, the implementation provides two forms
6549 <quote><literal>-&lt;</literal></quote> (first-order)
6550 and <quote><literal>-&lt;&lt;</literal></quote> (higher-order).
6551 </para>
6552 </listitem>
6553
6554 <listitem>
6555 <para>User-defined operators are flagged with banana brackets instead of
6556 a new <literal>form</literal> keyword.
6557 </para>
6558 </listitem>
6559
6560 </itemizedlist>
6561
6562 </sect2>
6563
6564 <sect2>
6565 <title>Portability</title>
6566
6567 <para>
6568 Although only GHC implements arrow notation directly,
6569 there is also a preprocessor
6570 (available from the 
6571 <ulink url="http://www.haskell.org/arrows/">arrows web page</ulink>)
6572 that translates arrow notation into Haskell 98
6573 for use with other Haskell systems.
6574 You would still want to check arrow programs with GHC;
6575 tracing type errors in the preprocessor output is not easy.
6576 Modules intended for both GHC and the preprocessor must observe some
6577 additional restrictions:
6578 <itemizedlist>
6579
6580 <listitem>
6581 <para>
6582 The module must import
6583 <ulink url="../libraries/base/Control-Arrow.html"><literal>Control.Arrow</literal></ulink>.
6584 </para>
6585 </listitem>
6586
6587 <listitem>
6588 <para>
6589 The preprocessor cannot cope with other Haskell extensions.
6590 These would have to go in separate modules.
6591 </para>
6592 </listitem>
6593
6594 <listitem>
6595 <para>
6596 Because the preprocessor targets Haskell (rather than Core),
6597 <literal>let</literal>-bound variables are monomorphic.
6598 </para>
6599 </listitem>
6600
6601 </itemizedlist>
6602 </para>
6603
6604 </sect2>
6605
6606 </sect1>
6607
6608 <!-- ==================== BANG PATTERNS =================  -->
6609
6610 <sect1 id="bang-patterns">
6611 <title>Bang patterns
6612 <indexterm><primary>Bang patterns</primary></indexterm>
6613 </title>
6614 <para>GHC supports an extension of pattern matching called <emphasis>bang
6615 patterns</emphasis>.   Bang patterns are under consideration for Haskell Prime.
6616 The <ulink
6617 url="http://hackage.haskell.org/trac/haskell-prime/wiki/BangPatterns">Haskell
6618 prime feature description</ulink> contains more discussion and examples
6619 than the material below.
6620 </para>
6621 <para>
6622 Bang patterns are enabled by the flag <option>-XBangPatterns</option>.
6623 </para>
6624
6625 <sect2 id="bang-patterns-informal">
6626 <title>Informal description of bang patterns
6627 </title>
6628 <para>
6629 The main idea is to add a single new production to the syntax of patterns:
6630 <programlisting>
6631   pat ::= !pat
6632 </programlisting>
6633 Matching an expression <literal>e</literal> against a pattern <literal>!p</literal> is done by first
6634 evaluating <literal>e</literal> (to WHNF) and then matching the result against <literal>p</literal>.
6635 Example:
6636 <programlisting>
6637 f1 !x = True
6638 </programlisting>
6639 This definition makes <literal>f1</literal> is strict in <literal>x</literal>,
6640 whereas without the bang it would be lazy.
6641 Bang patterns can be nested of course:
6642 <programlisting>
6643 f2 (!x, y) = [x,y]
6644 </programlisting>
6645 Here, <literal>f2</literal> is strict in <literal>x</literal> but not in
6646 <literal>y</literal>.  
6647 A bang only really has an effect if it precedes a variable or wild-card pattern:
6648 <programlisting>
6649 f3 !(x,y) = [x,y]
6650 f4 (x,y)  = [x,y]
6651 </programlisting>
6652 Here, <literal>f3</literal> and <literal>f4</literal> are identical; putting a bang before a pattern that
6653 forces evaluation anyway does nothing.
6654 </para><para>
6655 Bang patterns work in <literal>case</literal> expressions too, of course:
6656 <programlisting>
6657 g5 x = let y = f x in body
6658 g6 x = case f x of { y -&gt; body }
6659 g7 x = case f x of { !y -&gt; body }
6660 </programlisting>
6661 The functions <literal>g5</literal> and <literal>g6</literal> mean exactly the same thing.  
6662 But <literal>g7</literal> evaluates <literal>(f x)</literal>, binds <literal>y</literal> to the
6663 result, and then evaluates <literal>body</literal>.
6664 </para><para>
6665 Bang patterns work in <literal>let</literal> and <literal>where</literal>
6666 definitions too. For example:
6667 <programlisting>
6668 let ![x,y] = e in b
6669 </programlisting>
6670 is a strict pattern: operationally, it evaluates <literal>e</literal>, matches
6671 it against the pattern <literal>[x,y]</literal>, and then evaluates <literal>b</literal>
6672 The "<literal>!</literal>" should not be regarded as part of the pattern; after all,
6673 in a function argument <literal>![x,y]</literal> means the 
6674 same as <literal>[x,y]</literal>.  Rather, the "<literal>!</literal>" 
6675 is part of the syntax of <literal>let</literal> bindings.
6676 </para>
6677 </sect2>
6678
6679
6680 <sect2 id="bang-patterns-sem">
6681 <title>Syntax and semantics
6682 </title>
6683 <para>
6684
6685 We add a single new production to the syntax of patterns:
6686 <programlisting>
6687   pat ::= !pat
6688 </programlisting>
6689 There is one problem with syntactic ambiguity.  Consider:
6690 <programlisting>
6691 f !x = 3
6692 </programlisting>
6693 Is this a definition of the infix function "<literal>(!)</literal>",
6694 or of the "<literal>f</literal>" with a bang pattern? GHC resolves this
6695 ambiguity in favour of the latter.  If you want to define
6696 <literal>(!)</literal> with bang-patterns enabled, you have to do so using
6697 prefix notation:
6698 <programlisting>
6699 (!) f x = 3
6700 </programlisting>
6701 The semantics of Haskell pattern matching is described in <ulink
6702 url="http://www.haskell.org/onlinereport/exps.html#sect3.17.2">
6703 Section 3.17.2</ulink> of the Haskell Report.  To this description add 
6704 one extra item 10, saying:
6705 <itemizedlist><listitem><para>Matching
6706 the pattern <literal>!pat</literal> against a value <literal>v</literal> behaves as follows:
6707 <itemizedlist><listitem><para>if <literal>v</literal> is bottom, the match diverges</para></listitem>
6708                 <listitem><para>otherwise, <literal>pat</literal> is matched against
6709                 <literal>v</literal></para></listitem>
6710 </itemizedlist>
6711 </para></listitem></itemizedlist>
6712 Similarly, in Figure 4 of  <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.17.3">
6713 Section 3.17.3</ulink>, add a new case (t):
6714 <programlisting>
6715 case v of { !pat -> e; _ -> e' }
6716    = v `seq` case v of { pat -> e; _ -> e' }
6717 </programlisting>
6718 </para><para>
6719 That leaves let expressions, whose translation is given in 
6720 <ulink url="http://www.haskell.org/onlinereport/exps.html#sect3.12">Section
6721 3.12</ulink>
6722 of the Haskell Report.
6723 In the translation box, first apply 
6724 the following transformation:  for each pattern <literal>pi</literal> that is of 
6725 form <literal>!qi = ei</literal>, transform it to <literal>(xi,!qi) = ((),ei)</literal>, and and replace <literal>e0</literal> 
6726 by <literal>(xi `seq` e0)</literal>.  Then, when none of the left-hand-side patterns
6727 have a bang at the top, apply the rules in the existing box.
6728 </para>
6729 <para>The effect of the let rule is to force complete matching of the pattern
6730 <literal>qi</literal> before evaluation of the body is begun.  The bang is
6731 retained in the translated form in case <literal>qi</literal> is a variable,
6732 thus:
6733 <programlisting>
6734   let !y = f x in b
6735 </programlisting>
6736
6737 </para>
6738 <para>
6739 The let-binding can be recursive.  However, it is much more common for
6740 the let-binding to be non-recursive, in which case the following law holds:
6741 <literal>(let !p = rhs in body)</literal>
6742      is equivalent to
6743 <literal>(case rhs of !p -> body)</literal>
6744 </para>
6745 <para>
6746 A pattern with a bang at the outermost level is not allowed at the top level of
6747 a module.
6748 </para>
6749 </sect2>
6750 </sect1>
6751
6752 <!-- ==================== ASSERTIONS =================  -->
6753
6754 <sect1 id="assertions">
6755 <title>Assertions
6756 <indexterm><primary>Assertions</primary></indexterm>
6757 </title>
6758
6759 <para>
6760 If you want to make use of assertions in your standard Haskell code, you
6761 could define a function like the following:
6762 </para>
6763
6764 <para>
6765
6766 <programlisting>
6767 assert :: Bool -> a -> a
6768 assert False x = error "assertion failed!"
6769 assert _     x = x
6770 </programlisting>
6771
6772 </para>
6773
6774 <para>
6775 which works, but gives you back a less than useful error message --
6776 an assertion failed, but which and where?
6777 </para>
6778
6779 <para>
6780 One way out is to define an extended <function>assert</function> function which also
6781 takes a descriptive string to include in the error message and
6782 perhaps combine this with the use of a pre-processor which inserts
6783 the source location where <function>assert</function> was used.
6784 </para>
6785
6786 <para>
6787 Ghc offers a helping hand here, doing all of this for you. For every
6788 use of <function>assert</function> in the user's source:
6789 </para>
6790
6791 <para>
6792
6793 <programlisting>
6794 kelvinToC :: Double -> Double
6795 kelvinToC k = assert (k &gt;= 0.0) (k+273.15)
6796 </programlisting>
6797
6798 </para>
6799
6800 <para>
6801 Ghc will rewrite this to also include the source location where the
6802 assertion was made,
6803 </para>
6804
6805 <para>
6806
6807 <programlisting>
6808 assert pred val ==> assertError "Main.hs|15" pred val
6809 </programlisting>
6810
6811 </para>
6812
6813 <para>
6814 The rewrite is only performed by the compiler when it spots
6815 applications of <function>Control.Exception.assert</function>, so you
6816 can still define and use your own versions of
6817 <function>assert</function>, should you so wish. If not, import
6818 <literal>Control.Exception</literal> to make use
6819 <function>assert</function> in your code.
6820 </para>
6821
6822 <para>
6823 GHC ignores assertions when optimisation is turned on with the
6824       <option>-O</option><indexterm><primary><option>-O</option></primary></indexterm> flag.  That is, expressions of the form
6825 <literal>assert pred e</literal> will be rewritten to
6826 <literal>e</literal>.  You can also disable assertions using the
6827       <option>-fignore-asserts</option>
6828       option<indexterm><primary><option>-fignore-asserts</option></primary>
6829       </indexterm>.</para>
6830
6831 <para>
6832 Assertion failures can be caught, see the documentation for the
6833 <literal>Control.Exception</literal> library for the details.
6834 </para>
6835
6836 </sect1>
6837
6838
6839 <!-- =============================== PRAGMAS ===========================  -->
6840
6841   <sect1 id="pragmas">
6842     <title>Pragmas</title>
6843
6844     <indexterm><primary>pragma</primary></indexterm>
6845
6846     <para>GHC supports several pragmas, or instructions to the
6847     compiler placed in the source code.  Pragmas don't normally affect
6848     the meaning of the program, but they might affect the efficiency
6849     of the generated code.</para>
6850
6851     <para>Pragmas all take the form
6852
6853 <literal>{-# <replaceable>word</replaceable> ... #-}</literal>  
6854
6855     where <replaceable>word</replaceable> indicates the type of
6856     pragma, and is followed optionally by information specific to that
6857     type of pragma.  Case is ignored in
6858     <replaceable>word</replaceable>.  The various values for
6859     <replaceable>word</replaceable> that GHC understands are described
6860     in the following sections; any pragma encountered with an
6861     unrecognised <replaceable>word</replaceable> is (silently)
6862     ignored. The layout rule applies in pragmas, so the closing <literal>#-}</literal>
6863     should start in a column to the right of the opening <literal>{-#</literal>. </para> 
6864
6865     <para>Certain pragmas are <emphasis>file-header pragmas</emphasis>.  A file-header
6866       pragma must precede the <literal>module</literal> keyword in the file.  
6867       There can be as many file-header pragmas as you please, and they can be
6868       preceded or followed by comments.</para>
6869
6870     <sect2 id="language-pragma">
6871       <title>LANGUAGE pragma</title>
6872
6873       <indexterm><primary>LANGUAGE</primary><secondary>pragma</secondary></indexterm>
6874       <indexterm><primary>pragma</primary><secondary>LANGUAGE</secondary></indexterm>
6875
6876       <para>The <literal>LANGUAGE</literal> pragma allows language extensions to be enabled 
6877         in a portable way.
6878         It is the intention that all Haskell compilers support the
6879         <literal>LANGUAGE</literal> pragma with the same syntax, although not
6880         all extensions are supported by all compilers, of
6881         course.  The <literal>LANGUAGE</literal> pragma should be used instead
6882         of <literal>OPTIONS_GHC</literal>, if possible.</para>
6883
6884       <para>For example, to enable the FFI and preprocessing with CPP:</para>
6885
6886 <programlisting>{-# LANGUAGE ForeignFunctionInterface, CPP #-}</programlisting>
6887
6888         <para><literal>LANGUAGE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6889
6890       <para>Every language extension can also be turned into a command-line flag
6891         by prefixing it with "<literal>-X</literal>"; for example <option>-XForeignFunctionInterface</option>.
6892         (Similarly, all "<literal>-X</literal>" flags can be written as <literal>LANGUAGE</literal> pragmas.
6893       </para>
6894
6895       <para>A list of all supported language extensions can be obtained by invoking
6896         <literal>ghc --supported-languages</literal> (see <xref linkend="modes"/>).</para>
6897
6898       <para>Any extension from the <literal>Extension</literal> type defined in
6899         <ulink
6900           url="../libraries/Cabal/Language-Haskell-Extension.html"><literal>Language.Haskell.Extension</literal></ulink>
6901         may be used.  GHC will report an error if any of the requested extensions are not supported.</para>
6902     </sect2>
6903
6904
6905     <sect2 id="options-pragma">
6906       <title>OPTIONS_GHC pragma</title>
6907       <indexterm><primary>OPTIONS_GHC</primary>
6908       </indexterm>
6909       <indexterm><primary>pragma</primary><secondary>OPTIONS_GHC</secondary>
6910       </indexterm>
6911
6912       <para>The <literal>OPTIONS_GHC</literal> pragma is used to specify
6913       additional options that are given to the compiler when compiling
6914       this source file.  See <xref linkend="source-file-options"/> for
6915       details.</para>
6916
6917       <para>Previous versions of GHC accepted <literal>OPTIONS</literal> rather
6918         than <literal>OPTIONS_GHC</literal>, but that is now deprecated.</para>
6919     </sect2>
6920
6921         <para><literal>OPTIONS_GHC</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6922
6923     <sect2 id="include-pragma">
6924       <title>INCLUDE pragma</title>
6925
6926       <para>The <literal>INCLUDE</literal> pragma is for specifying the names
6927         of C header files that should be <literal>#include</literal>'d into
6928         the C source code generated by the compiler for the current module (if
6929         compiling via C).  For example:</para>
6930
6931 <programlisting>
6932 {-# INCLUDE "foo.h" #-}
6933 {-# INCLUDE &lt;stdio.h&gt; #-}</programlisting>
6934
6935         <para><literal>INCLUDE</literal> is a file-header pragma (see <xref linkend="pragmas"/>).</para>
6936
6937       <para>An <literal>INCLUDE</literal> pragma is  the preferred alternative
6938         to the <option>-#include</option> option (<xref
6939           linkend="options-C-compiler" />), because the
6940         <literal>INCLUDE</literal> pragma is understood by other
6941         compilers.  Yet another alternative is to add the include file to each
6942         <literal>foreign import</literal> declaration in your code, but we
6943         don't recommend using this approach with GHC.</para>
6944     </sect2>
6945
6946     <sect2 id="warning-deprecated-pragma">
6947       <title>WARNING and DEPRECATED pragmas</title>
6948       <indexterm><primary>WARNING</primary></indexterm>
6949       <indexterm><primary>DEPRECATED</primary></indexterm>
6950
6951       <para>The WARNING pragma allows you to attach an arbitrary warning
6952       to a particular function, class, or type.
6953       A DEPRECATED pragma lets you specify that
6954       a particular function, class, or type is deprecated.
6955       There are two ways of using these pragmas.
6956
6957       <itemizedlist>
6958         <listitem>
6959           <para>You can work on an entire module thus:</para>
6960 <programlisting>
6961    module Wibble {-# DEPRECATED "Use Wobble instead" #-} where
6962      ...
6963 </programlisting>
6964       <para>Or:</para>
6965 <programlisting>
6966    module Wibble {-# WARNING "This is an unstable interface." #-} where
6967      ...
6968 </programlisting>
6969           <para>When you compile any module that import
6970           <literal>Wibble</literal>, GHC will print the specified
6971           message.</para>
6972         </listitem>
6973
6974         <listitem>
6975           <para>You can attach a warning to a function, class, type, or data constructor, with the
6976           following top-level declarations:</para>
6977 <programlisting>
6978    {-# DEPRECATED f, C, T "Don't use these" #-}
6979    {-# WARNING unsafePerformIO "This is unsafe; I hope you know what you're doing" #-}
6980 </programlisting>
6981           <para>When you compile any module that imports and uses any
6982           of the specified entities, GHC will print the specified
6983           message.</para>
6984           <para> You can only attach to entities declared at top level in the module
6985           being compiled, and you can only use unqualified names in the list of
6986           entities. A capitalised name, such as <literal>T</literal>
6987           refers to <emphasis>either</emphasis> the type constructor <literal>T</literal>
6988           <emphasis>or</emphasis> the data constructor <literal>T</literal>, or both if
6989           both are in scope.  If both are in scope, there is currently no way to
6990       specify one without the other (c.f. fixities
6991       <xref linkend="infix-tycons"/>).</para>
6992         </listitem>
6993       </itemizedlist>
6994       Warnings and deprecations are not reported for
6995       (a) uses within the defining module, and
6996       (b) uses in an export list.
6997       The latter reduces spurious complaints within a library
6998       in which one module gathers together and re-exports 
6999       the exports of several others.
7000       </para>
7001       <para>You can suppress the warnings with the flag
7002       <option>-fno-warn-warnings-deprecations</option>.</para>
7003     </sect2>
7004
7005     <sect2 id="inline-noinline-pragma">
7006       <title>INLINE and NOINLINE pragmas</title>
7007
7008       <para>These pragmas control the inlining of function
7009       definitions.</para>
7010
7011       <sect3 id="inline-pragma">
7012         <title>INLINE pragma</title>
7013         <indexterm><primary>INLINE</primary></indexterm>
7014
7015         <para>GHC (with <option>-O</option>, as always) tries to
7016         inline (or &ldquo;unfold&rdquo;) functions/values that are
7017         &ldquo;small enough,&rdquo; thus avoiding the call overhead
7018         and possibly exposing other more-wonderful optimisations.
7019         Normally, if GHC decides a function is &ldquo;too
7020         expensive&rdquo; to inline, it will not do so, nor will it
7021         export that unfolding for other modules to use.</para>
7022
7023         <para>The sledgehammer you can bring to bear is the
7024         <literal>INLINE</literal><indexterm><primary>INLINE
7025         pragma</primary></indexterm> pragma, used thusly:</para>
7026
7027 <programlisting>
7028 key_function :: Int -> String -> (Bool, Double)
7029 {-# INLINE key_function #-}
7030 </programlisting>
7031
7032         <para>The major effect of an <literal>INLINE</literal> pragma
7033         is to declare a function's &ldquo;cost&rdquo; to be very low.
7034         The normal unfolding machinery will then be very keen to
7035         inline it.  However, an <literal>INLINE</literal> pragma for a 
7036         function "<literal>f</literal>" has a number of other effects:
7037 <itemizedlist>
7038 <listitem><para>
7039 No functions are inlined into <literal>f</literal>.  Otherwise
7040 GHC might inline a big function into <literal>f</literal>'s right hand side, 
7041 making <literal>f</literal> big; and then inline <literal>f</literal> blindly.
7042 </para></listitem>
7043 <listitem><para>
7044 The float-in, float-out, and common-sub-expression transformations are not 
7045 applied to the body of <literal>f</literal>.  
7046 </para></listitem>
7047 <listitem><para>
7048 An INLINE function is not worker/wrappered by strictness analysis.
7049 It's going to be inlined wholesale instead.
7050 </para></listitem>
7051 </itemizedlist>
7052 All of these effects are aimed at ensuring that what gets inlined is
7053 exactly what you asked for, no more and no less.
7054 </para>
7055 <para>GHC ensures that inlining cannot go on forever: every mutually-recursive
7056 group is cut by one or more <emphasis>loop breakers</emphasis> that is never inlined
7057 (see <ulink url="http://research.microsoft.com/%7Esimonpj/Papers/inlining/index.htm">
7058 Secrets of the GHC inliner, JFP 12(4) July 2002</ulink>).
7059 GHC tries not to select a function with an INLINE pragma as a loop breaker, but
7060 when there is no choice even an INLINE function can be selected, in which case
7061 the INLINE pragma is ignored.
7062 For example, for a self-recursive function, the loop breaker can only be the function
7063 itself, so an INLINE pragma is always ignored.</para>
7064
7065         <para>Syntactically, an <literal>INLINE</literal> pragma for a
7066         function can be put anywhere its type signature could be
7067         put.</para>
7068
7069         <para><literal>INLINE</literal> pragmas are a particularly
7070         good idea for the
7071         <literal>then</literal>/<literal>return</literal> (or
7072         <literal>bind</literal>/<literal>unit</literal>) functions in
7073         a monad.  For example, in GHC's own
7074         <literal>UniqueSupply</literal> monad code, we have:</para>
7075
7076 <programlisting>
7077 {-# INLINE thenUs #-}
7078 {-# INLINE returnUs #-}
7079 </programlisting>
7080
7081         <para>See also the <literal>NOINLINE</literal> pragma (<xref
7082         linkend="noinline-pragma"/>).</para>
7083
7084         <para>Note: the HBC compiler doesn't like <literal>INLINE</literal> pragmas,
7085           so if you want your code to be HBC-compatible you'll have to surround
7086           the pragma with C pre-processor directives 
7087           <literal>#ifdef __GLASGOW_HASKELL__</literal>...<literal>#endif</literal>.</para>
7088
7089       </sect3>
7090
7091       <sect3 id="noinline-pragma">
7092         <title>NOINLINE pragma</title>
7093         
7094         <indexterm><primary>NOINLINE</primary></indexterm>
7095         <indexterm><primary>NOTINLINE</primary></indexterm>
7096
7097         <para>The <literal>NOINLINE</literal> pragma does exactly what
7098         you'd expect: it stops the named function from being inlined
7099         by the compiler.  You shouldn't ever need to do this, unless
7100         you're very cautious about code size.</para>
7101
7102         <para><literal>NOTINLINE</literal> is a synonym for
7103         <literal>NOINLINE</literal> (<literal>NOINLINE</literal> is
7104         specified by Haskell 98 as the standard way to disable
7105         inlining, so it should be used if you want your code to be
7106         portable).</para>
7107       </sect3>
7108
7109       <sect3 id="phase-control">
7110         <title>Phase control</title>
7111
7112         <para> Sometimes you want to control exactly when in GHC's
7113         pipeline the INLINE pragma is switched on.  Inlining happens
7114         only during runs of the <emphasis>simplifier</emphasis>.  Each
7115         run of the simplifier has a different <emphasis>phase
7116         number</emphasis>; the phase number decreases towards zero.
7117         If you use <option>-dverbose-core2core</option> you'll see the
7118         sequence of phase numbers for successive runs of the
7119         simplifier.  In an INLINE pragma you can optionally specify a
7120         phase number, thus:
7121         <itemizedlist>
7122           <listitem>
7123             <para>"<literal>INLINE[k] f</literal>" means: do not inline
7124             <literal>f</literal>
7125               until phase <literal>k</literal>, but from phase
7126               <literal>k</literal> onwards be very keen to inline it.
7127             </para></listitem>
7128           <listitem>
7129             <para>"<literal>INLINE[~k] f</literal>" means: be very keen to inline
7130             <literal>f</literal>
7131               until phase <literal>k</literal>, but from phase
7132               <literal>k</literal> onwards do not inline it.
7133             </para></listitem>
7134           <listitem>
7135             <para>"<literal>NOINLINE[k] f</literal>" means: do not inline
7136             <literal>f</literal>
7137               until phase <literal>k</literal>, but from phase
7138               <literal>k</literal> onwards be willing to inline it (as if
7139               there was no pragma).
7140             </para></listitem>
7141             <listitem>
7142             <para>"<literal>NOINLINE[~k] f</literal>" means: be willing to inline
7143             <literal>f</literal>
7144               until phase <literal>k</literal>, but from phase
7145               <literal>k</literal> onwards do not inline it.
7146             </para></listitem>
7147         </itemizedlist>
7148 The same information is summarised here:
7149 <programlisting>
7150                            -- Before phase 2     Phase 2 and later
7151   {-# INLINE   [2]  f #-}  --      No                 Yes
7152   {-# INLINE   [~2] f #-}  --      Yes                No
7153   {-# NOINLINE [2]  f #-}  --      No                 Maybe
7154   {-# NOINLINE [~2] f #-}  --      Maybe              No
7155
7156   {-# INLINE   f #-}       --      Yes                Yes
7157   {-# NOINLINE f #-}       --      No                 No
7158 </programlisting>
7159 By "Maybe" we mean that the usual heuristic inlining rules apply (if the
7160 function body is small, or it is applied to interesting-looking arguments etc).
7161 Another way to understand the semantics is this:
7162 <itemizedlist>
7163 <listitem><para>For both INLINE and NOINLINE, the phase number says
7164 when inlining is allowed at all.</para></listitem>
7165 <listitem><para>The INLINE pragma has the additional effect of making the
7166 function body look small, so that when inlining is allowed it is very likely to
7167 happen.
7168 </para></listitem>
7169 </itemizedlist>
7170 </para>
7171 <para>The same phase-numbering control is available for RULES
7172         (<xref linkend="rewrite-rules"/>).</para>
7173       </sect3>
7174     </sect2>
7175
7176     <sect2 id="annotation-pragmas">
7177       <title>ANN pragmas</title>
7178       
7179       <para>GHC offers the ability to annotate various code constructs with additional
7180       data by using three pragmas.  This data can then be inspected at a later date by
7181       using GHC-as-a-library.</para>
7182             
7183       <sect3 id="ann-pragma">
7184         <title>Annotating values</title>
7185         
7186         <indexterm><primary>ANN</primary></indexterm>
7187         
7188         <para>Any expression that has both <literal>Typeable</literal> and <literal>Data</literal> instances may be attached to a top-level value
7189         binding using an <literal>ANN</literal> pragma. In particular, this means you can use <literal>ANN</literal>
7190         to annotate data constructors (e.g. <literal>Just</literal>) as well as normal values (e.g. <literal>take</literal>).
7191         By way of example, to annotate the function <literal>foo</literal> with the annotation <literal>Just "Hello"</literal>
7192         you would do this:</para>
7193         
7194 <programlisting>
7195 {-# ANN foo (Just "Hello") #-}
7196 foo = ...
7197 </programlisting>
7198         
7199         <para>
7200           A number of restrictions apply to use of annotations:
7201           <itemizedlist>
7202             <listitem><para>The binder being annotated must be at the top level (i.e. no nested binders)</para></listitem>
7203             <listitem><para>The binder being annotated must be declared in the current module</para></listitem>
7204             <listitem><para>The expression you are annotating with must have a type with <literal>Typeable</literal> and <literal>Data</literal> instances</para></listitem>
7205             <listitem><para>The <ulink linkend="using-template-haskell">Template Haskell staging restrictions</ulink> apply to the
7206             expression being annotated with, so for example you cannot run a function from the module being compiled.</para>
7207             
7208             <para>To be precise, the annotation <literal>{-# ANN x e #-}</literal> is well staged if and only if <literal>$(e)</literal> would be 
7209             (disregarding the usual type restrictions of the splice syntax, and the usual restriction on splicing inside a splice - <literal>$([|1|])</literal> is fine as an annotation, albeit redundant).</para></listitem>
7210           </itemizedlist>
7211           
7212           If you feel strongly that any of these restrictions are too onerous, <ulink url="http://hackage.haskell.org/trac/ghc/wiki/MailingListsAndIRC">
7213           please give the GHC team a shout</ulink>.
7214         </para>
7215         
7216         <para>However, apart from these restrictions, many things are allowed, including expressions which not fully evaluated!
7217         Annotation expressions will be evaluated by the compiler just like Template Haskell splices are. So, this annotation is fine:</para>
7218         
7219 <programlisting>
7220 {-# ANN f SillyAnnotation { foo = (id 10) + $([| 20 |]), bar = 'f } #-}
7221 f = ...
7222 </programlisting>
7223       </sect3>
7224       
7225       <sect3 id="typeann-pragma">
7226         <title>Annotating types</title>
7227         
7228         <indexterm><primary>ANN type</primary></indexterm>
7229         <indexterm><primary>ANN</primary></indexterm>
7230         
7231         <para>You can annotate types with the <literal>ANN</literal> pragma by using the <literal>type</literal> keyword. For example:</para>
7232         
7233 <programlisting>
7234 {-# ANN type Foo (Just "A `Maybe String' annotation") #-}
7235 data Foo = ...
7236 </programlisting>
7237       </sect3>
7238       
7239       <sect3 id="modann-pragma">
7240         <title>Annotating modules</title>
7241         
7242         <indexterm><primary>ANN module</primary></indexterm>
7243         <indexterm><primary>ANN</primary></indexterm>
7244         
7245         <para>You can annotate modules with the <literal>ANN</literal> pragma by using the <literal>module</literal> keyword. For example:</para>
7246         
7247 <programlisting>
7248 {-# ANN module (Just "A `Maybe String' annotation") #-}
7249 </programlisting>
7250       </sect3>
7251     </sect2>
7252
7253     <sect2 id="line-pragma">
7254       <title>LINE pragma</title>
7255
7256       <indexterm><primary>LINE</primary><secondary>pragma</secondary></indexterm>
7257       <indexterm><primary>pragma</primary><secondary>LINE</secondary></indexterm>
7258       <para>This pragma is similar to C's <literal>&num;line</literal>
7259       pragma, and is mainly for use in automatically generated Haskell
7260       code.  It lets you specify the line number and filename of the
7261       original code; for example</para>
7262
7263 <programlisting>{-# LINE 42 "Foo.vhs" #-}</programlisting>
7264
7265       <para>if you'd generated the current file from something called
7266       <filename>Foo.vhs</filename> and this line corresponds to line
7267       42 in the original.  GHC will adjust its error messages to refer
7268       to the line/file named in the <literal>LINE</literal>
7269       pragma.</para>
7270     </sect2>
7271
7272     <sect2 id="rules">
7273       <title>RULES pragma</title>
7274
7275       <para>The RULES pragma lets you specify rewrite rules.  It is
7276       described in <xref linkend="rewrite-rules"/>.</para>
7277     </sect2>
7278
7279     <sect2 id="specialize-pragma">
7280       <title>SPECIALIZE pragma</title>
7281
7282       <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
7283       <indexterm><primary>pragma, SPECIALIZE</primary></indexterm>
7284       <indexterm><primary>overloading, death to</primary></indexterm>
7285
7286       <para>(UK spelling also accepted.)  For key overloaded
7287       functions, you can create extra versions (NB: more code space)
7288       specialised to particular types.  Thus, if you have an
7289       overloaded function:</para>
7290
7291 <programlisting>
7292   hammeredLookup :: Ord key => [(key, value)] -> key -> value
7293 </programlisting>
7294
7295       <para>If it is heavily used on lists with
7296       <literal>Widget</literal> keys, you could specialise it as
7297       follows:</para>
7298
7299 <programlisting>
7300   {-# SPECIALIZE hammeredLookup :: [(Widget, value)] -> Widget -> value #-}
7301 </programlisting>
7302
7303       <para>A <literal>SPECIALIZE</literal> pragma for a function can
7304       be put anywhere its type signature could be put.</para>
7305
7306       <para>A <literal>SPECIALIZE</literal> has the effect of generating
7307       (a) a specialised version of the function and (b) a rewrite rule
7308       (see <xref linkend="rewrite-rules"/>) that rewrites a call to the
7309       un-specialised function into a call to the specialised one.</para>
7310
7311       <para>The type in a SPECIALIZE pragma can be any type that is less
7312         polymorphic than the type of the original function.  In concrete terms,
7313         if the original function is <literal>f</literal> then the pragma
7314 <programlisting>
7315   {-# SPECIALIZE f :: &lt;type&gt; #-}
7316 </programlisting>
7317       is valid if and only if the definition
7318 <programlisting>
7319   f_spec :: &lt;type&gt;
7320   f_spec = f
7321 </programlisting>
7322       is valid.  Here are some examples (where we only give the type signature
7323       for the original function, not its code):
7324 <programlisting>
7325   f :: Eq a => a -> b -> b
7326   {-# SPECIALISE f :: Int -> b -> b #-}
7327
7328   g :: (Eq a, Ix b) => a -> b -> b
7329   {-# SPECIALISE g :: (Eq a) => a -> Int -> Int #-}
7330
7331   h :: Eq a => a -> a -> a
7332   {-# SPECIALISE h :: (Eq a) => [a] -> [a] -> [a] #-}
7333 </programlisting>
7334 The last of these examples will generate a 
7335 RULE with a somewhat-complex left-hand side (try it yourself), so it might not fire very
7336 well.  If you use this kind of specialisation, let us know how well it works.
7337 </para>
7338
7339 <para>A <literal>SPECIALIZE</literal> pragma can optionally be followed with a
7340 <literal>INLINE</literal> or <literal>NOINLINE</literal> pragma, optionally 
7341 followed by a phase, as described in <xref linkend="inline-noinline-pragma"/>.
7342 The <literal>INLINE</literal> pragma affects the specialised version of the
7343 function (only), and applies even if the function is recursive.  The motivating
7344 example is this:
7345 <programlisting>
7346 -- A GADT for arrays with type-indexed representation
7347 data Arr e where
7348   ArrInt :: !Int -> ByteArray# -> Arr Int
7349   ArrPair :: !Int -> Arr e1 -> Arr e2 -> Arr (e1, e2)
7350
7351 (!:) :: Arr e -> Int -> e
7352 {-# SPECIALISE INLINE (!:) :: Arr Int -> Int -> Int #-}
7353 {-# SPECIALISE INLINE (!:) :: Arr (a, b) -> Int -> (a, b) #-}
7354 (ArrInt _ ba)     !: (I# i) = I# (indexIntArray# ba i)
7355 (ArrPair _ a1 a2) !: i      = (a1 !: i, a2 !: i)
7356 </programlisting>
7357 Here, <literal>(!:)</literal> is a recursive function that indexes arrays
7358 of type <literal>Arr e</literal>.  Consider a call to  <literal>(!:)</literal>
7359 at type <literal>(Int,Int)</literal>.  The second specialisation will fire, and
7360 the specialised function will be inlined.  It has two calls to
7361 <literal>(!:)</literal>,
7362 both at type <literal>Int</literal>.  Both these calls fire the first
7363 specialisation, whose body is also inlined.  The result is a type-based
7364 unrolling of the indexing function.</para>
7365 <para>Warning: you can make GHC diverge by using <literal>SPECIALISE INLINE</literal>
7366 on an ordinarily-recursive function.</para>
7367
7368       <para>Note: In earlier versions of GHC, it was possible to provide your own
7369       specialised function for a given type:
7370
7371 <programlisting>
7372 {-# SPECIALIZE hammeredLookup :: [(Int, value)] -> Int -> value = intLookup #-}
7373 </programlisting>
7374
7375       This feature has been removed, as it is now subsumed by the
7376       <literal>RULES</literal> pragma (see <xref linkend="rule-spec"/>).</para>
7377
7378     </sect2>
7379
7380 <sect2 id="specialize-instance-pragma">
7381 <title>SPECIALIZE instance pragma
7382 </title>
7383
7384 <para>
7385 <indexterm><primary>SPECIALIZE pragma</primary></indexterm>
7386 <indexterm><primary>overloading, death to</primary></indexterm>
7387 Same idea, except for instance declarations.  For example:
7388
7389 <programlisting>
7390 instance (Eq a) => Eq (Foo a) where { 
7391    {-# SPECIALIZE instance Eq (Foo [(Int, Bar)]) #-}
7392    ... usual stuff ...
7393  }
7394 </programlisting>
7395 The pragma must occur inside the <literal>where</literal> part
7396 of the instance declaration.
7397 </para>
7398 <para>
7399 Compatible with HBC, by the way, except perhaps in the placement
7400 of the pragma.
7401 </para>
7402
7403 </sect2>
7404
7405     <sect2 id="unpack-pragma">
7406       <title>UNPACK pragma</title>
7407
7408       <indexterm><primary>UNPACK</primary></indexterm>
7409       
7410       <para>The <literal>UNPACK</literal> indicates to the compiler
7411       that it should unpack the contents of a constructor field into
7412       the constructor itself, removing a level of indirection.  For
7413       example:</para>
7414
7415 <programlisting>
7416 data T = T {-# UNPACK #-} !Float
7417            {-# UNPACK #-} !Float
7418 </programlisting>
7419
7420       <para>will create a constructor <literal>T</literal> containing
7421       two unboxed floats.  This may not always be an optimisation: if
7422       the <function>T</function> constructor is scrutinised and the
7423       floats passed to a non-strict function for example, they will
7424       have to be reboxed (this is done automatically by the
7425       compiler).</para>
7426
7427       <para>Unpacking constructor fields should only be used in
7428       conjunction with <option>-O</option>, in order to expose
7429       unfoldings to the compiler so the reboxing can be removed as
7430       often as possible.  For example:</para>
7431
7432 <programlisting>
7433 f :: T -&#62; Float
7434 f (T f1 f2) = f1 + f2
7435 </programlisting>
7436
7437       <para>The compiler will avoid reboxing <function>f1</function>
7438       and <function>f2</function> by inlining <function>+</function>
7439       on floats, but only when <option>-O</option> is on.</para>
7440
7441       <para>Any single-constructor data is eligible for unpacking; for
7442       example</para>
7443
7444 <programlisting>
7445 data T = T {-# UNPACK #-} !(Int,Int)
7446 </programlisting>
7447
7448       <para>will store the two <literal>Int</literal>s directly in the
7449       <function>T</function> constructor, by flattening the pair.
7450       Multi-level unpacking is also supported:
7451
7452 <programlisting>
7453 data T = T {-# UNPACK #-} !S
7454 data S = S {-# UNPACK #-} !Int {-# UNPACK #-} !Int
7455 </programlisting>
7456
7457       will store two unboxed <literal>Int&num;</literal>s
7458       directly in the <function>T</function> constructor.  The
7459       unpacker can see through newtypes, too.</para>
7460
7461       <para>If a field cannot be unpacked, you will not get a warning,
7462       so it might be an idea to check the generated code with
7463       <option>-ddump-simpl</option>.</para>
7464
7465       <para>See also the <option>-funbox-strict-fields</option> flag,
7466       which essentially has the effect of adding
7467       <literal>{-#&nbsp;UNPACK&nbsp;#-}</literal> to every strict
7468       constructor field.</para>
7469     </sect2>
7470
7471     <sect2 id="source-pragma">
7472       <title>SOURCE pragma</title>
7473
7474       <indexterm><primary>SOURCE</primary></indexterm>
7475      <para>The <literal>{-# SOURCE #-}</literal> pragma is used only in <literal>import</literal> declarations,
7476      to break a module loop.  It is described in detail in <xref linkend="mutual-recursion"/>.
7477      </para>
7478 </sect2>
7479
7480 </sect1>
7481
7482 <!--  ======================= REWRITE RULES ======================== -->
7483
7484 <sect1 id="rewrite-rules">
7485 <title>Rewrite rules
7486
7487 <indexterm><primary>RULES pragma</primary></indexterm>
7488 <indexterm><primary>pragma, RULES</primary></indexterm>
7489 <indexterm><primary>rewrite rules</primary></indexterm></title>
7490
7491 <para>
7492 The programmer can specify rewrite rules as part of the source program
7493 (in a pragma).  
7494 Here is an example:
7495
7496 <programlisting>
7497   {-# RULES
7498   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
7499     #-}
7500 </programlisting>
7501 </para>
7502 <para>
7503 Use the debug flag <option>-ddump-simpl-stats</option> to see what rules fired.
7504 If you need more information, then <option>-ddump-rule-firings</option> shows you
7505 each individual rule firing in detail.
7506 </para>
7507
7508 <sect2>
7509 <title>Syntax</title>
7510
7511 <para>
7512 From a syntactic point of view:
7513
7514 <itemizedlist>
7515
7516 <listitem>
7517 <para>
7518  There may be zero or more rules in a <literal>RULES</literal> pragma, separated by semicolons (which
7519  may be generated by the layout rule).
7520 </para>
7521 </listitem>
7522
7523 <listitem>
7524 <para>
7525 The layout rule applies in a pragma.
7526 Currently no new indentation level
7527 is set, so if you put several rules in single RULES pragma and wish to use layout to separate them,
7528 you must lay out the starting in the same column as the enclosing definitions.
7529 <programlisting>
7530   {-# RULES
7531   "map/map"    forall f g xs.  map f (map g xs) = map (f.g) xs
7532   "map/append" forall f xs ys. map f (xs ++ ys) = map f xs ++ map f ys
7533     #-}
7534 </programlisting>
7535 Furthermore, the closing <literal>#-}</literal>
7536 should start in a column to the right of the opening <literal>{-#</literal>.
7537 </para>
7538 </listitem>
7539
7540 <listitem>
7541 <para>
7542  Each rule has a name, enclosed in double quotes.  The name itself has
7543 no significance at all.  It is only used when reporting how many times the rule fired.
7544 </para>
7545 </listitem>
7546
7547 <listitem>
7548 <para>
7549 A rule may optionally have a phase-control number (see <xref linkend="phase-control"/>),
7550 immediately after the name of the rule.  Thus:
7551 <programlisting>
7552   {-# RULES
7553         "map/map" [2]  forall f g xs. map f (map g xs) = map (f.g) xs
7554     #-}
7555 </programlisting>
7556 The "[2]" means that the rule is active in Phase 2 and subsequent phases.  The inverse
7557 notation "[~2]" is also accepted, meaning that the rule is active up to, but not including,
7558 Phase 2.
7559 </para>
7560 </listitem>
7561
7562
7563
7564 <listitem>
7565 <para>
7566  Each variable mentioned in a rule must either be in scope (e.g. <function>map</function>),
7567 or bound by the <literal>forall</literal> (e.g. <function>f</function>, <function>g</function>, <function>xs</function>).  The variables bound by
7568 the <literal>forall</literal> are called the <emphasis>pattern</emphasis> variables.  They are separated
7569 by spaces, just like in a type <literal>forall</literal>.
7570 </para>
7571 </listitem>
7572 <listitem>
7573
7574 <para>
7575  A pattern variable may optionally have a type signature.
7576 If the type of the pattern variable is polymorphic, it <emphasis>must</emphasis> have a type signature.
7577 For example, here is the <literal>foldr/build</literal> rule:
7578
7579 <programlisting>
7580 "fold/build"  forall k z (g::forall b. (a->b->b) -> b -> b) .
7581               foldr k z (build g) = g k z
7582 </programlisting>
7583
7584 Since <function>g</function> has a polymorphic type, it must have a type signature.
7585
7586 </para>
7587 </listitem>
7588 <listitem>
7589
7590 <para>
7591 The left hand side of a rule must consist of a top-level variable applied
7592 to arbitrary expressions.  For example, this is <emphasis>not</emphasis> OK:
7593
7594 <programlisting>
7595 "wrong1"   forall e1 e2.  case True of { True -> e1; False -> e2 } = e1
7596 "wrong2"   forall f.      f True = True
7597 </programlisting>
7598
7599 In <literal>"wrong1"</literal>, the LHS is not an application; in <literal>"wrong2"</literal>, the LHS has a pattern variable
7600 in the head.
7601 </para>
7602 </listitem>
7603 <listitem>
7604
7605 <para>
7606  A rule does not need to be in the same module as (any of) the
7607 variables it mentions, though of course they need to be in scope.
7608 </para>
7609 </listitem>
7610 <listitem>
7611
7612 <para>
7613  All rules are implicitly exported from the module, and are therefore
7614 in force in any module that imports the module that defined the rule, directly
7615 or indirectly.  (That is, if A imports B, which imports C, then C's rules are
7616 in force when compiling A.)  The situation is very similar to that for instance
7617 declarations.
7618 </para>
7619 </listitem>
7620
7621 <listitem>
7622
7623 <para>
7624 Inside a RULE "<literal>forall</literal>" is treated as a keyword, regardless of
7625 any other flag settings.  Furthermore, inside a RULE, the language extension
7626 <option>-XScopedTypeVariables</option> is automatically enabled; see 
7627 <xref linkend="scoped-type-variables"/>.
7628 </para>
7629 </listitem>
7630 <listitem>
7631
7632 <para>
7633 Like other pragmas, RULE pragmas are always checked for scope errors, and
7634 are typechecked. Typechecking means that the LHS and RHS of a rule are typechecked, 
7635 and must have the same type.  However, rules are only <emphasis>enabled</emphasis>
7636 if the <option>-fenable-rewrite-rules</option> flag is 
7637 on (see <xref linkend="rule-semantics"/>).
7638 </para>
7639 </listitem>
7640 </itemizedlist>
7641
7642 </para>
7643
7644 </sect2>
7645
7646 <sect2 id="rule-semantics">
7647 <title>Semantics</title>
7648
7649 <para>
7650 From a semantic point of view:
7651
7652 <itemizedlist>
7653 <listitem>
7654 <para>
7655 Rules are enabled (that is, used during optimisation)
7656 by the <option>-fenable-rewrite-rules</option> flag.
7657 This flag is implied by <option>-O</option>, and may be switched
7658 off (as usual) by <option>-fno-enable-rewrite-rules</option>.
7659 (NB: enabling <option>-fenable-rewrite-rules</option> without <option>-O</option> 
7660 may not do what you expect, though, because without <option>-O</option> GHC 
7661 ignores all optimisation information in interface files;
7662 see <option>-fignore-interface-pragmas</option>, <xref linkend="options-f"/>.)
7663 Note that <option>-fenable-rewrite-rules</option> is an <emphasis>optimisation</emphasis> flag, and
7664 has no effect on parsing or typechecking.
7665 </para>
7666 </listitem>
7667
7668 <listitem>
7669 <para>
7670  Rules are regarded as left-to-right rewrite rules.
7671 When GHC finds an expression that is a substitution instance of the LHS
7672 of a rule, it replaces the expression by the (appropriately-substituted) RHS.
7673 By "a substitution instance" we mean that the LHS can be made equal to the
7674 expression by substituting for the pattern variables.
7675
7676 </para>
7677 </listitem>
7678 <listitem>
7679
7680 <para>
7681  GHC makes absolutely no attempt to verify that the LHS and RHS
7682 of a rule have the same meaning.  That is undecidable in general, and
7683 infeasible in most interesting cases.  The responsibility is entirely the programmer's!
7684
7685 </para>
7686 </listitem>
7687 <listitem>
7688
7689 <para>
7690  GHC makes no attempt to make sure that the rules are confluent or
7691 terminating.  For example:
7692
7693 <programlisting>
7694   "loop"        forall x y.  f x y = f y x
7695 </programlisting>
7696
7697 This rule will cause the compiler to go into an infinite loop.
7698
7699 </para>
7700 </listitem>
7701 <listitem>
7702
7703 <para>
7704  If more than one rule matches a call, GHC will choose one arbitrarily to apply.
7705
7706 </para>
7707 </listitem>
7708 <listitem>
7709 <para>
7710  GHC currently uses a very simple, syntactic, matching algorithm
7711 for matching a rule LHS with an expression.  It seeks a substitution
7712 which makes the LHS and expression syntactically equal modulo alpha
7713 conversion.  The pattern (rule), but not the expression, is eta-expanded if
7714 necessary.  (Eta-expanding the expression can lead to laziness bugs.)
7715 But not beta conversion (that's called higher-order matching).
7716 </para>
7717
7718 <para>
7719 Matching is carried out on GHC's intermediate language, which includes
7720 type abstractions and applications.  So a rule only matches if the
7721 types match too.  See <xref linkend="rule-spec"/> below.
7722 </para>
7723 </listitem>
7724 <listitem>
7725
7726 <para>
7727  GHC keeps trying to apply the rules as it optimises the program.
7728 For example, consider:
7729
7730 <programlisting>
7731   let s = map f
7732       t = map g
7733   in
7734   s (t xs)
7735 </programlisting>
7736
7737 The expression <literal>s (t xs)</literal> does not match the rule <literal>"map/map"</literal>, but GHC
7738 will substitute for <varname>s</varname> and <varname>t</varname>, giving an expression which does match.
7739 If <varname>s</varname> or <varname>t</varname> was (a) used more than once, and (b) large or a redex, then it would
7740 not be substituted, and the rule would not fire.
7741
7742 </para>
7743 </listitem>
7744 <listitem>
7745
7746 <para>
7747 Ordinary inlining happens at the same time as rule rewriting, which may lead to unexpected
7748 results.  Consider this (artificial) example
7749 <programlisting>
7750 f x = x
7751 {-# RULES "f" f True = False #-}
7752
7753 g y = f y
7754
7755 h z = g True
7756 </programlisting>
7757 Since <literal>f</literal>'s right-hand side is small, it is inlined into <literal>g</literal>,
7758 to give
7759 <programlisting>
7760 g y = y
7761 </programlisting>
7762 Now <literal>g</literal> is inlined into <literal>h</literal>, but <literal>f</literal>'s RULE has
7763 no chance to fire.  
7764 If instead GHC had first inlined <literal>g</literal> into <literal>h</literal> then there
7765 would have been a better chance that <literal>f</literal>'s RULE might fire.  
7766 </para>
7767 <para>
7768 The way to get predictable behaviour is to use a NOINLINE 
7769 pragma on <literal>f</literal>, to ensure
7770 that it is not inlined until its RULEs have had a chance to fire.
7771 </para>
7772 </listitem>
7773 </itemizedlist>
7774
7775 </para>
7776
7777 </sect2>
7778
7779 <sect2>
7780 <title>List fusion</title>
7781
7782 <para>
7783 The RULES mechanism is used to implement fusion (deforestation) of common list functions.
7784 If a "good consumer" consumes an intermediate list constructed by a "good producer", the
7785 intermediate list should be eliminated entirely.
7786 </para>
7787
7788 <para>
7789 The following are good producers:
7790
7791 <itemizedlist>
7792 <listitem>
7793
7794 <para>
7795  List comprehensions
7796 </para>
7797 </listitem>
7798 <listitem>
7799
7800 <para>
7801  Enumerations of <literal>Int</literal> and <literal>Char</literal> (e.g. <literal>['a'..'z']</literal>).
7802 </para>
7803 </listitem>
7804 <listitem>
7805
7806 <para>
7807  Explicit lists (e.g. <literal>[True, False]</literal>)
7808 </para>
7809 </listitem>
7810 <listitem>
7811
7812 <para>
7813  The cons constructor (e.g <literal>3:4:[]</literal>)
7814 </para>
7815 </listitem>
7816 <listitem>
7817
7818 <para>
7819  <function>++</function>
7820 </para>
7821 </listitem>
7822
7823 <listitem>
7824 <para>
7825  <function>map</function>
7826 </para>
7827 </listitem>
7828
7829 <listitem>
7830 <para>
7831 <function>take</function>, <function>filter</function>
7832 </para>
7833 </listitem>
7834 <listitem>
7835
7836 <para>
7837  <function>iterate</function>, <function>repeat</function>
7838 </para>
7839 </listitem>
7840 <listitem>
7841
7842 <para>
7843  <function>zip</function>, <function>zipWith</function>
7844 </para>
7845 </listitem>
7846
7847 </itemizedlist>
7848
7849 </para>
7850
7851 <para>
7852 The following are good consumers:
7853
7854 <itemizedlist>
7855 <listitem>
7856
7857 <para>
7858  List comprehensions
7859 </para>
7860 </listitem>
7861 <listitem>
7862
7863 <para>
7864  <function>array</function> (on its second argument)
7865 </para>
7866 </listitem>
7867 <listitem>
7868
7869 <para>
7870  <function>++</function> (on its first argument)
7871 </para>
7872 </listitem>
7873
7874 <listitem>
7875 <para>
7876  <function>foldr</function>
7877 </para>
7878 </listitem>
7879
7880 <listitem>
7881 <para>
7882  <function>map</function>
7883 </para>
7884 </listitem>
7885 <listitem>
7886
7887 <para>
7888 <function>take</function>, <function>filter</function>
7889 </para>
7890 </listitem>
7891 <listitem>
7892
7893 <para>
7894  <function>concat</function>
7895 </para>
7896 </listitem>
7897 <listitem>
7898
7899 <para>
7900  <function>unzip</function>, <function>unzip2</function>, <function>unzip3</function>, <function>unzip4</function>
7901 </para>
7902 </listitem>
7903 <listitem>
7904
7905 <para>
7906  <function>zip</function>, <function>zipWith</function> (but on one argument only; if both are good producers, <function>zip</function>
7907 will fuse with one but not the other)
7908 </para>
7909 </listitem>
7910 <listitem>
7911
7912 <para>
7913  <function>partition</function>
7914 </para>
7915 </listitem>
7916 <listitem>
7917
7918 <para>
7919  <function>head</function>
7920 </para>
7921 </listitem>
7922 <listitem>
7923
7924 <para>
7925  <function>and</function>, <function>or</function>, <function>any</function>, <function>all</function>
7926 </para>
7927 </listitem>
7928 <listitem>
7929
7930 <para>
7931  <function>sequence&lowbar;</function>
7932 </para>
7933 </listitem>
7934 <listitem>
7935
7936 <para>
7937  <function>msum</function>
7938 </para>
7939 </listitem>
7940 <listitem>
7941
7942 <para>
7943  <function>sortBy</function>
7944 </para>
7945 </listitem>
7946
7947 </itemizedlist>
7948
7949 </para>
7950
7951  <para>
7952 So, for example, the following should generate no intermediate lists:
7953
7954 <programlisting>
7955 array (1,10) [(i,i*i) | i &#60;- map (+ 1) [0..9]]
7956 </programlisting>
7957
7958 </para>
7959
7960 <para>
7961 This list could readily be extended; if there are Prelude functions that you use
7962 a lot which are not included, please tell us.
7963 </para>
7964
7965 <para>
7966 If you want to write your own good consumers or producers, look at the
7967 Prelude definitions of the above functions to see how to do so.
7968 </para>
7969
7970 </sect2>
7971
7972 <sect2 id="rule-spec">
7973 <title>Specialisation
7974 </title>
7975
7976 <para>
7977 Rewrite rules can be used to get the same effect as a feature
7978 present in earlier versions of GHC.
7979 For example, suppose that:
7980
7981 <programlisting>
7982 genericLookup :: Ord a => Table a b   -> a   -> b
7983 intLookup     ::          Table Int b -> Int -> b
7984 </programlisting>
7985
7986 where <function>intLookup</function> is an implementation of
7987 <function>genericLookup</function> that works very fast for
7988 keys of type <literal>Int</literal>.  You might wish
7989 to tell GHC to use <function>intLookup</function> instead of
7990 <function>genericLookup</function> whenever the latter was called with
7991 type <literal>Table Int b -&gt; Int -&gt; b</literal>.
7992 It used to be possible to write
7993
7994 <programlisting>
7995 {-# SPECIALIZE genericLookup :: Table Int b -> Int -> b = intLookup #-}
7996 </programlisting>
7997
7998 This feature is no longer in GHC, but rewrite rules let you do the same thing:
7999
8000 <programlisting>
8001 {-# RULES "genericLookup/Int" genericLookup = intLookup #-}
8002 </programlisting>
8003
8004 This slightly odd-looking rule instructs GHC to replace
8005 <function>genericLookup</function> by <function>intLookup</function>
8006 <emphasis>whenever the types match</emphasis>.
8007 What is more, this rule does not need to be in the same
8008 file as <function>genericLookup</function>, unlike the
8009 <literal>SPECIALIZE</literal> pragmas which currently do (so that they
8010 have an original definition available to specialise).
8011 </para>
8012
8013 <para>It is <emphasis>Your Responsibility</emphasis> to make sure that
8014 <function>intLookup</function> really behaves as a specialised version
8015 of <function>genericLookup</function>!!!</para>
8016
8017 <para>An example in which using <literal>RULES</literal> for
8018 specialisation will Win Big:
8019
8020 <programlisting>
8021 toDouble :: Real a => a -> Double
8022 toDouble = fromRational . toRational
8023
8024 {-# RULES "toDouble/Int" toDouble = i2d #-}
8025 i2d (I# i) = D# (int2Double# i) -- uses Glasgow prim-op directly
8026 </programlisting>
8027
8028 The <function>i2d</function> function is virtually one machine
8029 instruction; the default conversion&mdash;via an intermediate
8030 <literal>Rational</literal>&mdash;is obscenely expensive by
8031 comparison.
8032 </para>
8033
8034 </sect2>
8035
8036 <sect2>
8037 <title>Controlling what's going on</title>
8038
8039 <para>
8040
8041 <itemizedlist>
8042 <listitem>
8043
8044 <para>
8045  Use <option>-ddump-rules</option> to see what transformation rules GHC is using.
8046 </para>
8047 </listitem>
8048 <listitem>
8049
8050 <para>
8051  Use <option>-ddump-simpl-stats</option> to see what rules are being fired.
8052 If you add <option>-dppr-debug</option> you get a more detailed listing.
8053 </para>
8054 </listitem>
8055 <listitem>
8056
8057 <para>
8058  The definition of (say) <function>build</function> in <filename>GHC/Base.lhs</filename> looks like this:
8059
8060 <programlisting>
8061         build   :: forall a. (forall b. (a -> b -> b) -> b -> b) -> [a]
8062         {-# INLINE build #-}
8063         build g = g (:) []
8064 </programlisting>
8065
8066 Notice the <literal>INLINE</literal>!  That prevents <literal>(:)</literal> from being inlined when compiling
8067 <literal>PrelBase</literal>, so that an importing module will &ldquo;see&rdquo; the <literal>(:)</literal>, and can
8068 match it on the LHS of a rule.  <literal>INLINE</literal> prevents any inlining happening
8069 in the RHS of the <literal>INLINE</literal> thing.  I regret the delicacy of this.
8070
8071 </para>
8072 </listitem>
8073 <listitem>
8074
8075 <para>
8076  In <filename>libraries/base/GHC/Base.lhs</filename> look at the rules for <function>map</function> to
8077 see how to write rules that will do fusion and yet give an efficient
8078 program even if fusion doesn't happen.  More rules in <filename>GHC/List.lhs</filename>.
8079 </para>
8080 </listitem>
8081
8082 </itemizedlist>
8083
8084 </para>
8085
8086 </sect2>
8087
8088 <sect2 id="core-pragma">
8089   <title>CORE pragma</title>
8090
8091   <indexterm><primary>CORE pragma</primary></indexterm>
8092   <indexterm><primary>pragma, CORE</primary></indexterm>
8093   <indexterm><primary>core, annotation</primary></indexterm>
8094
8095 <para>
8096   The external core format supports <quote>Note</quote> annotations;
8097   the <literal>CORE</literal> pragma gives a way to specify what these
8098   should be in your Haskell source code.  Syntactically, core
8099   annotations are attached to expressions and take a Haskell string
8100   literal as an argument.  The following function definition shows an
8101   example:
8102
8103 <programlisting>
8104 f x = ({-# CORE "foo" #-} show) ({-# CORE "bar" #-} x)
8105 </programlisting>
8106
8107   Semantically, this is equivalent to:
8108
8109 <programlisting>
8110 g x = show x
8111 </programlisting>
8112 </para>
8113
8114 <para>
8115   However, when external core is generated (via
8116   <option>-fext-core</option>), there will be Notes attached to the
8117   expressions <function>show</function> and <varname>x</varname>.
8118   The core function declaration for <function>f</function> is:
8119 </para>
8120
8121 <programlisting>
8122   f :: %forall a . GHCziShow.ZCTShow a ->
8123                    a -> GHCziBase.ZMZN GHCziBase.Char =
8124     \ @ a (zddShow::GHCziShow.ZCTShow a) (eta::a) ->
8125         (%note "foo"
8126          %case zddShow %of (tpl::GHCziShow.ZCTShow a)
8127            {GHCziShow.ZCDShow
8128             (tpl1::GHCziBase.Int ->
8129                    a ->
8130                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
8131 r)
8132             (tpl2::a -> GHCziBase.ZMZN GHCziBase.Char)
8133             (tpl3::GHCziBase.ZMZN a ->
8134                    GHCziBase.ZMZN GHCziBase.Char -> GHCziBase.ZMZN GHCziBase.Cha
8135 r) ->
8136               tpl2})
8137         (%note "bar"
8138          eta);
8139 </programlisting>
8140
8141 <para>
8142   Here, we can see that the function <function>show</function> (which
8143   has been expanded out to a case expression over the Show dictionary)
8144   has a <literal>%note</literal> attached to it, as does the
8145   expression <varname>eta</varname> (which used to be called
8146   <varname>x</varname>).
8147 </para>
8148
8149 </sect2>
8150
8151 </sect1>
8152
8153 <sect1 id="special-ids">
8154 <title>Special built-in functions</title>
8155 <para>GHC has a few built-in functions with special behaviour.  These
8156 are now described in the module <ulink
8157 url="../libraries/base/GHC-Prim.html"><literal>GHC.Prim</literal></ulink>
8158 in the library documentation.</para>
8159 </sect1>
8160
8161
8162 <sect1 id="generic-classes">
8163 <title>Generic classes</title>
8164
8165 <para>
8166 The ideas behind this extension are described in detail in "Derivable type classes",
8167 Ralf Hinze and Simon Peyton Jones, Haskell Workshop, Montreal Sept 2000, pp94-105.
8168 An example will give the idea:
8169 </para>
8170
8171 <programlisting>
8172   import Generics
8173
8174   class Bin a where
8175     toBin   :: a -> [Int]
8176     fromBin :: [Int] -> (a, [Int])
8177   
8178     toBin {| Unit |}    Unit      = []
8179     toBin {| a :+: b |} (Inl x)   = 0 : toBin x
8180     toBin {| a :+: b |} (Inr y)   = 1 : toBin y
8181     toBin {| a :*: b |} (x :*: y) = toBin x ++ toBin y
8182   
8183     fromBin {| Unit |}    bs      = (Unit, bs)
8184     fromBin {| a :+: b |} (0:bs)  = (Inl x, bs')    where (x,bs') = fromBin bs
8185     fromBin {| a :+: b |} (1:bs)  = (Inr y, bs')    where (y,bs') = fromBin bs
8186     fromBin {| a :*: b |} bs      = (x :*: y, bs'') where (x,bs' ) = fromBin bs
8187                                                           (y,bs'') = fromBin bs'
8188 </programlisting>
8189 <para>
8190 This class declaration explains how <literal>toBin</literal> and <literal>fromBin</literal>
8191 work for arbitrary data types.  They do so by giving cases for unit, product, and sum,
8192 which are defined thus in the library module <literal>Generics</literal>:
8193 </para>
8194 <programlisting>
8195   data Unit    = Unit
8196   data a :+: b = Inl a | Inr b
8197   data a :*: b = a :*: b
8198 </programlisting>
8199 <para>
8200 Now you can make a data type into an instance of Bin like this:
8201 <programlisting>
8202   instance (Bin a, Bin b) => Bin (a,b)
8203   instance Bin a => Bin [a]
8204 </programlisting>
8205 That is, just leave off the "where" clause.  Of course, you can put in the
8206 where clause and over-ride whichever methods you please.
8207 </para>
8208
8209     <sect2>
8210       <title> Using generics </title>
8211       <para>To use generics you need to</para>
8212       <itemizedlist>
8213         <listitem>
8214           <para>Use the flags <option>-fglasgow-exts</option> (to enable the extra syntax), 
8215                 <option>-XGenerics</option> (to generate extra per-data-type code),
8216                 and <option>-package lang</option> (to make the <literal>Generics</literal> library
8217                 available.  </para>
8218         </listitem>
8219         <listitem>
8220           <para>Import the module <literal>Generics</literal> from the
8221           <literal>lang</literal> package.  This import brings into
8222           scope the data types <literal>Unit</literal>,
8223           <literal>:*:</literal>, and <literal>:+:</literal>.  (You
8224           don't need this import if you don't mention these types
8225           explicitly; for example, if you are simply giving instance
8226           declarations.)</para>
8227         </listitem>
8228       </itemizedlist>
8229     </sect2>
8230
8231 <sect2> <title> Changes wrt the paper </title>
8232 <para>
8233 Note that the type constructors <literal>:+:</literal> and <literal>:*:</literal> 
8234 can be written infix (indeed, you can now use
8235 any operator starting in a colon as an infix type constructor).  Also note that
8236 the type constructors are not exactly as in the paper (Unit instead of 1, etc).
8237 Finally, note that the syntax of the type patterns in the class declaration
8238 uses "<literal>{|</literal>" and "<literal>|}</literal>" brackets; curly braces
8239 alone would ambiguous when they appear on right hand sides (an extension we 
8240 anticipate wanting).
8241 </para>
8242 </sect2>
8243
8244 <sect2> <title>Terminology and restrictions</title>
8245 <para>
8246 Terminology.  A "generic default method" in a class declaration
8247 is one that is defined using type patterns as above.
8248 A "polymorphic default method" is a default method defined as in Haskell 98.
8249 A "generic class declaration" is a class declaration with at least one
8250 generic default method.
8251 </para>
8252
8253 <para>
8254 Restrictions:
8255 <itemizedlist>
8256 <listitem>
8257 <para>
8258 Alas, we do not yet implement the stuff about constructor names and 
8259 field labels.
8260 </para>
8261 </listitem>
8262
8263 <listitem>
8264 <para>
8265 A generic class can have only one parameter; you can't have a generic
8266 multi-parameter class.
8267 </para>
8268 </listitem>
8269
8270 <listitem>
8271 <para>
8272 A default method must be defined entirely using type patterns, or entirely
8273 without.  So this is illegal:
8274 <programlisting>
8275   class Foo a where
8276     op :: a -> (a, Bool)
8277     op {| Unit |} Unit = (Unit, True)
8278     op x               = (x,    False)
8279 </programlisting>
8280 However it is perfectly OK for some methods of a generic class to have 
8281 generic default methods and others to have polymorphic default methods.
8282 </para>
8283 </listitem>
8284
8285 <listitem>
8286 <para>
8287 The type variable(s) in the type pattern for a generic method declaration
8288 scope over the right hand side.  So this is legal (note the use of the type variable ``p'' in a type signature on the right hand side:
8289 <programlisting>
8290   class Foo a where
8291     op :: a -> Bool
8292     op {| p :*: q |} (x :*: y) = op (x :: p)
8293     ...
8294 </programlisting>
8295 </para>
8296 </listitem>
8297
8298 <listitem>
8299 <para>
8300 The type patterns in a generic default method must take one of the forms:
8301 <programlisting>
8302        a :+: b
8303        a :*: b
8304        Unit
8305 </programlisting>
8306 where "a" and "b" are type variables.  Furthermore, all the type patterns for
8307 a single type constructor (<literal>:*:</literal>, say) must be identical; they
8308 must use the same type variables.  So this is illegal:
8309 <programlisting>
8310   class Foo a where
8311     op :: a -> Bool
8312     op {| a :+: b |} (Inl x) = True
8313     op {| p :+: q |} (Inr y) = False
8314 </programlisting>
8315 The type patterns must be identical, even in equations for different methods of the class.
8316 So this too is illegal:
8317 <programlisting>
8318   class Foo a where
8319     op1 :: a -> Bool
8320     op1 {| a :*: b |} (x :*: y) = True
8321
8322     op2 :: a -> Bool
8323     op2 {| p :*: q |} (x :*: y) = False
8324 </programlisting>
8325 (The reason for this restriction is that we gather all the equations for a particular type constructor
8326 into a single generic instance declaration.)
8327 </para>
8328 </listitem>
8329
8330 <listitem>
8331 <para>
8332 A generic method declaration must give a case for each of the three type constructors.
8333 </para>
8334 </listitem>
8335
8336 <listitem>
8337 <para>
8338 The type for a generic method can be built only from:
8339   <itemizedlist>
8340   <listitem> <para> Function arrows </para> </listitem>
8341   <listitem> <para> Type variables </para> </listitem>
8342   <listitem> <para> Tuples </para> </listitem>
8343   <listitem> <para> Arbitrary types not involving type variables </para> </listitem>
8344   </itemizedlist>
8345 Here are some example type signatures for generic methods:
8346 <programlisting>
8347     op1 :: a -> Bool
8348     op2 :: Bool -> (a,Bool)
8349     op3 :: [Int] -> a -> a
8350     op4 :: [a] -> Bool
8351 </programlisting>
8352 Here, op1, op2, op3 are OK, but op4 is rejected, because it has a type variable
8353 inside a list.  
8354 </para>
8355 <para>
8356 This restriction is an implementation restriction: we just haven't got around to
8357 implementing the necessary bidirectional maps over arbitrary type constructors.
8358 It would be relatively easy to add specific type constructors, such as Maybe and list,
8359 to the ones that are allowed.</para>
8360 </listitem>
8361
8362 <listitem>
8363 <para>
8364 In an instance declaration for a generic class, the idea is that the compiler
8365 will fill in the methods for you, based on the generic templates.  However it can only
8366 do so if
8367   <itemizedlist>
8368   <listitem>
8369   <para>
8370   The instance type is simple (a type constructor applied to type variables, as in Haskell 98).
8371   </para>
8372   </listitem>
8373   <listitem>
8374   <para>
8375   No constructor of the instance type has unboxed fields.
8376   </para>
8377   </listitem>
8378   </itemizedlist>
8379 (Of course, these things can only arise if you are already using GHC extensions.)
8380 However, you can still give an instance declarations for types which break these rules,
8381 provided you give explicit code to override any generic default methods.
8382 </para>
8383 </listitem>
8384
8385 </itemizedlist>
8386 </para>
8387
8388 <para>
8389 The option <option>-ddump-deriv</option> dumps incomprehensible stuff giving details of 
8390 what the compiler does with generic declarations.
8391 </para>
8392
8393 </sect2>
8394
8395 <sect2> <title> Another example </title>
8396 <para>
8397 Just to finish with, here's another example I rather like:
8398 <programlisting>
8399   class Tag a where
8400     nCons :: a -> Int
8401     nCons {| Unit |}    _ = 1
8402     nCons {| a :*: b |} _ = 1
8403     nCons {| a :+: b |} _ = nCons (bot::a) + nCons (bot::b)
8404   
8405     tag :: a -> Int
8406     tag {| Unit |}    _       = 1
8407     tag {| a :*: b |} _       = 1   
8408     tag {| a :+: b |} (Inl x) = tag x
8409     tag {| a :+: b |} (Inr y) = nCons (bot::a) + tag y
8410 </programlisting>
8411 </para>
8412 </sect2>
8413 </sect1>
8414
8415 <sect1 id="monomorphism">
8416 <title>Control over monomorphism</title>
8417
8418 <para>GHC supports two flags that control the way in which generalisation is
8419 carried out at let and where bindings.
8420 </para>
8421
8422 <sect2>
8423 <title>Switching off the dreaded Monomorphism Restriction</title>
8424           <indexterm><primary><option>-XNoMonomorphismRestriction</option></primary></indexterm>
8425
8426 <para>Haskell's monomorphism restriction (see 
8427 <ulink url="http://www.haskell.org/onlinereport/decls.html#sect4.5.5">Section
8428 4.5.5</ulink>
8429 of the Haskell Report)
8430 can be completely switched off by
8431 <option>-XNoMonomorphismRestriction</option>.
8432 </para>
8433 </sect2>
8434
8435 <sect2>
8436 <title>Monomorphic pattern bindings</title>
8437           <indexterm><primary><option>-XNoMonoPatBinds</option></primary></indexterm>
8438           <indexterm><primary><option>-XMonoPatBinds</option></primary></indexterm>
8439
8440           <para> As an experimental change, we are exploring the possibility of
8441           making pattern bindings monomorphic; that is, not generalised at all.  
8442             A pattern binding is a binding whose LHS has no function arguments,
8443             and is not a simple variable.  For example:
8444 <programlisting>
8445   f x = x                    -- Not a pattern binding
8446   f = \x -> x                -- Not a pattern binding
8447   f :: Int -> Int = \x -> x  -- Not a pattern binding
8448
8449   (g,h) = e                  -- A pattern binding
8450   (f) = e                    -- A pattern binding
8451   [x] = e                    -- A pattern binding
8452 </programlisting>
8453 Experimentally, GHC now makes pattern bindings monomorphic <emphasis>by
8454 default</emphasis>.  Use <option>-XNoMonoPatBinds</option> to recover the
8455 standard behaviour.
8456 </para>
8457 </sect2>
8458 </sect1>
8459
8460
8461
8462 <!-- Emacs stuff:
8463      ;;; Local Variables: ***
8464      ;;; mode: xml ***
8465      ;;; sgml-parent-document: ("users_guide.xml" "book" "chapter" "sect1") ***
8466      ;;; ispell-local-dictionary: "british" ***
8467      ;;; End: ***
8468  -->
8469