[project @ 2000-04-06 10:45:11 by simonmar]
[ghc-hetmet.git] / docs / building.sgml
1 <!DOCTYPE Article PUBLIC "-//OASIS//DTD DocBook V3.1//EN">
2
3 <Article>
4
5 <ArtHeader>
6
7 <Title>Building the Glasgow Functional Programming Tools Suite</Title>
8 <Author><OtherName>The GHC Team</OtherName></Author>
9 <Address><Email>glasgow-haskell-&lcub;users,bugs&rcub;@haskell.org</Email></Address>
10 <PubDate>January 2000</PubDate>
11
12 <Abstract>
13
14 <Para>
15 This guide is intended for people who want to build or modify
16 programs from the Glasgow <Literal>fptools</Literal> suite (as distinct from those
17 who merely want to <Emphasis>run</Emphasis> them). Installation instructions are now provided in the user guide.
18 </Para>
19
20 <Para>
21 The bulk of this guide applies to building on Unix systems; see <XRef LinkEnd="winbuild"> for Windows notes.
22 </Para>
23
24 </Abstract>
25
26 </ArtHeader>
27
28
29 <Sect1 id="sec-getting">
30 <Title>Getting the Glasgow <Literal>fptools</Literal> suite
31 </Title>
32
33 <Para>
34 Building the Glasgow tools <Emphasis>can</Emphasis> be complicated, mostly because
35 there are so many permutations of what/why/how, e.g., ``Build Happy
36 with HBC, everything else with GHC, leave out profiling, and test it
37 all on the `real' NoFib programs.''  Yeeps!
38 </Para>
39
40 <Para>
41 Happily, such complications don't apply to most people.  A few common
42 ``strategies'' serve most purposes.  Pick one and proceed
43 as suggested:
44 </Para>
45
46 <Para>
47 <VariableList>
48
49 <VarListEntry>
50 <Term><IndexTerm><Primary>Binary distribution</Primary></IndexTerm>Binary distribution.</Term>
51 <ListItem>
52 <Para>
53 If your only purpose is to install some of the <Literal>fptools</Literal> suite then the easiest thing to do is to get a binary distribution. In the
54 binary distribution everything is pre-compiled for your particular
55 machine architecture and operating system, so all you should have to
56 do is install the binaries and libraries in suitable places. The user guide
57 describes how to do this.
58 </Para>
59
60 <Para>
61 A binary distribution may not work for you for two reasons.  First, we
62 may not have built the suite for the particular architecture/OS
63 platform you want. That may be due to lack of time and energy (in
64 which case you can get a source distribution and build from it; see
65 below).  Alternatively, it may be because we haven't yet ported the
66 suite to your architecture, in which case you are considerably worse
67 off.
68 </Para>
69
70 <Para>
71 The second reason a binary distribution may not be what you want is
72 if you want to read or modify the souce code.
73 </Para>
74 </ListItem></VarListEntry>
75 <VarListEntry>
76 <Term><IndexTerm><Primary>Source distribution</Primary></IndexTerm>Source distribution.</Term>
77 <ListItem>
78 <Para>
79 You have a supported
80 platform, but (a)&nbsp;you like the warm fuzzy feeling of compiling things
81 yourself; (b)&nbsp;you want to build something ``extra''&mdash;e.g., a set of
82 libraries with strictness-analysis turned off; or (c)&nbsp;you want to hack
83 on GHC yourself.
84 </Para>
85
86 <Para>
87 A source distribution contains complete sources for one or more
88 projects in the <Literal>fptools</Literal> suite.  Not only that, but the more awkward
89 machine-independent steps are done for you.  For example, if you don't
90 have <Command>flex</Command><IndexTerm><Primary>flex</Primary></IndexTerm> you'll find it convenient that the source
91 distribution contains the result of running <Command>flex</Command> on the lexical
92 analyser specification.  If you don't want to alter the lexical
93 analyser then this saves you having to find and install <Command>flex</Command>. You
94 will still need a working version of GHC on your machine in order to
95 compile (most of) the sources, however.
96 </Para>
97
98 <Para>
99 We make source distributions more frequently than binary
100 distributions; a release that comes with pre-compiled binaries
101 is considered a major release, i.e., a release that we have some
102 confidence will work well by having tested it (more) thoroughly.
103 </Para>
104
105 <Para>
106 Source-only distributions are either bugfix releases or snapshots of
107 current state of development. The release has undergone some testing.
108 Source releases of GHC 4.xx can be compiled up using GHC 2.10 or
109 later.
110 </Para>
111 </ListItem></VarListEntry>
112 <VarListEntry>
113 <Term>Build GHC from intermediate C <Filename>.hc</Filename> files<IndexTerm><Primary>hc files</Primary></IndexTerm>:</Term>
114 <ListItem>
115 <Para>
116 You
117 need a working GHC to use a source distribution. What if you don't
118 have a working GHC? Then you have no choice but to ``bootstrap'' up
119 from the intermediate C (<Filename>.hc</Filename>) files that we provide.  Building GHC
120 on an unsupported platform falls into this category.  Please see
121 <Xref LinkEnd="sec-booting-from-C">.
122 </Para>
123
124 <Para>
125 Once you have built GHC, you can build the other Glasgow tools with
126 it.
127 </Para>
128
129 <Para>
130 In theory, you can (could?) build GHC with another Haskell compiler
131 (e.g., HBC). We haven't tried to do this for ages and it almost
132 certainly doesn't work any more (for tedious reasons).
133 </Para>
134 </ListItem></VarListEntry>
135 <VarListEntry>
136 <Term>The CVS repository.</Term>
137 <ListItem>
138 <Para>
139 We make source distributions slightly more often than binary
140 distributions; but still infrequently.  If you want more up-to-the
141 minute (but less tested) source code then you need to get access to
142 our CVS repository.
143 </Para>
144
145 <Para>
146 All the <Literal>fptools</Literal> source code is held in a CVS repository. CVS is a
147 pretty good source-code control system, and best of all it works over
148 the network.
149 </Para>
150
151 <Para>
152 The repository holds source code only. It holds no mechanically
153 generated files at all.  So if you check out a source tree from CVS
154 you will need to install every utility so that you can build all the
155 derived files from scratch.
156 </Para>
157
158 <Para>
159 More information about our CVS repository is available in the <ULink
160 URL="http://www.haskell.org/ghc/cvs-cheat-sheet.html" >FPTools CVS
161 Cheat Sheet</ULink >.
162 </Para>
163 </ListItem></VarListEntry>
164 </VariableList>
165 </Para>
166
167 <Para>
168 If you are going to do any building from sources (either from a source
169 distribution or the CVS repository) then you need to read all of this
170 manual in detail.
171 </Para>
172
173 </Sect1>
174
175 <Sect1>
176 <Title>Things to check before you start typing</Title>
177
178 <Para>
179 Here's a list of things to check before you get started.
180
181 <OrderedList>
182 <ListItem>
183
184 <Para>
185 <IndexTerm><Primary>Disk space needed</Primary></IndexTerm>Disk space needed: About 30MB (five hamburgers' worth) of disk space
186 for the most basic binary distribution of GHC; more for some
187 platforms, e.g., Alphas.  An extra ``bundle'' (e.g., concurrent
188 Haskell libraries) might take you to 8&ndash;10 hamburgers.
189
190 You'll need over 100MB (say, 20 hamburgers' worth) if you need to
191 build the basic stuff from scratch.
192
193
194 All of the above are <Emphasis>estimates</Emphasis> of disk-space needs. (I don't yet
195 know the disk requirements for the non-GHC tools).
196
197 </Para>
198 </ListItem>
199 <ListItem>
200
201 <Para>
202 Use an appropriate machine, compilers, and things.
203
204 SPARC boxes, and PCs running Linux, FreeBSD, NetBSD, or Solaris are
205 all fully supported.  Win32 and HP boxes are in pretty good shape.
206 DEC Alphas running OSF/1, Linux or some BSD variant, MIPS and AIX
207 boxes will need some minimal porting effort before they work (as of
208 4.06).  <Xref LinkEnd="sec-port-info"> gives the full run-down on
209 ports or lack thereof.
210
211 </Para>
212 </ListItem>
213 <ListItem>
214
215 <Para>
216  Be sure that the ``pre-supposed'' utilities are installed.
217 <Xref LinkEnd="sec-pre-supposed"> elaborates.
218
219 </Para>
220 </ListItem>
221 <ListItem>
222
223 <Para>
224  If you have any problem when building or installing the Glasgow
225 tools, please check the ``known pitfalls'' (<Xref
226 LinkEnd="sec-build-pitfalls">).  Also check the FAQ for the version
227 you're building, which should be available from the relevant download
228 page on the <ULink URL="http://www.haskell.org/ghc/" >GHC web
229 site</ULink>.
230
231 <IndexTerm><Primary>known bugs</Primary></IndexTerm>
232 <IndexTerm><Primary>bugs, known</Primary></IndexTerm>
233
234 If you feel there is still some shortcoming in our procedure or
235 instructions, please report it.
236
237 For GHC, please see the bug-reporting section of the GHC Users' Guide
238 (separate document), to maximise the usefulness of your report.
239 <IndexTerm><Primary>bugs, reporting</Primary></IndexTerm>
240
241 If in doubt, please send a message to
242 <Email>glasgow-haskell-bugs@haskell.org</Email>.
243 <IndexTerm><Primary>bugs, mailing list</Primary></IndexTerm>
244 </Para>
245 </ListItem>
246
247 </OrderedList>
248
249 </Para>
250
251 </Sect1>
252
253 <Sect1 id="sec-port-info">
254 <Title>What machines the Glasgow tools run on
255 </Title>
256
257 <Para>
258 <IndexTerm><Primary>ports, GHC</Primary></IndexTerm>
259 <IndexTerm><Primary>GHC ports</Primary></IndexTerm>
260 <IndexTerm><Primary>supported platforms</Primary></IndexTerm>
261 <IndexTerm><Primary>platforms, supported</Primary></IndexTerm>
262 The main question is whether or not the Haskell compiler (GHC) runs on
263 your platform.
264 </Para>
265
266 <Para>
267 A ``platform'' is a architecture/manufacturer/operating-system
268 combination, such as <Literal>sparc-sun-solaris2</Literal>.  Other common ones are
269 <Literal>alpha-dec-osf2</Literal>, <Literal>hppa1.1-hp-hpux9</Literal>, <Literal>i386-unknown-linux</Literal>,
270 <Literal>i386-unknown-solaris2</Literal>, <Literal>i386-unknown-freebsd</Literal>,
271 <Literal>i386-unknown-cygwin32</Literal>, <Literal>m68k-sun-sunos4</Literal>, <Literal>mips-sgi-irix5</Literal>,
272 <Literal>sparc-sun-sunos4</Literal>, <Literal>sparc-sun-solaris2</Literal>, <Literal>powerpc-ibm-aix</Literal>.
273 </Para>
274
275 <Para>
276 Bear in mind that certain ``bundles'', e.g. parallel Haskell, may not
277 work on all machines for which basic Haskell compiling is supported.
278 </Para>
279
280 <Para>
281 Some libraries may only work on a limited number of platforms; for
282 example, a sockets library is of no use unless the operating system
283 supports the underlying BSDisms.
284 </Para>
285
286 <Sect2>
287 <Title>What platforms the Haskell compiler (GHC) runs on</Title>
288
289 <Para>
290 <IndexTerm><Primary>fully-supported platforms</Primary></IndexTerm>
291 <IndexTerm><Primary>native-code generator</Primary></IndexTerm>
292 <IndexTerm><Primary>registerised ports</Primary></IndexTerm>
293 <IndexTerm><Primary>unregisterised ports</Primary></IndexTerm>
294 The GHC hierarchy of Porting Goodness: (a)&nbsp;Best is a native-code
295 generator; (b)&nbsp;next best is a ``registerised''
296 port; (c)&nbsp;the bare minimum is an ``unregisterised'' port.
297 (``Unregisterised'' is so terrible that we won't say more about it).
298 </Para>
299
300 <Para>
301 The native code generator is currently non-functional (as of GHC
302 version 4.06), but we're actively working on getting it going again.
303 </Para>
304
305 <Para>
306 We use Sparcs running Solaris 2.7 and x86 boxes running FreeBSD and
307 Linux, so those are the best supported platforms, unsurprisingly.
308 </Para>
309
310 <Para>
311 Here's everything that's known about GHC ports.  We identify platforms
312 by their ``canonical'' CPU/Manufacturer/OS triple.
313 </Para>
314
315 <Para>
316 <VariableList>
317
318 <VarListEntry>
319 <Term>alpha-dec-{osf,linux,freebsd,openbsd,netbsd}:</Term>
320 <IndexTerm><Primary>alpha-dec-osf</Primary></IndexTerm>
321 <IndexTerm><Primary>alpha-dec-linux</Primary></IndexTerm>
322 <IndexTerm><Primary>alpha-dec-freebsd</Primary></IndexTerm>
323 <IndexTerm><Primary>alpha-dec-openbsd</Primary></IndexTerm>
324 <IndexTerm><Primary>alpha-dec-netbsd</Primary></IndexTerm>
325 <ListItem>
326
327 <Para>
328 Currently non-working.  The last working version (osf[1-3]) is GHC
329 3.02.  A small amount of porting effort will be required to get Alpha
330 support into GHC 4.xx, but we don't have easy access to machines right
331 now, and there hasn't been a massive demand for support, so Alphas
332 remain unsupported for the time being.  Please get in touch if you
333 either need Alpha support and/or can provide access to boxes.
334 </Para>
335
336 </ListItem></VarListEntry>
337 <VarListEntry>
338 <Term>sparc-sun-sunos4:</Term>
339 <IndexTerm><Primary>sparc-sun-sunos4</Primary></IndexTerm>
340 <ListItem>
341
342 <Para>
343 Probably works with minor tweaks, hasn't been tested for a while.
344 </Para>
345
346 </ListItem></VarListEntry>
347 <VarListEntry>
348 <Term>sparc-sun-solaris2:</Term>
349 <IndexTerm><Primary>sparc-sun-solaris2</Primary></IndexTerm>
350 <ListItem>
351
352 <Para>
353 Fully supported, including native-code generator.
354 </Para>
355
356 </ListItem></VarListEntry>
357 <VarListEntry>
358 <Term>hppa1.1-hp-hpux (HP-PA boxes running HPUX 9.x)</Term>
359 <IndexTerm><Primary>hppa1.1-hp-hpux</Primary></IndexTerm>
360 <ListItem>
361
362 <Para>
363 Works registerised.  No native-code generator.
364 </Para>
365
366 </ListItem></VarListEntry>
367 <VarListEntry>
368 <Term>i386-unknown-linux (PCs running Linux&mdash;ELF binary format):</Term>
369 <IndexTerm><Primary>i386-*-linux</Primary></IndexTerm>
370 <ListItem>
371
372 <Para>
373 GHC works registerised.  You <Emphasis>must</Emphasis> have GCC 2.7.x
374 or later.  NOTE about <literal>glibc</literal> versions: GHC binaries
375 built on a system running <literal>glibc 2.0</literal> won't work on a
376 system running <literal>glibc 2.1</literal>, and vice version.  In
377 general, don't expect compatibility between <literal>glibc</literal>
378 versions, even if the shared library version hasn't changed.
379 </Para>
380
381 </ListItem></VarListEntry>
382 <VarListEntry>
383 <Term>i386-unknown-{freebsd,netbsd,openbsd) (PCs running FreeBSD 2.2
384 or higher, NetBSD, and possibly OpenBSD):</Term>
385 <IndexTerm><Primary>i386-unknown-freebsd</Primary></IndexTerm> 
386 <IndexTerm><Primary>i386-unknown-netbsd</Primary></IndexTerm> 
387 <IndexTerm><Primary>i386-unknown-openbsd</Primary></IndexTerm> 
388 <ListItem>
389
390 <Para>
391 GHC works registerised.  These systems provide ready-built packages of
392 GHC, so if you just need binaries you're better off just installing
393 the package.
394 </Para>
395
396 </ListItem></VarListEntry>
397 <VarListEntry>
398 <Term>i386-unknown-cygwin32:</Term>
399 <IndexTerm><Primary>i386-unknown-cygwin32</Primary></IndexTerm>
400 <ListItem>
401
402 <Para>
403 Fully supported under Win9x/NT, including a native code
404 generator. Requires the <Literal>cygwin32</Literal> compatibility
405 library and a healthy collection of GNU tools (i.e., gcc, GNU ld, bash
406 etc.).
407 </Para>
408
409 </ListItem></VarListEntry>
410 <VarListEntry>
411 <Term>mips-sgi-irix5:</Term>
412 <IndexTerm><Primary>mips-sgi-irix[5-6]</Primary></IndexTerm>
413 <ListItem>
414
415 <Para>
416 Port currently doesn't work, needs some minimal porting effort.  As
417 usual, we don't have access to machines and there hasn't been an
418 overwhelming demand for this port, but feel free to get in touch.
419 </Para>
420 </ListItem></VarListEntry>
421
422 <VarListEntry>
423 <Term>powerpc-ibm-aix:</Term>
424 <ListItem>
425 <Para>
426 <IndexTerm><Primary>powerpc-ibm-aix</Primary></IndexTerm>
427 Port currently doesn't work, needs some minimal porting effort.  As
428 usual, we don't have access to machines and there hasn't been an
429 overwhelming demand for this port, but feel free to get in touch.
430 </Para>
431 </ListItem></VarListEntry>
432
433 </VariableList>
434 </Para>
435
436 <para>
437 Various other systems have had GHC ported to them in the distant past,
438 including various Motorola 68k boxes.  The 68k support still remains,
439 but porting to one of these systems will certainly be a non-trivial
440 task.
441 </para>
442
443 </Sect2>
444
445 <Sect2>
446 <Title>What machines the other tools run on</Title>
447
448 <Para>
449 Unless you hear otherwise, the other tools work if GHC works.
450 </Para>
451
452 </Sect2>
453
454 </Sect1>
455
456
457 <Sect1 id="sec-pre-supposed">
458 <Title>Installing pre-supposed utilities
459
460 <IndexTerm><Primary>pre-supposed utilities</Primary></IndexTerm>
461 <IndexTerm><Primary>utilities, pre-supposed</Primary></IndexTerm></Title>
462
463 <Para>
464 Here are the gory details about some utility programs you may need;
465 <Command>perl</Command>, <Command>gcc</Command> and
466 <command>happy</command> are the only important
467 ones. (PVM<IndexTerm><Primary>PVM</Primary></IndexTerm> is important
468 if you're going for Parallel Haskell.)  The
469 <Command>configure</Command><IndexTerm><Primary>configure</Primary></IndexTerm>
470 script will tell you if you are missing something.
471 </Para>
472
473 <Para>
474 <VariableList>
475
476 <VarListEntry>
477 <Term>Perl:</Term>
478 <IndexTerm><Primary>pre-supposed: Perl</Primary></IndexTerm>
479 <IndexTerm><Primary>Perl, pre-supposed</Primary></IndexTerm>
480 <ListItem>
481 <Para>
482 <Emphasis>You have to have Perl to proceed!</Emphasis> Perl is a
483 language quite good for doing shell-scripty tasks that involve lots of
484 text processing.  It is pretty easy to install.
485 </Para>
486
487 <Para>
488 Perl&nbsp;5 is required.  For Win32 platforms, we strongly suggest you
489 pick up a port of Perl&nbsp;5 for <Literal>cygwin32</Literal>, as the
490 common Hip/ActiveWare port of Perl is Not Cool Enough for our
491 purposes.
492 </Para>
493
494 <Para>
495 Perl should be put somewhere so that it can be invoked by the
496 <Literal>&num;!</Literal> script-invoking mechanism. (I believe
497 <Filename>/usr/bin/perl</Filename> is preferred; we use
498 <Filename>/usr/local/bin/perl</Filename> at Glasgow.)  The full
499 pathname should may need to be less than 32 characters long on some
500 systems.
501 </Para>
502
503 </ListItem></VarListEntry>
504 <VarListEntry>
505 <Term>GNU C (<Command>gcc</Command>):</Term>
506 <IndexTerm><Primary>pre-supposed: GCC (GNU C compiler)</Primary></IndexTerm>
507 <IndexTerm><Primary>GCC (GNU C compiler), pre-supposed</Primary></IndexTerm>
508 <ListItem>
509
510 <Para>
511 We recommend using GCC version 2.95.2 on all platforms.  Failing that,
512 version 2.7.2 is stable on most platforms.  Earlier versions of GCC
513 can be assumed not to work, and versions in between 2.7.2 and 2.95.2
514 (including <command>egcs</command>) have varying degrees of stability
515 depending on the platform.
516 </Para>
517
518 <Para>
519 If your GCC dies with ``internal error'' on some GHC source file,
520 please let us know, so we can report it and get things improved.
521 (Exception: on iX86 boxes&mdash;you may need to fiddle with GHC's
522 <Option>-monly-N-regs</Option> option; see the User's Guide)
523 </Para>
524 </ListItem></VarListEntry>
525
526 <varlistentry>
527 <term>Happy:</term>
528 <indexterm><primary>Happy</primary></indexterm>
529 <listitem>
530 <para>Happy is a parser generator tool for Haskell, and is used to
531 generate GHC's parsers.  Happy is written in Haskell, and is a project
532 in the CVS repository (<literal>fptools/happy</literal>).  It can be
533 built from source, but bear in mind that you'll need GHC installed in
534 order to build it.  To avoid the chicken/egg problem, install a binary
535 distribtion of either Happy or GHC to get started.  Happy
536 distributions are available from <ulink
537 url="http://www.haskell.org/happy/">Happy's Web Page</ulink>.
538 </para>
539 </listitem>
540 </varlistentry>
541
542 <VarListEntry>
543 <Term>Autoconf:</Term>
544 <IndexTerm><Primary>pre-supposed: Autoconf</Primary></IndexTerm>
545 <IndexTerm><Primary>Autoconf, pre-supposed</Primary></IndexTerm>
546 <ListItem>
547 <Para>
548 GNU Autoconf is needed if you intend to build from the CVS sources, it
549 is <Emphasis>not</Emphasis> needed if you just intend to build a
550 standard source distribution.
551 </Para>
552
553 <Para>
554 Autoconf builds the <Command>configure</Command> script from
555 <Filename>configure.in</Filename> and <Filename>aclocal.m4</Filename>.
556 If you modify either of these files, you'll need Autoconf to rebuild
557 <Filename>configure</Filename>.
558 </Para>
559
560 </ListItem></VarListEntry>
561 <VarListEntry>
562 <Term><Command>sed</Command></Term>
563 <IndexTerm><Primary>pre-supposed: sed</Primary></IndexTerm>
564 <IndexTerm><Primary>sed, pre-supposed</Primary></IndexTerm>
565 <ListItem>
566 <Para>
567 You need a working <Command>sed</Command> if you are going to build
568 from sources.  The build-configuration stuff needs it.  GNU sed
569 version 2.0.4 is no good!  It has a bug in it that is tickled by the
570 build-configuration.  2.0.5 is OK. Others are probably OK too
571 (assuming we don't create too elaborate configure scripts.)
572 </Para>
573 </ListItem></VarListEntry>
574 </VariableList>
575 </Para>
576
577 <Para>
578 One <Literal>fptools</Literal> project is worth a quick note at this
579 point, because it is useful for all the others:
580 <Literal>glafp-utils</Literal> contains several utilities which aren't
581 particularly Glasgow-ish, but Occasionally Indispensable.  Like
582 <Command>lndir</Command> for creating symbolic link trees.
583 </Para>
584
585 <Sect2 id="pre-supposed-gph-tools">
586 <Title>Tools for building parallel GHC (GPH)
587 </Title>
588
589 <Para>
590 <VariableList>
591
592 <VarListEntry>
593 <Term>PVM version 3:</Term>
594 <IndexTerm><Primary>pre-supposed: PVM3 (Parallel Virtual Machine)</Primary></IndexTerm>
595 <IndexTerm><Primary>PVM3 (Parallel Virtual Machine), pre-supposed</Primary></IndexTerm>
596 <ListItem>
597
598 <Para>
599 PVM is the Parallel Virtual Machine on which Parallel Haskell programs
600 run.  (You only need this if you plan to run Parallel Haskell.
601 Concurent Haskell, which runs concurrent threads on a uniprocessor
602 doesn't need it.)  Underneath PVM, you can have (for example) a
603 network of workstations (slow) or a multiprocessor box (faster).
604 </Para>
605
606 <Para>
607 The current version of PVM is 3.3.11; we use 3.3.7.  It is readily
608 available on the net; I think I got it from
609 <Literal>research.att.com</Literal>, in <Filename>netlib</Filename>.
610 </Para>
611
612 <Para>
613 A PVM installation is slightly quirky, but easy to do.  Just follow
614 the <Filename>Readme</Filename> instructions.
615 </Para>
616 </ListItem></VarListEntry>
617 <VarListEntry>
618 <Term><Command>bash</Command>:</Term>
619 <IndexTerm><Primary>bash, presupposed (Parallel Haskell only)</Primary></IndexTerm>
620 <ListItem>
621 <Para>
622 Sadly, the <Command>gr2ps</Command> script, used to convert ``parallelism profiles''
623 to PostScript, is written in Bash (GNU's Bourne Again shell).
624 This bug will be fixed (someday).
625 </Para>
626 </ListItem></VarListEntry>
627 </VariableList>
628 </Para>
629
630 </Sect2>
631
632 <Sect2 id="pre-supposed-doc-tools">
633 <Title>Tools for building the Documentation
634 </Title>
635
636 <Para>
637 The following additional tools are required if you want to format the
638 documentation that comes with the <Literal>fptools</Literal> projects:
639 </Para>
640
641 <Para>
642 <VariableList>
643
644 <VarListEntry>
645 <Term>DocBook:</Term>
646 <IndexTerm><Primary>pre-supposed: DocBook</Primary></IndexTerm>
647 <IndexTerm><Primary>DocBook, pre-supposed</Primary></IndexTerm>
648 <ListItem>
649 <Para>
650 All our documentation is written in SGML, using the DocBook DTD and
651 processed using the <ULink
652 URL="http://sourceware.cygnus.com/docbook-tools/">Cygnus DocBook
653 tools</ULink>, which is the most shrink-wrapped SGML suite that we
654 could find. You need all the RPMs except for psgml (i.e. docbook, jade, jadetex, sgmlcommon and stylesheets). Unfortunately, it's only packaged as RPMs. You can use it to generate HTML, DVI (and hence PDF and Postscript) and RTF from any DocBook source file (including this manual). N.B. The <Emphasis>Cygnus</Emphasis> version of the tools is assumed. Others, such as the SuSE version, may not work.
655 </Para>
656 </ListItem></VarListEntry>
657 <VarListEntry>
658 <Term>TeX:</Term>
659 <IndexTerm><Primary>pre-supposed: TeX</Primary></IndexTerm>
660 <IndexTerm><Primary>TeX, pre-supposed</Primary></IndexTerm>
661 <ListItem>
662 <Para>
663 A decent TeX distribution is required if you want to produce printable
664 documentation.  We recomment teTeX, which includes just about
665 everything you need.
666 </Para>
667 </ListItem></VarListEntry>
668 </VariableList>
669 </Para>
670
671 </Sect2>
672
673 <Sect2 id="pre-supposed-other-tools">
674 <Title>Other useful tools
675 </Title>
676
677 <VariableList>
678 <VarListEntry>
679 <Term>Flex:</Term>
680 <IndexTerm><Primary>pre-supposed: flex</Primary></IndexTerm> 
681 <IndexTerm><Primary>flex, pre-supposed</Primary></IndexTerm>
682 <ListItem>
683
684 <Para>
685 This is a quite-a-bit-better-than-Lex lexer.  Used to build a couple
686 of utilities in <Literal>glafp-utils</Literal>.  Depending on your
687 operating system, the supplied <Command>lex</Command> may or may not
688 work; you should get the GNU version.
689 </Para>
690 </ListItem></VarListEntry>
691 </VariableList>
692
693 </Sect2>
694
695 </Sect1>
696
697 <Sect1 id="sec-building-from-source">
698 <Title>Building from source
699
700 <IndexTerm><Primary>Building from source</Primary></IndexTerm>
701 <IndexTerm><Primary>Source, building from</Primary></IndexTerm></Title>
702
703 <Para>
704 You've been rash enough to want to build some of
705 the Glasgow Functional Programming tools (GHC, Happy,
706 nofib, etc.) from source.  You've slurped the source,
707 from the CVS repository or from a source distribution, and
708 now you're sitting looking at a huge mound of bits, wondering
709 what to do next.
710 </Para>
711
712 <Para>
713 Gingerly, you type <Command>make</Command>.  Wrong already!
714 </Para>
715
716 <Para>
717 This rest of this guide is intended for duffers like me, who aren't
718 really interested in Makefiles and systems configurations, but who
719 need a mental model of the interlocking pieces so that they can make
720 them work, extend them consistently when adding new software, and lay
721 hands on them gently when they don't work.
722 </Para>
723
724 <Sect2 id="sec-source-tree">
725 <Title>Your source tree
726 </Title>
727
728 <Para>
729 The source code is held in your <Emphasis>source tree</Emphasis>.
730 The root directory of your source tree <Emphasis>must</Emphasis>
731 contain the following directories and files:
732 </Para>
733
734 <Para>
735
736 <ItemizedList>
737 <ListItem>
738
739 <Para>
740 <Filename>Makefile</Filename>: the root Makefile.
741 </Para>
742 </ListItem>
743 <ListItem>
744
745 <Para>
746 <Filename>mk/</Filename>: the directory that contains the
747 main Makefile code, shared by all the
748 <Literal>fptools</Literal> software.
749 </Para>
750 </ListItem>
751 <ListItem>
752
753 <Para>
754  <Filename>configure.in</Filename>, <Filename>config.sub</Filename>, <Filename>config.guess</Filename>:
755 these files support the configuration process.
756 </Para>
757 </ListItem>
758 <ListItem>
759
760 <Para>
761  <Filename>install-sh</Filename>.
762 </Para>
763 </ListItem>
764
765 </ItemizedList>
766
767 </Para>
768
769 <Para>
770 All the other directories are individual <Emphasis>projects</Emphasis> of the
771 <Literal>fptools</Literal> system&mdash;for example, the Glasgow Haskell Compiler
772 (<Literal>ghc</Literal>), the Happy parser generator (<Literal>happy</Literal>), the <Literal>nofib</Literal> benchmark
773 suite, and so on.  You can have zero or more of these.  Needless to
774 say, some of them are needed to build others.
775 </Para>
776
777 <Para>
778 The important thing to remember is that even if you want only one
779 project (<Literal>happy</Literal>, say), you must have a source tree whose root
780 directory contains <Filename>Makefile</Filename>, <Filename>mk/</Filename>, <Filename>configure.in</Filename>, and the
781 project(s) you want (<Filename>happy/</Filename> in this case).  You cannot get by with
782 just the <Filename>happy/</Filename> directory.
783 </Para>
784
785 </Sect2>
786
787 <Sect2>
788 <Title>Build trees
789 <IndexTerm><Primary>build trees</Primary></IndexTerm>
790 <IndexTerm><Primary>link trees, for building</Primary></IndexTerm></Title>
791
792 <Para>
793 While you can build a system in the source tree, we don't recommend it.
794 We often want to build multiple versions of our software
795 for different architectures, or with different options (e.g. profiling).
796 It's very desirable to share a single copy of the source code among
797 all these builds.
798 </Para>
799
800 <Para>
801 So for every source tree we have zero or more <Emphasis>build trees</Emphasis>.  Each
802 build tree is initially an exact copy of the source tree, except that
803 each file is a symbolic link to the source file, rather than being a
804 copy of the source file.  There are ``standard'' Unix utilities that
805 make such copies, so standard that they go by different names:
806 <Command>lndir</Command><IndexTerm><Primary>lndir</Primary></IndexTerm>, <Command>mkshadowdir</Command><IndexTerm><Primary>mkshadowdir</Primary></IndexTerm> are two (If you
807 don't have either, the source distribution includes sources for the
808 X11 <Command>lndir</Command>&mdash;check out <Filename>fptools/glafp-utils/lndir</Filename>). See <Xref LinkEnd="sec-storysofar"> for a typical invocation.
809 </Para>
810
811 <Para>
812 The build tree does not need to be anywhere near the source tree in
813 the file system.  Indeed, one advantage of separating the build tree
814 from the source is that the build tree can be placed in a
815 non-backed-up partition, saving your systems support people from
816 backing up untold megabytes of easily-regenerated, and
817 rapidly-changing, gubbins.  The golden rule is that (with a single
818 exception&mdash;<XRef LinkEnd="sec-build-config">)
819 <Emphasis>absolutely everything in the build tree is either a symbolic
820 link to the source tree, or else is mechanically generated</Emphasis>.
821 It should be perfectly OK for your build tree to vanish overnight; an
822 hour or two compiling and you're on the road again.
823 </Para>
824
825 <Para>
826 You need to be a bit careful, though, that any new files you create
827 (if you do any development work) are in the source tree, not a build tree!
828 </Para>
829
830 <Para>
831 Remember, that the source files in the build tree are <Emphasis>symbolic
832 links</Emphasis> to the files in the source tree.  (The build tree soon
833 accumulates lots of built files like <Filename>Foo.o</Filename>, as well.)  You
834 can <Emphasis>delete</Emphasis> a source file from the build tree without affecting
835 the source tree (though it's an odd thing to do).  On the other hand,
836 if you <Emphasis>edit</Emphasis> a source file from the build tree, you'll edit the
837 source-tree file directly.  (You can set up Emacs so that if you edit
838 a source file from the build tree, Emacs will silently create an
839 edited copy of the source file in the build tree, leaving the source
840 file unchanged; but the danger is that you think you've edited the
841 source file whereas actually all you've done is edit the build-tree
842 copy.  More commonly you do want to edit the source file.)
843 </Para>
844
845 <Para>
846 Like the source tree, the top level of your build tree must be (a
847 linked copy of) the root directory of the <Literal>fptools</Literal> suite.  Inside
848 Makefiles, the root of your build tree is called
849 <Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant><IndexTerm><Primary>FPTOOLS&lowbar;TOP</Primary></IndexTerm>.  In the rest of this document path
850 names are relative to <Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant> unless otherwise stated.  For
851 example, the file <Filename>ghc/mk/target.mk</Filename> is actually
852 <Filename><Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>/ghc/mk/target.mk</Filename>.
853 </Para>
854
855 </Sect2>
856
857 <Sect2 id="sec-build-config">
858 <Title>Getting the build you want
859 </Title>
860
861 <Para>
862 When you build <Literal>fptools</Literal> you will be compiling code on a particular
863 <Emphasis>host platform</Emphasis>, to run on a particular <Emphasis>target platform</Emphasis>
864 (usually the same as the host platform)<IndexTerm><Primary>platform</Primary></IndexTerm>.  The
865 difficulty is that there are minor differences between different
866 platforms; minor, but enough that the code needs to be a bit different
867 for each.  There are some big differences too: for a different
868 architecture we need to build GHC with a different native-code
869 generator.
870 </Para>
871
872 <Para>
873 There are also knobs you can turn to control how the <Literal>fptools</Literal>
874 software is built.  For example, you might want to build GHC optimised
875 (so that it runs fast) or unoptimised (so that you can compile it fast
876 after you've modified it.  Or, you might want to compile it with
877 debugging on (so that extra consistency-checking code gets included)
878 or off.  And so on.
879 </Para>
880
881 <Para>
882 All of this stuff is called the <Emphasis>configuration</Emphasis> of your build.
883 You set the configuration using a three-step process.
884 <VariableList>
885
886 <VarListEntry>
887 <Term>Step 1: get ready for configuration.</Term>
888 <ListItem>
889 <Para>
890 Change directory to
891 <Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant> and issue the command <Command>autoconf</Command><IndexTerm><Primary>autoconf</Primary></IndexTerm> (with
892 no arguments). This GNU program converts <Filename><Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>/configure.in</Filename>
893 to a shell script called <Filename><Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>/configure</Filename>.
894 </Para>
895
896 <para>
897 Some projects, including GHC, have their own configure script.  If
898 there's an
899 <Constant>&dollar;(FPTOOLS&lowbar;TOP)/&lt;project&gt;/configure.in</Constant>,
900 then you need to run <command>autoconf</command> in that directory too.
901 </para>
902
903 <Para>
904 Both these steps are completely platform-independent; they just mean
905 that the human-written file (<Filename>configure.in</Filename>) can be short, although
906 the resulting shell script, <Command>configure</Command>, and <Filename>mk/config.h.in</Filename>, are
907 long.
908 </Para>
909
910 <Para>
911 In case you don't have <Command>autoconf</Command> we distribute the results,
912 <Command>configure</Command>, and <Filename>mk/config.h.in</Filename>, with the source distribution.  They
913 aren't kept in the repository, though.
914 </Para>
915 </ListItem></VarListEntry>
916 <VarListEntry>
917 <Term>Step 2: system configuration.</Term>
918 <ListItem>
919 <Para>
920 Runs the newly-created <Command>configure</Command> script, thus:
921
922 <ProgramListing>
923 ./configure
924 </ProgramListing>
925
926 <Command>configure</Command>'s mission is to scurry round your
927 computer working out what architecture it has, what operating system,
928 whether it has the <Function>vfork</Function> system call, where
929 <Command>yacc</Command> is kept, whether <Command>gcc</Command> is
930 available, where various obscure <Literal>&num;include</Literal> files
931 are, whether it's a leap year, and what the systems manager had for
932 lunch.  It communicates these snippets of information in two ways:
933 </Para>
934
935 <Para>
936
937 <ItemizedList>
938 <ListItem>
939
940 <Para>
941  It translates <Filename>mk/config.mk.in</Filename><IndexTerm><Primary>config.mk.in</Primary></IndexTerm> to
942 <Filename>mk/config.mk</Filename><IndexTerm><Primary>config.mk</Primary></IndexTerm>, substituting for things between
943 ``<Literal>@</Literal>'' brackets.  So, ``<Literal>@HaveGcc@</Literal>'' will be replaced by
944 ``<Literal>YES</Literal>'' or ``<Literal>NO</Literal>'' depending on what <Command>configure</Command> finds.
945 <Filename>mk/config.mk</Filename> is included by every Makefile (directly or indirectly),
946 so the configuration information is thereby communicated to all
947 Makefiles.
948
949 </Para>
950 </ListItem>
951 <ListItem>
952
953 <Para>
954  It translates <Filename>mk/config.h.in</Filename><IndexTerm><Primary>config.h.in</Primary></IndexTerm> to
955 <Filename>mk/config.h</Filename><IndexTerm><Primary>config.h</Primary></IndexTerm>.  The latter is <Literal>&num;include</Literal>d by various C
956 programs, which can thereby make use of configuration information.
957
958 </Para>
959 </ListItem>
960
961 </ItemizedList>
962
963 </Para>
964
965 <Para>
966 <Command>configure</Command> caches the results of its run in <Filename>config.cache</Filename>.  Quite
967 often you don't want that; you're running <Command>configure</Command> a second time
968 because something has changed.  In that case, simply delete
969 <Filename>config.cache</Filename>.
970 </Para>
971 </ListItem></VarListEntry>
972 <VarListEntry>
973 <Term>Step 3: build configuration.</Term>
974 <ListItem>
975 <Para>
976 Next, you say how this build of <Literal>fptools</Literal> is to differ from the
977 standard defaults by creating a new file <Filename>mk/build.mk</Filename><IndexTerm><Primary>build.mk</Primary></IndexTerm>
978 <Emphasis>in the build tree</Emphasis>.  This file is the one and only file you edit
979 in the build tree, precisely because it says how this build differs
980 from the source.  (Just in case your build tree does die, you might
981 want to keep a private directory of <Filename>build.mk</Filename> files, and use a
982 symbolic link in each build tree to point to the appropriate one.)  So
983 <Filename>mk/build.mk</Filename> never exists in the source tree&mdash;you create one in
984 each build tree from the template.  We'll discuss what to put in it
985 shortly.  
986 </Para>
987 </ListItem></VarListEntry>
988 </VariableList>
989 </Para>
990
991 <Para>
992 And that's it for configuration. Simple, eh?
993 </Para>
994
995 <Para>
996 What do you put in your build-specific configuration file
997 <Filename>mk/build.mk</Filename>?  <Emphasis>For almost all purposes all you will do is put
998 make variable definitions that override those in</Emphasis> <Filename>mk/config.mk.in</Filename>.
999 The whole point of <Filename>mk/config.mk.in</Filename>&mdash;and its derived counterpart
1000 <Filename>mk/config.mk</Filename>&mdash;is to define the build configuration. It is heavily
1001 commented, as you will see if you look at it.  So generally, what you
1002 do is look at <Filename>mk/config.mk.in</Filename>, and add definitions in <Filename>mk/build.mk</Filename>
1003 that override any of the <Filename>config.mk</Filename> definitions that you want to
1004 change.  (The override occurs because the main boilerplate file,
1005 <Filename>mk/boilerplate.mk</Filename><IndexTerm><Primary>boilerplate.mk</Primary></IndexTerm>, includes <Filename>build.mk</Filename> after
1006 <Filename>config.mk</Filename>.)
1007 </Para>
1008
1009 <Para>
1010 For example, <Filename>config.mk.in</Filename> contains the definition:
1011 </Para>
1012
1013 <Para>
1014
1015 <ProgramListing>
1016 ProjectsToBuild = glafp-utils ghc hslibs
1017 </ProgramListing>
1018
1019 </Para>
1020
1021 <Para>
1022 The accompanying comment explains that this is the list of enabled
1023 projects; that is, if (after configuring) you type <Command>gmake all</Command> in
1024 <Constant>FPTOOLS&lowbar;TOP</Constant> three specified projects will be made.  If you want to
1025 add <Command>green-card</Command>, you can add this line to <Filename>build.mk</Filename>:
1026 </Para>
1027
1028 <Para>
1029
1030 <ProgramListing>
1031 ProjectsToBuild += green-card
1032 </ProgramListing>
1033
1034 </Para>
1035
1036 <Para>
1037 or, if you prefer,
1038 </Para>
1039
1040 <Para>
1041
1042 <ProgramListing>
1043 ProjectsToBuild = glafp-utils ghc green-card
1044 </ProgramListing>
1045
1046 </Para>
1047
1048 <Para>
1049 (GNU <Command>make</Command> allows existing definitions to have new text appended
1050 using the ``<Literal>+=</Literal>'' operator, which is quite a convenient feature.)
1051 </Para>
1052
1053 <Para>
1054 When reading <Filename>config.mk.in</Filename>, remember that anything between
1055 ``@...@'' signs is going to be substituted by <Command>configure</Command>
1056 later.  You <Emphasis>can</Emphasis> override the resulting definition if you want,
1057 but you need to be a bit surer what you are doing.  For example,
1058 there's a line that says: 
1059 </Para>
1060
1061 <Para>
1062
1063 <ProgramListing>
1064 YACC = @YaccCmd@
1065 </ProgramListing>
1066
1067 </Para>
1068
1069 <Para>
1070 This defines the Make variables <Constant>YACC</Constant> to the pathname for a <Command>yacc</Command> that
1071 <Command>configure</Command> finds somewhere.  If you have your own pet <Command>yacc</Command> you want
1072 to use instead, that's fine. Just add this line to <Filename>mk/build.mk</Filename>:
1073 </Para>
1074
1075 <Para>
1076
1077 <ProgramListing>
1078 YACC = myyacc
1079 </ProgramListing>
1080
1081 </Para>
1082
1083 <Para>
1084 You do not <Emphasis>have</Emphasis> to have a <Filename>mk/build.mk</Filename> file at all; if you
1085 don't, you'll get all the default settings from <Filename>mk/config.mk.in</Filename>.
1086 </Para>
1087
1088 <Para>
1089 You can also use <Filename>build.mk</Filename> to override anything that <Command>configure</Command> got
1090 wrong.  One place where this happens often is with the definition of
1091 <Constant>FPTOOLS&lowbar;TOP&lowbar;ABS</Constant>: this variable is supposed to be the canonical path
1092 to the top of your source tree, but if your system uses an automounter
1093 then the correct directory is hard to find automatically.  If you find
1094 that <Command>configure</Command> has got it wrong, just put the correct definition in
1095 <Filename>build.mk</Filename>.
1096 </Para>
1097
1098 </Sect2>
1099
1100 <Sect2 id="sec-storysofar">
1101 <Title>The story so far</Title>
1102
1103 <Para>
1104 Let's summarise the steps you need to carry to get yourself
1105 a fully-configured build tree from scratch.
1106 </Para>
1107
1108 <Para>
1109
1110 <OrderedList>
1111 <ListItem>
1112
1113 <Para>
1114  Get your source tree from somewhere (CVS repository or source
1115 distribution).  Say you call the root directory <Filename>myfptools</Filename> (it
1116 does not have to be called <Filename>fptools</Filename>).  Make sure that you have
1117 the essential files (see <XRef LinkEnd="sec-source-tree">).
1118
1119 </Para>
1120 </ListItem>
1121 <ListItem>
1122
1123 <Para>
1124  Use <Command>lndir</Command> or <Command>mkshadowdir</Command> to create a build tree.
1125
1126 <ProgramListing>
1127 cd myfptools
1128 mkshadowdir . /scratch/joe-bloggs/myfptools-sun4
1129 </ProgramListing>
1130
1131 (N.B. <Command>mkshadowdir</Command>'s first argument is taken relative to its second.) You probably want to give the build tree a name that
1132 suggests its main defining characteristic (in your mind at least),
1133 in case you later add others.
1134
1135 </Para>
1136 </ListItem>
1137 <ListItem>
1138
1139 <Para>
1140  Change directory to the build tree.  Everything is going
1141 to happen there now.
1142
1143 <ProgramListing>
1144 cd /scratch/joe-bloggs/myfptools-sun4
1145 </ProgramListing>
1146
1147 </Para>
1148 </ListItem>
1149 <ListItem>
1150
1151 <Para>
1152  Prepare for system configuration:
1153
1154 <ProgramListing>
1155 autoconf
1156 </ProgramListing>
1157
1158 (You can skip this step if you are starting from a source distribution,
1159 and you already have <Filename>configure</Filename> and <Filename>mk/config.h.in</Filename>.)
1160
1161 </Para>
1162 </ListItem>
1163 <ListItem>
1164
1165 <Para>
1166  Do system configuration:
1167
1168 <ProgramListing>
1169 ./configure
1170 </ProgramListing>
1171
1172
1173 </Para>
1174 </ListItem>
1175 <ListItem>
1176
1177 <Para>
1178  Create the file <Filename>mk/build.mk</Filename>, 
1179 adding definitions for your desired configuration options.
1180
1181 <ProgramListing>
1182 emacs mk/build.mk
1183 </ProgramListing>
1184
1185 </Para>
1186 </ListItem>
1187
1188 </OrderedList>
1189
1190 You can make subsequent changes to <Filename>mk/build.mk</Filename> as often 
1191 as you like.  You do not have to run any further configuration 
1192 programs to make these changes take effect.
1193 In theory you should, however, say <Command>gmake clean</Command>, <Command>gmake all</Command>,
1194 because configuration option changes could affect anything&mdash;but in practice you are likely to know what's affected.
1195 </Para>
1196
1197 </Sect2>
1198
1199 <Sect2>
1200 <Title>Making things</Title>
1201
1202 <Para>
1203 At this point you have made yourself a fully-configured build tree,
1204 so you are ready to start building real things.
1205 </Para>
1206
1207 <Para>
1208 The first thing you need to know is that 
1209 <Emphasis>you must use GNU <Command>make</Command>, usually called <Command>gmake</Command>, not standard Unix <Command>make</Command></Emphasis>.
1210 If you use standard Unix <Command>make</Command> you will get all sorts of error messages
1211 (but no damage) because the <Literal>fptools</Literal> <Command>Makefiles</Command> use GNU <Command>make</Command>'s facilities
1212 extensively.
1213 </Para>
1214
1215 </Sect2>
1216
1217 <Sect2 id="sec-standard-targets">
1218 <Title>Standard Targets
1219
1220 <IndexTerm><Primary>targets, standard makefile</Primary></IndexTerm>
1221 <IndexTerm><Primary>makefile targets</Primary></IndexTerm></Title>
1222
1223 <Para>
1224 In any directory you should be able to make the following:
1225 <VariableList>
1226
1227 <VarListEntry>
1228 <Term><Literal>boot</Literal>:</Term>
1229 <ListItem>
1230 <Para>
1231 does the one-off preparation required to get ready for the real work.
1232 Notably, it does <Command>gmake depend</Command> in all directories that contain
1233 programs.  It also builds the necessary tools for compilation to proceed.
1234 </Para>
1235
1236 <Para>
1237 You should say <Command>gmake boot</Command> right after configuring your build tree,
1238 but note that this is a one-off, i.e., there's no need to re-do
1239 <Command>gmake boot</Command> if you should re-configure your build tree at a later
1240 stage (no harm caused if you do though).
1241 </Para>
1242 </ListItem></VarListEntry>
1243 <VarListEntry>
1244 <Term><Literal>all</Literal>:</Term>
1245 <ListItem>
1246 <Para>
1247 makes all the final target(s) for this Makefile.
1248 Depending on which directory you are in a ``final target'' may be an
1249 executable program, a library archive, a shell script, or a Postscript
1250 file.  Typing <Command>gmake</Command> alone is generally the same as typing <Command>gmake all</Command>.
1251 </Para>
1252 </ListItem></VarListEntry>
1253 <VarListEntry>
1254 <Term><Literal>install</Literal>:</Term>
1255 <ListItem>
1256 <Para>
1257 installs the things built by <Literal>all</Literal>.  Where does it
1258 install them?  That is specified by
1259 <Filename>mk/config.mk.in</Filename>; you can override it in
1260 <Filename>mk/build.mk</Filename>, or by running
1261 <command>configure</command> with command-line arguments like
1262 <literal>--bindir=/home/simonpj/bin</literal>;  see <literal>./configure
1263 --help</literal> for the full details.
1264 </Para>
1265 </ListItem></VarListEntry>
1266 <VarListEntry>
1267 <Term><Literal>uninstall</Literal>:</Term>
1268 <ListItem>
1269 <Para>
1270 reverses the effect of <Literal>install</Literal>.
1271 </Para>
1272 </ListItem></VarListEntry>
1273 <VarListEntry>
1274 <Term><Literal>clean</Literal>:</Term>
1275 <ListItem>
1276 <Para>
1277 remove all easily-rebuilt files.
1278 </Para>
1279 </ListItem></VarListEntry>
1280 <VarListEntry>
1281 <Term><Literal>veryclean</Literal>:</Term>
1282 <ListItem>
1283 <Para>
1284 remove all files that can be rebuilt at all.
1285 There's a danger here that you may remove a file that needs a more
1286 obscure utility to rebuild it (especially if you started from a source
1287 distribution).
1288 </Para>
1289 </ListItem></VarListEntry>
1290 <VarListEntry>
1291 <Term><Literal>check</Literal>:</Term>
1292 <ListItem>
1293 <Para>
1294 run the test suite.
1295 </Para>
1296 </ListItem></VarListEntry>
1297 </VariableList>
1298 </Para>
1299
1300 <Para>
1301 All of these standard targets automatically recurse into
1302 sub-directories.  Certain other standard targets do not:
1303 </Para>
1304
1305 <Para>
1306 <VariableList>
1307
1308 <VarListEntry>
1309 <Term><Literal>configure</Literal>:</Term>
1310 <ListItem>
1311 <Para>
1312 is only available in the root directory
1313 <Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>; it has been discussed in <XRef LinkEnd="sec-build-config">.
1314 </Para>
1315 </ListItem></VarListEntry>
1316 <VarListEntry>
1317 <Term><Literal>depend</Literal>:</Term>
1318 <ListItem>
1319 <Para>
1320 make a <Filename>.depend</Filename> file in each directory that needs
1321 it. This <Filename>.depend</Filename> file contains mechanically-generated dependency
1322 information; for example, suppose a directory contains a Haskell 
1323 source module <Filename>Foo.lhs</Filename> which imports another module <Literal>Baz</Literal>.
1324 Then the generated <Filename>.depend</Filename> file will contain the dependency:
1325 </Para>
1326
1327 <Para>
1328
1329 <ProgramListing>
1330 Foo.o : Baz.hi
1331 </ProgramListing>
1332
1333 </Para>
1334
1335 <Para>
1336 which says that the object file <Filename>Foo.o</Filename> depends on the interface file
1337 <Filename>Baz.hi</Filename> generated by compiling module <Literal>Baz</Literal>.  The <Filename>.depend</Filename> file is
1338 automatically included by every Makefile.
1339 </Para>
1340 </ListItem></VarListEntry>
1341 <VarListEntry>
1342 <Term><Literal>binary-dist</Literal>:</Term>
1343 <ListItem>
1344 <Para>
1345 make a binary distribution.  This is the
1346 target we use to build the binary distributions of GHC and Happy.
1347 </Para>
1348 </ListItem></VarListEntry>
1349 <VarListEntry>
1350 <Term><Literal>dist</Literal>:</Term>
1351 <ListItem>
1352 <Para>
1353 make a source distribution.  You must be in a
1354 linked build tree to make this target.
1355 </Para>
1356 </ListItem></VarListEntry>
1357 </VariableList>
1358 </Para>
1359
1360 <Para>
1361 Most <Filename>Makefile</Filename>s have targets other than these.  You can discover them by looking in the <Filename>Makefile</Filename> itself.
1362 </Para>
1363
1364 </Sect2>
1365
1366 <sect2>
1367 <title>Using a project from the build tree</title>
1368 <para>
1369 If you want to build GHC (say) and just use it direct from the build
1370 tree without doing <literal>make install</literal> first, you can run
1371 the in-place driver script:
1372 <filename>ghc/driver/ghc-inplace</filename>.
1373 </para>
1374
1375 <para> Do <emphasis>NOT</emphasis> use
1376 <filename>ghc/driver/ghc</filename>, or
1377 <filename>ghc/driver/ghc-4.xx</filename>, as these are the scripts
1378 intended for installation, and contain hard-wired paths to the
1379 installed libraries, rather than the libraries in the build tree.
1380 </para>
1381
1382 <para>
1383 Happy can similarly be run from the build tree, using
1384 <filename>happy/src/happy-inplace</filename>.
1385 </para>
1386 </sect2>
1387
1388 <Sect2>
1389 <Title>Fast Making <IndexTerm><Primary>fastmake</Primary></IndexTerm>
1390 <IndexTerm><Primary>dependencies, omitting</Primary></IndexTerm>
1391 <IndexTerm><Primary>FAST, makefile
1392 variable</Primary></IndexTerm></Title>
1393
1394 <Para>
1395 Sometimes the dependencies get in the way: if you've made a small
1396 change to one file, and you're absolutely sure that it won't affect
1397 anything else, but you know that <Command>make</Command> is going to rebuild everything
1398 anyway, the following hack may be useful:
1399 </Para>
1400
1401 <Para>
1402
1403 <ProgramListing>
1404 gmake FAST=YES 
1405 </ProgramListing>
1406
1407 </Para>
1408
1409 <Para>
1410 This tells the make system to ignore dependencies and just build what
1411 you tell it to.  In other words, it's equivalent to temporarily
1412 removing the <Filename>.depend</Filename> file in the current directory (where
1413 <Command>mkdependHS</Command> and friends store their dependency information).
1414 </Para>
1415
1416 <Para>
1417 A bit of history: GHC used to come with a <Command>fastmake</Command> script that did
1418 the above job, but GNU make provides the features we need to do it
1419 without resorting to a script.  Also, we've found that fastmaking is
1420 less useful since the advent of GHC's recompilation checker (see the
1421 User's Guide section on "Separate Compilation").
1422 </Para>
1423
1424 </Sect2>
1425
1426 </Sect1>
1427
1428 <Sect1>
1429 <Title>The <Filename>Makefile</Filename> architecture
1430 <IndexTerm><Primary>makefile architecture</Primary></IndexTerm></Title>
1431
1432 <Para>
1433 <Command>make</Command> is great if everything works&mdash;you type <Command>gmake install</Command> and
1434 lo! the right things get compiled and installed in the right places.
1435 Our goal is to make this happen often, but somehow it often doesn't;
1436 instead some weird error message eventually emerges from the bowels of
1437 a directory you didn't know existed.
1438 </Para>
1439
1440 <Para>
1441 The purpose of this section is to give you a road-map to help you figure
1442 out what is going right and what is going wrong.
1443 </Para>
1444
1445 <Sect2>
1446 <Title>A small project</Title>
1447
1448 <Para>
1449 To get started, let us look at the <Filename>Makefile</Filename> for an imaginary small
1450 <Literal>fptools</Literal> project, <Literal>small</Literal>.  Each project in <Literal>fptools</Literal> has its own
1451 directory in <Constant>FPTOOLS&lowbar;TOP</Constant>, so the <Literal>small</Literal> project will have its own
1452 directory <Constant>FPOOLS&lowbar;TOP/small/</Constant>.  Inside the <Filename>small/</Filename> directory there
1453 will be a <Filename>Makefile</Filename>, looking something like this:
1454 </Para>
1455
1456 <Para>
1457 <IndexTerm><Primary>Makefile, minimal</Primary></IndexTerm>
1458
1459 <ProgramListing>
1460 #     Makefile for fptools project "small"
1461
1462 TOP = ..
1463 include $(TOP)/mk/boilerplate.mk
1464
1465 SRCS = $(wildcard *.lhs) $(wildcard *.c)
1466 HS_PROG = small
1467
1468 include $(TOP)/target.mk
1469 </ProgramListing>
1470
1471 </Para>
1472
1473 <Para>
1474 This <Filename>Makefile</Filename> has three sections:
1475 </Para>
1476
1477 <Para>
1478
1479 <OrderedList>
1480 <ListItem>
1481
1482 <Para>
1483  The first section includes
1484 <FOOTNOTE>
1485
1486 <Para>
1487 One of the most important
1488 features of GNU <Command>make</Command> that we use is the ability for a <Filename>Makefile</Filename> to
1489 include another named file, very like <Command>cpp</Command>'s <Literal>&num;include</Literal>
1490 directive.
1491 </Para>
1492
1493 </FOOTNOTE>
1494  a file of ``boilerplate'' code from the level
1495 above (which in this case will be
1496 <Filename><Constant>FPTOOLS&lowbar;TOP</Constant>/mk/boilerplate.mk</Filename><IndexTerm><Primary>boilerplate.mk</Primary></IndexTerm>).  As its name
1497 suggests, <Filename>boilerplate.mk</Filename> consists of a large quantity of standard
1498 <Filename>Makefile</Filename> code.  We discuss this boilerplate in more detail in
1499 <XRef LinkEnd="sec-boiler">.
1500 <IndexTerm><Primary>include, directive in Makefiles</Primary></IndexTerm>
1501 <IndexTerm><Primary>Makefile inclusion</Primary></IndexTerm>
1502
1503 Before the <Literal>include</Literal> statement, you must define the <Command>make</Command> variable
1504 <Constant>TOP</Constant><IndexTerm><Primary>TOP</Primary></IndexTerm> to be the directory containing the <Filename>mk</Filename> directory in
1505 which the <Filename>boilerplate.mk</Filename> file is.  It is <Emphasis>not</Emphasis> OK to simply say
1506
1507
1508 <ProgramListing>
1509 include ../mk/boilerplate.mk  # NO NO NO
1510 </ProgramListing>
1511
1512
1513 Why?  Because the <Filename>boilerplate.mk</Filename> file needs to know where it is, so
1514 that it can, in turn, <Literal>include</Literal> other files.  (Unfortunately, when an
1515 <Literal>include</Literal>d file does an <Literal>include</Literal>, the filename is treated relative to
1516 the directory in which <Command>gmake</Command> is being run, not the directory in
1517 which the <Literal>include</Literal>d sits.)  In general, <Emphasis>every file <Filename>foo.mk</Filename>
1518 assumes that <Filename><Constant>&dollar;(TOP)</Constant>/mk/foo.mk</Filename> refers to itself.</Emphasis> It is up to the
1519 <Filename>Makefile</Filename> doing the <Literal>include</Literal> to ensure this is the case.
1520
1521 Files intended for inclusion in other <Filename>Makefile</Filename>s are written to have
1522 the following property: <Emphasis>after <Filename>foo.mk</Filename> is <Literal>include</Literal>d, it leaves
1523 <Constant>TOP</Constant> containing the same value as it had just before the <Literal>include</Literal>
1524 statement</Emphasis>.  In our example, this invariant guarantees that the
1525 <Literal>include</Literal> for <Filename>target.mk</Filename> will look in the same directory as that for
1526 <Filename>boilerplate.mk</Filename>.
1527
1528 </Para>
1529 </ListItem>
1530 <ListItem>
1531
1532 <Para>
1533  The second section defines the following standard <Command>make</Command>
1534 variables: <Constant>SRCS</Constant><IndexTerm><Primary>SRCS</Primary></IndexTerm> (the source files from which is to be
1535 built), and <Constant>HS&lowbar;PROG</Constant><IndexTerm><Primary>HS&lowbar;PROG</Primary></IndexTerm> (the executable binary to be
1536 built).  We will discuss in more detail what the ``standard
1537 variables'' are, and how they affect what happens, in <XRef LinkEnd="sec-targets">.
1538
1539 The definition for <Constant>SRCS</Constant> uses the useful GNU <Command>make</Command> construct
1540 <Literal>&dollar;(wildcard&nbsp;$pat$)</Literal><IndexTerm><Primary>wildcard</Primary></IndexTerm>, which expands to a list of all
1541 the files matching the pattern <Literal>pat</Literal> in the current directory.  In
1542 this example, <Constant>SRCS</Constant> is set to the list of all the <Filename>.lhs</Filename> and <Filename>.c</Filename>
1543 files in the directory.  (Let's suppose there is one of each,
1544 <Filename>Foo.lhs</Filename> and <Filename>Baz.c</Filename>.)
1545
1546 </Para>
1547 </ListItem>
1548 <ListItem>
1549
1550 <Para>
1551  The last section includes a second file of standard code,
1552 called <Filename>target.mk</Filename><IndexTerm><Primary>target.mk</Primary></IndexTerm>.  It contains the rules that tell
1553 <Command>gmake</Command> how to make the standard targets (<Xref LinkEnd="sec-standard-targets">).  Why, you ask,
1554 can't this standard code be part of <Filename>boilerplate.mk</Filename>?  Good question.
1555 We discuss the reason later, in <Xref LinkEnd="sec-boiler-arch">.
1556
1557 You do not <Emphasis>have</Emphasis> to <Literal>include</Literal> the <Filename>target.mk</Filename> file.  Instead, you
1558 can write rules of your own for all the standard targets.  Usually,
1559 though, you will find quite a big payoff from using the canned rules
1560 in <Filename>target.mk</Filename>; the price tag is that you have to understand what
1561 canned rules get enabled, and what they do (<Xref LinkEnd="sec-targets">).
1562
1563 </Para>
1564 </ListItem>
1565
1566 </OrderedList>
1567
1568 </Para>
1569
1570 <Para>
1571 In our example <Filename>Makefile</Filename>, most of the work is done by the two
1572 <Literal>include</Literal>d files.  When you say <Command>gmake all</Command>, the following things
1573 happen:
1574 </Para>
1575
1576 <Para>
1577
1578 <ItemizedList>
1579 <ListItem>
1580
1581 <Para>
1582  <Command>gmake</Command> figures out that the object files are <Filename>Foo.o</Filename> and
1583 <Filename>Baz.o</Filename>.
1584
1585 </Para>
1586 </ListItem>
1587 <ListItem>
1588
1589 <Para>
1590  It uses a boilerplate pattern rule to compile <Filename>Foo.lhs</Filename> to
1591 <Filename>Foo.o</Filename> using a Haskell compiler.  (Which one?  That is set in the
1592 build configuration.)
1593
1594 </Para>
1595 </ListItem>
1596 <ListItem>
1597
1598 <Para>
1599  It uses another standard pattern rule to compile <Filename>Baz.c</Filename> to
1600 <Filename>Baz.o</Filename>, using a C compiler.  (Ditto.)
1601
1602 </Para>
1603 </ListItem>
1604 <ListItem>
1605
1606 <Para>
1607  It links the resulting <Filename>.o</Filename> files together to make <Literal>small</Literal>,
1608 using the Haskell compiler to do the link step.  (Why not use <Command>ld</Command>?
1609 Because the Haskell compiler knows what standard libraries to link in.
1610 How did <Command>gmake</Command> know to use the Haskell compiler to do the link,
1611 rather than the C compiler?  Because we set the variable <Constant>HS&lowbar;PROG</Constant>
1612 rather than <Constant>C&lowbar;PROG</Constant>.)
1613
1614 </Para>
1615 </ListItem>
1616
1617 </ItemizedList>
1618
1619 </Para>
1620
1621 <Para>
1622 All <Filename>Makefile</Filename>s should follow the above three-section format.
1623 </Para>
1624
1625 </Sect2>
1626
1627 <Sect2>
1628 <Title>A larger project</Title>
1629
1630 <Para>
1631 Larger projects are usually structured into a number of sub-directories,
1632 each of which has its own <Filename>Makefile</Filename>.  (In very large projects, this
1633 sub-structure might be iterated recursively, though that is rare.)
1634 To give you the idea, here's part of the directory structure for
1635 the (rather large) GHC project:
1636 </Para>
1637
1638 <Para>
1639
1640 <Screen>
1641 $(FPTOOLS_TOP)/ghc/
1642   Makefile
1643   mk/
1644     boilerplate.mk
1645     rules.mk
1646    docs/
1647     Makefile
1648     ...source files for documentation...
1649    driver/
1650     Makefile
1651     ...source files for driver...
1652    compiler/
1653     Makefile
1654     parser/...source files for parser...
1655     renamer/...source files for renamer...
1656     ...etc...
1657 </Screen>
1658
1659 </Para>
1660
1661 <Para>
1662 The sub-directories <Filename>docs</Filename>, <Filename>driver</Filename>, <Filename>compiler</Filename>, and so on, each
1663 contains a sub-component of GHC, and each has its own <Filename>Makefile</Filename>.
1664 There must also be a <Filename>Makefile</Filename> in <Filename><Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>/ghc</Filename>.  It does most
1665 of its work by recursively invoking <Command>gmake</Command> on the <Filename>Makefile</Filename>s in the
1666 sub-directories.  We say that <Filename>ghc/Makefile</Filename> is a <Emphasis>non-leaf
1667 <Filename>Makefile</Filename></Emphasis>, because it does little except organise its children,
1668 while the <Filename>Makefile</Filename>s in the sub-directories are all <Emphasis>leaf
1669 <Filename>Makefile</Filename>s</Emphasis>.  (In principle the sub-directories might themselves
1670 contain a non-leaf <Filename>Makefile</Filename> and several sub-sub-directories, but
1671 that does not happen in GHC.)
1672 </Para>
1673
1674 <Para>
1675 The <Filename>Makefile</Filename> in <Filename>ghc/compiler</Filename> is considered a leaf <Filename>Makefile</Filename> even
1676 though the <Filename>ghc/compiler</Filename> has sub-directories, because these sub-directories
1677 do not themselves have <Filename>Makefile</Filename>s in them.  They are just used to structure
1678 the collection of modules that make up GHC, but all are managed by the
1679 single <Filename>Makefile</Filename> in <Filename>ghc/compiler</Filename>.
1680 </Para>
1681
1682 <Para>
1683 You will notice that <Filename>ghc/</Filename> also contains a directory <Filename>ghc/mk/</Filename>.  It
1684 contains GHC-specific <Filename>Makefile</Filename> boilerplate code.  More precisely:
1685 </Para>
1686
1687 <Para>
1688
1689 <ItemizedList>
1690 <ListItem>
1691
1692 <Para>
1693  <Filename>ghc/mk/boilerplate.mk</Filename> is included at the top of
1694 <Filename>ghc/Makefile</Filename>, and of all the leaf <Filename>Makefile</Filename>s in the
1695 sub-directories.  It in turn <Literal>include</Literal>s the main boilerplate file
1696 <Filename>mk/boilerplate.mk</Filename>.
1697
1698
1699 </Para>
1700 </ListItem>
1701 <ListItem>
1702
1703 <Para>
1704  <Filename>ghc/mk/target.mk</Filename> is <Literal>include</Literal>d at the bottom of
1705 <Filename>ghc/Makefile</Filename>, and of all the leaf <Filename>Makefile</Filename>s in the
1706 sub-directories.  It in turn <Literal>include</Literal>s the file <Filename>mk/target.mk</Filename>.
1707
1708 </Para>
1709 </ListItem>
1710
1711 </ItemizedList>
1712
1713 </Para>
1714
1715 <Para>
1716 So these two files are the place to look for GHC-wide customisation
1717 of the standard boilerplate.
1718 </Para>
1719
1720 </Sect2>
1721
1722 <Sect2 id="sec-boiler-arch">
1723 <Title>Boilerplate architecture
1724 <IndexTerm><Primary>boilerplate architecture</Primary></IndexTerm>
1725 </Title>
1726
1727 <Para>
1728 Every <Filename>Makefile</Filename> includes a <Filename>boilerplate.mk</Filename><IndexTerm><Primary>boilerplate.mk</Primary></IndexTerm> file
1729 at the top, and <Filename>target.mk</Filename><IndexTerm><Primary>target.mk</Primary></IndexTerm> file at the bottom.  In
1730 this section we discuss what is in these files, and why there have to
1731 be two of them.  In general:
1732 </Para>
1733
1734 <Para>
1735
1736 <ItemizedList>
1737 <ListItem>
1738
1739 <Para>
1740  <Filename>boilerplate.mk</Filename> consists of:
1741
1742 <ItemizedList>
1743 <ListItem>
1744
1745 <Para>
1746  <Emphasis>Definitions of millions of <Command>make</Command> variables</Emphasis> that
1747 collectively specify the build configuration.  Examples:
1748 <Constant>HC&lowbar;OPTS</Constant><IndexTerm><Primary>HC&lowbar;OPTS</Primary></IndexTerm>, the options to feed to the Haskell compiler;
1749 <Constant>NoFibSubDirs</Constant><IndexTerm><Primary>NoFibSubDirs</Primary></IndexTerm>, the sub-directories to enable within the
1750 <Literal>nofib</Literal> project; <Constant>GhcWithHc</Constant><IndexTerm><Primary>GhcWithHc</Primary></IndexTerm>, the name of the Haskell
1751 compiler to use when compiling GHC in the <Literal>ghc</Literal> project.  
1752 </Para>
1753 </ListItem>
1754 <ListItem>
1755
1756 <Para>
1757 <Emphasis>Standard pattern rules</Emphasis> that tell <Command>gmake</Command> how to construct one
1758 file from another.
1759 </Para>
1760 </ListItem>
1761
1762 </ItemizedList>
1763
1764
1765 <Filename>boilerplate.mk</Filename> needs to be <Literal>include</Literal>d at the <Emphasis>top</Emphasis>
1766 of each <Filename>Makefile</Filename>, so that the user can replace the
1767 boilerplate definitions or pattern rules by simply giving a new
1768 definition or pattern rule in the <Filename>Makefile</Filename>.  <Command>gmake</Command>
1769 simply takes the last definition as the definitive one.
1770
1771 Instead of <Emphasis>replacing</Emphasis> boilerplate definitions, it is also quite
1772 common to <Emphasis>augment</Emphasis> them. For example, a <Filename>Makefile</Filename> might say:
1773
1774
1775 <ProgramListing>
1776 SRC_HC_OPTS += -O
1777 </ProgramListing>
1778
1779
1780 thereby adding ``<Option>-O</Option>'' to the end of <Constant>SRC&lowbar;HC&lowbar;OPTS</Constant><IndexTerm><Primary>SRC&lowbar;HC&lowbar;OPTS</Primary></IndexTerm>.
1781
1782 </Para>
1783 </ListItem>
1784 <ListItem>
1785
1786 <Para>
1787  <Filename>target.mk</Filename> contains <Command>make</Command> rules for the standard
1788 targets described in <Xref LinkEnd="sec-standard-targets">.  These rules are selectively included,
1789 depending on the setting of certain <Command>make</Command> variables.  These
1790 variables are usually set in the middle section of the
1791 <Filename>Makefile</Filename> between the two <Literal>include</Literal>s.
1792
1793 <Filename>target.mk</Filename> must be included at the end (rather than being part of
1794 <Filename>boilerplate.mk</Filename>) for several tiresome reasons:
1795
1796
1797 <ItemizedList>
1798 <ListItem>
1799
1800 <Para>
1801  <Command>gmake</Command> commits target and dependency lists earlier than
1802 it should.  For example, <FIlename>target.mk</FIlename> has a rule that looks like
1803 this: 
1804
1805
1806 <ProgramListing>
1807 $(HS_PROG) : $(OBJS)
1808       $(HC) $(LD_OPTS) $&#60; -o $@
1809 </ProgramListing>
1810
1811
1812 If this rule was in <Filename>boilerplate.mk</Filename> then <Constant>&dollar;(HS&lowbar;PROG)</Constant><IndexTerm><Primary>HS&lowbar;PROG</Primary></IndexTerm>
1813 and <Constant>&dollar;(OBJS)</Constant><IndexTerm><Primary>OBJS</Primary></IndexTerm> would not have their final values at the
1814 moment <Command>gmake</Command> encountered the rule.  Alas, <Command>gmake</Command> takes a snapshot
1815 of their current values, and wires that snapshot into the rule.  (In
1816 contrast, the commands executed when the rule ``fires'' are only
1817 substituted at the moment of firing.)  So, the rule must follow the
1818 definitions given in the <Filename>Makefile</Filename> itself.
1819
1820 </Para>
1821 </ListItem>
1822 <ListItem>
1823
1824 <Para>
1825  Unlike pattern rules, ordinary rules cannot be overriden or
1826 replaced by subsequent rules for the same target (at least, not without an
1827 error message).  Including ordinary rules in <Filename>boilerplate.mk</Filename> would
1828 prevent the user from writing rules for specific targets in specific cases.
1829
1830 </Para>
1831 </ListItem>
1832 <ListItem>
1833
1834 <Para>
1835  There are a couple of other reasons I've forgotten, but it doesn't
1836 matter too much.
1837 </Para>
1838 </ListItem>
1839
1840 </ItemizedList>
1841
1842 </Para>
1843 </ListItem>
1844
1845 </ItemizedList>
1846
1847 </Para>
1848
1849 </Sect2>
1850
1851 <Sect2 id="sec-boiler">
1852 <Title>The main <Filename>mk/boilerplate.mk</Filename> file
1853
1854 <IndexTerm><Primary>boilerplate.mk</Primary></IndexTerm></Title>
1855
1856 <Para>
1857 If you look at <Filename><Constant>&dollar;(FPTOOLS&lowbar;TOP)</Constant>/mk/boilerplate.mk</Filename> you will find
1858 that it consists of the following sections, each held in a separate
1859 file: 
1860 </Para>
1861
1862 <Para>
1863 <VariableList>
1864
1865 <VarListEntry>
1866 <Term><Filename>config.mk</Filename><IndexTerm><Primary>config.mk</Primary></IndexTerm></Term>
1867 <ListItem>
1868 <Para>
1869 is the build configuration file we
1870 discussed at length in <Xref LinkEnd="sec-build-config">.
1871 </Para>
1872 </ListItem></VarListEntry>
1873 <VarListEntry>
1874 <Term><Filename>paths.mk</Filename><IndexTerm><Primary>paths.mk</Primary></IndexTerm></Term>
1875 <ListItem>
1876 <Para>
1877 defines <Command>make</Command> variables for
1878 pathnames and file lists.  In particular, it gives definitions for:
1879 </Para>
1880
1881 <Para>
1882 <VariableList>
1883
1884 <VarListEntry>
1885 <Term><Constant>SRCS</Constant><IndexTerm><Primary>SRCS</Primary></IndexTerm>:</Term>
1886 <ListItem>
1887 <Para>
1888 all source files in the current directory.
1889 </Para>
1890 </ListItem></VarListEntry>
1891 <VarListEntry>
1892 <Term><Constant>HS&lowbar;SRCS</Constant><IndexTerm><Primary>HS&lowbar;SRCS</Primary></IndexTerm>:</Term>
1893 <ListItem>
1894 <Para>
1895 all Haskell source files in the current directory.
1896 It is derived from <Constant>&dollar;(SRCS)</Constant>, so if you override <Constant>SRCS</Constant> with a new value
1897 <Constant>HS&lowbar;SRCS</Constant> will follow suit.
1898 </Para>
1899 </ListItem></VarListEntry>
1900 <VarListEntry>
1901 <Term><Constant>C&lowbar;SRCS</Constant><IndexTerm><Primary>C&lowbar;SRCS</Primary></IndexTerm>:</Term>
1902 <ListItem>
1903 <Para>
1904 similarly for C source files.
1905 </Para>
1906 </ListItem></VarListEntry>
1907 <VarListEntry>
1908 <Term><Constant>HS&lowbar;OBJS</Constant><IndexTerm><Primary>HS&lowbar;OBJS</Primary></IndexTerm>:</Term>
1909 <ListItem>
1910 <Para>
1911 the <Filename>.o</Filename> files derived from <Constant>&dollar;(HS&lowbar;SRCS)</Constant>.
1912 </Para>
1913 </ListItem></VarListEntry>
1914 <VarListEntry>
1915 <Term><Constant>C&lowbar;OBJS</Constant><IndexTerm><Primary>C&lowbar;OBJS</Primary></IndexTerm>:</Term>
1916 <ListItem>
1917 <Para>
1918 similarly for <Constant>&dollar;(C&lowbar;SRCS)</Constant>.
1919 </Para>
1920 </ListItem></VarListEntry>
1921 <VarListEntry>
1922 <Term><Constant>OBJS</Constant><IndexTerm><Primary>OBJS</Primary></IndexTerm>:</Term>
1923 <ListItem>
1924 <Para>
1925 the concatenation of <Constant>&dollar;(HS&lowbar;OBJS)</Constant> and <Constant>&dollar;(C&lowbar;OBJS)</Constant>.
1926 </Para>
1927 </ListItem></VarListEntry>
1928 </VariableList>
1929 </Para>
1930
1931 <Para>
1932 Any or all of these definitions can easily be overriden by giving new
1933 definitions in your <Filename>Makefile</Filename>.  For example, if there are things in
1934 the current directory that look like source files but aren't, then
1935 you'll need to set <Constant>SRCS</Constant> manually in your <Filename>Makefile</Filename>.  The other
1936 definitions will then work from this new definition.
1937 </Para>
1938
1939 <Para>
1940 What, exactly, does <Filename>paths.mk</Filename> consider a ``source file'' to be?  It's
1941 based on the file's suffix (e.g. <Filename>.hs</Filename>, <Filename>.lhs</Filename>, <Filename>.c</Filename>, <Filename>.lc</Filename>, etc), but
1942 this is the kind of detail that changes, so rather than
1943 enumerate the source suffices here the best thing to do is to look in
1944 <Filename>paths.mk</Filename>.
1945 </Para>
1946 </ListItem></VarListEntry>
1947 <VarListEntry>
1948 <Term><Filename>opts.mk</Filename><IndexTerm><Primary>opts.mk</Primary></IndexTerm></Term>
1949 <ListItem>
1950 <Para>
1951 defines <Command>make</Command> variables for option
1952 strings to pass to each program. For example, it defines
1953 <Constant>HC&lowbar;OPTS</Constant><IndexTerm><Primary>HC&lowbar;OPTS</Primary></IndexTerm>, the option strings to pass to the Haskell
1954 compiler.  See <Xref LinkEnd="sec-suffix">.
1955 </Para>
1956 </ListItem></VarListEntry>
1957 <VarListEntry>
1958 <Term><Filename>suffix.mk</Filename><IndexTerm><Primary>suffix.mk</Primary></IndexTerm></Term>
1959 <ListItem>
1960 <Para>
1961 defines standard pattern rules&mdash;see <Xref LinkEnd="sec-suffix">.
1962 </Para>
1963 </ListItem></VarListEntry>
1964 </VariableList>
1965 </Para>
1966
1967 <Para>
1968 Any of the variables and pattern rules defined by the boilerplate file
1969 can easily be overridden in any particular <Filename>Makefile</Filename>, because the
1970 boilerplate <Literal>include</Literal> comes first.  Definitions after this <Literal>include</Literal>
1971 directive simply override the default ones in <Filename>boilerplate.mk</Filename>.
1972 </Para>
1973
1974 </Sect2>
1975
1976 <Sect2 id="sec-suffix">
1977 <Title>Pattern rules and options
1978
1979 <IndexTerm><Primary>Pattern rules</Primary></IndexTerm></Title>
1980
1981 <Para>
1982 The file <Filename>suffix.mk</Filename><IndexTerm><Primary>suffix.mk</Primary></IndexTerm> defines standard <Emphasis>pattern
1983 rules</Emphasis> that say how to build one kind of file from another, for
1984 example, how to build a <Filename>.o</Filename> file from a <Filename>.c</Filename> file.  (GNU <Command>make</Command>'s
1985 <Emphasis>pattern rules</Emphasis> are more powerful and easier to use than Unix
1986 <Command>make</Command>'s <Emphasis>suffix rules</Emphasis>.)
1987 </Para>
1988
1989 <Para>
1990 Almost all the rules look something like this:
1991 </Para>
1992
1993 <Para>
1994
1995 <ProgramListing>
1996 %.o : %.c
1997       $(RM) $@
1998       $(CC) $(CC_OPTS) -c $&#60; -o $@
1999 </ProgramListing>
2000
2001 </Para>
2002
2003 <Para>
2004 Here's how to understand the rule.  It says that
2005 <Emphasis>something</Emphasis><Filename>.o</Filename> (say <Filename>Foo.o</Filename>) can be built from
2006 <Emphasis>something</Emphasis><Filename>.c</Filename> (<Filename>Foo.c</Filename>), by invoking the C compiler
2007 (path name held in <Constant>&dollar;(CC)</Constant>), passing to it the options
2008 <Constant>&dollar;(CC&lowbar;OPTS)</Constant> and the rule's dependent file of the rule
2009 <Literal>&dollar;&lt;</Literal> (<Filename>Foo.c</Filename> in this case), and putting the result in
2010 the rule's target <Literal>&dollar;@</Literal> (<Filename>Foo.o</Filename> in this case).
2011 </Para>
2012
2013 <Para>
2014 Every program is held in a <Command>make</Command> variable defined in
2015 <Filename>mk/config.mk</Filename>&mdash;look in <Filename>mk/config.mk</Filename> for the
2016 complete list.  One important one is the Haskell compiler, which is
2017 called <Constant>&dollar;(HC)</Constant>.
2018 </Para>
2019
2020 <Para>
2021 Every program's options are are held in a <Command>make</Command> variables called
2022 <Constant>&lt;prog&gt;&lowbar;OPTS</Constant>.  the <Constant>&lt;prog&gt;&lowbar;OPTS</Constant> variables are defined in
2023 <Filename>mk/opts.mk</Filename>.  Almost all of them are defined like this:
2024 </Para>
2025
2026 <Para>
2027
2028 <ProgramListing>
2029 CC_OPTS = $(SRC_CC_OPTS) $(WAY$(_way)_CC_OPTS) $($*_CC_OPTS) $(EXTRA_CC_OPTS)
2030 </ProgramListing>
2031
2032 </Para>
2033
2034 <Para>
2035 The four variables from which <Constant>CC&lowbar;OPTS</Constant> is built have the following meaning:
2036 </Para>
2037
2038 <Para>
2039 <VariableList>
2040
2041 <VarListEntry>
2042 <Term><Constant>SRC&lowbar;CC&lowbar;OPTS</Constant><IndexTerm><Primary>SRC&lowbar;CC&lowbar;OPTS</Primary></IndexTerm>:</Term>
2043 <ListItem>
2044 <Para>
2045 options passed to all C
2046 compilations.
2047 </Para>
2048 </ListItem></VarListEntry>
2049 <VarListEntry>
2050 <Term><Constant>WAY&lowbar;&lt;way&gt;&lowbar;CC&lowbar;OPTS</Constant>:</Term>
2051 <ListItem>
2052 <Para>
2053 options passed to C
2054 compilations for way <Literal>&lt;way&gt;</Literal>. For example,
2055 <Constant>WAY&lowbar;mp&lowbar;CC&lowbar;OPTS</Constant> gives options to pass to the C compiler when
2056 compiling way <Literal>mp</Literal>.  The variable <Constant>WAY&lowbar;CC&lowbar;OPTS</Constant> holds
2057 options to pass to the C compiler when compiling the standard way.
2058 (<Xref LinkEnd="sec-ways"> dicusses multi-way
2059 compilation.)  
2060 </Para>
2061 </ListItem></VarListEntry>
2062 <VarListEntry>
2063 <Term><Constant>&lt;module&gt;&lowbar;CC&lowbar;OPTS</Constant>:</Term>
2064 <ListItem>
2065 <Para>
2066 options to
2067 pass to the C compiler that are specific to module <Literal>&lt;module&gt;</Literal>.  For example, <Constant>SMap&lowbar;CC&lowbar;OPTS</Constant> gives the specific options
2068 to pass to the C compiler when compiling <Filename>SMap.c</Filename>.
2069 </Para>
2070 </ListItem></VarListEntry>
2071 <VarListEntry>
2072 <Term><Constant>EXTRA&lowbar;CC&lowbar;OPTS</Constant><IndexTerm><Primary>EXTRA&lowbar;CC&lowbar;OPTS</Primary></IndexTerm>:</Term>
2073 <ListItem>
2074 <Para>
2075 extra options to pass to all
2076 C compilations.  This is intended for command line use, thus:
2077 </Para>
2078
2079 <Para>
2080
2081 <ProgramListing>
2082 gmake libHS.a EXTRA_CC_OPTS="-v"
2083 </ProgramListing>
2084
2085 </Para>
2086 </ListItem></VarListEntry>
2087 </VariableList>
2088 </Para>
2089
2090 </Sect2>
2091
2092 <Sect2 id="sec-targets">
2093 <Title>The main <Filename>mk/target.mk</Filename> file
2094
2095 <IndexTerm><Primary>target.mk</Primary></IndexTerm></Title>
2096
2097 <Para>
2098 <Filename>target.mk</Filename> contains canned rules for all the standard targets
2099 described in <Xref LinkEnd="sec-standard-targets">.  It is complicated by the fact that you don't want all of
2100 these rules to be active in every <Filename>Makefile</Filename>.  Rather than have a
2101 plethora of tiny files which you can include selectively, there is a
2102 single file, <Filename>target.mk</Filename>, which selectively includes rules based on
2103 whether you have defined certain variables in your <Filename>Makefile</Filename>.  This
2104 section explains what rules you get, what variables control them, and
2105 what the rules do.  Hopefully, you will also get enough of an idea of
2106 what is supposed to happen that you can read and understand any weird
2107 special cases yourself.
2108 </Para>
2109
2110 <Para>
2111 <VariableList>
2112
2113 <VarListEntry>
2114 <Term><Constant>HS&lowbar;PROG</Constant><IndexTerm><Primary>HS&lowbar;PROG</Primary></IndexTerm>.</Term>
2115 <ListItem>
2116 <Para>
2117 If <Constant>HS&lowbar;PROG</Constant> is defined, you get
2118 rules with the following targets:
2119 <VariableList>
2120
2121 <VarListEntry>
2122 <Term><Filename>HS&lowbar;PROG</Filename><IndexTerm><Primary>HS&lowbar;PROG</Primary></IndexTerm></Term>
2123 <ListItem>
2124 <Para>
2125 itself.  This rule links <Constant>&dollar;(OBJS)</Constant>
2126 with the Haskell runtime system to get an executable called
2127 <Constant>&dollar;(HS&lowbar;PROG)</Constant>.
2128 </Para>
2129 </ListItem></VarListEntry>
2130 <VarListEntry>
2131 <Term><Literal>install</Literal><IndexTerm><Primary>install</Primary></IndexTerm></Term>
2132 <ListItem>
2133 <Para>
2134 installs <Constant>&dollar;(HS&lowbar;PROG)</Constant>
2135 in <Constant>&dollar;(bindir)</Constant>.
2136 </Para>
2137 </ListItem></VarListEntry>
2138 </VariableList>
2139 </Para>
2140 </ListItem></VarListEntry>
2141 <VarListEntry>
2142 <Term><Constant>C&lowbar;PROG</Constant><IndexTerm><Primary>C&lowbar;PROG</Primary></IndexTerm></Term>
2143 <ListItem>
2144 <Para>
2145 is similar to <Constant>HS&lowbar;PROG</Constant>, except that
2146 the link step links <Constant>&dollar;(C&lowbar;OBJS)</Constant> with the C runtime system.
2147 </Para>
2148 </ListItem></VarListEntry>
2149 <VarListEntry>
2150 <Term><Constant>LIBRARY</Constant><IndexTerm><Primary>LIBRARY</Primary></IndexTerm></Term>
2151 <ListItem>
2152 <Para>
2153 is similar to <Constant>HS&lowbar;PROG</Constant>, except that
2154 it links <Constant>&dollar;(LIB&lowbar;OBJS)</Constant> to make the library archive <Constant>&dollar;(LIBRARY)</Constant>, and
2155 <Literal>install</Literal> installs it in <Constant>&dollar;(libdir)</Constant>.
2156 </Para>
2157 </ListItem></VarListEntry>
2158 <VarListEntry>
2159 <Term><Constant>LIB&lowbar;DATA</Constant><IndexTerm><Primary>LIB&lowbar;DATA</Primary></IndexTerm></Term>
2160 <ListItem>
2161 <Para>
2162 &hellip;
2163 </Para>
2164 </ListItem></VarListEntry>
2165 <VarListEntry>
2166 <Term><Constant>LIB&lowbar;EXEC</Constant><IndexTerm><Primary>LIB&lowbar;EXEC</Primary></IndexTerm></Term>
2167 <ListItem>
2168 <Para>
2169 &hellip;
2170 </Para>
2171 </ListItem></VarListEntry>
2172 <VarListEntry>
2173 <Term><Constant>HS&lowbar;SRCS</Constant><IndexTerm><Primary>HS&lowbar;SRCS</Primary></IndexTerm>, <Constant>C&lowbar;SRCS</Constant><IndexTerm><Primary>C&lowbar;SRCS</Primary></IndexTerm>.</Term>
2174 <ListItem>
2175 <Para>
2176 If <Constant>HS&lowbar;SRCS</Constant>
2177 is defined and non-empty, a rule for the target <Literal>depend</Literal> is included,
2178 which generates dependency information for Haskell programs.
2179 Similarly for <Constant>C&lowbar;SRCS</Constant>.
2180 </Para>
2181 </ListItem></VarListEntry>
2182 </VariableList>
2183 </Para>
2184
2185 <Para>
2186 All of these rules are ``double-colon'' rules, thus
2187 </Para>
2188
2189 <Para>
2190
2191 <ProgramListing>
2192 install :: $(HS_PROG)
2193       ...how to install it...
2194 </ProgramListing>
2195
2196 </Para>
2197
2198 <Para>
2199 GNU <Command>make</Command> treats double-colon rules as separate entities.  If there
2200 are several double-colon rules for the same target it takes each in
2201 turn and fires it if its dependencies say to do so.  This means that
2202 you can, for example, define both <Constant>HS&lowbar;PROG</Constant> and <Constant>LIBRARY</Constant>, which will
2203 generate two rules for <Literal>install</Literal>.  When you type <Command>gmake install</Command> both
2204 rules will be fired, and both the program and the library will be
2205 installed, just as you wanted.
2206 </Para>
2207
2208 </Sect2>
2209
2210 <Sect2 id="sec-subdirs">
2211 <Title>Recursion
2212
2213 <IndexTerm><Primary>recursion, in makefiles</Primary></IndexTerm>
2214 <IndexTerm><Primary>Makefile, recursing into subdirectories</Primary></IndexTerm></Title>
2215
2216 <Para>
2217 In leaf <Filename>Makefile</Filename>s the variable <Constant>SUBDIRS</Constant><IndexTerm><Primary>SUBDIRS</Primary></IndexTerm> is undefined.
2218 In non-leaf <Filename>Makefile</Filename>s, <Constant>SUBDIRS</Constant> is set to the list of
2219 sub-directories that contain subordinate <Filename>Makefile</Filename>s.  <Emphasis>It is up to
2220 you to set <Constant>SUBDIRS</Constant> in the <Filename>Makefile</Filename>.</Emphasis> There is no automation here&mdash;<Constant>SUBDIRS</Constant> is too important to automate.
2221 </Para>
2222
2223 <Para>
2224 When <Constant>SUBDIRS</Constant> is defined, <Filename>target.mk</Filename> includes a rather
2225 neat rule for the standard targets (<Xref LinkEnd="sec-standard-targets"> that simply invokes
2226 <Command>make</Command> recursively in each of the sub-directories.
2227 </Para>
2228
2229 <Para>
2230 <Emphasis>These recursive invocations are guaranteed to occur in the order
2231 in which the list of directories is specified in <Constant>SUBDIRS</Constant>. </Emphasis>This
2232 guarantee can be important.  For example, when you say <Command>gmake boot</Command> it
2233 can be important that the recursive invocation of <Command>make boot</Command> is done
2234 in one sub-directory (the include files, say) before another (the
2235 source files).  Generally, put the most independent sub-directory
2236 first, and the most dependent last.
2237 </Para>
2238
2239 </Sect2>
2240
2241 <Sect2 id="sec-ways">
2242 <Title>Way management
2243
2244 <IndexTerm><Primary>way management</Primary></IndexTerm></Title>
2245
2246 <Para>
2247 We sometimes want to build essentially the same system in several
2248 different ``ways''.  For example, we want to build GHC's <Literal>Prelude</Literal>
2249 libraries with and without profiling, with and without concurrency,
2250 and so on, so that there is an appropriately-built library archive to
2251 link with when the user compiles his program.  It would be possible to
2252 have a completely separate build tree for each such ``way'', but it
2253 would be horribly bureaucratic, especially since often only parts of
2254 the build tree need to be constructed in multiple ways.
2255 </Para>
2256
2257 <Para>
2258 Instead, the <Filename>target.mk</Filename><IndexTerm><Primary>target.mk</Primary></IndexTerm> contains some clever magic to
2259 allow you to build several versions of a system; and to control
2260 locally how many versions are built and how they differ.  This section
2261 explains the magic.
2262 </Para>
2263
2264 <Para>
2265 The files for a particular way are distinguished by munging the
2266 suffix.  The ``normal way'' is always built, and its files have the
2267 standard suffices <Filename>.o</Filename>, <Filename>.hi</Filename>, and so on.  In addition, you can build
2268 one or more extra ways, each distinguished by a <Emphasis>way tag</Emphasis>.  The
2269 object files and interface files for one of these extra ways are
2270 distinguished by their suffix.  For example, way <Literal>mp</Literal> has files
2271 <Filename>.mp&lowbar;o</Filename> and <Filename>.mp&lowbar;hi</Filename>.  Library archives have their way tag the other
2272 side of the dot, for boring reasons; thus, <Filename>libHS&lowbar;mp.a</Filename>.
2273 </Para>
2274
2275 <Para>
2276 A <Command>make</Command> variable called <Constant>way</Constant> holds the current way tag.  <Emphasis><Constant>way</Constant>
2277 is only ever set on the command line of a recursive invocation of
2278 <Command>gmake</Command>.</Emphasis> It is never set inside a <Filename>Makefile</Filename>.  So it is a global
2279 constant for any one invocation of <Command>gmake</Command>.  Two other <Command>make</Command>
2280 variables, <Constant>way&lowbar;</Constant> and <Constant>&lowbar;way</Constant> are immediately derived from <Constant>&dollar;(way)</Constant> and
2281 never altered.  If <Constant>way</Constant> is not set, then neither are <Constant>way&lowbar;</Constant> and
2282 <Constant>&lowbar;way</Constant>, and the invocation of <Command>make</Command> will build the ``normal way''.
2283 If <Constant>way</Constant> is set, then the other two variables are set in sympathy.
2284 For example, if <Constant>&dollar;(way)</Constant> is ``<Literal>mp</Literal>'', then <Constant>way&lowbar;</Constant> is set to ``<Literal>mp&lowbar;</Literal>''
2285 and <Constant>&lowbar;way</Constant> is set to ``<Literal>&lowbar;mp</Literal>''.  These three variables are then used
2286 when constructing file names.
2287 </Para>
2288
2289 <Para>
2290 So how does <Command>make</Command> ever get recursively invoked with <Constant>way</Constant> set?  There
2291 are two ways in which this happens:
2292 </Para>
2293
2294 <Para>
2295
2296 <ItemizedList>
2297 <ListItem>
2298
2299 <Para>
2300  For some (but not all) of the standard targets, when in a leaf
2301 sub-directory, <Command>make</Command> is recursively invoked for each way tag in
2302 <Constant>&dollar;(WAYS)</Constant>.  You set <Constant>WAYS</Constant> to the list of way tags you want these
2303 targets built for.  The mechanism here is very much like the recursive
2304 invocation of <Command>make</Command> in sub-directories (<Xref LinkEnd="sec-subdirs">).
2305
2306 It is up to you to set <Constant>WAYS</Constant> in your <Filename>Makefile</Filename>; this is how you
2307 control what ways will get built.  
2308 </Para>
2309 </ListItem>
2310 <ListItem>
2311
2312 <Para>
2313  For a useful collection of
2314 targets (such as <Filename>libHS&lowbar;mp.a</Filename>, <Filename>Foo.mp&lowbar;o</Filename>) there is a rule which
2315 recursively invokes <Command>make</Command> to make the specified target, setting the
2316 <Constant>way</Constant> variable.  So if you say <Command>gmake Foo.mp&lowbar;o</Command> you should see a
2317 recursive invocation <Command>gmake Foo.mp&lowbar;o way=mp</Command>, and <Emphasis>in this
2318 recursive invocation the pattern rule for compiling a Haskell file
2319 into a <Filename>.o</Filename> file will match</Emphasis>.  The key pattern rules (in <Filename>suffix.mk</Filename>)
2320 look like this:
2321
2322
2323 <ProgramListing>
2324 %.$(way_)o : %.lhs
2325       $(HC) $(HC_OPTS) $&#60; -o $@
2326 </ProgramListing>
2327
2328
2329 Neat, eh?
2330 </Para>
2331 </ListItem>
2332
2333 </ItemizedList>
2334
2335 </Para>
2336
2337 </Sect2>
2338
2339 <Sect2>
2340 <Title>When the canned rule isn't right</Title>
2341
2342 <Para>
2343 Sometimes the canned rule just doesn't do the right thing.  For
2344 example, in the <Literal>nofib</Literal> suite we want the link step to print out
2345 timing information.  The thing to do here is <Emphasis>not</Emphasis> to define
2346 <Constant>HS&lowbar;PROG</Constant> or <Constant>C&lowbar;PROG</Constant>, and instead define a special purpose rule in
2347 your own <Filename>Makefile</Filename>.  By using different variable names you will avoid
2348 the canned rules being included, and conflicting with yours.
2349 </Para>
2350
2351 </Sect2>
2352
2353 </Sect1>
2354
2355 <Sect1 id="sec-booting-from-C">
2356 <Title>Booting/porting from C (<Filename>.hc</Filename>) files
2357
2358 <IndexTerm><Primary>building GHC from .hc files</Primary></IndexTerm>
2359 <IndexTerm><Primary>booting GHC from .hc files</Primary></IndexTerm>
2360 <IndexTerm><Primary>porting GHC</Primary></IndexTerm></Title>
2361
2362 <Para>
2363 This section is for people trying to get GHC going by using the
2364 supplied intermediate C (<Filename>.hc</Filename>) files.  This would probably be because
2365 no binaries have been provided, or because the machine is not ``fully
2366 supported''.
2367 </Para>
2368
2369 <Para>
2370 The intermediate C files are normally made available together with a
2371 source release, please check the announce message for exact directions
2372 of where to find them. If we haven't made them available or you
2373 can't find them, please ask.
2374 </Para>
2375
2376 <Para>
2377 Assuming you've got them, unpack them on top of a fresh source tree.
2378 Then follow the `normal' instructions in <Xref LinkEnd="sec-building-from-source"> for setting
2379 up a build tree. When you invoke the configure script, you'll have
2380 to tell the script about your intentions:
2381 </Para>
2382
2383 <Para>
2384
2385 <Screen>
2386 foo% ./configure --enable-hc-boot
2387 </Screen>
2388
2389 <IndexTerm><Primary>--enable-hc-boot</Primary></IndexTerm>
2390 <IndexTerm><Primary>--disable-hc-boot</Primary></IndexTerm>
2391 </Para>
2392
2393 <Para>
2394 Assuming it configures OK and you don't need to create <Filename>mk/build.mk</Filename>
2395 for any other purposes, the next step is to proceed with a <Command>make boot</Command>
2396 followed by <Command>make all</Command>. At the successful completion of <Command>make all</Command>,
2397 you should end up with a binary of the compiler proper,
2398 <Filename>ghc/compiler/hsc</Filename>, plus archives (but no <Filename>.hi</Filename> files!) of the prelude
2399 libraries. To generate the Prelude interface files (and test drive the
2400 bootstrapped compiler), re-run the <Command>configure</Command> script, but this time
2401 without the <Option>--enable-hc-boot</Option> option. After that re-create the
2402 contents of <Filename>ghc/lib</Filename>:
2403 </Para>
2404
2405 <Para>
2406
2407 <Screen>
2408 foo% ./configure
2409  ....
2410 foo% cd ghc/lib
2411 foo% make clean
2412 foo% make boot
2413 foo% make all
2414 </Screen>
2415
2416 </Para>
2417
2418 <Para>
2419 That's the mechanics of the boot process, but, of course, if you're
2420 trying to boot on a platform that is not supported and significantly
2421 `different' from any of the supported ones, this is only the start of
2422 the adventure&hellip;(ToDo: porting tips&mdash;stuff to look out for, etc.)
2423 </Para>
2424
2425 </Sect1>
2426
2427 <Sect1 id="sec-build-pitfalls">
2428 <Title>Known pitfalls in building Glasgow Haskell
2429
2430 <IndexTerm><Primary>problems, building</Primary></IndexTerm>
2431 <IndexTerm><Primary>pitfalls, in building</Primary></IndexTerm>
2432 <IndexTerm><Primary>building pitfalls</Primary></IndexTerm></Title>
2433
2434 <Para>
2435 WARNINGS about pitfalls and known ``problems'':
2436 </Para>
2437
2438 <Para>
2439
2440 <OrderedList>
2441 <ListItem>
2442
2443 <Para>
2444 One difficulty that comes up from time to time is running out of space
2445 in <Filename>/tmp</Filename>.  (It is impossible for the configuration stuff to
2446 compensate for the vagaries of different sysadmin approaches to temp
2447 space.)
2448 <IndexTerm><Primary>tmp, running out of space in</Primary></IndexTerm>
2449
2450 The quickest way around it is <Command>setenv TMPDIR /usr/tmp</Command><IndexTerm><Primary>TMPDIR</Primary></IndexTerm> or
2451 even <Command>setenv TMPDIR .</Command> (or the equivalent incantation with your shell
2452 of choice).
2453
2454 The best way around it is to say
2455
2456 <ProgramListing>
2457 export TMPDIR=&#60;dir&#62;
2458 </ProgramListing>
2459
2460 in your <Filename>build.mk</Filename> file.
2461 Then GHC and the other <Literal>fptools</Literal> programs will use the appropriate directory
2462 in all cases.
2463
2464
2465 </Para>
2466 </ListItem>
2467 <ListItem>
2468
2469 <Para>
2470 In compiling some support-code bits, e.g., in <Filename>ghc/rts/gmp</Filename> and even
2471 in <Filename>ghc/lib</Filename>, you may get a few C-compiler warnings.  We think these
2472 are OK.
2473
2474 </Para>
2475 </ListItem>
2476 <ListItem>
2477
2478 <Para>
2479 When compiling via C, you'll sometimes get ``warning: assignment from
2480 incompatible pointer type'' out of GCC.  Harmless.
2481
2482 </Para>
2483 </ListItem>
2484 <ListItem>
2485
2486 <Para>
2487 Similarly, <Command>ar</Command>chiving warning messages like the following are not
2488 a problem:
2489
2490 <Screen>
2491 ar: filename GlaIOMonad__1_2s.o truncated to GlaIOMonad_
2492 ar: filename GlaIOMonad__2_2s.o truncated to GlaIOMonad_
2493 ...
2494 </Screen>
2495
2496
2497 </Para>
2498 </ListItem>
2499 <ListItem>
2500
2501 <Para>
2502  In compiling the compiler proper (in <Filename>compiler/</Filename>), you <Emphasis>may</Emphasis>
2503 get an ``Out of heap space'' error message.  These can vary with the
2504 vagaries of different systems, it seems.  The solution is simple:
2505
2506
2507 <ItemizedList>
2508 <ListItem>
2509
2510 <Para>
2511  If you're compiling with GHC 4.00 or later, then the
2512 <Emphasis>maximum</Emphasis> heap size must have been reached.  This
2513 is somewhat unlikely, since the maximum is set to 64M by default.
2514 Anyway, you can raise it with the
2515 <Option>-optCrts-M&lt;size&gt;</Option> flag (add this flag to
2516 <Constant>&lt;module&gt;&lowbar;HC&lowbar;OPTS</Constant>
2517 <Command>make</Command> variable in the appropriate
2518 <Filename>Makefile</Filename>).
2519
2520 </Para>
2521 </ListItem>
2522 <ListItem>
2523
2524 <Para>
2525  For GHC &#60; 4.00, add a suitable <Option>-H</Option> flag to the <Filename>Makefile</Filename>, as
2526 above.
2527
2528 </Para>
2529 </ListItem>
2530
2531 </ItemizedList>
2532
2533
2534 and try again: <Command>gmake</Command>.  (see <Xref LinkEnd="sec-suffix"> for information about
2535 <Constant>&lt;module&gt;&lowbar;HC&lowbar;OPTS</Constant>.)
2536
2537 Alternatively, just cut to the chase:
2538
2539 <Screen>
2540 % cd ghc/compiler
2541 % make EXTRA_HC_OPTS=-optCrts-M128M
2542 </Screen>
2543
2544
2545 </Para>
2546 </ListItem>
2547 <ListItem>
2548
2549 <Para>
2550 If you try to compile some Haskell, and you get errors from GCC about
2551 lots of things from <Filename>/usr/include/math.h</Filename>, then your GCC was
2552 mis-installed.  <Command>fixincludes</Command> wasn't run when it should've been.
2553
2554 As <Command>fixincludes</Command> is now automagically run as part of GCC installation,
2555 this bug also suggests that you have an old GCC.
2556
2557
2558 </Para>
2559 </ListItem>
2560 <ListItem>
2561
2562 <Para>
2563 You <Emphasis>may</Emphasis> need to re-<Command>ranlib</Command><IndexTerm><Primary>ranlib</Primary></IndexTerm> your libraries (on Sun4s).
2564
2565
2566 <Screen>
2567 % cd $(libdir)/ghc-x.xx/sparc-sun-sunos4
2568 % foreach i ( `find . -name '*.a' -print` ) # or other-shell equiv...
2569 ?    ranlib $i
2570 ?    # or, on some machines: ar s $i
2571 ? end
2572 </Screen>
2573
2574
2575 We'd be interested to know if this is still necessary.
2576
2577
2578 </Para>
2579 </ListItem>
2580 <ListItem>
2581
2582 <Para>
2583 GHC's sources go through <Command>cpp</Command> before being compiled, and <Command>cpp</Command> varies
2584 a bit from one Unix to another.  One particular gotcha is macro calls
2585 like this:
2586
2587
2588 <ProgramListing>
2589 SLIT("Hello, world")
2590 </ProgramListing>
2591
2592
2593 Some <Command>cpp</Command>s treat the comma inside the string as separating two macro
2594 arguments, so you get
2595
2596
2597 <Screen>
2598 :731: macro `SLIT' used with too many (2) args
2599 </Screen>
2600
2601
2602 Alas, <Command>cpp</Command> doesn't tell you the offending file!
2603
2604 Workaround: don't put weird things in string args to <Command>cpp</Command> macros.
2605 </Para>
2606 </ListItem>
2607
2608 </OrderedList>
2609
2610 </Para>
2611
2612 </Sect1>
2613
2614
2615 <Sect1 id="winbuild"><Title>Notes for building under Windows</Title>
2616
2617 <Para>
2618 This section summarises how to get the utilities you need on your
2619 Win95/98/NT/2000 machine to use CVS and build GHC. Similar notes for installing and running GHC may be found in the user guide. In general, Win95/Win98 behave the same, and WinNT/Win2k behave the same. It is based largely on detailed advice from Sigbj&oslash;rn Finne.
2620 </Para>
2621
2622
2623 <Sect2><Title>Installing ssh</Title>
2624
2625 <ItemizedList>
2626
2627 <ListItem>
2628 <Para>
2629 Extract the whole of <ULink URL="http://research.microsoft.com/~simonpj/ssh-1_2_26-cygwinb19.tar.gz">the ssh archive</ULink> into your <Filename>C:\</Filename> directory, and use the ``All files'' and ``User folder names'' options in WinZip extract dialogue box. This populates your <Filename>C:\usr\local</Filename> tree.
2630 </Para>
2631 </ListItem>
2632
2633 <ListItem>
2634 <Para>
2635 Extract <ULink URL="http://research.microsoft.com/~simonpj/cygwinb19.dll.zip">cygwinb19.dll</ULink> into <Filename>/usr/local/bin</Filename>.  The current version
2636 of Cywin is b20, but this version of ssh was compiled with b19.
2637 </Para>
2638 </ListItem>
2639
2640 <ListItem>
2641 <Para>
2642 On a Win2k machine, open up a bash and do 
2643 </Para>
2644
2645 <Screen>
2646 foo$ cd /etc
2647 foo$ mkpasswd -l > passwd
2648 </Screen>
2649
2650 <Para>
2651 Check that your login entry is on the first line
2652 of that file. If not, move it to the top.  It's OK
2653 for 'Administrator' to be the first entry, assuming you are one.
2654 </Para>
2655
2656 <Para>
2657 However, Win9x doesn't support the calls that <Command>mkpasswd</Command> relies on
2658 (e.g., <Function>NetUserEnum</Function>). If you run <Command>mkpasswd</Command> you
2659 get errors like:
2660 </Para>
2661
2662 <Screen>
2663 linked to missing export netapi32.dll:NetUserEnum
2664 </Screen>
2665
2666 <Para>
2667 The passwd file is used
2668 by ssh in a fairly rudimentary manner, so I'd simply 
2669 synthesise/copy an existing Unix <Filename>/etc/passwd</Filename>, i.e., create
2670 an <Filename>/etc/passwd</Filename> file containing the line
2671 </Para>
2672
2673 <Screen>
2674 &lt;login&gt;::500:513:::/bin/sh
2675 </Screen>
2676
2677 <Para>
2678 where <Literal>&lt;login&gt;</Literal> is your login id.
2679 </Para>
2680 </ListItem>
2681
2682 <ListItem>
2683 <Para>
2684 Generate a key, by running <Filename>c:/user/local/bin/ssh-keygen1</Filename>.
2685   This generates a public key in <Filename>.ssh/identity.pub</Filename>, and a
2686   private key in <Filename>.ssh/identity</Filename>
2687 </Para>
2688
2689 <Para>
2690   In response to the 'Enter passphrase' question, just hit
2691   return (i.e. use an empty passphrase).  The passphrase is
2692   a password that protects your private key.  But it's a pain
2693   to type this passphrase everytime you use <Command>ssh</Command>, so the best
2694   thing to do is simply to protect your <Filename>.ssh</Filename> directory, and
2695   <Filename>.ssh/identity</Filename> from access by anyone else.  To do this 
2696   right-click your <Filename>.ssh</Filename> directory, and select Properties.
2697   If you are not on the access control list, add yourself, and
2698   give yourself full permissions (the second panel).  
2699   Remove everyone else from the access control list.  (Don't
2700   leave them there but deny them access, because 'they' may be
2701   a list that includes you!)
2702 </Para>
2703
2704 <Para>
2705   If you have problems running <Command>ssh-keygen1</Command>
2706   from within <Command>bash</Command>, start up <Filename>cmd.exe</Filename> and run it as follows:
2707 </Para>
2708
2709 <Screen>
2710 c:\tmp> set CYGWIN32=tty
2711 c:\tmp> c:/user/local/bin/ssh-keygen1
2712 </Screen>
2713 </ListItem>
2714
2715 <ListItem>
2716 <Para>
2717 If you don't have an account on <Literal>cvs.haskell.org</Literal>, send 
2718   your <Filename>.ssh/identity.pub</Filename> to the CVS repository administrator
2719   (currently Jeff Lewis <Email>jlewis@cse.ogi.edu</Email>).  He will set up
2720   your account.
2721 </Para>
2722
2723 <Para>
2724   If you do have an account on <Literal>cvs.haskell.org</Literal>, use TeraTerm
2725   to logon to it. Once in, copy the
2726   key that <Command>ssh-keygen1</Command> deposited in <Filename>/.ssh/identity.pub</Filename> into
2727   your <Filename>~/.ssh/authorized_keys</Filename>. Make sure that the new version
2728   of <Filename>authorized_keys</Filename> still has 600 file permission.
2729 </Para>
2730 </ListItem>
2731
2732 </ItemizedList>
2733
2734 </Sect2>
2735
2736
2737 <Sect2><Title>Installing CVS</Title>
2738
2739 <ItemizedList>
2740
2741 <ListItem>
2742 <Para>
2743 Unpack 
2744 <ULink URL="http://research.microsoft.com/~simonpj/cvs-1_10-win.zip">
2745 CVS</ULink> and, following the instructions in the <Filename>README</Filename>, copy the
2746 appropriate files into <Filename>/usr/local/bin</Filename>.
2747 </Para>
2748 </ListItem>
2749
2750 <ListItem>
2751 <Para>
2752 From the System control panel,
2753 set the following <Emphasis>user</Emphasis> environment variables (see the GHC user guide)
2754 </Para>
2755
2756 <ItemizedList>
2757 <ListItem>
2758 <Para>
2759 <Constant>HOME</Constant>: points to your home directory.  This is where CVS
2760 will look for its <Filename>.cvsrc</Filename> file.
2761 </Para>
2762 </ListItem>
2763
2764 <ListItem>
2765 <Para>
2766 <Constant>CVS_RSH</Constant>: <Filename>c:/usr/local/bin/ssh1</Filename>
2767 </Para>
2768 </ListItem>
2769
2770 <ListItem>
2771 <Para>
2772 <Constant>CVSROOT</Constant>: <Literal>:ext:username@cvs.haskell.org:/home/cvs/root</Literal>,
2773 where <Literal>username</Literal> is your userid
2774 </Para>
2775 </ListItem>
2776
2777 <ListItem>
2778 <Para>
2779 <Constant>CVSEDITOR</Constant>: <Filename>bin/gnuclient.exe</Filename> if you want to use an Emacs buffer for typing in those long commit messages.
2780 </Para>
2781 </ListItem>
2782 </ItemizedList>
2783 </ListItem>
2784
2785 <ListItem>
2786 <Para>
2787 Put the following in <Filename>$HOME/.cvsrc</Filename>:
2788 </Para>
2789
2790 <ProgramListing>
2791 checkout -P
2792 release -d
2793 update -P
2794 diff -u
2795 </ProgramListing>
2796
2797 <Para>
2798 These are the default options for the specified CVS commands,
2799 and represent better defaults than the usual ones.  (Feel
2800 free to change them.)
2801 </Para>
2802
2803 <Para>
2804 Filenames starting with "<Filename>.</Filename>" were illegal in 
2805 the 8.3 DOS filesystem, but that restriction should have
2806 been lifted by now (i.e., you're using VFAT or later filesystems.) If
2807 you're still having problems creating it, don't worry; <Filename>.cvsrc</Filename> is entirely
2808 optional.
2809 </Para>
2810 </ListItem>
2811
2812 <ListItem>
2813 <Para>
2814 Try doing <Command>cvs co fpconfig</Command>. All being well, bytes should
2815 start to trickle through, leaving a directory <Filename>fptools</Filename>
2816 in your current directory.  (You can <Command>rm</Command> it if you don't want to keep it.)  The following messages appear to be harmless:
2817 </Para>
2818
2819 <Screen>
2820 setsockopt IPTOS_LOWDELAY: Invalid argument
2821 setsockopt IPTOS_THROUGHPUT: Invalid argument
2822 </Screen>
2823
2824 <Para>
2825 At this point I found that CVS tried to invoke a little dialogue with
2826 me (along the lines of `do you want to talk to this host'), but
2827 somehow bombed out.  This was from a bash shell running in emacs.
2828 I solved this by invoking a Cygnus shell, and running CVS from there.
2829 Once things are dialogue free, it seems to work OK from within emacs.
2830 </Para>
2831 </ListItem>
2832
2833 <ListItem>
2834 <Para>
2835 If you want to check out part of large tree, proceed as follows:
2836 </Para>
2837
2838 <ProgramListing>
2839 cvs -f checkout -l papers
2840 cd papers
2841 cvs update cpr
2842 </ProgramListing>
2843
2844 <Para>
2845 This sequence checks out the <Literal>papers</Literal> module, but none
2846 of its sub-directories.
2847 The "<Option>-l</Option>" flag says not to check out sub-directories.
2848 The "<Option>-f</Option>" flag says not to read the <Filename>.cvsrc</Filename> file
2849 whose <Option>-P</Option> default (don't check out empty directories) is
2850 in this case bogus.
2851 </Para>
2852
2853 <Para>
2854 The <Command>cvs update</Command> command sucks in a named sub-directory.
2855 </Para>
2856 </ListItem>
2857
2858 </ItemizedList>
2859
2860 <Para>
2861 There is a very nice graphical front-end to CVS for Win32 platforms,
2862 with a UI that people will be familiar with, at 
2863 <ULink URL="http://www.wincvs.org/">wincvs.org</ULink>.
2864 I have not tried it yet.
2865 </Para>
2866
2867 </Sect2>
2868
2869
2870 <Sect2><Title>Installing autoconf</Title>
2871
2872 <Para>
2873 Only required if you are doing builds from GHC's sources
2874 checked out from the CVS tree.
2875 </Para>
2876
2877 <ItemizedList>
2878 <ListItem>
2879 <Para>
2880 Fetch the (standard, Unix) <Command>autoconf</Command> distribution from
2881 <ULink URL="ftp://ftp.gnu.org/gnu/autoconf">ftp.gnu.org</ULink>.
2882 </Para>
2883 </ListItem>
2884 <ListItem>
2885 <Para>
2886 Unpack it into an arbitrary directory.
2887 </Para>
2888 </ListItem>
2889 <ListItem>
2890 <Para>
2891 Make sure that the directory <Filename>/usr/local/bin</Filename> exists.
2892 </Para>
2893 </ListItem>
2894 <ListItem>
2895 <Para>
2896 Say "<Filename>./configure</Filename>".
2897 </Para>
2898 </ListItem>
2899 <ListItem>
2900 <Para>
2901 Now <Command>make install</Command>.  This should put <Filename>autoheader</Filename>
2902 and <Filename>autoconf</Filename> in <Filename>/usr/local/bin</Filename>.
2903 </Para>
2904 </ListItem>
2905 </ItemizedList>
2906
2907 <Para>
2908 <Command>autoheader</Command> doesn't seem to work, but you don't need it
2909 for GHC.
2910 </Para>
2911
2912 </Sect2>
2913
2914
2915 <Sect2><Title>Building GHC</Title>
2916
2917 <ItemizedList>
2918
2919 <ListItem>
2920 <Para>
2921 In the <Filename>./configure</Filename> output, ignore 
2922 "<Literal>
2923 checking whether #! works in shell scripts... 
2924 ./configure: ./conftest: No such file or directory</Literal>", 
2925 and "<Literal>not updating unwritable cache ./config.cache</Literal>".
2926 Nobody knows why these happen, but they seem to be harmless.
2927 </Para>
2928 </ListItem>
2929
2930 <ListItem>
2931 <Para>
2932 You have to run <Command>autoconf</Command> both in <Filename>fptools</Filename>
2933 and in <Filename>fptools/ghc</Filename>.  If you omit the latter step you'll
2934 get an error when you run <Filename>./configure</Filename>:
2935 </Para>
2936
2937 <Screen>
2938 ...lots of stuff...
2939 creating mk/config.h
2940 mk/config.h is unchanged
2941 configuring in ghc
2942 running /bin/sh ./configure  --cache-file=.././config.cache --srcdir=.
2943 ./configure: ./configure: No such file or directory
2944 configure: error: ./configure failed for ghc
2945 </Screen>
2946 </ListItem>
2947
2948 <ListItem>
2949 <Para>
2950 You need <Filename>ghc</Filename> to be in your <Constant>PATH</Constant> before you run
2951 <Command>configure</Command>.  The default GHC InstallShield creates only
2952 <Filename>ghc-4.05</Filename>, so you may need to duplicate this file as <Filename>ghc</Filename>
2953 in the same directory, in order that <Command>configure</Command> will see it (or
2954 just rename <Filename>ghc-4.05</Filename> to <Filename>ghc</Filename>.
2955 And make sure that the directory is in your path.
2956 </Para>
2957 </ListItem>
2958
2959 <ListItem>
2960 <Para>
2961 Compile <Command>happy</Command> and <Command>ghc</Command> 
2962 with <Option>-static</Option>.  To do this, set
2963 </Para>
2964
2965 <ProgramListing>
2966 GhcHcOpts=-static
2967 HappyHcOpts=-static
2968 </ProgramListing>
2969
2970 <Para>
2971 in your <Filename>build.mk</Filename> file.
2972 [Actually, I successfully compiled Happy without <Option>-static</Option> on Win2k, but not GHC.]
2973 </Para>
2974 </ListItem>
2975
2976 </ItemizedList>
2977
2978 </Sect2>
2979
2980 </Sect1>
2981
2982 </Article>