Merge remote-tracking branch 'eg-working/collab/phasefx/merged_bill_and_receipt_fixes'
[working/Evergreen.git] / README
1 README for Evergreen master
2 ===========================
3
4 Preamble: referenced user accounts
5 ----------------------------------
6
7 In subsequent sections, we will refer to a number of different accounts, as
8 follows:
9
10   * Linux user accounts:
11     ** The *user* Linux account is the account that you use to log onto the
12        Linux system as a regular user.
13     ** The *root* Linux account is an account that has system administrator
14        privileges. On Debian and Fedora you can switch to this account from
15        your *user* account by issuing the `su -` command and entering the
16        password for the *root* account when prompted. On Ubuntu you can switch
17        to this account from your *user* account using the `sudo su -` command
18        and entering the password for your *user* account when prompted.
19     ** The *opensrf* Linux account is an account that you create when installing
20        OpenSRF. You can switch to this account from the *root* account by
21        issuing the `su - opensrf` command.
22     ** The *postgres* Linux account is created automatically when you install
23        the PostgreSQL database server. You can switch to this account from the
24        *root* account by issuing the `su - postgres` command.
25   * PostgreSQL user accounts:
26     ** The *evergreen* PostgreSQL account is a superuser account that you will
27        create to connect to the PostgreSQL database server.
28   * Evergreen administrator account:
29     ** The *egadmin* Evergreen account is an administrator account for
30        Evergreen that you will use to test connectivity and configure your
31        Evergreen instance.
32
33 Preamble: Developer instructions
34 --------------------------------
35
36 [NOTE]
37 Skip this section if you are using an official release tarball downloaded
38 from http://evergreen-ils.org/downloads
39
40 Developers working directly with the source code from the Git repository,
41 rather than an official release tarball, must install some extra packages
42 and perform one step before they can proceed with the `./configure` step.
43
44 As the *root* Linux account, install the following packages:
45
46   * autoconf
47   * automake
48   * libtool
49
50 As the *user* Linux account, issue the following command in the Evergreen
51 source directory to generate the configure script and Makefiles:
52
53 [source, bash]
54 ------------------------------------------------------------------------------
55 ./autogen.sh
56 ------------------------------------------------------------------------------
57
58 After running `make install`, developers also need to install the Dojo Toolkit
59 set of JavaScript libraries. The appropriate version of Dojo is included
60 in Evergreen release tarballs. Developers should install the Dojo 1.3.3
61 version of Dojo by issuing the following commands as the *opensrf* Linux
62 account:
63
64 [source, bash]
65 ------------------------------------------------------------------------------
66 wget http://download.dojotoolkit.org/release-1.3.3/dojo-release-1.3.3.tar.gz
67 tar -C /openils/var/web/js -xzf dojo-release-1.3.3.tar.gz
68 cp -r /openils/var/web/js/dojo-release-1.3.3/* /openils/var/web/js/dojo/.
69 ------------------------------------------------------------------------------
70
71 Installing prerequisites
72 ------------------------
73
74 Evergreen has a number of prerequisite packages that must be installed
75 before you can successfully configure, compile, and install Evergreen.
76
77 1. Begin by installing the most recent version of OpenSRF (2.0 or later).
78    You can download OpenSRF releases from http://evergreen-ils.org/opensrf.php
79 2. On many distributions, it is necessary to install PostgreSQL 9 from external
80    repositories.
81 +
82   * On Debian Squeeze, open `/etc/apt/sources.list` in a text editor as the
83     *root* Linux account and add the following line:
84 +
85 [source, bash]
86 ------------------------------------------------------------------------------
87 deb http://backports.debian.org/debian-backports squeeze-backports main contrib
88 ------------------------------------------------------------------------------
89 +
90   * On Ubuntu Lucid, you can use a PPA (personal package archive), which are 
91     package sources hosted on Launchpad. The one most commonly used by Evergreen
92     Community members is maintained by Martin Pitt, who also maintains the
93     official PostgreSQL packages for Ubuntu. As the *root* Linux account, issue
94     the following commands to add the PPA source:
95 +
96 [source, bash]
97 ------------------------------------------------------------------------------
98 apt-get install python-software-properties
99 add-apt-repository ppa:pitti/postgresql
100 ------------------------------------------------------------------------------
101 +
102   * Fedora 16 comes with PostgreSQL 9, so no additional steps are required.
103 +
104 3. On Debian and Ubuntu, run `aptitude update` as the *root* Linux account to
105    retrieve the new packages from the backports repository.
106 4. Issue the following commands as the *root* Linux account to install
107    prerequisites using the `Makefile.install` prerequisite installer,
108    substituting `debian-squeeze`, `fedora16`, `ubuntu-lucid`, `centos`, or
109    `rhel` for <osname> below:
110 +
111 [source, bash]
112 ------------------------------------------------------------------------------
113 make -f Open-ILS/src/extras/Makefile.install <osname>
114 ------------------------------------------------------------------------------
115 +
116 [NOTE]
117 `centos` and `rhel` are less tested than the `debian`, `fedora`,
118 and `ubuntu` options.  Your patches and suggestions for improvement are
119 welcome!
120 +
121 5. Add the libdbi-libdbd libraries to the system dynamic library path by
122    issuing the following commands as the *root* Linux account:
123 +
124 .Debian / Ubuntu
125 [source, bash]
126 ------------------------------------------------------------------------------
127 echo "/usr/local/lib/dbd" > /etc/ld.so.conf.d/eg.conf
128 ldconfig
129 ------------------------------------------------------------------------------
130 +
131 .Fedora
132 [source, bash]
133 ------------------------------------------------------------------------------
134 echo "/usr/lib64/dbd" > /etc/ld.so.conf.d/eg.conf
135 ldconfig
136 ------------------------------------------------------------------------------
137
138 Configuration and compilation instructions
139 ------------------------------------------
140
141 For the time being, we are still installing everything in the `/openils/`
142 directory. From the Evergreen source directory, issue the following commands as
143 the *user* Linux account to configure and build Evergreen:
144
145 [source, bash]
146 ------------------------------------------------------------------------------
147 ./configure --prefix=/openils --sysconfdir=/openils/conf
148 make
149 ------------------------------------------------------------------------------
150
151 Installation instructions
152 -------------------------
153
154 1. Once you have configured and compiled Evergreen, issue the following
155    command as the *root* Linux account to install Evergreen, build the server
156    portion of the staff client, and copy example configuration files to
157    `/openils/conf`.
158    Change the value of the `STAFF_CLIENT_STAMP_ID` variable to match the version
159    of the staff client that you will use to connect to the Evergreen server.
160 +
161 [source, bash]
162 ------------------------------------------------------------------------------
163 make STAFF_CLIENT_STAMP_ID=rel_name install
164 ------------------------------------------------------------------------------
165 +
166 2. The server portion of the staff client expects `http://hostname/xul/server`
167    to resolve. Issue the following commands as the *root* Linux account to
168    create a symbolic link pointing to the `server` subdirectory of the server
169    portion of the staff client that we just built using the staff client ID
170    'rel_name':
171 +
172 [source, bash]
173 ------------------------------------------------------------------------------
174 cd /openils/var/web/xul
175 ln -sf rel_name/server server
176 ------------------------------------------------------------------------------
177
178 Change ownership of the Evergreen files
179 ---------------------------------------
180
181 All files in the `/openils/` directory and subdirectories must be owned by the
182 `opensrf` user. Issue the following command as the *root* Linux account to
183 change the ownership on the files:
184
185 [source, bash]
186 ------------------------------------------------------------------------------
187 chown -R opensrf:opensrf /openils
188 ------------------------------------------------------------------------------
189
190 Configure the Apache Web server
191 -------------------------------
192
193 1. Use the example configuration files in `Open-ILS/examples/apache/` to
194 configure your Web server for the Evergreen catalog, staff client, Web
195 services, and administration interfaces. Issue the following commands as the
196 *root* Linux account:
197 +
198 .Debian and Ubuntu
199 [source,bash]
200 ------------------------------------------------------------------------------
201 cp Open-ILS/examples/apache/eg.conf       /etc/apache2/sites-available/
202 cp Open-ILS/examples/apache/eg_vhost.conf /etc/apache2/
203 cp Open-ILS/examples/apache/startup.pl    /etc/apache2/
204 # Now set up SSL
205 mkdir /etc/apache2/ssl
206 cd /etc/apache2/ssl
207 ------------------------------------------------------------------------------
208 +
209 .Fedora
210 [source,bash]
211 ------------------------------------------------------------------------------
212 cp Open-ILS/examples/apache/eg.conf       /etc/httpd/sites-available/
213 cp Open-ILS/examples/apache/eg_vhost.conf /etc/httpd/
214 cp Open-ILS/examples/apache/startup.pl    /etc/httpd/
215 # Now set up SSL
216 mkdir /etc/httpd/ssl
217 cd /etc/httpd/ssl
218 ------------------------------------------------------------------------------
219 +
220 2. The `openssl` command cuts a new SSL key for your Apache server. For a
221 production server, you should purchase a signed SSL certificate, but you can
222 just use a self-signed certificate and accept the warnings in the staff client
223 and browser during testing and development. Create an SSL key for the Apache
224 server by issuing the following command as the *root* Linux account:
225 +
226 [source,bash]
227 ------------------------------------------------------------------------------
228 openssl req -new -x509 -days 365 -nodes -out server.crt -keyout server.key
229 ------------------------------------------------------------------------------
230 +
231 3. As the *root* Linux account, edit the `eg.conf` file that you copied into
232 place.
233   a. Replace `Allow from 10.0.0.0/8` with `Allow from all` (to enable
234      access to the offline upload / execute interface from any workstation on
235      any network - note that you must secure this for a production instance)
236 4. Change the user for the Apache server.
237   * (Debian and Ubuntu): As the *root* Linux account, edit
238     `/etc/apache2/envvars`.  Change `export APACHE_RUN_USER=www-data` to 
239     `export APACHE_RUN_USER=opensrf`.
240   * (Fedora): As the *root* Linux account , edit `/etc/httpd/conf/httpd.conf`.
241     Change `User apache` to `User opensrf`.
242 5. Configure Apache with performance settings appropriate for Evergreen:
243   * (Debian and Ubuntu): As the *root* Linux account, edit
244     `/etc/apache2/apache2.conf`:
245   * (Fedora): As the *root* Linux account, edit `/etc/httpd/conf/httpd.conf`:
246     a. Change `KeepAliveTimeout` to `1`. Higher values reduce the chance of
247        a request timing out unexpectedly, but increase the risk of using up
248        all available Apache child processes.
249     b. 'Optional': Change `MaxKeepAliveRequests` to `100`
250     c. Update the prefork configuration section to suit your environment. The
251        following settings apply to a busy system:
252 +
253 [source,bash]
254 ------------------------------------------------------------------------------
255 <IfModule mpm_prefork_module>
256    StartServers           20
257    MinSpareServers         5
258    MaxSpareServers        15
259    MaxClients            150
260    MaxRequestsPerChild 10000
261 </IfModule>
262 ------------------------------------------------------------------------------
263 +
264 6. (Debian and Ubuntu): As the *root* Linux account, enable the Evergreen site:
265 +
266 [source,bash]
267 ------------------------------------------------------------------------------
268 a2dissite default  # OPTIONAL: disable the default site (the "It Works" page)
269 a2ensite eg.conf
270 ------------------------------------------------------------------------------
271
272 Configure OpenSRF for the Evergreen application
273 -----------------------------------------------
274 There are a number of example OpenSRF configuration files in `/openils/conf/`
275 that you can use as a template for your Evergreen installation. Issue the
276 following commands as the *opensrf* Linux account:
277
278 [source, bash]
279 ------------------------------------------------------------------------------
280 cp -b /openils/conf/opensrf_core.xml.example /openils/conf/opensrf_core.xml
281 cp -b /openils/conf/opensrf.xml.example /openils/conf/opensrf.xml
282 ------------------------------------------------------------------------------
283
284 When you installed OpenSRF, you created four Jabber users on two
285 separate domains and edited the `opensrf_core.xml` file accordingly. Please
286 refer back to the OpenSRF README and, as the *opensrf* Linux account, edit the
287 Evergreen version of the `opensrf_core.xml` file using the same Jabber users
288 and domains as you used while installing and testing OpenSRF.
289
290 [NOTE]
291 The `-b` flag tells the `cp` command to create a backup version of the
292 destination file. The backup version of the destination file has a tilde (`~`)
293 appended to the file name, so if you have forgotten the Jabber users and
294 domains, you can retrieve the settings from the backup version of the files.
295
296 `eg_db_config.pl`, described in the following section, sets the database
297 connection information in `opensrf.xml` for you.
298
299 Creating the Evergreen database
300 -------------------------------
301
302 By default, the `Makefile.install` prerequisite installer does not install
303 the PostgreSQL 9 database server required by every Evergreen system;
304 for production use, most libraries install the PostgreSQL database server on a
305 dedicated machine. You can install the packages required by Debian or Ubuntu
306 on the machine of your choice using the following commands as the *root*
307 Linux account:
308
309 .(Debian / Ubuntu) Installing PostgreSQL 9.1 server packages
310 [source, bash]
311 ------------------------------------------------------------------------------
312 make -f Open-ILS/src/extras/Makefile.install install_pgsql_server_debs_91
313 ------------------------------------------------------------------------------
314
315 You can install the packages required by Fedora on the machine of your choice
316 using the following commands as the *root* Linux account:
317
318 .(Fedora 16) Installing PostgreSQL server packages
319 [source, bash]
320 ------------------------------------------------------------------------------
321 make -f Open-ILS/src/extras/Makefile.install install_fedora_pgsql_server
322 ------------------------------------------------------------------------------
323
324 For a standalone PostgreSQL server, install the following Perl modules as the
325 *root* Linux account:
326
327 .(Debian / Ubuntu) Installing additional Perl modules on a standalone PostgreSQL 9 server
328 [source, bash]
329 ------------------------------------------------------------------------------
330 aptitude install gcc libxml-libxml-perl libxml-libxslt-perl
331 cpan Business::ISBN
332 cpan JSON::XS
333 cpan Library::CallNumber::LC
334 cpan MARC::Record
335 cpan MARC::File::XML
336 cpan UUID::Tiny
337 ------------------------------------------------------------------------------
338
339 .(Fedora 16) Installing additional Perl modules on a standalone PostgreSQL 9 server
340 [source, bash]
341 ------------------------------------------------------------------------------
342 yum install gcc perl-XML-LibXML perl-XML-LibXSLT perl-Business-ISBN
343 cpan Library::CallNumber::LC
344 cpan MARC::Record
345 cpan MARC::File::XML
346 cpan UUID::Tiny
347 ------------------------------------------------------------------------------
348
349 You need to create a PostgreSQL superuser to create and access the database.
350 Issue the following command as the *postgres* Linux account to create a new
351 PostgreSQL superuser named `evergreen`. When prompted, enter the new user's
352 password:
353
354 [source, bash]
355 ------------------------------------------------------------------------------
356 createuser -s -P evergreen
357 ------------------------------------------------------------------------------
358
359 Once you have created the *evergreen* PostgreSQL account, you also need to
360 create the database and schema, and configure your configuration files to point
361 at the database server. Issue the following command as the *root* Linux account
362 from inside the Evergreen source directory, replacing <user>, <password>,
363 <hostname>, <port>, and <dbname> with the appropriate values for your
364 PostgreSQL database (where <user> and <password> are for the *evergreen*
365 PostgreSQL account you just created), and replace <admin-user> and <admin-pass>
366 with the values you want for the *egadmin* Evergreen administrator account:
367
368 [source, bash]
369 ------------------------------------------------------------------------------
370 perl Open-ILS/src/support-scripts/eg_db_config.pl --update-config \
371        --service all --create-database --create-schema --create-offline \
372        --user <user> --password <password> --hostname <hostname> --port <port> \
373        --database <dbname> --admin-user <admin-user> --admin-pass <admin-pass>
374 ------------------------------------------------------------------------------
375
376 This creates the database and schema and configures all of the services in
377 your `/openils/conf/opensrf.xml` configuration file to point to that database.
378 It also creates the configuration files required by the Evergreen `cgi-bin`
379 administration scripts, and sets the user name and password for the *egadmin*
380 Evergreen administrator account to your requested values.
381
382 Creating the database on a remote server
383 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
384 In a production instance of Evergreen, your PostgreSQL server should be
385 installed on a dedicated server. For PostgreSQL 9.1 and later you should be
386 able to continue to use the --create-database flag on eg_db_config.pl, without
387 needing to install any server modules on your application machine. For
388 PostgreSQL 9.0 you can either:
389
390   *  Install the PostgreSQL contrib modules on the machine on which you
391      are installing the Evergreen code, and use the --create-database
392      option from that machine, or
393   *  Copy the `Open-ILS/src/sql/Pg/create_database.sql` script to your
394      PostgreSQL server and invoke it as the *postgres* Linux account:
395 +
396 [source, bash]
397 ------------------------------------------------------------------------------
398 psql -vdb_name=<dbname> -vcontrib_dir=`pg_config --sharedir`/contrib -f create_database.sql
399 ------------------------------------------------------------------------------
400
401 Then you can issue the `eg_db_config.pl` command as above _without_ the
402 `--create-database` argument to create your schema and configure your
403 configuration files.
404
405 Starting Evergreen
406 ------------------
407 1. As the *root* Linux account, start the `memcached` and `ejabberd` services
408 (if they aren't already running):
409 +
410 [source, bash]
411 ------------------------------------------------------------------------------
412 /etc/init.d/ejabberd start
413 /etc/init.d/memcached start
414 ------------------------------------------------------------------------------
415 +
416 2. As the *opensrf* Linux account, start Evergreen. The `-l` flag in the
417 following command is only necessary if you want to force Evergreen to treat the
418 hostname as `localhost`; if you configured `opensrf.xml` using the real
419 hostname of your machine as returned by `perl -ENet::Domain 'print
420 Net::Domain::hostfqdn() . "\n";'`, you should not use the `-l` flag.
421 +
422 [source, bash]
423 ------------------------------------------------------------------------------
424 osrf_ctl.sh -l -a start_all
425 ------------------------------------------------------------------------------
426 +
427   ** If you receive the error message `bash: osrf_ctl.sh: command not found`,
428      then your environment variable `PATH` does not include the `/openils/bin`
429      directory; this should have been set in the *opensrf* Linux account's
430      `.bashrc` configuration file. To manually set the `PATH` variable, edit the
431      configuration file `~/.bashrc` as the *opensrf* Linux account and add the
432      following line:
433 +
434 [source, bash]
435 ------------------------------------------------------------------------------
436 export PATH=$PATH:/openils/bin
437 ------------------------------------------------------------------------------
438 +
439 3. As the *opensrf* Linux account, generate the Web files needed by the staff
440    client and catalogue and update the organization unit proximity (you need to do
441    this the first time you start Evergreen, and after that each time you change
442    the library hierarchy in `config.cgi`):
443 +
444 [source, bash]
445 ------------------------------------------------------------------------------
446 autogen.sh -u
447 ------------------------------------------------------------------------------
448 +
449 4. As the *root* Linux account, restart the Apache Web server:
450 +
451 [source, bash]
452 ------------------------------------------------------------------------------
453 /etc/init.d/apache2 restart
454 ------------------------------------------------------------------------------
455 +
456 If the Apache Web server was running when you started the OpenSRF services, you
457 might not be able to successfully log in to the OPAC or staff client until the
458 Apache Web server is restarted.
459
460 Testing connections to Evergreen
461 --------------------------------
462
463 Once you have installed and started Evergreen, test your connection to
464 Evergreen via `srfsh`. As the *opensrf* Linux account, issue the following
465 commands to start `srfsh` and try to log onto the Evergreen server using the
466 *egadmin* Evergreen administrator user name and password that you set using the
467 `eg_db_config.pl` command:
468
469 [source, bash]
470 ------------------------------------------------------------------------------
471 /openils/bin/srfsh
472 srfsh% login <admin-user> <admin-pass>
473 ------------------------------------------------------------------------------
474
475 You should see a result like:
476
477     Received Data: "250bf1518c7527a03249858687714376"
478     ------------------------------------
479     Request Completed Successfully
480     Request Time in seconds: 0.045286
481     ------------------------------------
482
483     Received Data: {
484        "ilsevent":0,
485        "textcode":"SUCCESS",
486        "desc":" ",
487        "pid":21616,
488        "stacktrace":"oils_auth.c:304",
489        "payload":{
490           "authtoken":"e5f9827cc0f93b503a1cc66bee6bdd1a",
491           "authtime":420
492        }
493
494     }
495
496     ------------------------------------
497     Request Completed Successfully
498     Request Time in seconds: 1.336568
499     ------------------------------------
500
501 If this does not work, it's time to do some troubleshooting.
502
503   * As the *opensrf* Linux acccount, run the `settings-tester.pl` script to see
504     if it finds any system configuration problems. The script is found at
505     `Open-ILS/src/support-scripts/settings-tester.pl` in the Evergreen source
506     tree.
507   * Follow the steps in the http://evergreen-ils.org/dokuwiki/doku.php?id=troubleshooting:checking_for_errors[troubleshooting guide].
508   * If you have faithfully followed the entire set of installation steps
509     listed here, you are probably extremely close to a working system.
510     Gather your configuration files and log files and contact the
511     http://open-ils.org/listserv.php[Evergreen development mailing list]
512     for assistance before making any drastic changes to your system
513     configuration.
514
515 Getting help
516 ------------
517
518 Need help installing or using Evergreen? Join the mailing lists at
519 http://evergreen-ils.org/listserv.php or contact us on the Freenode
520 IRC network on the #evergreen channel.