]> git.evergreen-ils.org Git - Evergreen.git/blob - Open-ILS/src/sql/Pg/1.6.1-2.0-upgrade-db.sql
Resolving various discrepancies between an upgraded 2.0 database
[Evergreen.git] / Open-ILS / src / sql / Pg / 1.6.1-2.0-upgrade-db.sql
1 BEGIN;
2
3 -- Highest-numbered individual upgrade script
4 -- incorporated herein:
5
6 INSERT INTO config.upgrade_log (version) VALUES ('0403');
7
8 -- Begin by upgrading permission.perm_list.  This is fairly complicated.
9
10 -- Add ON UPDATE CASCADE to some foreign keys so that, when we renumber the
11 -- permissions, the dependents will follow and stay in sync:
12
13 ALTER TABLE permission.grp_perm_map DROP CONSTRAINT grp_perm_map_perm_fkey;
14 ALTER TABLE permission.grp_perm_map ADD CONSTRAINT grp_perm_map_perm_fkey FOREIGN KEY (perm)
15     REFERENCES permission.perm_list (id) ON UPDATE CASCADE ON DELETE RESTRICT DEFERRABLE INITIALLY DEFERRED;
16
17 ALTER TABLE permission.usr_perm_map DROP CONSTRAINT usr_perm_map_perm_fkey;
18 ALTER TABLE permission.usr_perm_map ADD CONSTRAINT usr_perm_map_perm_fkey FOREIGN KEY (perm)
19     REFERENCES permission.perm_list (id) ON UPDATE CASCADE ON DELETE RESTRICT DEFERRABLE INITIALLY DEFERRED;
20
21 ALTER TABLE permission.usr_object_perm_map DROP CONSTRAINT usr_object_perm_map_perm_fkey;
22 ALTER TABLE permission.usr_object_perm_map ADD CONSTRAINT usr_object_perm_map_perm_fkey FOREIGN KEY (perm)
23     REFERENCES permission.perm_list (id) ON UPDATE CASCADE ON DELETE RESTRICT DEFERRABLE INITIALLY DEFERRED;
24
25 UPDATE permission.perm_list
26     SET code = 'UPDATE_ORG_UNIT_SETTING.credit.payments.allow'
27     WHERE code = 'UPDATE_ORG_UNIT_SETTING.global.credit.allow';
28
29 -- The following UPDATES were originally in an individual upgrade script, but should
30 -- no longer be necessary now that the foreign key has an ON UPDATE CASCADE clause.
31 -- We retain the UPDATES here, commented out, as historical relics.
32
33 -- UPDATE permission.grp_perm_map SET perm = perm + 1000 WHERE perm NOT IN ( SELECT id FROM permission.perm_list );
34 -- UPDATE permission.usr_perm_map SET perm = perm + 1000 WHERE perm NOT IN ( SELECT id FROM permission.perm_list );
35
36 -- Spelling correction
37 UPDATE permission.perm_list SET code = 'ADMIN_RECURRING_FINE_RULE' WHERE code = 'ADMIN_RECURING_FINE_RULE';
38
39 -- Now we engage in a Great Renumbering of the permissions in permission.perm_list,
40 -- in order to clean up accumulated cruft.
41
42 -- The first step is to establish some triggers so that, when we change the id of a permission,
43 -- the associated translations are updated accordingly.
44
45 CREATE OR REPLACE FUNCTION oils_i18n_update_apply(old_ident TEXT, new_ident TEXT, hint TEXT) RETURNS VOID AS $_$
46 BEGIN
47
48     EXECUTE $$
49         UPDATE  config.i18n_core
50           SET   identity_value = $$ || quote_literal( new_ident ) || $$ 
51           WHERE fq_field LIKE '$$ || hint || $$.%' 
52                 AND identity_value = $$ || quote_literal( old_ident ) || $$;$$;
53
54     RETURN;
55
56 END;
57 $_$ LANGUAGE PLPGSQL;
58
59 CREATE OR REPLACE FUNCTION oils_i18n_id_tracking(/* hint */) RETURNS TRIGGER AS $_$
60 BEGIN
61     PERFORM oils_i18n_update_apply( OLD.id::TEXT, NEW.id::TEXT, TG_ARGV[0]::TEXT );
62     RETURN NEW;
63 END;
64 $_$ LANGUAGE PLPGSQL;
65
66 CREATE OR REPLACE FUNCTION oils_i18n_code_tracking(/* hint */) RETURNS TRIGGER AS $_$
67 BEGIN
68     PERFORM oils_i18n_update_apply( OLD.code::TEXT, NEW.code::TEXT, TG_ARGV[0]::TEXT );
69     RETURN NEW;
70 END;
71 $_$ LANGUAGE PLPGSQL;
72
73
74 CREATE TRIGGER maintain_perm_i18n_tgr
75     AFTER UPDATE ON permission.perm_list
76     FOR EACH ROW EXECUTE PROCEDURE oils_i18n_id_tracking('ppl');
77
78 -- Next, create a new table as a convenience for sloshing data back and forth,
79 -- and for recording which permission went where.  It looks just like
80 -- permission.perm_list, but with two extra columns: one for the old id, and one to
81 -- distinguish between predefined permissions and non-predefined permissions.
82
83 -- This table is, in effect, a temporary table, because we can drop it once the
84 -- upgrade is complete.  It is not technically temporary as far as PostgreSQL is
85 -- concerned, because we don't want it to disappear at the end of the session.
86 -- We keep it around so that we have a map showing the old id and the new id for
87 -- each permission.  However there is no IDL entry for it, nor is it defined
88 -- in the base sql files.
89
90 CREATE TABLE permission.temp_perm (
91         id          INT        PRIMARY KEY,
92         code        TEXT       UNIQUE,
93         description TEXT,
94         old_id      INT,
95         predefined  BOOL       NOT NULL DEFAULT TRUE
96 );
97
98 -- Populate the temp table with a definitive set of predefined permissions,
99 -- hard-coding the ids.
100
101 -- The first set of permissions is derived from the database, as loaded in a
102 -- loaded 1.6.1 database, plus a few changes previously applied in this upgrade
103 -- script.  The second set is derived from the IDL -- permissions that are referenced
104 -- in <permacrud> elements but not defined in the database.
105
106 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( -1, 'EVERYTHING',
107      '' );
108 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 1, 'OPAC_LOGIN',
109      'Allow a user to log in to the OPAC' );
110 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 2, 'STAFF_LOGIN',
111      'Allow a user to log in to the staff client' );
112 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 3, 'MR_HOLDS',
113      'Allow a user to create a metarecord holds' );
114 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 4, 'TITLE_HOLDS',
115      'Allow a user to place a hold at the title level' );
116 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 5, 'VOLUME_HOLDS',
117      'Allow a user to place a volume level hold' );
118 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 6, 'COPY_HOLDS',
119      'Allow a user to place a hold on a specific copy' );
120 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 7, 'REQUEST_HOLDS',
121      'Allow a user to create holds for another user (if true, we still check to make sure they have permission to make the type of hold they are requesting, for example, COPY_HOLDS)' );
122 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 8, 'REQUEST_HOLDS_OVERRIDE',
123      '* no longer applicable' );
124 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 9, 'VIEW_HOLD',
125      'Allow a user to view another user''s holds' );
126 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 10, 'DELETE_HOLDS',
127      '* no longer applicable' );
128 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 11, 'UPDATE_HOLD',
129      'Allow a user to update another user''s hold' );
130 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 12, 'RENEW_CIRC',
131      'Allow a user to renew items' );
132 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 13, 'VIEW_USER_FINES_SUMMARY',
133      'Allow a user to view bill details' );
134 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 14, 'VIEW_USER_TRANSACTIONS',
135      'Allow a user to see another user''s grocery or circulation transactions in the Bills Interface; duplicate of VIEW_TRANSACTION' );
136 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 15, 'UPDATE_MARC',
137      'Allow a user to edit a MARC record' );
138 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 16, 'CREATE_MARC',
139      'Allow a user to create new MARC records' );
140 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 17, 'IMPORT_MARC',
141      'Allow a user to import a MARC record via the Z39.50 interface' );
142 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 18, 'CREATE_VOLUME',
143      'Allow a user to create a volume' );
144 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 19, 'UPDATE_VOLUME',
145      'Allow a user to edit volumes - needed for merging records. This is a duplicate of VOLUME_UPDATE; user must have both permissions at appropriate level to merge records.' );
146 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 20, 'DELETE_VOLUME',
147      'Allow a user to delete a volume' );
148 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 21, 'CREATE_COPY',
149      'Allow a user to create a new copy object' );
150 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 22, 'UPDATE_COPY',
151      'Allow a user to edit a copy' );
152 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 23, 'DELETE_COPY',
153      'Allow a user to delete a copy' );
154 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 24, 'RENEW_HOLD_OVERRIDE',
155      'Allow a user to continue to renew an item even if it is required for a hold' );
156 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 25, 'CREATE_USER',
157      'Allow a user to create another user' );
158 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 26, 'UPDATE_USER',
159      'Allow a user to edit a user''s record' );
160 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 27, 'DELETE_USER',
161      'Allow a user to mark a user as deleted' );
162 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 28, 'VIEW_USER',
163      'Allow a user to view another user''s Patron Record' );
164 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 29, 'COPY_CHECKIN',
165      'Allow a user to check in a copy' );
166 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 30, 'CREATE_TRANSIT',
167      'Allow a user to place an item in transit' );
168 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 31, 'VIEW_PERMISSION',
169      'Allow a user to view user permissions within the user permissions editor' );
170 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 32, 'CHECKIN_BYPASS_HOLD_FULFILL',
171      '* no longer applicable' );
172 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 33, 'CREATE_PAYMENT',
173      'Allow a user to record payments in the Billing Interface' );
174 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 34, 'SET_CIRC_LOST',
175      'Allow a user to mark an item as ''lost''' );
176 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 35, 'SET_CIRC_MISSING',
177      'Allow a user to mark an item as ''missing''' );
178 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 36, 'SET_CIRC_CLAIMS_RETURNED',
179      'Allow a user to mark an item as ''claims returned''' );
180 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 37, 'CREATE_TRANSACTION',
181      'Allow a user to create a new billable transaction' );
182 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 38, 'VIEW_TRANSACTION',
183      'Allow a user may view another user''s transactions' );
184 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 39, 'CREATE_BILL',
185      'Allow a user to create a new bill on a transaction' );
186 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 40, 'VIEW_CONTAINER',
187      'Allow a user to view another user''s containers (buckets)' );
188 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 41, 'CREATE_CONTAINER',
189      'Allow a user to create a new container for another user' );
190 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 42, 'UPDATE_ORG_UNIT',
191      'Allow a user to change the settings for an organization unit' );
192 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 43, 'VIEW_CIRCULATIONS',
193      'Allow a user to see what another user has checked out' );
194 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 44, 'DELETE_CONTAINER',
195      'Allow a user to delete another user''s container' );
196 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 45, 'CREATE_CONTAINER_ITEM',
197      'Allow a user to create a container item for another user' );
198 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 46, 'CREATE_USER_GROUP_LINK',
199      'Allow a user to add other users to permission groups' );
200 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 47, 'REMOVE_USER_GROUP_LINK',
201      'Allow a user to remove other users from permission groups' );
202 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 48, 'VIEW_PERM_GROUPS',
203      'Allow a user to view other users'' permission groups' );
204 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 49, 'VIEW_PERMIT_CHECKOUT',
205      'Allow a user to determine whether another user can check out an item' );
206 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 50, 'UPDATE_BATCH_COPY',
207      'Allow a user to edit copies in batch' );
208 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 51, 'CREATE_PATRON_STAT_CAT',
209      'User may create a new patron statistical category' );
210 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 52, 'CREATE_COPY_STAT_CAT',
211      'User may create a copy statistical category' );
212 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 53, 'CREATE_PATRON_STAT_CAT_ENTRY',
213      'User may create an entry in a patron statistical category' );
214 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 54, 'CREATE_COPY_STAT_CAT_ENTRY',
215      'User may create an entry in a copy statistical category' );
216 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 55, 'UPDATE_PATRON_STAT_CAT',
217      'User may update a patron statistical category' );
218 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 56, 'UPDATE_COPY_STAT_CAT',
219      'User may update a copy statistical category' );
220 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 57, 'UPDATE_PATRON_STAT_CAT_ENTRY',
221      'User may update an entry in a patron statistical category' );
222 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 58, 'UPDATE_COPY_STAT_CAT_ENTRY',
223      'User may update an entry in a copy statistical category' );
224 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 59, 'CREATE_PATRON_STAT_CAT_ENTRY_MAP',
225      'User may link another user to an entry in a statistical category' );
226 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 60, 'CREATE_COPY_STAT_CAT_ENTRY_MAP',
227      'User may link a copy to an entry in a statistical category' );
228 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 61, 'DELETE_PATRON_STAT_CAT',
229      'User may delete a patron statistical category' );
230 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 62, 'DELETE_COPY_STAT_CAT',
231      'User may delete a copy statistical category' );
232 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 63, 'DELETE_PATRON_STAT_CAT_ENTRY',
233      'User may delete an entry from a patron statistical category' );
234 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 64, 'DELETE_COPY_STAT_CAT_ENTRY',
235      'User may delete an entry from a copy statistical category' );
236 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 65, 'DELETE_PATRON_STAT_CAT_ENTRY_MAP',
237      'User may delete a patron statistical category entry map' );
238 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 66, 'DELETE_COPY_STAT_CAT_ENTRY_MAP',
239      'User may delete a copy statistical category entry map' );
240 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 67, 'CREATE_NON_CAT_TYPE',
241      'Allow a user to create a new non-cataloged item type' );
242 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 68, 'UPDATE_NON_CAT_TYPE',
243      'Allow a user to update a non-cataloged item type' );
244 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 69, 'CREATE_IN_HOUSE_USE',
245      'Allow a user to create a new in-house-use ' );
246 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 70, 'COPY_CHECKOUT',
247      'Allow a user to check out a copy' );
248 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 71, 'CREATE_COPY_LOCATION',
249      'Allow a user to create a new copy location' );
250 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 72, 'UPDATE_COPY_LOCATION',
251      'Allow a user to update a copy location' );
252 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 73, 'DELETE_COPY_LOCATION',
253      'Allow a user to delete a copy location' );
254 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 74, 'CREATE_COPY_TRANSIT',
255      'Allow a user to create a transit_copy object for transiting a copy' );
256 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 75, 'COPY_TRANSIT_RECEIVE',
257      'Allow a user to close out a transit on a copy' );
258 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 76, 'VIEW_HOLD_PERMIT',
259      'Allow a user to see if another user has permission to place a hold on a given copy' );
260 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 77, 'VIEW_COPY_CHECKOUT_HISTORY',
261      'Allow a user to view which users have checked out a given copy' );
262 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 78, 'REMOTE_Z3950_QUERY',
263      'Allow a user to perform Z39.50 queries against remote servers' );
264 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 79, 'REGISTER_WORKSTATION',
265      'Allow a user to register a new workstation' );
266 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 80, 'VIEW_COPY_NOTES',
267      'Allow a user to view all notes attached to a copy' );
268 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 81, 'VIEW_VOLUME_NOTES',
269      'Allow a user to view all notes attached to a volume' );
270 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 82, 'VIEW_TITLE_NOTES',
271      'Allow a user to view all notes attached to a title' );
272 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 83, 'CREATE_COPY_NOTE',
273      'Allow a user to create a new copy note' );
274 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 84, 'CREATE_VOLUME_NOTE',
275      'Allow a user to create a new volume note' );
276 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 85, 'CREATE_TITLE_NOTE',
277      'Allow a user to create a new title note' );
278 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 86, 'DELETE_COPY_NOTE',
279      'Allow a user to delete another user''s copy notes' );
280 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 87, 'DELETE_VOLUME_NOTE',
281      'Allow a user to delete another user''s volume note' );
282 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 88, 'DELETE_TITLE_NOTE',
283      'Allow a user to delete another user''s title note' );
284 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 89, 'UPDATE_CONTAINER',
285      'Allow a user to update another user''s container' );
286 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 90, 'CREATE_MY_CONTAINER',
287      'Allow a user to create a container for themselves' );
288 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 91, 'VIEW_HOLD_NOTIFICATION',
289      'Allow a user to view notifications attached to a hold' );
290 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 92, 'CREATE_HOLD_NOTIFICATION',
291      'Allow a user to create new hold notifications' );
292 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 93, 'UPDATE_ORG_SETTING',
293      'Allow a user to update an organization unit setting' );
294 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 94, 'OFFLINE_UPLOAD',
295      'Allow a user to upload an offline script' );
296 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 95, 'OFFLINE_VIEW',
297      'Allow a user to view uploaded offline script information' );
298 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 96, 'OFFLINE_EXECUTE',
299      'Allow a user to execute an offline script batch' );
300 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 97, 'CIRC_OVERRIDE_DUE_DATE',
301      'Allow a user to change the due date on an item to any date' );
302 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 98, 'CIRC_PERMIT_OVERRIDE',
303      'Allow a user to bypass the circulation permit call for check out' );
304 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 99, 'COPY_IS_REFERENCE.override',
305      'Allow a user to override the copy_is_reference event' );
306 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 100, 'VOID_BILLING',
307      'Allow a user to void a bill' );
308 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 101, 'CIRC_CLAIMS_RETURNED.override',
309      'Allow a user to check in or check out an item that has a status of ''claims returned''' );
310 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 102, 'COPY_BAD_STATUS.override',
311      'Allow a user to check out an item in a non-circulatable status' );
312 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 103, 'COPY_ALERT_MESSAGE.override',
313      'Allow a user to check in/out an item that has an alert message' );
314 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 104, 'COPY_STATUS_LOST.override',
315      'Allow a user to remove the lost status from a copy' );
316 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 105, 'COPY_STATUS_MISSING.override',
317      'Allow a user to change the missing status on a copy' );
318 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 106, 'ABORT_TRANSIT',
319      'Allow a user to abort a copy transit if the user is at the transit destination or source' );
320 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 107, 'ABORT_REMOTE_TRANSIT',
321      'Allow a user to abort a copy transit if the user is not at the transit source or dest' );
322 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 108, 'VIEW_ZIP_DATA',
323      'Allow a user to query the ZIP code data method' );
324 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 109, 'CANCEL_HOLDS',
325      'Allow a user to cancel holds' );
326 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 110, 'CREATE_DUPLICATE_HOLDS',
327      'Allow a user to create duplicate holds (two or more holds on the same title)' );
328 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 111, 'actor.org_unit.closed_date.delete',
329      'Allow a user to remove a closed date interval for a given location' );
330 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 112, 'actor.org_unit.closed_date.update',
331      'Allow a user to update a closed date interval for a given location' );
332 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 113, 'actor.org_unit.closed_date.create',
333      'Allow a user to create a new closed date for a location' );
334 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 114, 'DELETE_NON_CAT_TYPE',
335      'Allow a user to delete a non cataloged type' );
336 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 115, 'money.collections_tracker.create',
337      'Allow a user to put someone into collections' );
338 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 116, 'money.collections_tracker.delete',
339      'Allow a user to remove someone from collections' );
340 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 117, 'BAR_PATRON',
341      'Allow a user to bar a patron' );
342 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 118, 'UNBAR_PATRON',
343      'Allow a user to un-bar a patron' );
344 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 119, 'DELETE_WORKSTATION',
345      'Allow a user to remove an existing workstation so a new one can replace it' );
346 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 120, 'group_application.user',
347      'Allow a user to add/remove users to/from the "User" group' );
348 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 121, 'group_application.user.patron',
349      'Allow a user to add/remove users to/from the "Patron" group' );
350 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 122, 'group_application.user.staff',
351      'Allow a user to add/remove users to/from the "Staff" group' );
352 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 123, 'group_application.user.staff.circ',
353      'Allow a user to add/remove users to/from the "Circulator" group' );
354 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 124, 'group_application.user.staff.cat',
355      'Allow a user to add/remove users to/from the "Cataloger" group' );
356 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 125, 'group_application.user.staff.admin.global_admin',
357      'Allow a user to add/remove users to/from the "GlobalAdmin" group' );
358 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 126, 'group_application.user.staff.admin.local_admin',
359      'Allow a user to add/remove users to/from the "LocalAdmin" group' );
360 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 127, 'group_application.user.staff.admin.lib_manager',
361      'Allow a user to add/remove users to/from the "LibraryManager" group' );
362 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 128, 'group_application.user.staff.cat.cat1',
363      'Allow a user to add/remove users to/from the "Cat1" group' );
364 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 129, 'group_application.user.staff.supercat',
365      'Allow a user to add/remove users to/from the "Supercat" group' );
366 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 130, 'group_application.user.sip_client',
367      'Allow a user to add/remove users to/from the "SIP-Client" group' );
368 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 131, 'group_application.user.vendor',
369      'Allow a user to add/remove users to/from the "Vendor" group' );
370 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 132, 'ITEM_AGE_PROTECTED.override',
371      'Allow a user to place a hold on an age-protected item' );
372 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 133, 'MAX_RENEWALS_REACHED.override',
373      'Allow a user to renew an item past the maximum renewal count' );
374 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 134, 'PATRON_EXCEEDS_CHECKOUT_COUNT.override',
375      'Allow staff to override checkout count failure' );
376 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 135, 'PATRON_EXCEEDS_OVERDUE_COUNT.override',
377      'Allow staff to override overdue count failure' );
378 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 136, 'PATRON_EXCEEDS_FINES.override',
379      'Allow staff to override fine amount checkout failure' );
380 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 137, 'CIRC_EXCEEDS_COPY_RANGE.override',
381      'Allow staff to override circulation copy range failure' );
382 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 138, 'ITEM_ON_HOLDS_SHELF.override',
383      'Allow staff to override item on holds shelf failure' );
384 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 139, 'COPY_NOT_AVAILABLE.override',
385      'Allow staff to force checkout of Missing/Lost type items' );
386 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 140, 'HOLD_EXISTS.override',
387      'Allow a user to place multiple holds on a single title' );
388 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 141, 'RUN_REPORTS',
389      'Allow a user to run reports' );
390 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 142, 'SHARE_REPORT_FOLDER',
391      'Allow a user to share report his own folders' );
392 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 143, 'VIEW_REPORT_OUTPUT',
393      'Allow a user to view report output' );
394 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 144, 'COPY_CIRC_NOT_ALLOWED.override',
395      'Allow a user to checkout an item that is marked as non-circ' );
396 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 145, 'DELETE_CONTAINER_ITEM',
397      'Allow a user to delete an item out of another user''s container' );
398 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 146, 'ASSIGN_WORK_ORG_UNIT',
399      'Allow a staff member to define where another staff member has their permissions' );
400 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 147, 'CREATE_FUNDING_SOURCE',
401      'Allow a user to create a new funding source' );
402 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 148, 'DELETE_FUNDING_SOURCE',
403      'Allow a user to delete a funding source' );
404 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 149, 'VIEW_FUNDING_SOURCE',
405      'Allow a user to view a funding source' );
406 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 150, 'UPDATE_FUNDING_SOURCE',
407      'Allow a user to update a funding source' );
408 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 151, 'CREATE_FUND',
409      'Allow a user to create a new fund' );
410 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 152, 'DELETE_FUND',
411      'Allow a user to delete a fund' );
412 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 153, 'VIEW_FUND',
413      'Allow a user to view a fund' );
414 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 154, 'UPDATE_FUND',
415      'Allow a user to update a fund' );
416 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 155, 'CREATE_FUND_ALLOCATION',
417      'Allow a user to create a new fund allocation' );
418 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 156, 'DELETE_FUND_ALLOCATION',
419      'Allow a user to delete a fund allocation' );
420 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 157, 'VIEW_FUND_ALLOCATION',
421      'Allow a user to view a fund allocation' );
422 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 158, 'UPDATE_FUND_ALLOCATION',
423      'Allow a user to update a fund allocation' );
424 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 159, 'GENERAL_ACQ',
425      'Lowest level permission required to access the ACQ interface' );
426 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 160, 'CREATE_PROVIDER',
427      'Allow a user to create a new provider' );
428 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 161, 'DELETE_PROVIDER',
429      'Allow a user to delate a provider' );
430 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 162, 'VIEW_PROVIDER',
431      'Allow a user to view a provider' );
432 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 163, 'UPDATE_PROVIDER',
433      'Allow a user to update a provider' );
434 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 164, 'ADMIN_FUNDING_SOURCE',
435      'Allow a user to create/view/update/delete a funding source' );
436 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 165, 'ADMIN_FUND',
437      '(Deprecated) Allow a user to create/view/update/delete a fund' );
438 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 166, 'MANAGE_FUNDING_SOURCE',
439      'Allow a user to view/credit/debit a funding source' );
440 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 167, 'MANAGE_FUND',
441      'Allow a user to view/credit/debit a fund' );
442 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 168, 'CREATE_PICKLIST',
443      'Allows a user to create a picklist' );
444 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 169, 'ADMIN_PROVIDER',
445      'Allow a user to create/view/update/delete a provider' );
446 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 170, 'MANAGE_PROVIDER',
447      'Allow a user to view and purchase from a provider' );
448 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 171, 'VIEW_PICKLIST',
449      'Allow a user to view another users picklist' );
450 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 172, 'DELETE_RECORD',
451      'Allow a staff member to directly remove a bibliographic record' );
452 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 173, 'ADMIN_CURRENCY_TYPE',
453      'Allow a user to create/view/update/delete a currency_type' );
454 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 174, 'MARK_BAD_DEBT',
455      'Allow a user to mark a transaction as bad (unrecoverable) debt' );
456 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 175, 'VIEW_BILLING_TYPE',
457      'Allow a user to view billing types' );
458 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 176, 'MARK_ITEM_AVAILABLE',
459      'Allow a user to mark an item status as ''available''' );
460 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 177, 'MARK_ITEM_CHECKED_OUT',
461      'Allow a user to mark an item status as ''checked out''' );
462 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 178, 'MARK_ITEM_BINDERY',
463      'Allow a user to mark an item status as ''bindery''' );
464 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 179, 'MARK_ITEM_LOST',
465      'Allow a user to mark an item status as ''lost''' );
466 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 180, 'MARK_ITEM_MISSING',
467      'Allow a user to mark an item status as ''missing''' );
468 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 181, 'MARK_ITEM_IN_PROCESS',
469      'Allow a user to mark an item status as ''in process''' );
470 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 182, 'MARK_ITEM_IN_TRANSIT',
471      'Allow a user to mark an item status as ''in transit''' );
472 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 183, 'MARK_ITEM_RESHELVING',
473      'Allow a user to mark an item status as ''reshelving''' );
474 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 184, 'MARK_ITEM_ON_HOLDS_SHELF',
475      'Allow a user to mark an item status as ''on holds shelf''' );
476 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 185, 'MARK_ITEM_ON_ORDER',
477      'Allow a user to mark an item status as ''on order''' );
478 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 186, 'MARK_ITEM_ILL',
479      'Allow a user to mark an item status as ''inter-library loan''' );
480 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 187, 'group_application.user.staff.acq',
481      'Allows a user to add/remove/edit users in the "ACQ" group' );
482 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 188, 'CREATE_PURCHASE_ORDER',
483      'Allows a user to create a purchase order' );
484 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 189, 'VIEW_PURCHASE_ORDER',
485      'Allows a user to view a purchase order' );
486 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 190, 'IMPORT_ACQ_LINEITEM_BIB_RECORD',
487      'Allows a user to import a bib record from the acq staging area (on-order record) into the ILS bib data set' );
488 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 191, 'RECEIVE_PURCHASE_ORDER',
489      'Allows a user to mark a purchase order, lineitem, or individual copy as received' );
490 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 192, 'VIEW_ORG_SETTINGS',
491      'Allows a user to view all org settings at the specified level' );
492 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 193, 'CREATE_MFHD_RECORD',
493      'Allows a user to create a new MFHD record' );
494 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 194, 'UPDATE_MFHD_RECORD',
495      'Allows a user to update an MFHD record' );
496 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 195, 'DELETE_MFHD_RECORD',
497      'Allows a user to delete an MFHD record' );
498 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 196, 'ADMIN_ACQ_FUND',
499      'Allow a user to create/view/update/delete a fund' );
500 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 197, 'group_application.user.staff.acq_admin',
501      'Allows a user to add/remove/edit users in the "Acquisitions Administrators" group' );
502 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 198, 'SET_CIRC_CLAIMS_RETURNED.override',
503      'Allows staff to override the max claims returned value for a patron' );
504 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 199, 'UPDATE_PATRON_CLAIM_RETURN_COUNT',
505      'Allows staff to manually change a patron''s claims returned count' );
506 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 200, 'UPDATE_BILL_NOTE',
507      'Allows staff to edit the note for a bill on a transaction' );
508 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 201, 'UPDATE_PAYMENT_NOTE',
509      'Allows staff to edit the note for a payment on a transaction' );
510 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 202, 'UPDATE_PATRON_CLAIM_NEVER_CHECKED_OUT_COUNT',
511      'Allows staff to manually change a patron''s claims never checkout out count' );
512 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 203, 'ADMIN_COPY_LOCATION_ORDER',
513      'Allow a user to create/view/update/delete a copy location order' );
514 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 204, 'ASSIGN_GROUP_PERM',
515      '' );
516 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 205, 'CREATE_AUDIENCE',
517      '' );
518 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 206, 'CREATE_BIB_LEVEL',
519      '' );
520 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 207, 'CREATE_CIRC_DURATION',
521      '' );
522 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 208, 'CREATE_CIRC_MOD',
523      '' );
524 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 209, 'CREATE_COPY_STATUS',
525      '' );
526 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 210, 'CREATE_HOURS_OF_OPERATION',
527      '' );
528 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 211, 'CREATE_ITEM_FORM',
529      '' );
530 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 212, 'CREATE_ITEM_TYPE',
531      '' );
532 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 213, 'CREATE_LANGUAGE',
533      '' );
534 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 214, 'CREATE_LASSO',
535      '' );
536 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 215, 'CREATE_LASSO_MAP',
537      '' );
538 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 216, 'CREATE_LIT_FORM',
539      '' );
540 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 217, 'CREATE_METABIB_FIELD',
541      '' );
542 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 218, 'CREATE_NET_ACCESS_LEVEL',
543      '' );
544 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 219, 'CREATE_ORG_ADDRESS',
545      '' );
546 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 220, 'CREATE_ORG_TYPE',
547      '' );
548 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 221, 'CREATE_ORG_UNIT',
549      '' );
550 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 222, 'CREATE_ORG_UNIT_CLOSING',
551      '' );
552 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 223, 'CREATE_PERM',
553      '' );
554 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 224, 'CREATE_RELEVANCE_ADJUSTMENT',
555      '' );
556 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 225, 'CREATE_SURVEY',
557      '' );
558 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 226, 'CREATE_VR_FORMAT',
559      '' );
560 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 227, 'CREATE_XML_TRANSFORM',
561      '' );
562 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 228, 'DELETE_AUDIENCE',
563      '' );
564 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 229, 'DELETE_BIB_LEVEL',
565      '' );
566 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 230, 'DELETE_CIRC_DURATION',
567      '' );
568 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 231, 'DELETE_CIRC_MOD',
569      '' );
570 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 232, 'DELETE_COPY_STATUS',
571      '' );
572 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 233, 'DELETE_HOURS_OF_OPERATION',
573      '' );
574 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 234, 'DELETE_ITEM_FORM',
575      '' );
576 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 235, 'DELETE_ITEM_TYPE',
577      '' );
578 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 236, 'DELETE_LANGUAGE',
579      '' );
580 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 237, 'DELETE_LASSO',
581      '' );
582 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 238, 'DELETE_LASSO_MAP',
583      '' );
584 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 239, 'DELETE_LIT_FORM',
585      '' );
586 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 240, 'DELETE_METABIB_FIELD',
587      '' );
588 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 241, 'DELETE_NET_ACCESS_LEVEL',
589      '' );
590 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 242, 'DELETE_ORG_ADDRESS',
591      '' );
592 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 243, 'DELETE_ORG_TYPE',
593      '' );
594 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 244, 'DELETE_ORG_UNIT',
595      '' );
596 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 245, 'DELETE_ORG_UNIT_CLOSING',
597      '' );
598 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 246, 'DELETE_PERM',
599      '' );
600 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 247, 'DELETE_RELEVANCE_ADJUSTMENT',
601      '' );
602 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 248, 'DELETE_SURVEY',
603      '' );
604 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 249, 'DELETE_TRANSIT',
605      '' );
606 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 250, 'DELETE_VR_FORMAT',
607      '' );
608 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 251, 'DELETE_XML_TRANSFORM',
609      '' );
610 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 252, 'REMOVE_GROUP_PERM',
611      '' );
612 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 253, 'TRANSIT_COPY',
613      '' );
614 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 254, 'UPDATE_AUDIENCE',
615      '' );
616 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 255, 'UPDATE_BIB_LEVEL',
617      '' );
618 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 256, 'UPDATE_CIRC_DURATION',
619      '' );
620 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 257, 'UPDATE_CIRC_MOD',
621      '' );
622 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 258, 'UPDATE_COPY_NOTE',
623      '' );
624 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 259, 'UPDATE_COPY_STATUS',
625      '' );
626 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 260, 'UPDATE_GROUP_PERM',
627      '' );
628 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 261, 'UPDATE_HOURS_OF_OPERATION',
629      '' );
630 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 262, 'UPDATE_ITEM_FORM',
631      '' );
632 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 263, 'UPDATE_ITEM_TYPE',
633      '' );
634 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 264, 'UPDATE_LANGUAGE',
635      '' );
636 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 265, 'UPDATE_LASSO',
637      '' );
638 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 266, 'UPDATE_LASSO_MAP',
639      '' );
640 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 267, 'UPDATE_LIT_FORM',
641      '' );
642 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 268, 'UPDATE_METABIB_FIELD',
643      '' );
644 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 269, 'UPDATE_NET_ACCESS_LEVEL',
645      '' );
646 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 270, 'UPDATE_ORG_ADDRESS',
647      '' );
648 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 271, 'UPDATE_ORG_TYPE',
649      '' );
650 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 272, 'UPDATE_ORG_UNIT_CLOSING',
651      '' );
652 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 273, 'UPDATE_PERM',
653      '' );
654 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 274, 'UPDATE_RELEVANCE_ADJUSTMENT',
655      '' );
656 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 275, 'UPDATE_SURVEY',
657      '' );
658 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 276, 'UPDATE_TRANSIT',
659      '' );
660 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 277, 'UPDATE_VOLUME_NOTE',
661      '' );
662 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 278, 'UPDATE_VR_FORMAT',
663      '' );
664 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 279, 'UPDATE_XML_TRANSFORM',
665      '' );
666 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 280, 'MERGE_BIB_RECORDS',
667      '' );
668 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 281, 'UPDATE_PICKUP_LIB_FROM_HOLDS_SHELF',
669      '' );
670 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 282, 'CREATE_ACQ_FUNDING_SOURCE',
671      '' );
672 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 283, 'CREATE_AUTHORITY_IMPORT_IMPORT_FIELD_DEF',
673      '' );
674 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 284, 'CREATE_AUTHORITY_IMPORT_QUEUE',
675      '' );
676 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 285, 'CREATE_AUTHORITY_RECORD_NOTE',
677      '' );
678 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 286, 'CREATE_BIB_IMPORT_FIELD_DEF',
679      '' );
680 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 287, 'CREATE_BIB_IMPORT_QUEUE',
681      '' );
682 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 288, 'CREATE_LOCALE',
683      '' );
684 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 289, 'CREATE_MARC_CODE',
685      '' );
686 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 290, 'CREATE_TRANSLATION',
687      '' );
688 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 291, 'DELETE_ACQ_FUNDING_SOURCE',
689      '' );
690 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 292, 'DELETE_AUTHORITY_IMPORT_IMPORT_FIELD_DEF',
691      '' );
692 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 293, 'DELETE_AUTHORITY_IMPORT_QUEUE',
693      '' );
694 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 294, 'DELETE_AUTHORITY_RECORD_NOTE',
695      '' );
696 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 295, 'DELETE_BIB_IMPORT_IMPORT_FIELD_DEF',
697      '' );
698 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 296, 'DELETE_BIB_IMPORT_QUEUE',
699      '' );
700 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 297, 'DELETE_LOCALE',
701      '' );
702 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 298, 'DELETE_MARC_CODE',
703      '' );
704 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 299, 'DELETE_TRANSLATION',
705      '' );
706 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 300, 'UPDATE_ACQ_FUNDING_SOURCE',
707      '' );
708 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 301, 'UPDATE_AUTHORITY_IMPORT_IMPORT_FIELD_DEF',
709      '' );
710 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 302, 'UPDATE_AUTHORITY_IMPORT_QUEUE',
711      '' );
712 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 303, 'UPDATE_AUTHORITY_RECORD_NOTE',
713      '' );
714 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 304, 'UPDATE_BIB_IMPORT_IMPORT_FIELD_DEF',
715      '' );
716 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 305, 'UPDATE_BIB_IMPORT_QUEUE',
717      '' );
718 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 306, 'UPDATE_LOCALE',
719      '' );
720 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 307, 'UPDATE_MARC_CODE',
721      '' );
722 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 308, 'UPDATE_TRANSLATION',
723      '' );
724 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 309, 'VIEW_ACQ_FUNDING_SOURCE',
725      '' );
726 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 310, 'VIEW_AUTHORITY_RECORD_NOTES',
727      '' );
728 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 311, 'CREATE_IMPORT_ITEM',
729      '' );
730 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 312, 'CREATE_IMPORT_ITEM_ATTR_DEF',
731      '' );
732 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 313, 'CREATE_IMPORT_TRASH_FIELD',
733      '' );
734 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 314, 'DELETE_IMPORT_ITEM',
735      '' );
736 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 315, 'DELETE_IMPORT_ITEM_ATTR_DEF',
737      '' );
738 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 316, 'DELETE_IMPORT_TRASH_FIELD',
739      '' );
740 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 317, 'UPDATE_IMPORT_ITEM',
741      '' );
742 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 318, 'UPDATE_IMPORT_ITEM_ATTR_DEF',
743      '' );
744 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 319, 'UPDATE_IMPORT_TRASH_FIELD',
745      '' );
746 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 320, 'UPDATE_ORG_UNIT_SETTING_ALL',
747      '' );
748 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 321, 'UPDATE_ORG_UNIT_SETTING.circ.lost_materials_processing_fee',
749      '' );
750 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 322, 'UPDATE_ORG_UNIT_SETTING.cat.default_item_price',
751      '' );
752 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 323, 'UPDATE_ORG_UNIT_SETTING.auth.opac_timeout',
753      '' );
754 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 324, 'UPDATE_ORG_UNIT_SETTING.auth.staff_timeout',
755      '' );
756 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 325, 'UPDATE_ORG_UNIT_SETTING.org.bounced_emails',
757      '' );
758 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 326, 'UPDATE_ORG_UNIT_SETTING.circ.hold_expire_alert_interval',
759      '' );
760 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 327, 'UPDATE_ORG_UNIT_SETTING.circ.hold_expire_interval',
761      '' );
762 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 328, 'UPDATE_ORG_UNIT_SETTING.credit.payments.allow',
763      '' );
764 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 329, 'UPDATE_ORG_UNIT_SETTING.circ.void_overdue_on_lost',
765      '' );
766 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 330, 'UPDATE_ORG_UNIT_SETTING.circ.hold_stalling.soft',
767      '' );
768 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 331, 'UPDATE_ORG_UNIT_SETTING.circ.hold_boundary.hard',
769      '' );
770 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 332, 'UPDATE_ORG_UNIT_SETTING.circ.hold_boundary.soft',
771      '' );
772 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 333, 'UPDATE_ORG_UNIT_SETTING.opac.barcode_regex',
773      '' );
774 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 334, 'UPDATE_ORG_UNIT_SETTING.global.password_regex',
775      '' );
776 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 335, 'UPDATE_ORG_UNIT_SETTING.circ.item_checkout_history.max',
777      '' );
778 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 336, 'UPDATE_ORG_UNIT_SETTING.circ.reshelving_complete.interval',
779      '' );
780 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 337, 'UPDATE_ORG_UNIT_SETTING.circ.selfcheck.patron_login_timeout',
781      '' );
782 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 338, 'UPDATE_ORG_UNIT_SETTING.circ.selfcheck.alert_on_checkout_event',
783      '' );
784 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 339, 'UPDATE_ORG_UNIT_SETTING.circ.selfcheck.require_patron_password',
785      '' );
786 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 340, 'UPDATE_ORG_UNIT_SETTING.global.juvenile_age_threshold',
787      '' );
788 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 341, 'UPDATE_ORG_UNIT_SETTING.cat.bib.keep_on_empty',
789      '' );
790 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 342, 'UPDATE_ORG_UNIT_SETTING.cat.bib.alert_on_empty',
791      '' );
792 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 343, 'UPDATE_ORG_UNIT_SETTING.patron.password.use_phone',
793      '' );
794 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 344, 'HOLD_ITEM_CHECKED_OUT.override',
795      'Allows a user to place a hold on an item that they already have checked out' );
796 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 345, 'ADMIN_ACQ_CANCEL_CAUSE',
797      'Allow a user to create/update/delete reasons for order cancellations' );
798 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 346, 'ACQ_XFER_MANUAL_DFUND_AMOUNT',
799      'Allow a user to transfer different amounts of money out of one fund and into another' );
800 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 347, 'OVERRIDE_HOLD_HAS_LOCAL_COPY',
801      'Allow a user to override the circ.holds.hold_has_copy_at.block setting' );
802 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 348, 'UPDATE_PICKUP_LIB_FROM_TRANSIT',
803      'Allow a user to change the pickup and transit destination for a captured hold item already in transit' );
804 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 349, 'COPY_NEEDED_FOR_HOLD.override',
805      'Allow a user to force renewal of an item that could fulfill a hold request' );
806 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 350, 'MERGE_AUTH_RECORDS',
807      'Allow a user to merge authority records together' );
808 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 351, 'ALLOW_ALT_TCN',
809      'Allows staff to import a record using an alternate TCN to avoid conflicts' );
810 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 352, 'ADMIN_TRIGGER_EVENT_DEF',
811      'Allow a user to administer trigger event definitions' );
812 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 353, 'ADMIN_TRIGGER_CLEANUP',
813      'Allow a user to create, delete, and update trigger cleanup entries' );
814 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 354, 'CREATE_TRIGGER_CLEANUP',
815      'Allow a user to create trigger cleanup entries' );
816 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 355, 'DELETE_TRIGGER_CLEANUP',
817      'Allow a user to delete trigger cleanup entries' );
818 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 356, 'UPDATE_TRIGGER_CLEANUP',
819      'Allow a user to update trigger cleanup entries' );
820 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 357, 'CREATE_TRIGGER_EVENT_DEF',
821      'Allow a user to create trigger event definitions' );
822 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 358, 'DELETE_TRIGGER_EVENT_DEF',
823      'Allow a user to delete trigger event definitions' );
824 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 359, 'UPDATE_TRIGGER_EVENT_DEF',
825      'Allow a user to update trigger event definitions' );
826 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 360, 'VIEW_TRIGGER_EVENT_DEF',
827      'Allow a user to view trigger event definitions' );
828 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 361, 'ADMIN_TRIGGER_HOOK',
829      'Allow a user to create, update, and delete trigger hooks' );
830 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 362, 'CREATE_TRIGGER_HOOK',
831      'Allow a user to create trigger hooks' );
832 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 363, 'DELETE_TRIGGER_HOOK',
833      'Allow a user to delete trigger hooks' );
834 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 364, 'UPDATE_TRIGGER_HOOK',
835      'Allow a user to update trigger hooks' );
836 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 365, 'ADMIN_TRIGGER_REACTOR',
837      'Allow a user to create, update, and delete trigger reactors' );
838 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 366, 'CREATE_TRIGGER_REACTOR',
839      'Allow a user to create trigger reactors' );
840 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 367, 'DELETE_TRIGGER_REACTOR',
841      'Allow a user to delete trigger reactors' );
842 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 368, 'UPDATE_TRIGGER_REACTOR',
843      'Allow a user to update trigger reactors' );
844 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 369, 'ADMIN_TRIGGER_TEMPLATE_OUTPUT',
845      'Allow a user to delete trigger template output' );
846 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 370, 'DELETE_TRIGGER_TEMPLATE_OUTPUT',
847      'Allow a user to delete trigger template output' );
848 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 371, 'ADMIN_TRIGGER_VALIDATOR',
849      'Allow a user to create, update, and delete trigger validators' );
850 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 372, 'CREATE_TRIGGER_VALIDATOR',
851      'Allow a user to create trigger validators' );
852 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 373, 'DELETE_TRIGGER_VALIDATOR',
853      'Allow a user to delete trigger validators' );
854 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 374, 'UPDATE_TRIGGER_VALIDATOR',
855      'Allow a user to update trigger validators' );
856 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 375, 'HOLD_LOCAL_AVAIL_OVERRIDE',
857      'Allow a user to place a hold despite the availability of a local copy' );
858 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 376, 'ADMIN_BOOKING_RESOURCE',
859      'Enables the user to create/update/delete booking resources' );
860 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 377, 'ADMIN_BOOKING_RESOURCE_TYPE',
861      'Enables the user to create/update/delete booking resource types' );
862 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 378, 'ADMIN_BOOKING_RESOURCE_ATTR',
863      'Enables the user to create/update/delete booking resource attributes' );
864 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 379, 'ADMIN_BOOKING_RESOURCE_ATTR_MAP',
865      'Enables the user to create/update/delete booking resource attribute maps' );
866 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 380, 'ADMIN_BOOKING_RESOURCE_ATTR_VALUE',
867      'Enables the user to create/update/delete booking resource attribute values' );
868 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 381, 'ADMIN_BOOKING_RESERVATION',
869      'Enables the user to create/update/delete booking reservations' );
870 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 382, 'ADMIN_BOOKING_RESERVATION_ATTR_VALUE_MAP',
871      'Enables the user to create/update/delete booking reservation attribute value maps' );
872 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 383, 'RETRIEVE_RESERVATION_PULL_LIST',
873      'Allows a user to retrieve a booking reservation pull list' );
874 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 384, 'CAPTURE_RESERVATION',
875      'Allows a user to capture booking reservations' );
876 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 385, 'UPDATE_RECORD',
877      '' );
878 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 386, 'UPDATE_ORG_UNIT_SETTING.circ.block_renews_for_holds',
879      '' );
880 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 387, 'MERGE_USERS',
881      'Allows user records to be merged' );
882 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 388, 'ISSUANCE_HOLDS',
883      'Allow a user to place holds on serials issuances' );
884 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 389, 'VIEW_CREDIT_CARD_PROCESSING',
885      'View org unit settings related to credit card processing' );
886 INSERT INTO permission.temp_perm ( id, code, description ) VALUES ( 390, 'ADMIN_CREDIT_CARD_PROCESSING',
887      'Update org unit settings related to credit card processing' );
888
889 -- Now for the permissions from the IDL.  We don't have descriptions for them.
890
891 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 391, 'ADMIN_ACQ_CLAIM' );
892 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 392, 'ADMIN_ACQ_CLAIM_EVENT_TYPE' );
893 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 393, 'ADMIN_ACQ_CLAIM_TYPE' );
894 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 394, 'ADMIN_ACQ_DISTRIB_FORMULA' );
895 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 395, 'ADMIN_ACQ_FISCAL_YEAR' );
896 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 396, 'ADMIN_ACQ_FUND_ALLOCATION_PERCENT' );
897 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 397, 'ADMIN_ACQ_FUND_TAG' );
898 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 398, 'ADMIN_ACQ_LINEITEM_ALERT_TEXT' );
899 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 399, 'ADMIN_AGE_PROTECT_RULE' );
900 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 400, 'ADMIN_ASSET_COPY_TEMPLATE' );
901 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 401, 'ADMIN_BOOKING_RESERVATION_ATTR_MAP' );
902 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 402, 'ADMIN_CIRC_MATRIX_MATCHPOINT' );
903 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 403, 'ADMIN_CIRC_MOD' );
904 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 404, 'ADMIN_CLAIM_POLICY' );
905 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 405, 'ADMIN_CONFIG_REMOTE_ACCOUNT' );
906 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 406, 'ADMIN_FIELD_DOC' );
907 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 407, 'ADMIN_GLOBAL_FLAG' );
908 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 408, 'ADMIN_GROUP_PENALTY_THRESHOLD' );
909 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 409, 'ADMIN_HOLD_CANCEL_CAUSE' );
910 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 410, 'ADMIN_HOLD_MATRIX_MATCHPOINT' );
911 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 411, 'ADMIN_IDENT_TYPE' );
912 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 412, 'ADMIN_IMPORT_ITEM_ATTR_DEF' );
913 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 413, 'ADMIN_INDEX_NORMALIZER' );
914 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 414, 'ADMIN_INVOICE' );
915 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 415, 'ADMIN_INVOICE_METHOD' );
916 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 416, 'ADMIN_INVOICE_PAYMENT_METHOD' );
917 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 417, 'ADMIN_LINEITEM_MARC_ATTR_DEF' );
918 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 418, 'ADMIN_MARC_CODE' );
919 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 419, 'ADMIN_MAX_FINE_RULE' );
920 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 420, 'ADMIN_MERGE_PROFILE' );
921 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 421, 'ADMIN_ORG_UNIT_SETTING_TYPE' );
922 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 422, 'ADMIN_RECURRING_FINE_RULE' );
923 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 423, 'ADMIN_SERIAL_SUBSCRIPTION' );
924 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 424, 'ADMIN_STANDING_PENALTY' );
925 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 425, 'ADMIN_SURVEY' );
926 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 426, 'ADMIN_USER_REQUEST_TYPE' );
927 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 427, 'ADMIN_USER_SETTING_GROUP' );
928 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 428, 'ADMIN_USER_SETTING_TYPE' );
929 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 429, 'ADMIN_Z3950_SOURCE' );
930 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 430, 'CREATE_BIB_BTYPE' );
931 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 431, 'CREATE_BIBLIO_FINGERPRINT' );
932 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 432, 'CREATE_BIB_SOURCE' );
933 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 433, 'CREATE_BILLING_TYPE' );
934 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 434, 'CREATE_CN_BTYPE' );
935 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 435, 'CREATE_COPY_BTYPE' );
936 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 436, 'CREATE_INVOICE' );
937 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 437, 'CREATE_INVOICE_ITEM_TYPE' );
938 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 438, 'CREATE_INVOICE_METHOD' );
939 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 439, 'CREATE_MERGE_PROFILE' );
940 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 440, 'CREATE_METABIB_CLASS' );
941 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 441, 'CREATE_METABIB_SEARCH_ALIAS' );
942 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 442, 'CREATE_USER_BTYPE' );
943 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 443, 'DELETE_BIB_BTYPE' );
944 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 444, 'DELETE_BIBLIO_FINGERPRINT' );
945 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 445, 'DELETE_BIB_SOURCE' );
946 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 446, 'DELETE_BILLING_TYPE' );
947 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 447, 'DELETE_CN_BTYPE' );
948 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 448, 'DELETE_COPY_BTYPE' );
949 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 449, 'DELETE_INVOICE_ITEM_TYPE' );
950 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 450, 'DELETE_INVOICE_METHOD' );
951 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 451, 'DELETE_MERGE_PROFILE' );
952 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 452, 'DELETE_METABIB_CLASS' );
953 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 453, 'DELETE_METABIB_SEARCH_ALIAS' );
954 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 454, 'DELETE_USER_BTYPE' );
955 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 455, 'MANAGE_CLAIM' );
956 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 456, 'UPDATE_BIB_BTYPE' );
957 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 457, 'UPDATE_BIBLIO_FINGERPRINT' );
958 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 458, 'UPDATE_BIB_SOURCE' );
959 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 459, 'UPDATE_BILLING_TYPE' );
960 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 460, 'UPDATE_CN_BTYPE' );
961 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 461, 'UPDATE_COPY_BTYPE' );
962 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 462, 'UPDATE_INVOICE_ITEM_TYPE' );
963 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 463, 'UPDATE_INVOICE_METHOD' );
964 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 464, 'UPDATE_MERGE_PROFILE' );
965 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 465, 'UPDATE_METABIB_CLASS' );
966 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 466, 'UPDATE_METABIB_SEARCH_ALIAS' );
967 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 467, 'UPDATE_USER_BTYPE' );
968 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 468, 'user_request.create' );
969 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 469, 'user_request.delete' );
970 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 470, 'user_request.update' );
971 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 471, 'user_request.view' );
972 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 472, 'VIEW_ACQ_FUND_ALLOCATION_PERCENT' );
973 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 473, 'VIEW_CIRC_MATRIX_MATCHPOINT' );
974 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 474, 'VIEW_CLAIM' );
975 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 475, 'VIEW_GROUP_PENALTY_THRESHOLD' );
976 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 476, 'VIEW_HOLD_MATRIX_MATCHPOINT' );
977 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 477, 'VIEW_INVOICE' );
978 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 478, 'VIEW_MERGE_PROFILE' );
979 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 479, 'VIEW_SERIAL_SUBSCRIPTION' );
980 INSERT INTO permission.temp_perm ( id, code ) VALUES ( 480, 'VIEW_STANDING_PENALTY' );
981
982 -- For every permission in the temp_perm table that has a matching
983 -- permission in the real table: record the original id.
984
985 UPDATE permission.temp_perm AS tp
986 SET old_id =
987         (
988                 SELECT id
989                 FROM permission.perm_list AS ppl
990                 WHERE ppl.code = tp.code
991         )
992 WHERE code IN ( SELECT code FROM permission.perm_list );
993
994 -- Start juggling ids.
995
996 -- If any permissions have negative ids (with the special exception of -1),
997 -- we need to move them into the positive range in order to avoid duplicate
998 -- key problems (since we are going to use the negative range as a temporary
999 -- staging area).
1000
1001 -- First, move any predefined permissions that have negative ids (again with
1002 -- the special exception of -1).  Temporarily give them positive ids based on
1003 -- the sequence.
1004
1005 UPDATE permission.perm_list
1006 SET id = NEXTVAL('permission.perm_list_id_seq'::regclass)
1007 WHERE id < -1
1008   AND code IN (SELECT code FROM permission.temp_perm);
1009
1010 -- Identify any non-predefined permissions whose ids are either negative
1011 -- or within the range (0-1000) reserved for predefined permissions.
1012 -- Assign them ids above 1000, based on the sequence.  Record the new
1013 -- ids in the temp_perm table.
1014
1015 INSERT INTO permission.temp_perm ( id, code, description, old_id, predefined )
1016 (
1017         SELECT NEXTVAL('permission.perm_list_id_seq'::regclass),
1018                 code, description, id, false
1019         FROM permission.perm_list
1020         WHERE  ( id < -1 OR id BETWEEN 0 AND 1000 )
1021         AND code NOT IN (SELECT code FROM permission.temp_perm)
1022 );
1023
1024 -- Now update the ids of those non-predefined permissions, using the
1025 -- values assigned in the previous step.
1026
1027 UPDATE permission.perm_list AS ppl
1028 SET id = (
1029                 SELECT id
1030                 FROM permission.temp_perm AS tp
1031                 WHERE tp.code = ppl.code
1032         )
1033 WHERE id IN ( SELECT old_id FROM permission.temp_perm WHERE NOT predefined );
1034
1035 -- Now the negative ids have been eliminated, except for -1.  Move all the
1036 -- predefined permissions temporarily into the negative range.
1037
1038 UPDATE permission.perm_list
1039 SET id = -1 - id
1040 WHERE id <> -1
1041 AND code IN ( SELECT code from permission.temp_perm WHERE predefined );
1042
1043 -- Apply the final ids to the existing predefined permissions.
1044
1045 UPDATE permission.perm_list AS ppl
1046 SET id =
1047         (
1048                 SELECT id
1049                 FROM permission.temp_perm AS tp
1050                 WHERE tp.code = ppl.code
1051         )
1052 WHERE
1053         id <> -1
1054         AND ppl.code IN
1055         (
1056                 SELECT code from permission.temp_perm
1057                 WHERE predefined
1058                 AND old_id IS NOT NULL
1059         );
1060
1061 -- If there are any predefined permissions that don't exist yet in
1062 -- permission.perm_list, insert them now.
1063
1064 INSERT INTO permission.perm_list ( id, code, description )
1065 (
1066         SELECT id, code, description
1067         FROM permission.temp_perm
1068         WHERE old_id IS NULL
1069 );
1070
1071 -- Reset the sequence to the lowest feasible value.  This may or may not
1072 -- accomplish anything, but it will do no harm.
1073
1074 SELECT SETVAL('permission.perm_list_id_seq'::TEXT, GREATEST( 
1075         (SELECT MAX(id) FROM permission.perm_list), 1000 ));
1076
1077 -- If any permission lacks a description, use the code as a description.
1078 -- It's better than nothing.
1079
1080 UPDATE permission.perm_list
1081 SET description = code
1082 WHERE description IS NULL
1083    OR description = '';
1084
1085 -- Thus endeth the Great Renumbering.
1086
1087 -- Having massaged the permissions, massage the way they are assigned, by inserting
1088 -- rows into permission.grp_perm_map.  Some of these permissions may have already
1089 -- been assigned, so we insert the rows only if they aren't already there.
1090
1091 -- for backwards compat, give everyone the permission
1092 INSERT INTO permission.grp_perm_map (grp, perm, depth, grantable)
1093     SELECT 1, id, 0, false FROM permission.perm_list AS perm
1094         WHERE code = 'HOLD_ITEM_CHECKED_OUT.override'
1095                 AND NOT EXISTS (
1096                         SELECT 1
1097                         FROM permission.grp_perm_map AS map
1098                         WHERE
1099                                 grp = 1
1100                                 AND map.perm = perm.id
1101                 );
1102
1103 -- Add trigger administration permissions to the Local System Administrator group.
1104 INSERT INTO permission.grp_perm_map (grp, perm, depth, grantable)
1105     SELECT 10, id, 1, false FROM permission.perm_list AS perm
1106     WHERE (
1107                 perm.code LIKE 'ADMIN_TRIGGER%'
1108         OR perm.code LIKE 'CREATE_TRIGGER%'
1109         OR perm.code LIKE 'DELETE_TRIGGER%'
1110         OR perm.code LIKE 'UPDATE_TRIGGER%'
1111         ) AND NOT EXISTS (
1112                 SELECT 1
1113                 FROM permission.grp_perm_map AS map
1114                 WHERE
1115                         grp = 10
1116                         AND map.perm = perm.id
1117         );
1118
1119 -- View trigger permissions are required at a consortial level for initial setup
1120 -- (as before, only if the row doesn't already exist)
1121 INSERT INTO permission.grp_perm_map (grp, perm, depth, grantable)
1122     SELECT 10, id, 0, false FROM permission.perm_list AS perm
1123         WHERE code LIKE 'VIEW_TRIGGER%'
1124                 AND NOT EXISTS (
1125                         SELECT 1
1126                         FROM permission.grp_perm_map AS map
1127                         WHERE
1128                                 grp = 10
1129                                 AND map.perm = perm.id
1130                 );
1131
1132 -- Permission for merging auth records may already be defined,
1133 -- so add it only if it isn't there.
1134 INSERT INTO permission.grp_perm_map (grp, perm, depth, grantable)
1135     SELECT 4, id, 1, false FROM permission.perm_list AS perm
1136         WHERE code = 'MERGE_AUTH_RECORDS'
1137                 AND NOT EXISTS (
1138                         SELECT 1
1139                         FROM permission.grp_perm_map AS map
1140                         WHERE
1141                                 grp = 4
1142                                 AND map.perm = perm.id
1143                 );
1144
1145 -- Create a reference table as parent to both
1146 -- config.org_unit_setting_type and config_usr_setting_type
1147
1148 CREATE TABLE config.settings_group (
1149     name    TEXT PRIMARY KEY,
1150     label   TEXT UNIQUE NOT NULL -- I18N
1151 );
1152
1153 -- org_unit setting types
1154 CREATE TABLE config.org_unit_setting_type (
1155     name            TEXT    PRIMARY KEY,
1156     label           TEXT    UNIQUE NOT NULL,
1157     grp             TEXT    REFERENCES config.settings_group (name),
1158     description     TEXT,
1159     datatype        TEXT    NOT NULL DEFAULT 'string',
1160     fm_class        TEXT,
1161     view_perm       INT,
1162     update_perm     INT,
1163     --
1164     -- define valid datatypes
1165     --
1166     CONSTRAINT coust_valid_datatype CHECK ( datatype IN
1167     ( 'bool', 'integer', 'float', 'currency', 'interval',
1168       'date', 'string', 'object', 'array', 'link' ) ),
1169     --
1170     -- fm_class is meaningful only for 'link' datatype
1171     --
1172     CONSTRAINT coust_no_empty_link CHECK
1173     ( ( datatype =  'link' AND fm_class IS NOT NULL ) OR
1174       ( datatype <> 'link' AND fm_class IS NULL ) ),
1175         CONSTRAINT view_perm_fkey FOREIGN KEY (view_perm) REFERENCES permission.perm_list (id)
1176                 ON UPDATE CASCADE
1177                 ON DELETE RESTRICT
1178                 DEFERRABLE INITIALLY DEFERRED,
1179         CONSTRAINT update_perm_fkey FOREIGN KEY (update_perm) REFERENCES permission.perm_list (id)
1180                 ON UPDATE CASCADE
1181                 DEFERRABLE INITIALLY DEFERRED
1182 );
1183
1184 CREATE TABLE config.usr_setting_type (
1185
1186     name TEXT PRIMARY KEY,
1187     opac_visible BOOL NOT NULL DEFAULT FALSE,
1188     label TEXT UNIQUE NOT NULL,
1189     description TEXT,
1190     grp             TEXT    REFERENCES config.settings_group (name),
1191     datatype TEXT NOT NULL DEFAULT 'string',
1192     fm_class TEXT,
1193
1194     --
1195     -- define valid datatypes
1196     --
1197     CONSTRAINT coust_valid_datatype CHECK ( datatype IN
1198     ( 'bool', 'integer', 'float', 'currency', 'interval',
1199         'date', 'string', 'object', 'array', 'link' ) ),
1200
1201     --
1202     -- fm_class is meaningful only for 'link' datatype
1203     --
1204     CONSTRAINT coust_no_empty_link CHECK
1205     ( ( datatype = 'link' AND fm_class IS NOT NULL ) OR
1206         ( datatype <> 'link' AND fm_class IS NULL ) )
1207
1208 );
1209
1210 --------------------------------------
1211 -- Seed data for org_unit_setting_type
1212 --------------------------------------
1213
1214 INSERT into config.org_unit_setting_type
1215 ( name, label, description, datatype ) VALUES
1216
1217 ( 'auth.opac_timeout',
1218   'OPAC Inactivity Timeout (in seconds)',
1219   null,
1220   'integer' ),
1221
1222 ( 'auth.staff_timeout',
1223   'Staff Login Inactivity Timeout (in seconds)',
1224   null,
1225   'integer' ),
1226
1227 ( 'circ.lost_materials_processing_fee',
1228   'Lost Materials Processing Fee',
1229   null,
1230   'currency' ),
1231
1232 ( 'cat.default_item_price',
1233   'Default Item Price',
1234   null,
1235   'currency' ),
1236
1237 ( 'org.bounced_emails',
1238   'Sending email address for patron notices',
1239   null,
1240   'string' ),
1241
1242 ( 'circ.hold_expire_alert_interval',
1243   'Holds: Expire Alert Interval',
1244   'Amount of time before a hold expires at which point the patron should be alerted',
1245   'interval' ),
1246
1247 ( 'circ.hold_expire_interval',
1248   'Holds: Expire Interval',
1249   'Amount of time after a hold is placed before the hold expires.  Example "100 days"',
1250   'interval' ),
1251
1252 ( 'credit.payments.allow',
1253   'Allow Credit Card Payments',
1254   'If enabled, patrons will be able to pay fines accrued at this location via credit card',
1255   'bool' ),
1256
1257 ( 'global.default_locale',
1258   'Global Default Locale',
1259   null,
1260   'string' ),
1261
1262 ( 'circ.void_overdue_on_lost',
1263   'Void overdue fines when items are marked lost',
1264   null,
1265   'bool' ),
1266
1267 ( 'circ.hold_stalling.soft',
1268   'Holds: Soft stalling interval',
1269   'How long to wait before allowing remote items to be opportunisticaly captured for a hold.  Example "5 days"',
1270   'interval' ),
1271
1272 ( 'circ.hold_stalling_hard',
1273   'Holds: Hard stalling interval',
1274   '',
1275   'interval' ),
1276
1277 ( 'circ.hold_boundary.hard',
1278   'Holds: Hard boundary',
1279   null,
1280   'integer' ),
1281
1282 ( 'circ.hold_boundary.soft',
1283   'Holds: Soft boundary',
1284   null,
1285   'integer' ),
1286
1287 ( 'opac.barcode_regex',
1288   'Patron barcode format',
1289   'Regular expression defining the patron barcode format',
1290   'string' ),
1291
1292 ( 'global.password_regex',
1293   'Password format',
1294   'Regular expression defining the password format',
1295   'string' ),
1296
1297 ( 'circ.item_checkout_history.max',
1298   'Maximum previous checkouts displayed',
1299   'This is maximum number of previous circulations the staff client will display when investigating item details',
1300   'integer' ),
1301
1302 ( 'circ.reshelving_complete.interval',
1303   'Change reshelving status interval',
1304   'Amount of time to wait before changing an item from "reshelving" status to "available".  Examples "1 day", "6 hours"',
1305   'interval' ),
1306
1307 ( 'circ.holds.default_estimated_wait_interval',
1308   'Holds: Default Estimated Wait',
1309   'When predicting the amount of time a patron will be waiting for a hold to be fulfilled, this is the default estimated length of time to assume an item will be checked out.',
1310   'interval' ),
1311
1312 ( 'circ.holds.min_estimated_wait_interval',
1313   'Holds: Minimum Estimated Wait',
1314   'When predicting the amount of time a patron will be waiting for a hold to be fulfilled, this is the minimum estimated length of time to assume an item will be checked out.',
1315   'interval' ),
1316
1317 ( 'circ.selfcheck.patron_login_timeout',
1318   'Selfcheck: Patron Login Timeout (in seconds)',
1319   'Number of seconds of inactivity before the patron is logged out of the selfcheck interfacer',
1320   'integer' ),
1321
1322 ( 'circ.selfcheck.alert.popup',
1323   'Selfcheck: Pop-up alert for errors',
1324   'If true, checkout/renewal errors will cause a pop-up window in addition to the on-screen message',
1325   'bool' ),
1326
1327 ( 'circ.selfcheck.require_patron_password',
1328   'Selfcheck: Require patron password',
1329   'If true, patrons will be required to enter their password in addition to their username/barcode to log into the selfcheck interface',
1330   'bool' ),
1331
1332 ( 'global.juvenile_age_threshold',
1333   'Juvenile Age Threshold',
1334   'The age at which a user is no long considered a juvenile.  For example, "18 years".',
1335   'interval' ),
1336
1337 ( 'cat.bib.keep_on_empty',
1338   'Retain empty bib records',
1339   'Retain a bib record even when all attached copies are deleted',
1340   'bool' ),
1341
1342 ( 'cat.bib.alert_on_empty',
1343   'Alert on empty bib records',
1344   'Alert staff when the last copy for a record is being deleted',
1345   'bool' ),
1346
1347 ( 'patron.password.use_phone',
1348   'Patron: password from phone #',
1349   'Use the last 4 digits of the patrons phone number as the default password when creating new users',
1350   'bool' ),
1351
1352 ( 'circ.charge_on_damaged',
1353   'Charge item price when marked damaged',
1354   'Charge item price when marked damaged',
1355   'bool' ),
1356
1357 ( 'circ.charge_lost_on_zero',
1358   'Charge lost on zero',
1359   '',
1360   'bool' ),
1361
1362 ( 'circ.damaged_item_processing_fee',
1363   'Charge processing fee for damaged items',
1364   'Charge processing fee for damaged items',
1365   'currency' ),
1366
1367 ( 'circ.void_lost_on_checkin',
1368   'Circ: Void lost item billing when returned',
1369   'Void lost item billing when returned',
1370   'bool' ),
1371
1372 ( 'circ.max_accept_return_of_lost',
1373   'Circ: Void lost max interval',
1374   'Items that have been lost this long will not result in voided billings when returned.  E.g. ''6 months''',
1375   'interval' ),
1376
1377 ( 'circ.void_lost_proc_fee_on_checkin',
1378   'Circ: Void processing fee on lost item return',
1379   'Void processing fee when lost item returned',
1380   'bool' ),
1381
1382 ( 'circ.restore_overdue_on_lost_return',
1383   'Circ: Restore overdues on lost item return',
1384   'Restore overdue fines on lost item return',
1385   'bool' ),
1386
1387 ( 'circ.lost_immediately_available',
1388   'Circ: Lost items usable on checkin',
1389   'Lost items are usable on checkin instead of going ''home'' first',
1390   'bool' ),
1391
1392 ( 'circ.holds_fifo',
1393   'Holds: FIFO',
1394   'Force holds to a more strict First-In, First-Out capture',
1395   'bool' ),
1396
1397 ( 'opac.allow_pending_address',
1398   'OPAC: Allow pending addresses',
1399   'If enabled, patrons can create and edit existing addresses.  Addresses are kept in a pending state until staff approves the changes',
1400   'bool' ),
1401
1402 ( 'ui.circ.show_billing_tab_on_bills',
1403   'Show billing tab first when bills are present',
1404   'If enabled and a patron has outstanding bills and the alert page is not required, show the billing tab by default, instead of the checkout tab, when a patron is loaded',
1405   'bool' ),
1406
1407 ( 'ui.general.idle_timeout',
1408     'GUI: Idle timeout',
1409     'If you want staff client windows to be minimized after a certain amount of system idle time, set this to the number of seconds of idle time that you want to allow before minimizing (requires staff client restart).',
1410     'integer' ),
1411
1412 ( 'ui.circ.in_house_use.entry_cap',
1413   'GUI: Record In-House Use: Maximum # of uses allowed per entry.',
1414   'The # of uses entry in the Record In-House Use interface may not exceed the value of this setting.',
1415   'integer' ),
1416
1417 ( 'ui.circ.in_house_use.entry_warn',
1418   'GUI: Record In-House Use: # of uses threshold for Are You Sure? dialog.',
1419   'In the Record In-House Use interface, a submission attempt will warn if the # of uses field exceeds the value of this setting.',
1420   'integer' ),
1421
1422 ( 'acq.default_circ_modifier',
1423   'Default circulation modifier',
1424   null,
1425   'string' ),
1426
1427 ( 'acq.tmp_barcode_prefix',
1428   'Temporary barcode prefix',
1429   null,
1430   'string' ),
1431
1432 ( 'acq.tmp_callnumber_prefix',
1433   'Temporary call number prefix',
1434   null,
1435   'string' ),
1436
1437 ( 'ui.circ.patron_summary.horizontal',
1438   'Patron circulation summary is horizontal',
1439   null,
1440   'bool' ),
1441
1442 ( 'ui.staff.require_initials',
1443   oils_i18n_gettext('ui.staff.require_initials', 'GUI: Require staff initials for entry/edit of item/patron/penalty notes/messages.', 'coust', 'label'),
1444   oils_i18n_gettext('ui.staff.require_initials', 'Appends staff initials and edit date into note content.', 'coust', 'description'),
1445   'bool' ),
1446
1447 ( 'ui.general.button_bar',
1448   'Button bar',
1449   null,
1450   'bool' ),
1451
1452 ( 'circ.hold_shelf_status_delay',
1453   'Hold Shelf Status Delay',
1454   'The purpose is to provide an interval of time after an item goes into the on-holds-shelf status before it appears to patrons that it is actually on the holds shelf.  This gives staff time to process the item before it shows as ready-for-pickup.',
1455   'interval' ),
1456
1457 ( 'circ.patron_invalid_address_apply_penalty',
1458   'Invalid patron address penalty',
1459   'When set, if a patron address is set to invalid, a penalty is applied.',
1460   'bool' ),
1461
1462 ( 'circ.checkout_fills_related_hold',
1463   'Checkout Fills Related Hold',
1464   'When a patron checks out an item and they have no holds that directly target the item, the system will attempt to find a hold for the patron that could be fulfilled by the checked out item and fulfills it',
1465   'bool'),
1466
1467 ( 'circ.selfcheck.auto_override_checkout_events',
1468   'Selfcheck override events list',
1469   'List of checkout/renewal events that the selfcheck interface should automatically override instead instead of alerting and stopping the transaction',
1470   'array' ),
1471
1472 ( 'circ.staff_client.do_not_auto_attempt_print',
1473   'Disable Automatic Print Attempt Type List',
1474   'Disable automatic print attempts from staff client interfaces for the receipt types in this list.  Possible values: "Checkout", "Bill Pay", "Hold Slip", "Transit Slip", and "Hold/Transit Slip".  This is different from the Auto-Print checkbox in the pertinent interfaces in that it disables automatic print attempts altogether, rather than encouraging silent printing by suppressing the print dialog.  The Auto-Print checkbox in these interfaces have no effect on the behavior for this setting.  In the case of the Hold, Transit, and Hold/Transit slips, this also suppresses the alert dialogs that precede the print dialog (the ones that offer Print and Do Not Print as options).',
1475   'array' ),
1476
1477 ( 'ui.patron.default_inet_access_level',
1478   'Default level of patrons'' internet access',
1479   null,
1480   'integer' ),
1481
1482 ( 'circ.max_patron_claim_return_count',
1483     'Max Patron Claims Returned Count',
1484     'When this count is exceeded, a staff override is required to mark the item as claims returned',
1485     'integer' ),
1486
1487 ( 'circ.obscure_dob',
1488     'Obscure the Date of Birth field',
1489     'When true, the Date of Birth column in patron lists will default to Not Visible, and in the Patron Summary sidebar the value will display as <Hidden> unless the field label is clicked.',
1490     'bool' ),
1491
1492 ( 'circ.auto_hide_patron_summary',
1493     'GUI: Toggle off the patron summary sidebar after first view.',
1494     'When true, the patron summary sidebar will collapse after a new patron sub-interface is selected.',
1495     'bool' ),
1496
1497 ( 'credit.processor.default',
1498     'Credit card processing: Name default credit processor',
1499     'This can be "AuthorizeNet", "PayPal" (for the Website Payment Pro API), or "PayflowPro".',
1500     'string' ),
1501
1502 ( 'credit.processor.authorizenet.enabled',
1503     'Credit card processing: AuthorizeNet enabled',
1504     '',
1505     'bool' ),
1506
1507 ( 'credit.processor.authorizenet.login',
1508     'Credit card processing: AuthorizeNet login',
1509     '',
1510     'string' ),
1511
1512 ( 'credit.processor.authorizenet.password',
1513     'Credit card processing: AuthorizeNet password',
1514     '',
1515     'string' ),
1516
1517 ( 'credit.processor.authorizenet.server',
1518     'Credit card processing: AuthorizeNet server',
1519     'Required if using a developer/test account with AuthorizeNet',
1520     'string' ),
1521
1522 ( 'credit.processor.authorizenet.testmode',
1523     'Credit card processing: AuthorizeNet test mode',
1524     '',
1525     'bool' ),
1526
1527 ( 'credit.processor.paypal.enabled',
1528     'Credit card processing: PayPal enabled',
1529     '',
1530     'bool' ),
1531 ( 'credit.processor.paypal.login',
1532     'Credit card processing: PayPal login',
1533     '',
1534     'string' ),
1535 ( 'credit.processor.paypal.password',
1536     'Credit card processing: PayPal password',
1537     '',
1538     'string' ),
1539 ( 'credit.processor.paypal.signature',
1540     'Credit card processing: PayPal signature',
1541     '',
1542     'string' ),
1543 ( 'credit.processor.paypal.testmode',
1544     'Credit card processing: PayPal test mode',
1545     '',
1546     'bool' ),
1547
1548 ( 'ui.admin.work_log.max_entries',
1549     oils_i18n_gettext('ui.admin.work_log.max_entries', 'GUI: Work Log: Maximum Actions Logged', 'coust', 'label'),
1550     oils_i18n_gettext('ui.admin.work_log.max_entries', 'Maximum entries for "Most Recent Staff Actions" section of the Work Log interface.', 'coust', 'description'),
1551   'interval' ),
1552
1553 ( 'ui.admin.patron_log.max_entries',
1554     oils_i18n_gettext('ui.admin.patron_log.max_entries', 'GUI: Work Log: Maximum Patrons Logged', 'coust', 'label'),
1555     oils_i18n_gettext('ui.admin.patron_log.max_entries', 'Maximum entries for "Most Recently Affected Patrons..." section of the Work Log interface.', 'coust', 'description'),
1556   'interval' ),
1557
1558 ( 'lib.courier_code',
1559     oils_i18n_gettext('lib.courier_code', 'Courier Code', 'coust', 'label'),
1560     oils_i18n_gettext('lib.courier_code', 'Courier Code for the library.  Available in transit slip templates as the %courier_code% macro.', 'coust', 'description'),
1561     'string'),
1562
1563 ( 'circ.block_renews_for_holds',
1564     oils_i18n_gettext('circ.block_renews_for_holds', 'Holds: Block Renewal of Items Needed for Holds', 'coust', 'label'),
1565     oils_i18n_gettext('circ.block_renews_for_holds', 'When an item could fulfill a hold, do not allow the current patron to renew', 'coust', 'description'),
1566     'bool' ),
1567
1568 ( 'circ.password_reset_request_per_user_limit',
1569     oils_i18n_gettext('circ.password_reset_request_per_user_limit', 'Circulation: Maximum concurrently active self-serve password reset requests per user', 'coust', 'label'),
1570     oils_i18n_gettext('circ.password_reset_request_per_user_limit', 'When a user has more than this number of concurrently active self-serve password reset requests for their account, prevent the user from creating any new self-serve password reset requests until the number of active requests for the user drops back below this number.', 'coust', 'description'),
1571     'string'),
1572
1573 ( 'circ.password_reset_request_time_to_live',
1574     oils_i18n_gettext('circ.password_reset_request_time_to_live', 'Circulation: Self-serve password reset request time-to-live', 'coust', 'label'),
1575     oils_i18n_gettext('circ.password_reset_request_time_to_live', 'Length of time (in seconds) a self-serve password reset request should remain active.', 'coust', 'description'),
1576     'string'),
1577
1578 ( 'circ.password_reset_request_throttle',
1579     oils_i18n_gettext('circ.password_reset_request_throttle', 'Circulation: Maximum concurrently active self-serve password reset requests', 'coust', 'label'),
1580     oils_i18n_gettext('circ.password_reset_request_throttle', 'Prevent the creation of new self-serve password reset requests until the number of active requests drops back below this number.', 'coust', 'description'),
1581     'string')
1582 ;
1583
1584 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1585         'ui.circ.suppress_checkin_popups',
1586         oils_i18n_gettext(
1587             'ui.circ.suppress_checkin_popups', 
1588             'Circ: Suppress popup-dialogs during check-in.', 
1589             'coust', 
1590             'label'),
1591         oils_i18n_gettext(
1592             'ui.circ.suppress_checkin_popups', 
1593             'Circ: Suppress popup-dialogs during check-in.', 
1594             'coust', 
1595             'description'),
1596         'bool'
1597 );
1598
1599 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1600         'format.date',
1601         oils_i18n_gettext(
1602             'format.date',
1603             'GUI: Format Dates with this pattern.', 
1604             'coust', 
1605             'label'),
1606         oils_i18n_gettext(
1607             'format.date',
1608             'GUI: Format Dates with this pattern (examples: "yyyy-MM-dd" for "2010-04-26", "MMM d, yyyy" for "Apr 26, 2010")', 
1609             'coust', 
1610             'description'),
1611         'string'
1612 ), (
1613         'format.time',
1614         oils_i18n_gettext(
1615             'format.time',
1616             'GUI: Format Times with this pattern.', 
1617             'coust', 
1618             'label'),
1619         oils_i18n_gettext(
1620             'format.time',
1621             'GUI: Format Times with this pattern (examples: "h:m:s.SSS a z" for "2:07:20.666 PM Eastern Daylight Time", "HH:mm" for "14:07")', 
1622             'coust', 
1623             'description'),
1624         'string'
1625 );
1626
1627 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1628         'cat.bib.delete_on_no_copy_via_acq_lineitem_cancel',
1629         oils_i18n_gettext(
1630             'cat.bib.delete_on_no_copy_via_acq_lineitem_cancel',
1631             'CAT: Delete bib if all copies are deleted via Acquisitions lineitem cancellation.', 
1632             'coust', 
1633             'label'),
1634         oils_i18n_gettext(
1635             'cat.bib.delete_on_no_copy_via_acq_lineitem_cancel',
1636             'CAT: Delete bib if all copies are deleted via Acquisitions lineitem cancellation.', 
1637             'coust', 
1638             'description'),
1639         'bool'
1640 );
1641
1642 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1643         'url.remote_column_settings',
1644         oils_i18n_gettext(
1645             'url.remote_column_settings',
1646             'GUI: URL for remote directory containing list column settings.', 
1647             'coust', 
1648             'label'),
1649         oils_i18n_gettext(
1650             'url.remote_column_settings',
1651             'GUI: URL for remote directory containing list column settings.  The format and naming convention for the files found in this directory match those in the local settings directory for a given workstation.  An administrator could create the desired settings locally and then copy all the tree_columns_for_* files to the remote directory.', 
1652             'coust', 
1653             'description'),
1654         'string'
1655 );
1656
1657 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1658         'gui.disable_local_save_columns',
1659         oils_i18n_gettext(
1660             'gui.disable_local_save_columns',
1661             'GUI: Disable the ability to save list column configurations locally.', 
1662             'coust', 
1663             'label'),
1664         oils_i18n_gettext(
1665             'gui.disable_local_save_columns',
1666             'GUI: Disable the ability to save list column configurations locally.  If set, columns may still be manipulated, however, the changes do not persist.  Also, existing local configurations are ignored if this setting is true.', 
1667             'coust', 
1668             'description'),
1669         'bool'
1670 );
1671
1672 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1673         'circ.password_reset_request_requires_matching_email',
1674         oils_i18n_gettext(
1675             'circ.password_reset_request_requires_matching_email',
1676             'Circulation: Require matching email address for password reset requests', 
1677             'coust', 
1678             'label'),
1679         oils_i18n_gettext(
1680             'circ.password_reset_request_requires_matching_email',
1681             'Circulation: Require matching email address for password reset requests', 
1682             'coust', 
1683             'description'),
1684         'bool'
1685 );
1686
1687 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1688         'circ.holds.expired_patron_block',
1689         oils_i18n_gettext(
1690             'circ.holds.expired_patron_block',
1691             'Circulation: Block hold request if hold recipient privileges have expired', 
1692             'coust', 
1693             'label'),
1694         oils_i18n_gettext(
1695             'circ.holds.expired_patron_block',
1696             'Circulation: Block hold request if hold recipient privileges have expired', 
1697             'coust', 
1698             'description'),
1699         'bool'
1700 );
1701
1702 INSERT INTO config.org_unit_setting_type
1703     (name, label, description, datatype) VALUES (
1704         'circ.booking_reservation.default_elbow_room',
1705         oils_i18n_gettext(
1706             'circ.booking_reservation.default_elbow_room',
1707             'Booking: Elbow room',
1708             'coust',
1709             'label'
1710         ),
1711         oils_i18n_gettext(
1712             'circ.booking_reservation.default_elbow_room',
1713             'Elbow room specifies how far in the future you must make a reservation on an item if that item will have to transit to reach its pickup location.  It secondarily defines how soon a reservation on a given item must start before the check-in process will opportunistically capture it for the reservation shelf.',
1714             'coust',
1715             'label'
1716         ),
1717         'interval'
1718     );
1719
1720 -- Org_unit_setting_type(s) that need an fm_class:
1721 INSERT into config.org_unit_setting_type
1722 ( name, label, description, datatype, fm_class ) VALUES
1723 ( 'acq.default_copy_location',
1724   'Default copy location',
1725   null,
1726   'link',
1727   'acpl' );
1728
1729 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1730     'circ.holds.org_unit_target_weight',
1731     'Holds: Org Unit Target Weight',
1732     'Org Units can be organized into hold target groups based on a weight.  Potential copies from org units with the same weight are chosen at random.',
1733     'integer'
1734 );
1735
1736 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1737     'circ.holds.target_holds_by_org_unit_weight',
1738     'Holds: Use weight-based hold targeting',
1739     'Use library weight based hold targeting',
1740     'bool'
1741 );
1742
1743 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1744     'circ.holds.max_org_unit_target_loops',
1745     'Holds: Maximum library target attempts',
1746     'When this value is set and greater than 0, the system will only attempt to find a copy at each possible branch the configured number of times',
1747     'integer'
1748 );
1749
1750
1751 -- Org setting for overriding the circ lib of a precat copy
1752 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1753     'circ.pre_cat_copy_circ_lib',
1754     'Pre-cat Item Circ Lib',
1755     'Override the default circ lib of "here" with a pre-configured circ lib for pre-cat items.  The value should be the "shortname" (aka policy name) of the org unit',
1756     'string'
1757 );
1758
1759 -- Circ auto-renew interval setting
1760 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1761     'circ.checkout_auto_renew_age',
1762     'Checkout auto renew age',
1763     'When an item has been checked out for at least this amount of time, an attempt to check out the item to the patron that it is already checked out to will simply renew the circulation',
1764     'interval'
1765 );
1766
1767 -- Setting for behind the desk hold pickups
1768 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1769     'circ.holds.behind_desk_pickup_supported',
1770     'Holds: Behind Desk Pickup Supported',
1771     'If a branch supports both a public holds shelf and behind-the-desk pickups, set this value to true.  This gives the patron the option to enable behind-the-desk pickups for their holds',
1772     'bool'
1773 );
1774
1775 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1776         'acq.holds.allow_holds_from_purchase_request',
1777         oils_i18n_gettext(
1778             'acq.holds.allow_holds_from_purchase_request', 
1779             'Allows patrons to create automatic holds from purchase requests.', 
1780             'coust', 
1781             'label'),
1782         oils_i18n_gettext(
1783             'acq.holds.allow_holds_from_purchase_request', 
1784             'Allows patrons to create automatic holds from purchase requests.', 
1785             'coust', 
1786             'description'),
1787         'bool'
1788 );
1789
1790 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
1791     'circ.holds.target_skip_me',
1792     'Skip For Hold Targeting',
1793     'When true, don''t target any copies at this org unit for holds',
1794     'bool'
1795 );
1796
1797 -- claims returned mark item missing 
1798 INSERT INTO
1799     config.org_unit_setting_type ( name, label, description, datatype )
1800     VALUES (
1801         'circ.claim_return.mark_missing',
1802         'Claim Return: Mark copy as missing', 
1803         'When a circ is marked as claims-returned, also mark the copy as missing',
1804         'bool'
1805     );
1806
1807 -- claims never checked out mark item missing 
1808 INSERT INTO
1809     config.org_unit_setting_type ( name, label, description, datatype )
1810     VALUES (
1811         'circ.claim_never_checked_out.mark_missing',
1812         'Claim Never Checked Out: Mark copy as missing', 
1813         'When a circ is marked as claims-never-checked-out, mark the copy as missing',
1814         'bool'
1815     );
1816
1817 -- mark damaged void overdue setting
1818 INSERT INTO
1819     config.org_unit_setting_type ( name, label, description, datatype )
1820     VALUES (
1821         'circ.damaged.void_ovedue',
1822         'Mark item damaged voids overdues',
1823         'When an item is marked damaged, overdue fines on the most recent circulation are voided.',
1824         'bool'
1825     );
1826
1827 -- hold cancel display limits
1828 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1829     VALUES (
1830         'circ.holds.canceled.display_count',
1831         'Holds: Canceled holds display count',
1832         'How many canceled holds to show in patron holds interfaces',
1833         'integer'
1834     );
1835
1836 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1837     VALUES (
1838         'circ.holds.canceled.display_age',
1839         'Holds: Canceled holds display age',
1840         'Show all canceled holds that were canceled within this amount of time',
1841         'interval'
1842     );
1843
1844 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1845     VALUES (
1846         'circ.holds.uncancel.reset_request_time',
1847         'Holds: Reset request time on un-cancel',
1848         'When a holds is uncanceled, reset the request time to push it to the end of the queue',
1849         'bool'
1850     );
1851
1852 INSERT INTO config.org_unit_setting_type (name, label, description, datatype)
1853     VALUES (
1854         'circ.holds.default_shelf_expire_interval',
1855         'Default hold shelf expire interval',
1856         '',
1857         'interval'
1858 );
1859
1860 INSERT INTO config.org_unit_setting_type (name, label, description, datatype, fm_class)
1861     VALUES (
1862         'circ.claim_return.copy_status', 
1863         'Claim Return Copy Status', 
1864         'Claims returned copies are put into this status.  Default is to leave the copy in the Checked Out status',
1865         'link', 
1866         'ccs' 
1867     );
1868
1869 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) 
1870     VALUES ( 
1871         'circ.max_fine.cap_at_price',
1872         oils_i18n_gettext('circ.max_fine.cap_at_price', 'Circ: Cap Max Fine at Item Price', 'coust', 'label'),
1873         oils_i18n_gettext('circ.max_fine.cap_at_price', 'This prevents the system from charging more than the item price in overdue fines', 'coust', 'description'),
1874         'bool' 
1875     );
1876
1877 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype, fm_class ) 
1878     VALUES ( 
1879         'circ.holds.clear_shelf.copy_status',
1880         oils_i18n_gettext('circ.holds.clear_shelf.copy_status', 'Holds: Clear shelf copy status', 'coust', 'label'),
1881         oils_i18n_gettext('circ.holds.clear_shelf.copy_status', 'Any copies that have not been put into reshelving, in-transit, or on-holds-shelf (for a new hold) during the clear shelf process will be put into this status.  This is basically a purgatory status for copies waiting to be pulled from the shelf and processed by hand', 'coust', 'description'),
1882         'link',
1883         'ccs'
1884     );
1885
1886 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1887     VALUES ( 
1888         'circ.selfcheck.workstation_required',
1889         oils_i18n_gettext('circ.selfcheck.workstation_required', 'Selfcheck: Workstation Required', 'coust', 'label'),
1890         oils_i18n_gettext('circ.selfcheck.workstation_required', 'All selfcheck stations must use a workstation', 'coust', 'description'),
1891         'bool'
1892     ), (
1893         'circ.selfcheck.patron_password_required',
1894         oils_i18n_gettext('circ.selfcheck.patron_password_required', 'Selfcheck: Require Patron Password', 'coust', 'label'),
1895         oils_i18n_gettext('circ.selfcheck.patron_password_required', 'Patron must log in with barcode and password at selfcheck station', 'coust', 'description'),
1896         'bool'
1897     );
1898
1899 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1900     VALUES ( 
1901         'circ.selfcheck.alert.sound',
1902         oils_i18n_gettext('circ.selfcheck.alert.sound', 'Selfcheck: Audio Alerts', 'coust', 'label'),
1903         oils_i18n_gettext('circ.selfcheck.alert.sound', 'Use audio alerts for selfcheck events', 'coust', 'description'),
1904         'bool'
1905     );
1906
1907 INSERT INTO
1908     config.org_unit_setting_type (name, label, description, datatype)
1909     VALUES (
1910         'notice.telephony.callfile_lines',
1911         'Telephony: Arbitrary line(s) to include in each notice callfile',
1912         $$
1913         This overrides lines from opensrf.xml.
1914         Line(s) must be valid for your target server and platform
1915         (e.g. Asterisk 1.4).
1916         $$,
1917         'string'
1918     );
1919
1920 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1921     VALUES ( 
1922         'circ.offline.username_allowed',
1923         oils_i18n_gettext('circ.offline.username_allowed', 'Offline: Patron Usernames Allowed', 'coust', 'label'),
1924         oils_i18n_gettext('circ.offline.username_allowed', 'During offline circulations, allow patrons to identify themselves with usernames in addition to barcode.  For this setting to work, a barcode format must also be defined', 'coust', 'description'),
1925         'bool'
1926     );
1927
1928 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1929 VALUES (
1930     'acq.fund.balance_limit.warn',
1931     oils_i18n_gettext('acq.fund.balance_limit.warn', 'Fund Spending Limit for Warning', 'coust', 'label'),
1932     oils_i18n_gettext('acq.fund.balance_limit.warn', 'When the amount remaining in the fund, including spent money and encumbrances, goes below this percentage, attempts to spend from the fund will result in a warning to the staff.', 'coust', 'descripton'),
1933     'integer'
1934 );
1935
1936 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1937 VALUES (
1938     'acq.fund.balance_limit.block',
1939     oils_i18n_gettext('acq.fund.balance_limit.block', 'Fund Spending Limit for Block', 'coust', 'label'),
1940     oils_i18n_gettext('acq.fund.balance_limit.block', 'When the amount remaining in the fund, including spent money and encumbrances, goes below this percentage, attempts to spend from the fund will be blocked.', 'coust', 'description'),
1941     'integer'
1942 );
1943
1944 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1945     VALUES (
1946         'circ.holds.hold_has_copy_at.alert',
1947         oils_i18n_gettext('circ.holds.hold_has_copy_at.alert', 'Holds: Has Local Copy Alert', 'coust', 'label'),
1948         oils_i18n_gettext('circ.holds.hold_has_copy_at.alert', 'If there is an available copy at the requesting library that could fulfill a hold during hold placement time, alert the patron', 'coust', 'description'),
1949         'bool'
1950     ),(
1951         'circ.holds.hold_has_copy_at.block',
1952         oils_i18n_gettext('circ.holds.hold_has_copy_at.block', 'Holds: Has Local Copy Block', 'coust', 'label'),
1953         oils_i18n_gettext('circ.holds.hold_has_copy_at.block', 'If there is an available copy at the requesting library that could fulfill a hold during hold placement time, do not allow the hold to be placed', 'coust', 'description'),
1954         'bool'
1955     );
1956
1957 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
1958 VALUES (
1959     'auth.persistent_login_interval',
1960     oils_i18n_gettext('auth.persistent_login_interval', 'Persistent Login Duration', 'coust', 'label'),
1961     oils_i18n_gettext('auth.persistent_login_interval', 'How long a persistent login lasts.  E.g. ''2 weeks''', 'coust', 'description'),
1962     'interval'
1963 );
1964
1965 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
1966         'cat.marc_control_number_identifier',
1967         oils_i18n_gettext(
1968             'cat.marc_control_number_identifier', 
1969             'Cat: Defines the control number identifier used in 003 and 035 fields.', 
1970             'coust', 
1971             'label'),
1972         oils_i18n_gettext(
1973             'cat.marc_control_number_identifier', 
1974             'Cat: Defines the control number identifier used in 003 and 035 fields.', 
1975             'coust', 
1976             'description'),
1977         'string'
1978 );
1979
1980 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) 
1981     VALUES (
1982         'circ.selfcheck.block_checkout_on_copy_status',
1983         oils_i18n_gettext(
1984             'circ.selfcheck.block_checkout_on_copy_status',
1985             'Selfcheck: Block copy checkout status',
1986             'coust',
1987             'label'
1988         ),
1989         oils_i18n_gettext(
1990             'circ.selfcheck.block_checkout_on_copy_status',
1991             'List of copy status IDs that will block checkout even if the generic COPY_NOT_AVAILABLE event is overridden',
1992             'coust',
1993             'description'
1994         ),
1995         'array'
1996     );
1997
1998 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype, fm_class )
1999 VALUES (
2000     'serial.prev_issuance_copy_location',
2001     oils_i18n_gettext(
2002         'serial.prev_issuance_copy_location',
2003         'Serials: Previous Issuance Copy Location',
2004         'coust',
2005         'label'
2006     ),
2007     oils_i18n_gettext(
2008         'serial.prev_issuance_copy_location',
2009         'When a serial issuance is received, copies (units) of the previous issuance will be automatically moved into the configured shelving location',
2010         'coust',
2011         'descripton'
2012         ),
2013     'link',
2014     'acpl'
2015 );
2016
2017 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype, fm_class )
2018 VALUES (
2019     'cat.default_classification_scheme',
2020     oils_i18n_gettext(
2021         'cat.default_classification_scheme',
2022         'Cataloging: Default Classification Scheme',
2023         'coust',
2024         'label'
2025     ),
2026     oils_i18n_gettext(
2027         'cat.default_classification_scheme',
2028         'Defines the default classification scheme for new call numbers: 1 = Generic; 2 = Dewey; 3 = LC',
2029         'coust',
2030         'descripton'
2031         ),
2032     'link',
2033     'acnc'
2034 );
2035
2036 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
2037         'opac.org_unit_hiding.depth',
2038         oils_i18n_gettext(
2039             'opac.org_unit_hiding.depth',
2040             'OPAC: Org Unit Hiding Depth', 
2041             'coust', 
2042             'label'),
2043         oils_i18n_gettext(
2044             'opac.org_unit_hiding.depth',
2045             'This will hide certain org units in the public OPAC if the Original Location (url param "ol") for the OPAC inherits this setting.  This setting specifies an org unit depth, that together with the OPAC Original Location determines which section of the Org Hierarchy should be visible in the OPAC.  For example, a stock Evergreen installation will have a 3-tier hierarchy (Consortium/System/Branch), where System has a depth of 1 and Branch has a depth of 2.  If this setting contains a depth of 1 in such an installation, then every library in the System in which the Original Location belongs will be visible, and everything else will be hidden.  A depth of 0 will effectively make every org visible.  The embedded OPAC in the staff client ignores this setting.', 
2046             'coust', 
2047             'description'),
2048         'integer'
2049 );
2050
2051 INSERT INTO config.org_unit_setting_type (name, label, description, datatype)
2052     VALUES 
2053         ('circ.holds.alert_if_local_avail',
2054          'Holds: Local available alert',
2055          'If local copy is available, alert the person making the hold',
2056          'bool'),
2057
2058         ('circ.holds.deny_if_local_avail',
2059          'Holds: Local available block',
2060          'If local copy is available, deny the creation of the hold',
2061          'bool')
2062     ;
2063
2064 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype )
2065     VALUES ( 
2066         'circ.holds.clear_shelf.no_capture_holds',
2067         oils_i18n_gettext('circ.holds.clear_shelf.no_capture_holds', 'Holds: Bypass hold capture during clear shelf process', 'coust', 'label'),
2068         oils_i18n_gettext('circ.holds.clear_shelf.no_capture_holds', 'During the clear shelf process, avoid capturing new holds on cleared items.', 'coust', 'description'),
2069         'bool'
2070     );
2071
2072 INSERT INTO config.org_unit_setting_type (name, label, description, datatype) VALUES (
2073     'circ.booking_reservation.stop_circ',
2074     'Disallow circulation of items when they are on booking reserve and that reserve overlaps with the checkout period',
2075     'When true, items on booking reserve during the proposed checkout period will not be allowed to circulate unless overridden with the COPY_RESERVED.override permission.',
2076     'bool'
2077 );
2078
2079 ---------------------------------
2080 -- Seed data for usr_setting_type
2081 ----------------------------------
2082
2083 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2084     VALUES ('opac.default_font', TRUE, 'OPAC Font Size', 'OPAC Font Size', 'string');
2085
2086 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2087     VALUES ('opac.default_search_depth', TRUE, 'OPAC Search Depth', 'OPAC Search Depth', 'integer');
2088
2089 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2090     VALUES ('opac.default_search_location', TRUE, 'OPAC Search Location', 'OPAC Search Location', 'integer');
2091
2092 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2093     VALUES ('opac.hits_per_page', TRUE, 'Hits per Page', 'Hits per Page', 'string');
2094
2095 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2096     VALUES ('opac.hold_notify', TRUE, 'Hold Notification Format', 'Hold Notification Format', 'string');
2097
2098 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2099     VALUES ('staff_client.catalog.record_view.default', TRUE, 'Default Record View', 'Default Record View', 'string');
2100
2101 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2102     VALUES ('staff_client.copy_editor.templates', TRUE, 'Copy Editor Template', 'Copy Editor Template', 'object');
2103
2104 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2105     VALUES ('circ.holds_behind_desk', FALSE, 'Hold is behind Circ Desk', 'Hold is behind Circ Desk', 'bool');
2106
2107 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2108     VALUES (
2109         'history.circ.retention_age',
2110         TRUE,
2111         oils_i18n_gettext('history.circ.retention_age','Historical Circulation Retention Age','cust','label'),
2112         oils_i18n_gettext('history.circ.retention_age','Historical Circulation Retention Age','cust','description'),
2113         'interval'
2114     ),(
2115         'history.circ.retention_start',
2116         FALSE,
2117         oils_i18n_gettext('history.circ.retention_start','Historical Circulation Retention Start Date','cust','label'),
2118         oils_i18n_gettext('history.circ.retention_start','Historical Circulation Retention Start Date','cust','description'),
2119         'date'
2120     );
2121
2122 INSERT INTO config.usr_setting_type (name,opac_visible,label,description,datatype)
2123     VALUES (
2124         'history.hold.retention_age',
2125         TRUE,
2126         oils_i18n_gettext('history.hold.retention_age','Historical Hold Retention Age','cust','label'),
2127         oils_i18n_gettext('history.hold.retention_age','Historical Hold Retention Age','cust','description'),
2128         'interval'
2129     ),(
2130         'history.hold.retention_start',
2131         TRUE,
2132         oils_i18n_gettext('history.hold.retention_start','Historical Hold Retention Start Date','cust','label'),
2133         oils_i18n_gettext('history.hold.retention_start','Historical Hold Retention Start Date','cust','description'),
2134         'interval'
2135     ),(
2136         'history.hold.retention_count',
2137         TRUE,
2138         oils_i18n_gettext('history.hold.retention_count','Historical Hold Retention Count','cust','label'),
2139         oils_i18n_gettext('history.hold.retention_count','Historical Hold Retention Count','cust','description'),
2140         'integer'
2141     );
2142
2143 INSERT INTO config.usr_setting_type (name, opac_visible, label, description, datatype)
2144     VALUES (
2145         'opac.default_sort',
2146         TRUE,
2147         oils_i18n_gettext(
2148             'opac.default_sort',
2149             'OPAC Default Search Sort',
2150             'cust',
2151             'label'
2152         ),
2153         oils_i18n_gettext(
2154             'opac.default_sort',
2155             'OPAC Default Search Sort',
2156             'cust',
2157             'description'
2158         ),
2159         'string'
2160     );
2161
2162 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype, fm_class ) VALUES (
2163         'circ.missing_pieces.copy_status',
2164         oils_i18n_gettext(
2165             'circ.missing_pieces.copy_status',
2166             'Circulation: Item Status for Missing Pieces',
2167             'coust',
2168             'label'),
2169         oils_i18n_gettext(
2170             'circ.missing_pieces.copy_status',
2171             'This is the Item Status to use for items that have been marked or scanned as having Missing Pieces.  In absense of this setting, the Damaged status is used.',
2172             'coust',
2173             'description'),
2174         'link',
2175         'ccs'
2176 );
2177
2178 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
2179         'circ.do_not_tally_claims_returned',
2180         oils_i18n_gettext(
2181             'circ.do_not_tally_claims_returned',
2182             'Circulation: Do not include outstanding Claims Returned circulations in lump sum tallies in Patron Display.',
2183             'coust',
2184             'label'),
2185         oils_i18n_gettext(
2186             'circ.do_not_tally_claims_returned',
2187             'In the Patron Display interface, the number of total active circulations for a given patron is presented in the Summary sidebar and underneath the Items Out navigation button.  This setting will prevent Claims Returned circulations from counting toward these tallies.',
2188             'coust',
2189             'description'),
2190         'bool'
2191 );
2192
2193 INSERT INTO config.org_unit_setting_type (name, label, description, datatype)
2194     VALUES
2195         ('cat.label.font.size',
2196             oils_i18n_gettext('cat.label.font.size',
2197                 'Cataloging: Spine and pocket label font size', 'coust', 'label'),
2198             oils_i18n_gettext('cat.label.font.size',
2199                 'Set the default font size for spine and pocket labels', 'coust', 'description'),
2200             'integer'
2201         )
2202         ,('cat.label.font.family',
2203             oils_i18n_gettext('cat.label.font.family',
2204                 'Cataloging: Spine and pocket label font family', 'coust', 'label'),
2205             oils_i18n_gettext('cat.label.font.family',
2206                 'Set the preferred font family for spine and pocket labels. You can specify a list of fonts, separated by commas, in order of preference; the system will use the first font it finds with a matching name. For example, "Arial, Helvetica, serif".',
2207                 'coust', 'description'),
2208             'string'
2209         )
2210         ,('cat.spine.line.width',
2211             oils_i18n_gettext('cat.spine.line.width',
2212                 'Cataloging: Spine label line width', 'coust', 'label'),
2213             oils_i18n_gettext('cat.spine.line.width',
2214                 'Set the default line width for spine labels in number of characters. This specifies the boundary at which lines must be wrapped.',
2215                 'coust', 'description'),
2216             'integer'
2217         )
2218         ,('cat.spine.line.height',
2219             oils_i18n_gettext('cat.spine.line.height',
2220                 'Cataloging: Spine label maximum lines', 'coust', 'label'),
2221             oils_i18n_gettext('cat.spine.line.height',
2222                 'Set the default maximum number of lines for spine labels.',
2223                 'coust', 'description'),
2224             'integer'
2225         )
2226         ,('cat.spine.line.margin',
2227             oils_i18n_gettext('cat.spine.line.margin',
2228                 'Cataloging: Spine label left margin', 'coust', 'label'),
2229             oils_i18n_gettext('cat.spine.line.margin',
2230                 'Set the left margin for spine labels in number of characters.',
2231                 'coust', 'description'),
2232             'integer'
2233         )
2234 ;
2235
2236 INSERT INTO config.org_unit_setting_type (name, label, description, datatype)
2237     VALUES
2238         ('cat.label.font.weight',
2239             oils_i18n_gettext('cat.label.font.weight',
2240                 'Cataloging: Spine and pocket label font weight', 'coust', 'label'),
2241             oils_i18n_gettext('cat.label.font.weight',
2242                 'Set the preferred font weight for spine and pocket labels. You can specify "normal", "bold", "bolder", or "lighter".',
2243                 'coust', 'description'),
2244             'string'
2245         )
2246 ;
2247
2248 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
2249         'circ.patron_edit.clone.copy_address',
2250         oils_i18n_gettext(
2251             'circ.patron_edit.clone.copy_address',
2252             'Patron Registration: Cloned patrons get address copy',
2253             'coust',
2254             'label'
2255         ),
2256         oils_i18n_gettext(
2257             'circ.patron_edit.clone.copy_address',
2258             'In the Patron editor, copy addresses from the cloned user instead of linking directly to the address',
2259             'coust',
2260             'description'
2261         ),
2262         'bool'
2263 );
2264
2265 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype, fm_class ) VALUES (
2266         'ui.patron.default_ident_type',
2267         oils_i18n_gettext(
2268             'ui.patron.default_ident_type',
2269             'GUI: Default Ident Type for Patron Registration',
2270             'coust',
2271             'label'),
2272         oils_i18n_gettext(
2273             'ui.patron.default_ident_type',
2274             'This is the default Ident Type for new users in the patron editor.',
2275             'coust',
2276             'description'),
2277         'link',
2278         'cit'
2279 );
2280
2281 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
2282         'ui.patron.default_country',
2283         oils_i18n_gettext(
2284             'ui.patron.default_country',
2285             'GUI: Default Country for New Addresses in Patron Editor',
2286             'coust',
2287             'label'),
2288         oils_i18n_gettext(
2289             'ui.patron.default_country',
2290             'This is the default Country for new addresses in the patron editor.',
2291             'coust',
2292             'description'),
2293         'string'
2294 );
2295
2296 INSERT INTO config.org_unit_setting_type ( name, label, description, datatype ) VALUES (
2297         'ui.patron.registration.require_address',
2298         oils_i18n_gettext(
2299             'ui.patron.registration.require_address',
2300             'GUI: Require at least one address for Patron Registration',
2301             'coust',
2302             'label'),
2303         oils_i18n_gettext(
2304             'ui.patron.registration.require_address',
2305             'Enforces a requirement for having at least one address for a patron during registration.',
2306             'coust',
2307             'description'),
2308         'bool'
2309 );
2310
2311 INSERT INTO config.org_unit_setting_type (
2312     name, label, description, datatype
2313 ) VALUES
2314     ('credit.processor.payflowpro.enabled',
2315         'Credit card processing: Enable PayflowPro payments',
2316         'This is NOT the same thing as the settings labeled with just "PayPal."',
2317         'bool'
2318     ),
2319     ('credit.processor.payflowpro.login',
2320         'Credit card processing: PayflowPro login/merchant ID',
2321         'Often the same thing as the PayPal manager login',
2322         'string'
2323     ),
2324     ('credit.processor.payflowpro.password',
2325         'Credit card processing: PayflowPro password',
2326         'PayflowPro password',
2327         'string'
2328     ),
2329     ('credit.processor.payflowpro.testmode',
2330         'Credit card processing: PayflowPro test mode',
2331         'Do not really process transactions, but stay in test mode - uses pilot-payflowpro.paypal.com instead of the usual host',
2332         'bool'
2333     ),
2334     ('credit.processor.payflowpro.vendor',
2335         'Credit card processing: PayflowPro vendor',
2336         'Often the same thing as the login',
2337         'string'
2338     ),
2339     ('credit.processor.payflowpro.partner',
2340         'Credit card processing: PayflowPro partner',
2341         'Often "PayPal" or "VeriSign", sometimes others',
2342         'string'
2343     );
2344
2345 -- Patch the name of an old selfcheck setting
2346 UPDATE actor.org_unit_setting
2347     SET name = 'circ.selfcheck.alert.popup'
2348     WHERE name = 'circ.selfcheck.alert_on_checkout_event';
2349
2350 -- Rename certain existing org_unit settings, if present,
2351 -- and make sure their values are JSON
2352 UPDATE actor.org_unit_setting SET
2353     name = 'circ.holds.default_estimated_wait_interval',
2354     --
2355     -- The value column should be JSON.  The old value should be a number,
2356     -- but it may or may not be quoted.  The following CASE behaves
2357     -- differently depending on whether value is quoted.  It is simplistic,
2358     -- and will be defeated by leading or trailing white space, or various
2359     -- malformations.
2360     --
2361     value = CASE WHEN SUBSTR( value, 1, 1 ) = '"'
2362                 THEN '"' || SUBSTR( value, 2, LENGTH(value) - 2 ) || ' days"'
2363                 ELSE '"' || value || ' days"'
2364             END
2365 WHERE name = 'circ.hold_estimate_wait_interval';
2366
2367 -- Create types for existing org unit settings
2368 -- not otherwise accounted for
2369
2370 INSERT INTO config.org_unit_setting_type(
2371  name,
2372  label,
2373  description
2374 )
2375 SELECT DISTINCT
2376         name,
2377         name,
2378         'FIXME'
2379 FROM
2380         actor.org_unit_setting
2381 WHERE
2382         name NOT IN (
2383                 SELECT name
2384                 FROM config.org_unit_setting_type
2385         );
2386
2387 -- Add foreign key to org_unit_setting
2388
2389 ALTER TABLE actor.org_unit_setting
2390         ADD FOREIGN KEY (name) REFERENCES config.org_unit_setting_type (name)
2391                 DEFERRABLE INITIALLY DEFERRED;
2392
2393 -- Create types for existing user settings
2394 -- not otherwise accounted for
2395
2396 INSERT INTO config.usr_setting_type (
2397         name,
2398         label,
2399         description
2400 )
2401 SELECT DISTINCT
2402         name,
2403         name,
2404         'FIXME'
2405 FROM
2406         actor.usr_setting
2407 WHERE
2408         name NOT IN (
2409                 SELECT name
2410                 FROM config.usr_setting_type
2411         );
2412
2413 -- Add foreign key to user_setting_type
2414
2415 ALTER TABLE actor.usr_setting
2416         ADD FOREIGN KEY (name) REFERENCES config.usr_setting_type (name)
2417                 ON DELETE CASCADE ON UPDATE CASCADE
2418                 DEFERRABLE INITIALLY DEFERRED;
2419
2420 INSERT INTO actor.org_unit_setting (org_unit, name, value) VALUES
2421     (1, 'cat.spine.line.margin', 0)
2422     ,(1, 'cat.spine.line.height', 9)
2423     ,(1, 'cat.spine.line.width', 8)
2424     ,(1, 'cat.label.font.family', '"monospace"')
2425     ,(1, 'cat.label.font.size', 10)
2426     ,(1, 'cat.label.font.weight', '"normal"')
2427 ;
2428
2429 ALTER TABLE action_trigger.event_definition ADD COLUMN granularity TEXT;
2430 ALTER TABLE action_trigger.event ADD COLUMN async_output BIGINT REFERENCES action_trigger.event_output (id);
2431 ALTER TABLE action_trigger.event_definition ADD COLUMN usr_field TEXT;
2432 ALTER TABLE action_trigger.event_definition ADD COLUMN opt_in_setting TEXT REFERENCES config.usr_setting_type (name) DEFERRABLE INITIALLY DEFERRED;
2433
2434 CREATE OR REPLACE FUNCTION is_json( TEXT ) RETURNS BOOL AS $f$
2435     use JSON::XS;
2436     my $json = shift();
2437     eval { JSON::XS->new->allow_nonref->decode( $json ) };
2438     return $@ ? 0 : 1;
2439 $f$ LANGUAGE PLPERLU;
2440
2441 ALTER TABLE action_trigger.event ADD COLUMN user_data TEXT CHECK (user_data IS NULL OR is_json( user_data ));
2442
2443 INSERT INTO action_trigger.hook (key,core_type,description) VALUES (
2444     'hold_request.cancel.expire_no_target',
2445     'ahr',
2446     'A hold is cancelled because no copies were found'
2447 );
2448
2449 INSERT INTO action_trigger.hook (key,core_type,description) VALUES (
2450     'hold_request.cancel.expire_holds_shelf',
2451     'ahr',
2452     'A hold is cancelled becuase it was on the holds shelf too long'
2453 );
2454
2455 INSERT INTO action_trigger.hook (key,core_type,description) VALUES (
2456     'hold_request.cancel.staff',
2457     'ahr',
2458     'A hold is cancelled becuase it was cancelled by staff'
2459 );
2460
2461 INSERT INTO action_trigger.hook (key,core_type,description) VALUES (
2462     'hold_request.cancel.patron',
2463     'ahr',
2464     'A hold is cancelled by the patron'
2465 );
2466
2467 -- Fix typos in descriptions
2468 UPDATE action_trigger.hook SET description = 'A hold is successfully placed' WHERE key = 'hold_request.success';
2469 UPDATE action_trigger.hook SET description = 'A hold is attempted but not successfully placed' WHERE key = 'hold_request.failure';
2470
2471 -- Add a hook for renewals
2472 INSERT INTO action_trigger.hook (key,core_type,description) VALUES ('renewal','circ','Item renewed to user');
2473
2474 INSERT INTO action_trigger.validator (module,description) VALUES ('MaxPassiveDelayAge','Check that the event is not too far past the delay_field time -- requires a max_delay_age interval parameter');
2475
2476 -- Sample Pre-due Notice --
2477
2478 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, delay, delay_field, group_field, template) 
2479     VALUES (6, 'f', 1, '3 Day Courtesy Notice', 'checkout.due', 'CircIsOpen', 'SendEmail', '-3 days', 'due_date', 'usr', 
2480 $$
2481 [%- USE date -%]
2482 [%- user = target.0.usr -%]
2483 To: [%- params.recipient_email || user.email %]
2484 From: [%- params.sender_email || default_sender %]
2485 Subject: Courtesy Notice
2486
2487 Dear [% user.family_name %], [% user.first_given_name %]
2488 As a reminder, the following items are due in 3 days.
2489
2490 [% FOR circ IN target %]
2491     Title: [% circ.target_copy.call_number.record.simple_record.title %] 
2492     Barcode: [% circ.target_copy.barcode %] 
2493     Due: [% date.format(helpers.format_date(circ.due_date), '%Y-%m-%d') %]
2494     Item Cost: [% helpers.get_copy_price(circ.target_copy) %]
2495     Library: [% circ.circ_lib.name %]
2496     Library Phone: [% circ.circ_lib.phone %]
2497 [% END %]
2498
2499 $$);
2500
2501 INSERT INTO action_trigger.environment (event_def, path) VALUES 
2502     (6, 'target_copy.call_number.record.simple_record'),
2503     (6, 'usr'),
2504     (6, 'circ_lib.billing_address');
2505
2506 INSERT INTO action_trigger.event_params (event_def, param, value) VALUES
2507     (6, 'max_delay_age', '"1 day"');
2508
2509 -- also add the max delay age to the default overdue notice event def
2510 INSERT INTO action_trigger.event_params (event_def, param, value) VALUES
2511     (1, 'max_delay_age', '"1 day"');
2512   
2513 INSERT INTO action_trigger.validator (module,description) VALUES ('MinPassiveTargetAge','Check that the target is old enough to be used by this event -- requires a min_target_age interval parameter, and accepts an optional target_age_field to specify what time to use for offsetting');
2514
2515 INSERT INTO action_trigger.reactor (module,description) VALUES ('ApplyPatronPenalty','Applies the conifigured penalty to a patron.  Required named environment variables are "user", which refers to the user object, and "context_org", which refers to the org_unit object that acts as the focus for the penalty.');
2516
2517 INSERT INTO action_trigger.hook (
2518         key,
2519         core_type,
2520         description,
2521         passive
2522     ) VALUES (
2523         'hold_request.shelf_expires_soon',
2524         'ahr',
2525         'A hold on the shelf will expire there soon.',
2526         TRUE
2527     );
2528
2529 INSERT INTO action_trigger.event_definition (
2530         id,
2531         active,
2532         owner,
2533         name,
2534         hook,
2535         validator,
2536         reactor,
2537         delay,
2538         delay_field,
2539         group_field,
2540         template
2541     ) VALUES (
2542         7,
2543         FALSE,
2544         1,
2545         'Hold Expires from Shelf Soon',
2546         'hold_request.shelf_expires_soon',
2547         'HoldIsAvailable',
2548         'SendEmail',
2549         '- 1 DAY',
2550         'shelf_expire_time',
2551         'usr',
2552 $$
2553 [%- USE date -%]
2554 [%- user = target.0.usr -%]
2555 To: [%- params.recipient_email || user.email %]
2556 From: [%- params.sender_email || default_sender %]
2557 Subject: Hold Available Notification
2558
2559 Dear [% user.family_name %], [% user.first_given_name %]
2560 You requested holds on the following item(s), which are available for
2561 pickup, but these holds will soon expire.
2562
2563 [% FOR hold IN target %]
2564     [%- data = helpers.get_copy_bib_basics(hold.current_copy.id) -%]
2565     Title: [% data.title %]
2566     Author: [% data.author %]
2567     Library: [% hold.pickup_lib.name %]
2568 [% END %]
2569 $$
2570     );
2571
2572 INSERT INTO action_trigger.environment (
2573         event_def,
2574         path
2575     ) VALUES
2576     ( 7, 'current_copy'),
2577     ( 7, 'pickup_lib.billing_address'),
2578     ( 7, 'usr');
2579
2580 INSERT INTO action_trigger.hook (
2581         key,
2582         core_type,
2583         description,
2584         passive
2585     ) VALUES (
2586         'hold_request.long_wait',
2587         'ahr',
2588         'A patron has been waiting on a hold to be fulfilled for a long time.',
2589         TRUE
2590     );
2591
2592 INSERT INTO action_trigger.event_definition (
2593         id,
2594         active,
2595         owner,
2596         name,
2597         hook,
2598         validator,
2599         reactor,
2600         delay,
2601         delay_field,
2602         group_field,
2603         template
2604     ) VALUES (
2605         9,
2606         FALSE,
2607         1,
2608         'Hold waiting for pickup for long time',
2609         'hold_request.long_wait',
2610         'NOOP_True',
2611         'SendEmail',
2612         '6 MONTHS',
2613         'request_time',
2614         'usr',
2615 $$
2616 [%- USE date -%]
2617 [%- user = target.0.usr -%]
2618 To: [%- params.recipient_email || user.email %]
2619 From: [%- params.sender_email || default_sender %]
2620 Subject: Long Wait Hold Notification
2621
2622 Dear [% user.family_name %], [% user.first_given_name %]
2623
2624 You requested hold(s) on the following item(s), but unfortunately
2625 we have not been able to fulfill your request after a considerable
2626 length of time.  If you would still like to recieve these items,
2627 no action is required.
2628
2629 [% FOR hold IN target %]
2630     Title: [% hold.bib_rec.bib_record.simple_record.title %]
2631     Author: [% hold.bib_rec.bib_record.simple_record.author %]
2632 [% END %]
2633 $$
2634 );
2635
2636 INSERT INTO action_trigger.environment (
2637         event_def,
2638         path
2639     ) VALUES
2640     (9, 'pickup_lib'),
2641     (9, 'usr'),
2642     (9, 'bib_rec.bib_record.simple_record');
2643
2644 INSERT INTO action_trigger.hook (key, core_type, description, passive) 
2645     VALUES (
2646         'format.selfcheck.checkout',
2647         'circ',
2648         'Formats circ objects for self-checkout receipt',
2649         TRUE
2650     );
2651
2652 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, group_field, granularity, template )
2653     VALUES (
2654         10,
2655         TRUE,
2656         1,
2657         'Self-Checkout Receipt',
2658         'format.selfcheck.checkout',
2659         'NOOP_True',
2660         'ProcessTemplate',
2661         'usr',
2662         'print-on-demand',
2663 $$
2664 [%- USE date -%]
2665 [%- SET user = target.0.usr -%]
2666 [%- SET lib = target.0.circ_lib -%]
2667 [%- SET lib_addr = target.0.circ_lib.billing_address -%]
2668 [%- SET hours = lib.hours_of_operation -%]
2669 <div>
2670     <style> li { padding: 8px; margin 5px; }</style>
2671     <div>[% date.format %]</div>
2672     <div>[% lib.name %]</div>
2673     <div>[% lib_addr.street1 %] [% lib_addr.street2 %]</div>
2674     <div>[% lib_addr.city %], [% lib_addr.state %] [% lb_addr.post_code %]</div>
2675     <div>[% lib.phone %]</div>
2676     <br/>
2677
2678     [% user.family_name %], [% user.first_given_name %]
2679     <ol>
2680     [% FOR circ IN target %]
2681         [%-
2682             SET idx = loop.count - 1;
2683             SET udata =  user_data.$idx
2684         -%]
2685         <li>
2686             <div>[% helpers.get_copy_bib_basics(circ.target_copy.id).title %]</div>
2687             <div>Barcode: [% circ.target_copy.barcode %]</div>
2688             [% IF udata.renewal_failure %]
2689                 <div style='color:red;'>Renewal Failed</div>
2690             [% ELSE %]
2691                 <div>Due Date: [% date.format(helpers.format_date(circ.due_date), '%Y-%m-%d') %]</div>
2692             [% END %]
2693         </li>
2694     [% END %]
2695     </ol>
2696     
2697     <div>
2698         Library Hours
2699         [%- BLOCK format_time; date.format(time _ ' 1/1/1000', format='%I:%M %p'); END -%]
2700         <div>
2701             Monday 
2702             [% PROCESS format_time time = hours.dow_0_open %] 
2703             [% PROCESS format_time time = hours.dow_0_close %] 
2704         </div>
2705         <div>
2706             Tuesday 
2707             [% PROCESS format_time time = hours.dow_1_open %] 
2708             [% PROCESS format_time time = hours.dow_1_close %] 
2709         </div>
2710         <div>
2711             Wednesday 
2712             [% PROCESS format_time time = hours.dow_2_open %] 
2713             [% PROCESS format_time time = hours.dow_2_close %] 
2714         </div>
2715         <div>
2716             Thursday
2717             [% PROCESS format_time time = hours.dow_3_open %] 
2718             [% PROCESS format_time time = hours.dow_3_close %] 
2719         </div>
2720         <div>
2721             Friday
2722             [% PROCESS format_time time = hours.dow_4_open %] 
2723             [% PROCESS format_time time = hours.dow_4_close %] 
2724         </div>
2725         <div>
2726             Saturday
2727             [% PROCESS format_time time = hours.dow_5_open %] 
2728             [% PROCESS format_time time = hours.dow_5_close %] 
2729         </div>
2730         <div>
2731             Sunday 
2732             [% PROCESS format_time time = hours.dow_6_open %] 
2733             [% PROCESS format_time time = hours.dow_6_close %] 
2734         </div>
2735     </div>
2736 </div>
2737 $$
2738 );
2739
2740 INSERT INTO action_trigger.environment ( event_def, path) VALUES
2741     ( 10, 'target_copy'),
2742     ( 10, 'circ_lib.billing_address'),
2743     ( 10, 'circ_lib.hours_of_operation'),
2744     ( 10, 'usr');
2745
2746 INSERT INTO action_trigger.hook (key, core_type, description, passive) 
2747     VALUES (
2748         'format.selfcheck.items_out',
2749         'circ',
2750         'Formats items out for self-checkout receipt',
2751         TRUE
2752     );
2753
2754 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, group_field, granularity, template )
2755     VALUES (
2756         11,
2757         TRUE,
2758         1,
2759         'Self-Checkout Items Out Receipt',
2760         'format.selfcheck.items_out',
2761         'NOOP_True',
2762         'ProcessTemplate',
2763         'usr',
2764         'print-on-demand',
2765 $$
2766 [%- USE date -%]
2767 [%- SET user = target.0.usr -%]
2768 <div>
2769     <style> li { padding: 8px; margin 5px; }</style>
2770     <div>[% date.format %]</div>
2771     <br/>
2772
2773     [% user.family_name %], [% user.first_given_name %]
2774     <ol>
2775     [% FOR circ IN target %]
2776         <li>
2777             <div>[% helpers.get_copy_bib_basics(circ.target_copy.id).title %]</div>
2778             <div>Barcode: [% circ.target_copy.barcode %]</div>
2779             <div>Due Date: [% date.format(helpers.format_date(circ.due_date), '%Y-%m-%d') %]</div>
2780         </li>
2781     [% END %]
2782     </ol>
2783 </div>
2784 $$
2785 );
2786
2787
2788 INSERT INTO action_trigger.environment ( event_def, path) VALUES
2789     ( 11, 'target_copy'),
2790     ( 11, 'circ_lib.billing_address'),
2791     ( 11, 'circ_lib.hours_of_operation'),
2792     ( 11, 'usr');
2793
2794 INSERT INTO action_trigger.hook (key, core_type, description, passive) 
2795     VALUES (
2796         'format.selfcheck.holds',
2797         'ahr',
2798         'Formats holds for self-checkout receipt',
2799         TRUE
2800     );
2801
2802 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, group_field, granularity, template )
2803     VALUES (
2804         12,
2805         TRUE,
2806         1,
2807         'Self-Checkout Holds Receipt',
2808         'format.selfcheck.holds',
2809         'NOOP_True',
2810         'ProcessTemplate',
2811         'usr',
2812         'print-on-demand',
2813 $$
2814 [%- USE date -%]
2815 [%- SET user = target.0.usr -%]
2816 <div>
2817     <style> li { padding: 8px; margin 5px; }</style>
2818     <div>[% date.format %]</div>
2819     <br/>
2820
2821     [% user.family_name %], [% user.first_given_name %]
2822     <ol>
2823     [% FOR hold IN target %]
2824         [%-
2825             SET idx = loop.count - 1;
2826             SET udata =  user_data.$idx
2827         -%]
2828         <li>
2829             <div>Title: [% hold.bib_rec.bib_record.simple_record.title %]</div>
2830             <div>Author: [% hold.bib_rec.bib_record.simple_record.author %]</div>
2831             <div>Pickup Location: [% hold.pickup_lib.name %]</div>
2832             <div>Status: 
2833                 [%- IF udata.ready -%]
2834                     Ready for pickup
2835                 [% ELSE %]
2836                     #[% udata.queue_position %] of [% udata.potential_copies %] copies.
2837                 [% END %]
2838             </div>
2839         </li>
2840     [% END %]
2841     </ol>
2842 </div>
2843 $$
2844 );
2845
2846
2847 INSERT INTO action_trigger.environment ( event_def, path) VALUES
2848     ( 12, 'bib_rec.bib_record.simple_record'),
2849     ( 12, 'pickup_lib'),
2850     ( 12, 'usr');
2851
2852 INSERT INTO action_trigger.hook (key, core_type, description, passive) 
2853     VALUES (
2854         'format.selfcheck.fines',
2855         'au',
2856         'Formats fines for self-checkout receipt',
2857         TRUE
2858     );
2859
2860 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, granularity, template )
2861     VALUES (
2862         13,
2863         TRUE,
2864         1,
2865         'Self-Checkout Fines Receipt',
2866         'format.selfcheck.fines',
2867         'NOOP_True',
2868         'ProcessTemplate',
2869         'print-on-demand',
2870 $$
2871 [%- USE date -%]
2872 [%- SET user = target -%]
2873 <div>
2874     <style> li { padding: 8px; margin 5px; }</style>
2875     <div>[% date.format %]</div>
2876     <br/>
2877
2878     [% user.family_name %], [% user.first_given_name %]
2879     <ol>
2880     [% FOR xact IN user.open_billable_transactions_summary %]
2881         <li>
2882             <div>Details: 
2883                 [% IF xact.xact_type == 'circulation' %]
2884                     [%- helpers.get_copy_bib_basics(xact.circulation.target_copy).title -%]
2885                 [% ELSE %]
2886                     [%- xact.last_billing_type -%]
2887                 [% END %]
2888             </div>
2889             <div>Total Billed: [% xact.total_owed %]</div>
2890             <div>Total Paid: [% xact.total_paid %]</div>
2891             <div>Balance Owed : [% xact.balance_owed %]</div>
2892         </li>
2893     [% END %]
2894     </ol>
2895 </div>
2896 $$
2897 );
2898
2899 INSERT INTO action_trigger.environment ( event_def, path) VALUES
2900     ( 13, 'open_billable_transactions_summary.circulation' );
2901
2902 INSERT INTO action_trigger.reactor (module,description) VALUES
2903 (   'SendFile',
2904     oils_i18n_gettext(
2905         'SendFile',
2906         'Build and transfer a file to a remote server.  Required parameter "remote_host" specifying target server.  Optional parameters: remote_user, remote_password, remote_account, port, type (FTP, SFTP or SCP), and debug.',
2907         'atreact',
2908         'description'
2909     )
2910 );
2911
2912 INSERT INTO action_trigger.hook (key, core_type, description, passive) 
2913     VALUES (
2914         'format.acqli.html',
2915         'jub',
2916         'Formats lineitem worksheet for titles received',
2917         TRUE
2918     );
2919
2920 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, granularity, template)
2921     VALUES (
2922         14,
2923         TRUE,
2924         1,
2925         'Lineitem Worksheet',
2926         'format.acqli.html',
2927         'NOOP_True',
2928         'ProcessTemplate',
2929         'print-on-demand',
2930 $$
2931 [%- USE date -%]
2932 [%- SET li = target; -%]
2933 <div class="wrapper">
2934     <div class="summary" style='font-size:110%; font-weight:bold;'>
2935
2936         <div>Title: [% helpers.get_li_attr("title", "", li.attributes) %]</div>
2937         <div>Author: [% helpers.get_li_attr("author", "", li.attributes) %]</div>
2938         <div class="count">Item Count: [% li.lineitem_details.size %]</div>
2939         <div class="lineid">Lineitem ID: [% li.id %]</div>
2940
2941         [% IF li.distribution_formulas.size > 0 %]
2942             [% SET forms = [] %]
2943             [% FOREACH form IN li.distribution_formulas; forms.push(form.formula.name); END %]
2944             <div>Distribution Formulas: [% forms.join(',') %]</div>
2945         [% END %]
2946
2947         [% IF li.lineitem_notes.size > 0 %]
2948             Lineitem Notes:
2949             <ul>
2950                 [%- FOR note IN li.lineitem_notes -%]
2951                     <li>
2952                     [% IF note.alert_text %]
2953                         [% note.alert_text.code -%] 
2954                         [% IF note.value -%]
2955                             : [% note.value %]
2956                         [% END %]
2957                     [% ELSE %]
2958                         [% note.value -%] 
2959                     [% END %]
2960                     </li>
2961                 [% END %]
2962             </ul>
2963         [% END %]
2964     </div>
2965     <br/>
2966     <table>
2967         <thead>
2968             <tr>
2969                 <th>Branch</th>
2970                 <th>Barcode</th>
2971                 <th>Call Number</th>
2972                 <th>Fund</th>
2973                 <th>Recd.</th>
2974                 <th>Notes</th>
2975             </tr>
2976         </thead>
2977         <tbody>
2978         [% FOREACH detail IN li.lineitem_details.sort('owning_lib') %]
2979             [% 
2980                 IF copy.eg_copy_id;
2981                     SET copy = copy.eg_copy_id;
2982                     SET cn_label = copy.call_number.label;
2983                 ELSE; 
2984                     SET copy = detail; 
2985                     SET cn_label = detail.cn_label;
2986                 END 
2987             %]
2988             <tr>
2989                 <!-- acq.lineitem_detail.id = [%- detail.id -%] -->
2990                 <td style='padding:5px;'>[% detail.owning_lib.shortname %]</td>
2991                 <td style='padding:5px;'>[% IF copy.barcode   %]<span class="barcode"  >[% detail.barcode   %]</span>[% END %]</td>
2992                 <td style='padding:5px;'>[% IF cn_label %]<span class="cn_label" >[% cn_label  %]</span>[% END %]</td>
2993                 <td style='padding:5px;'>[% IF detail.fund %]<span class="fund">[% detail.fund.code %] ([% detail.fund.year %])</span>[% END %]</td>
2994                 <td style='padding:5px;'>[% IF detail.recv_time %]<span class="recv_time">[% detail.recv_time %]</span>[% END %]</td>
2995                 <td style='padding:5px;'>[% detail.note %]</td>
2996             </tr>
2997         [% END %]
2998         </tbody>
2999     </table>
3000 </div>
3001 $$
3002 );
3003
3004
3005 INSERT INTO action_trigger.environment (event_def, path) VALUES
3006     ( 14, 'attributes' ),
3007     ( 14, 'lineitem_details' ),
3008     ( 14, 'lineitem_details.owning_lib' ),
3009     ( 14, 'lineitem_notes' )
3010 ;
3011
3012 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES (
3013         'aur.ordered',
3014         'aur', 
3015         oils_i18n_gettext(
3016             'aur.ordered',
3017             'A patron acquisition request has been marked On-Order.',
3018             'ath',
3019             'description'
3020         ), 
3021         TRUE
3022     ), (
3023         'aur.received', 
3024         'aur', 
3025         oils_i18n_gettext(
3026             'aur.received', 
3027             'A patron acquisition request has been marked Received.',
3028             'ath',
3029             'description'
3030         ),
3031         TRUE
3032     ), (
3033         'aur.cancelled',
3034         'aur',
3035         oils_i18n_gettext(
3036             'aur.cancelled',
3037             'A patron acquisition request has been marked Cancelled.',
3038             'ath',
3039             'description'
3040         ),
3041         TRUE
3042     )
3043 ;
3044
3045 INSERT INTO action_trigger.validator (module,description) VALUES (
3046         'Acq::UserRequestOrdered',
3047         oils_i18n_gettext(
3048             'Acq::UserRequestOrdered',
3049             'Tests to see if the corresponding Line Item has a state of "on-order".',
3050             'atval',
3051             'description'
3052         )
3053     ), (
3054         'Acq::UserRequestReceived',
3055         oils_i18n_gettext(
3056             'Acq::UserRequestReceived',
3057             'Tests to see if the corresponding Line Item has a state of "received".',
3058             'atval',
3059             'description'
3060         )
3061     ), (
3062         'Acq::UserRequestCancelled',
3063         oils_i18n_gettext(
3064             'Acq::UserRequestCancelled',
3065             'Tests to see if the corresponding Line Item has a state of "cancelled".',
3066             'atval',
3067             'description'
3068         )
3069     )
3070 ;
3071
3072 -- What was event_definition #15 in v1.6.1 will be recreated as #20.  This
3073 -- renumbering requires some juggling:
3074 --
3075 -- 1. Update any child rows to point to #20.  These updates will temporarily
3076 -- violate foreign key constraints, but that's okay as long as we create
3077 -- #20 before committing.
3078 --
3079 -- 2. Delete the old #15.
3080 --
3081 -- 3. Insert the new #15.
3082 --
3083 -- 4. Insert #20.
3084 --
3085 -- We could combine steps 2 and 3 into a single update, but that would create
3086 -- additional opportunities for typos, since we already have the insert from
3087 -- an upgrade script.
3088
3089 UPDATE action_trigger.environment
3090 SET event_def = 20
3091 WHERE event_def = 15;
3092
3093 UPDATE action_trigger.event
3094 SET event_def = 20
3095 WHERE event_def = 15;
3096
3097 UPDATE action_trigger.event_params
3098 SET event_def = 20
3099 WHERE event_def = 15;
3100
3101 DELETE FROM action_trigger.event_definition
3102 WHERE id = 15;
3103
3104 INSERT INTO action_trigger.event_definition (
3105         id,
3106         active,
3107         owner,
3108         name,
3109         hook,
3110         validator,
3111         reactor,
3112         template
3113     ) VALUES (
3114         15,
3115         FALSE,
3116         1,
3117         'Email Notice: Patron Acquisition Request marked On-Order.',
3118         'aur.ordered',
3119         'Acq::UserRequestOrdered',
3120         'SendEmail',
3121 $$
3122 [%- USE date -%]
3123 [%- SET li = target.lineitem; -%]
3124 [%- SET user = target.usr -%]
3125 [%- SET title = helpers.get_li_attr("title", "", li.attributes) -%]
3126 [%- SET author = helpers.get_li_attr("author", "", li.attributes) -%]
3127 [%- SET edition = helpers.get_li_attr("edition", "", li.attributes) -%]
3128 [%- SET isbn = helpers.get_li_attr("isbn", "", li.attributes) -%]
3129 [%- SET publisher = helpers.get_li_attr("publisher", "", li.attributes) -%]
3130 [%- SET pubdate = helpers.get_li_attr("pubdate", "", li.attributes) -%]
3131
3132 To: [%- params.recipient_email || user.email %]
3133 From: [%- params.sender_email || default_sender %]
3134 Subject: Acquisition Request Notification
3135
3136 Dear [% user.family_name %], [% user.first_given_name %]
3137 Our records indicate the following acquisition request has been placed on order.
3138
3139 Title: [% title %]
3140 [% IF author %]Author: [% author %][% END %]
3141 [% IF edition %]Edition: [% edition %][% END %]
3142 [% IF isbn %]ISBN: [% isbn %][% END %]
3143 [% IF publisher %]Publisher: [% publisher %][% END %]
3144 [% IF pubdate %]Publication Date: [% pubdate %][% END %]
3145 Lineitem ID: [% li.id %]
3146 $$
3147     ), (
3148         16,
3149         FALSE,
3150         1,
3151         'Email Notice: Patron Acquisition Request marked Received.',
3152         'aur.received',
3153         'Acq::UserRequestReceived',
3154         'SendEmail',
3155 $$
3156 [%- USE date -%]
3157 [%- SET li = target.lineitem; -%]
3158 [%- SET user = target.usr -%]
3159 [%- SET title = helpers.get_li_attr("title", "", li.attributes) %]
3160 [%- SET author = helpers.get_li_attr("author", "", li.attributes) %]
3161 [%- SET edition = helpers.get_li_attr("edition", "", li.attributes) %]
3162 [%- SET isbn = helpers.get_li_attr("isbn", "", li.attributes) %]
3163 [%- SET publisher = helpers.get_li_attr("publisher", "", li.attributes) -%]
3164 [%- SET pubdate = helpers.get_li_attr("pubdate", "", li.attributes) -%]
3165
3166 To: [%- params.recipient_email || user.email %]
3167 From: [%- params.sender_email || default_sender %]
3168 Subject: Acquisition Request Notification
3169
3170 Dear [% user.family_name %], [% user.first_given_name %]
3171 Our records indicate the materials for the following acquisition request have been received.
3172
3173 Title: [% title %]
3174 [% IF author %]Author: [% author %][% END %]
3175 [% IF edition %]Edition: [% edition %][% END %]
3176 [% IF isbn %]ISBN: [% isbn %][% END %]
3177 [% IF publisher %]Publisher: [% publisher %][% END %]
3178 [% IF pubdate %]Publication Date: [% pubdate %][% END %]
3179 Lineitem ID: [% li.id %]
3180 $$
3181     ), (
3182         17,
3183         FALSE,
3184         1,
3185         'Email Notice: Patron Acquisition Request marked Cancelled.',
3186         'aur.cancelled',
3187         'Acq::UserRequestCancelled',
3188         'SendEmail',
3189 $$
3190 [%- USE date -%]
3191 [%- SET li = target.lineitem; -%]
3192 [%- SET user = target.usr -%]
3193 [%- SET title = helpers.get_li_attr("title", "", li.attributes) %]
3194 [%- SET author = helpers.get_li_attr("author", "", li.attributes) %]
3195 [%- SET edition = helpers.get_li_attr("edition", "", li.attributes) %]
3196 [%- SET isbn = helpers.get_li_attr("isbn", "", li.attributes) %]
3197 [%- SET publisher = helpers.get_li_attr("publisher", "", li.attributes) -%]
3198 [%- SET pubdate = helpers.get_li_attr("pubdate", "", li.attributes) -%]
3199
3200 To: [%- params.recipient_email || user.email %]
3201 From: [%- params.sender_email || default_sender %]
3202 Subject: Acquisition Request Notification
3203
3204 Dear [% user.family_name %], [% user.first_given_name %]
3205 Our records indicate the following acquisition request has been cancelled.
3206
3207 Title: [% title %]
3208 [% IF author %]Author: [% author %][% END %]
3209 [% IF edition %]Edition: [% edition %][% END %]
3210 [% IF isbn %]ISBN: [% isbn %][% END %]
3211 [% IF publisher %]Publisher: [% publisher %][% END %]
3212 [% IF pubdate %]Publication Date: [% pubdate %][% END %]
3213 Lineitem ID: [% li.id %]
3214 $$
3215     );
3216
3217 INSERT INTO action_trigger.environment (
3218         event_def,
3219         path
3220     ) VALUES 
3221         ( 15, 'lineitem' ),
3222         ( 15, 'lineitem.attributes' ),
3223         ( 15, 'usr' ),
3224
3225         ( 16, 'lineitem' ),
3226         ( 16, 'lineitem.attributes' ),
3227         ( 16, 'usr' ),
3228
3229         ( 17, 'lineitem' ),
3230         ( 17, 'lineitem.attributes' ),
3231         ( 17, 'usr' )
3232     ;
3233
3234 INSERT INTO action_trigger.event_definition
3235 (id, active, owner, name, hook, validator, reactor, cleanup_success, cleanup_failure, delay, delay_field, group_field, template) VALUES
3236 (23, true, 1, 'PO JEDI', 'acqpo.activated', 'Acq::PurchaseOrderEDIRequired', 'GeneratePurchaseOrderJEDI', NULL, NULL, '00:05:00', NULL, NULL,
3237 $$[%- USE date -%]
3238 [%# start JEDI document -%]
3239 [%- BLOCK big_block -%]
3240 {
3241    "recipient":"[% target.provider.san %]",
3242    "sender":"[% target.ordering_agency.mailing_address.san %]",
3243    "body": [{
3244      "ORDERS":[ "order", {
3245         "po_number":[% target.id %],
3246         "date":"[% date.format(date.now, '%Y%m%d') %]",
3247         "buyer":[{
3248             [%- IF target.provider.edi_default.vendcode -%]
3249                 "id":"[% target.ordering_agency.mailing_address.san _ ' ' _ target.provider.edi_default.vendcode %]", 
3250                 "id-qualifier": 91
3251             [%- ELSE -%]
3252                 "id":"[% target.ordering_agency.mailing_address.san %]"
3253             [%- END  -%]
3254         }],
3255         "vendor":[ 
3256             [%- # target.provider.name (target.provider.id) -%]
3257             "[% target.provider.san %]",
3258             {"id-qualifier": 92, "id":"[% target.provider.id %]"}
3259         ],
3260         "currency":"[% target.provider.currency_type %]",
3261         "items":[
3262         [% FOR li IN target.lineitems %]
3263         {
3264             "identifiers":[   [%-# li.isbns = helpers.get_li_isbns(li.attributes) %]
3265             [% FOR isbn IN helpers.get_li_isbns(li.attributes) -%]
3266                 [% IF isbn.length == 13 -%]
3267                 {"id-qualifier":"EN","id":"[% isbn %]"},
3268                 [% ELSE -%]
3269                 {"id-qualifier":"IB","id":"[% isbn %]"},
3270                 [%- END %]
3271             [% END %]
3272                 {"id-qualifier":"SA","id":"[% li.id %]"}
3273             ],
3274             "price":[% li.estimated_unit_price || '0.00' %],
3275             "desc":[
3276                 {"BTI":"[% helpers.get_li_attr('title',     '', li.attributes) %]"}, 
3277                 {"BPU":"[% helpers.get_li_attr('publisher', '', li.attributes) %]"},
3278                 {"BPD":"[% helpers.get_li_attr('pubdate',   '', li.attributes) %]"},
3279                 {"BPH":"[% helpers.get_li_attr('pagination','', li.attributes) %]"}
3280             ],
3281             "quantity":[% li.lineitem_details.size %]
3282         }[% UNLESS loop.last %],[% END %]
3283         [%-# TODO: lineitem details (later) -%]
3284         [% END %]
3285         ],
3286         "line_items":[% target.lineitems.size %]
3287      }]  [% # close ORDERS array %]
3288    }]    [% # close  body  array %]
3289 }
3290 [% END %]
3291 [% tempo = PROCESS big_block; helpers.escape_json(tempo) %]
3292 $$
3293 );
3294
3295 INSERT INTO action_trigger.environment (event_def, path) VALUES 
3296   (23, 'lineitems.attributes'), 
3297   (23, 'lineitems.lineitem_details'), 
3298   (23, 'lineitems.lineitem_notes'), 
3299   (23, 'ordering_agency.mailing_address'), 
3300   (23, 'provider');
3301
3302 UPDATE action_trigger.event_definition SET template = 
3303 $$
3304 [%- USE date -%]
3305 [%-
3306     # find a lineitem attribute by name and optional type
3307     BLOCK get_li_attr;
3308         FOR attr IN li.attributes;
3309             IF attr.attr_name == attr_name;
3310                 IF !attr_type OR attr_type == attr.attr_type;
3311                     attr.attr_value;
3312                     LAST;
3313                 END;
3314             END;
3315         END;
3316     END
3317 -%]
3318
3319 <h2>Purchase Order [% target.id %]</h2>
3320 <br/>
3321 date <b>[% date.format(date.now, '%Y%m%d') %]</b>
3322 <br/>
3323
3324 <style>
3325     table td { padding:5px; border:1px solid #aaa;}
3326     table { width:95%; border-collapse:collapse; }
3327     #vendor-notes { padding:5px; border:1px solid #aaa; }
3328 </style>
3329 <table id='vendor-table'>
3330   <tr>
3331     <td valign='top'>Vendor</td>
3332     <td>
3333       <div>[% target.provider.name %]</div>
3334       <div>[% target.provider.addresses.0.street1 %]</div>
3335       <div>[% target.provider.addresses.0.street2 %]</div>
3336       <div>[% target.provider.addresses.0.city %]</div>
3337       <div>[% target.provider.addresses.0.state %]</div>
3338       <div>[% target.provider.addresses.0.country %]</div>
3339       <div>[% target.provider.addresses.0.post_code %]</div>
3340     </td>
3341     <td valign='top'>Ship to / Bill to</td>
3342     <td>
3343       <div>[% target.ordering_agency.name %]</div>
3344       <div>[% target.ordering_agency.billing_address.street1 %]</div>
3345       <div>[% target.ordering_agency.billing_address.street2 %]</div>
3346       <div>[% target.ordering_agency.billing_address.city %]</div>
3347       <div>[% target.ordering_agency.billing_address.state %]</div>
3348       <div>[% target.ordering_agency.billing_address.country %]</div>
3349       <div>[% target.ordering_agency.billing_address.post_code %]</div>
3350     </td>
3351   </tr>
3352 </table>
3353
3354 <br/><br/>
3355 <fieldset id='vendor-notes'>
3356     <legend>Notes to the Vendor</legend>
3357     <ul>
3358     [% FOR note IN target.notes %]
3359         [% IF note.vendor_public == 't' %]
3360             <li>[% note.value %]</li>
3361         [% END %]
3362     [% END %]
3363     </ul>
3364 </fieldset>
3365 <br/><br/>
3366
3367 <table>
3368   <thead>
3369     <tr>
3370       <th>PO#</th>
3371       <th>ISBN or Item #</th>
3372       <th>Title</th>
3373       <th>Quantity</th>
3374       <th>Unit Price</th>
3375       <th>Line Total</th>
3376       <th>Notes</th>
3377     </tr>
3378   </thead>
3379   <tbody>
3380
3381   [% subtotal = 0 %]
3382   [% FOR li IN target.lineitems %]
3383
3384   <tr>
3385     [% count = li.lineitem_details.size %]
3386     [% price = li.estimated_unit_price %]
3387     [% litotal = (price * count) %]
3388     [% subtotal = subtotal + litotal %]
3389     [% isbn = PROCESS get_li_attr attr_name = 'isbn' %]
3390     [% ident = PROCESS get_li_attr attr_name = 'identifier' %]
3391
3392     <td>[% target.id %]</td>
3393     <td>[% isbn || ident %]</td>
3394     <td>[% PROCESS get_li_attr attr_name = 'title' %]</td>
3395     <td>[% count %]</td>
3396     <td>[% price %]</td>
3397     <td>[% litotal %]</td>
3398     <td>
3399         <ul>
3400         [% FOR note IN li.lineitem_notes %]
3401             [% IF note.vendor_public == 't' %]
3402                 <li>[% note.value %]</li>
3403             [% END %]
3404         [% END %]
3405         </ul>
3406     </td>
3407   </tr>
3408   [% END %]
3409   <tr>
3410     <td/><td/><td/><td/>
3411     <td>Sub Total</td>
3412     <td>[% subtotal %]</td>
3413   </tr>
3414   </tbody>
3415 </table>
3416
3417 <br/>
3418
3419 Total Line Item Count: [% target.lineitems.size %]
3420 $$
3421 WHERE id = 4;
3422
3423 INSERT INTO action_trigger.environment (event_def, path) VALUES 
3424     (4, 'lineitems.lineitem_notes'),
3425     (4, 'notes');
3426
3427 INSERT INTO action_trigger.environment (event_def, path) VALUES
3428     ( 14, 'lineitem_notes.alert_text' ),
3429     ( 14, 'distribution_formulas.formula' ),
3430     ( 14, 'lineitem_details.fund' ),
3431     ( 14, 'lineitem_details.eg_copy_id' ),
3432     ( 14, 'lineitem_details.eg_copy_id.call_number' )
3433 ;
3434
3435 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES (
3436         'aur.created',
3437         'aur',
3438         oils_i18n_gettext(
3439             'aur.created',
3440             'A patron has made an acquisitions request.',
3441             'ath',
3442             'description'
3443         ),
3444         TRUE
3445     ), (
3446         'aur.rejected',
3447         'aur',
3448         oils_i18n_gettext(
3449             'aur.rejected',
3450             'A patron acquisition request has been rejected.',
3451             'ath',
3452             'description'
3453         ),
3454         TRUE
3455     )
3456 ;
3457
3458 INSERT INTO action_trigger.event_definition (
3459         id,
3460         active,
3461         owner,
3462         name,
3463         hook,
3464         validator,
3465         reactor,
3466         template
3467     ) VALUES (
3468         18,
3469         FALSE,
3470         1,
3471         'Email Notice: Acquisition Request created.',
3472         'aur.created',
3473         'NOOP_True',
3474         'SendEmail',
3475 $$
3476 [%- USE date -%]
3477 [%- SET user = target.usr -%]
3478 [%- SET title = target.title -%]
3479 [%- SET author = target.author -%]
3480 [%- SET isxn = target.isxn -%]
3481 [%- SET publisher = target.publisher -%]
3482 [%- SET pubdate = target.pubdate -%]
3483
3484 To: [%- params.recipient_email || user.email %]
3485 From: [%- params.sender_email || default_sender %]
3486 Subject: Acquisition Request Notification
3487
3488 Dear [% user.family_name %], [% user.first_given_name %]
3489 Our records indicate that you have made the following acquisition request:
3490
3491 Title: [% title %]
3492 [% IF author %]Author: [% author %][% END %]
3493 [% IF edition %]Edition: [% edition %][% END %]
3494 [% IF isbn %]ISXN: [% isxn %][% END %]
3495 [% IF publisher %]Publisher: [% publisher %][% END %]
3496 [% IF pubdate %]Publication Date: [% pubdate %][% END %]
3497 $$
3498     ), (
3499         19,
3500         FALSE,
3501         1,
3502         'Email Notice: Acquisition Request Rejected.',
3503         'aur.rejected',
3504         'NOOP_True',
3505         'SendEmail',
3506 $$
3507 [%- USE date -%]
3508 [%- SET user = target.usr -%]
3509 [%- SET title = target.title -%]
3510 [%- SET author = target.author -%]
3511 [%- SET isxn = target.isxn -%]
3512 [%- SET publisher = target.publisher -%]
3513 [%- SET pubdate = target.pubdate -%]
3514 [%- SET cancel_reason = target.cancel_reason.description -%]
3515
3516 To: [%- params.recipient_email || user.email %]
3517 From: [%- params.sender_email || default_sender %]
3518 Subject: Acquisition Request Notification
3519
3520 Dear [% user.family_name %], [% user.first_given_name %]
3521 Our records indicate the following acquisition request has been rejected for this reason: [% cancel_reason %]
3522
3523 Title: [% title %]
3524 [% IF author %]Author: [% author %][% END %]
3525 [% IF edition %]Edition: [% edition %][% END %]
3526 [% IF isbn %]ISBN: [% isbn %][% END %]
3527 [% IF publisher %]Publisher: [% publisher %][% END %]
3528 [% IF pubdate %]Publication Date: [% pubdate %][% END %]
3529 $$
3530     );
3531
3532 INSERT INTO action_trigger.environment (
3533         event_def,
3534         path
3535     ) VALUES 
3536         ( 18, 'usr' ),
3537         ( 19, 'usr' ),
3538         ( 19, 'cancel_reason' )
3539     ;
3540
3541 INSERT INTO action_trigger.event_definition (id, active, owner, name, hook, validator, reactor, delay, template) 
3542     VALUES (20, 'f', 1, 'Password reset request notification', 'password.reset_request', 'NOOP_True', 'SendEmail', '00:00:01',
3543 $$
3544 [%- USE date -%]
3545 [%- user = target.usr -%]
3546 To: [%- params.recipient_email || user.email %]
3547 From: [%- params.sender_email || user.home_ou.email || default_sender %]
3548 Subject: [% user.home_ou.name %]: library account password reset request
3549   
3550 You have received this message because you, or somebody else, requested a reset
3551 of your library system password. If you did not request a reset of your library
3552 system password, just ignore this message and your current password will
3553 continue to work.
3554
3555 If you did request a reset of your library system password, please perform
3556 the following steps to continue the process of resetting your password:
3557
3558 1. Open the following link in a web browser: https://[% params.hostname %]/opac/password/[% params.locale || 'en-US' %]/[% target.uuid %]
3559 The browser displays a password reset form.
3560
3561 2. Enter your new password in the password reset form in the browser. You must
3562 enter the password twice to ensure that you do not make a mistake. If the
3563 passwords match, you will then be able to log in to your library system account
3564 with the new password.
3565
3566 $$);
3567
3568 INSERT INTO action_trigger.hook (key, core_type, description, passive)
3569     VALUES (
3570         'format.acqcle.html',
3571         'acqcle',
3572         'Formats claim events into a voucher',
3573         TRUE
3574     );
3575
3576 INSERT INTO action_trigger.event_definition (
3577         id, active, owner, name, hook, group_field,
3578         validator, reactor, granularity, template
3579     ) VALUES (
3580         21,
3581         TRUE,
3582         1,
3583         'Claim Voucher',
3584         'format.acqcle.html',
3585         'claim',
3586         'NOOP_True',
3587         'ProcessTemplate',
3588         'print-on-demand',
3589 $$
3590 [%- USE date -%]
3591 [%- SET claim = target.0.claim -%]
3592 <!-- This will need refined/prettified. -->
3593 <div class="acq-claim-voucher">
3594     <h2>Claim: [% claim.id %] ([% claim.type.code %])</h2>
3595     <h3>Against: [%- helpers.get_li_attr("title", "", claim.lineitem_detail.lineitem.attributes) -%]</h3>
3596     <ul>
3597         [% FOR event IN target %]
3598         <li>
3599             Event type: [% event.type.code %]
3600             [% IF event.type.library_initiated %](Library initiated)[% END %]
3601             <br />
3602             Event date: [% event.event_date %]<br />
3603             Order date: [% event.claim.lineitem_detail.lineitem.purchase_order.order_date %]<br />
3604             Expected receive date: [% event.claim.lineitem_detail.lineitem.expected_recv_time %]<br />
3605             Initiated by: [% event.creator.family_name %], [% event.creator.first_given_name %] [% event.creator.second_given_name %]<br />
3606             Barcode: [% event.claim.lineitem_detail.barcode %]; Fund:
3607             [% event.claim.lineitem_detail.fund.code %]
3608             ([% event.claim.lineitem_detail.fund.year %])
3609         </li>
3610         [% END %]
3611     </ul>
3612 </div>
3613 $$
3614 );
3615
3616 INSERT INTO action_trigger.environment (event_def, path) VALUES
3617     (21, 'claim'),
3618     (21, 'claim.type'),
3619     (21, 'claim.lineitem_detail'),
3620     (21, 'claim.lineitem_detail.fund'),
3621     (21, 'claim.lineitem_detail.lineitem.attributes'),
3622     (21, 'claim.lineitem_detail.lineitem.purchase_order'),
3623     (21, 'creator'),
3624     (21, 'type')
3625 ;
3626
3627 INSERT INTO action_trigger.hook (key, core_type, description, passive)
3628     VALUES (
3629         'format.acqinv.html',
3630         'acqinv',
3631         'Formats invoices into a voucher',
3632         TRUE
3633     );
3634
3635 INSERT INTO action_trigger.event_definition (
3636         id, active, owner, name, hook,
3637         validator, reactor, granularity, template
3638     ) VALUES (
3639         22,
3640         TRUE,
3641         1,
3642         'Invoice',
3643         'format.acqinv.html',
3644         'NOOP_True',
3645         'ProcessTemplate',
3646         'print-on-demand',
3647 $$
3648 [% FILTER collapse %]
3649 [%- SET invoice = target -%]
3650 <!-- This lacks totals, info about funds (for invoice entries,
3651     funds are per-LID!), and general refinement -->
3652 <div class="acq-invoice-voucher">
3653     <h1>Invoice</h1>
3654     <div>
3655         <strong>No.</strong> [% invoice.inv_ident %]
3656         [% IF invoice.inv_type %]
3657             / <strong>Type:</strong>[% invoice.inv_type %]
3658         [% END %]
3659     </div>
3660     <div>
3661         <dl>
3662             [% BLOCK ent_with_address %]
3663             <dt>[% ent_label %]: [% ent.name %] ([% ent.code %])</dt>
3664             <dd>
3665                 [% IF ent.addresses.0 %]
3666                     [% SET addr = ent.addresses.0 %]
3667                     [% addr.street1 %]<br />
3668                     [% IF addr.street2 %][% addr.street2 %]<br />[% END %]
3669                     [% addr.city %],
3670                     [% IF addr.county %] [% addr.county %], [% END %]
3671                     [% IF addr.state %] [% addr.state %] [% END %]
3672                     [% IF addr.post_code %][% addr.post_code %][% END %]<br />
3673                     [% IF addr.country %] [% addr.country %] [% END %]
3674                 [% END %]
3675                 <p>
3676                     [% IF ent.phone %] Phone: [% ent.phone %]<br />[% END %]
3677                     [% IF ent.fax_phone %] Fax: [% ent.fax_phone %]<br />[% END %]
3678                     [% IF ent.url %] URL: [% ent.url %]<br />[% END %]
3679                     [% IF ent.email %] E-mail: [% ent.email %] [% END %]
3680                 </p>
3681             </dd>
3682             [% END %]
3683             [% INCLUDE ent_with_address
3684                 ent = invoice.provider
3685                 ent_label = "Provider" %]
3686             [% INCLUDE ent_with_address
3687                 ent = invoice.shipper
3688                 ent_label = "Shipper" %]
3689             <dt>Receiver</dt>
3690             <dd>
3691                 [% invoice.receiver.name %] ([% invoice.receiver.shortname %])
3692             </dd>
3693             <dt>Received</dt>
3694             <dd>
3695                 [% helpers.format_date(invoice.recv_date) %] by
3696                 [% invoice.recv_method %]
3697             </dd>
3698             [% IF invoice.note %]
3699                 <dt>Note</dt>
3700                 <dd>
3701                     [% invoice.note %]
3702                 </dd>
3703             [% END %]
3704         </dl>
3705     </div>
3706     <ul>
3707         [% FOR entry IN invoice.entries %]
3708             <li>
3709                 [% IF entry.lineitem %]
3710                     Title: [% helpers.get_li_attr(
3711                         "title", "", entry.lineitem.attributes
3712                     ) %]<br />
3713                     Author: [% helpers.get_li_attr(
3714                         "author", "", entry.lineitem.attributes
3715                     ) %]
3716                 [% END %]
3717                 [% IF entry.purchase_order %]
3718                     (PO: [% entry.purchase_order.name %])
3719                 [% END %]<br />
3720                 Invoice item count: [% entry.inv_item_count %]
3721                 [% IF entry.phys_item_count %]
3722                     / Physical item count: [% entry.phys_item_count %]
3723                 [% END %]
3724                 <br />
3725                 [% IF entry.cost_billed %]
3726                     Cost billed: [% entry.cost_billed %]
3727                     [% IF entry.billed_per_item %](per item)[% END %]
3728                     <br />
3729                 [% END %]
3730                 [% IF entry.actual_cost %]
3731                     Actual cost: [% entry.actual_cost %]<br />
3732                 [% END %]
3733                 [% IF entry.amount_paid %]
3734                     Amount paid: [% entry.amount_paid %]<br />
3735                 [% END %]
3736                 [% IF entry.note %]Note: [% entry.note %][% END %]
3737             </li>
3738         [% END %]
3739         [% FOR item IN invoice.items %]
3740             <li>
3741                 [% IF item.inv_item_type %]
3742                     Item Type: [% item.inv_item_type %]<br />
3743                 [% END %]
3744                 [% IF item.title %]Title/Description:
3745                     [% item.title %]<br />
3746                 [% END %]
3747                 [% IF item.author %]Author: [% item.author %]<br />[% END %]
3748                 [% IF item.purchase_order %]PO: [% item.purchase_order %]<br />[% END %]
3749                 [% IF item.note %]Note: [% item.note %]<br />[% END %]
3750                 [% IF item.cost_billed %]
3751                     Cost billed: [% item.cost_billed %]<br />
3752                 [% END %]
3753                 [% IF item.actual_cost %]
3754                     Actual cost: [% item.actual_cost %]<br />
3755                 [% END %]
3756                 [% IF item.amount_paid %]
3757                     Amount paid: [% item.amount_paid %]<br />
3758                 [% END %]
3759             </li>
3760         [% END %]
3761     </ul>
3762 </div>
3763 [% END %]
3764 $$
3765 );
3766
3767 INSERT INTO action_trigger.environment (event_def, path) VALUES
3768     (22, 'provider'),
3769     (22, 'provider.addresses'),
3770     (22, 'shipper'),
3771     (22, 'shipper.addresses'),
3772     (22, 'receiver'),
3773     (22, 'entries'),
3774     (22, 'entries.purchase_order'),
3775     (22, 'entries.lineitem'),
3776     (22, 'entries.lineitem.attributes'),
3777     (22, 'items')
3778 ;
3779
3780 INSERT INTO action_trigger.environment (event_def, path) VALUES 
3781   (23, 'provider.edi_default');
3782
3783 INSERT INTO action_trigger.validator (module, description) 
3784     VALUES (
3785         'Acq::PurchaseOrderEDIRequired',
3786         oils_i18n_gettext(
3787             'Acq::PurchaseOrderEDIRequired',
3788             'Purchase order is delivered via EDI',
3789             'atval',
3790             'description'
3791         )
3792     );
3793
3794 INSERT INTO action_trigger.reactor (module, description)
3795     VALUES (
3796         'GeneratePurchaseOrderJEDI',
3797         oils_i18n_gettext(
3798             'GeneratePurchaseOrderJEDI',
3799             'Creates purchase order JEDI (JSON EDI) for subsequent EDI processing',
3800             'atreact',
3801             'description'
3802         )
3803     );
3804
3805 UPDATE action_trigger.hook 
3806     SET 
3807         key = 'acqpo.activated', 
3808         passive = FALSE,
3809         description = oils_i18n_gettext(
3810             'acqpo.activated',
3811             'Purchase order was activated',
3812             'ath',
3813             'description'
3814         )
3815     WHERE key = 'format.po.jedi';
3816
3817 -- We just changed a key in action_trigger.hook.  Now redirect any
3818 -- child rows to point to the new key.  (There probably aren't any;
3819 -- this is just a precaution against possible local modifications.)
3820
3821 UPDATE action_trigger.event_definition
3822 SET hook = 'acqpo.activated'
3823 WHERE hook = 'format.po.jedi';
3824
3825 INSERT INTO action_trigger.reactor (module, description) VALUES (
3826     'AstCall', 'Possibly place a phone call with Asterisk'
3827 );
3828
3829 INSERT INTO
3830     action_trigger.event_definition (
3831         id, active, owner, name, hook, validator, reactor,
3832         cleanup_success, cleanup_failure, delay, delay_field, group_field,
3833         max_delay, granularity, usr_field, opt_in_setting, template
3834     ) VALUES (
3835         24,
3836         FALSE,
3837         1,
3838         'Telephone Overdue Notice',
3839         'checkout.due', 'NOOP_True', 'AstCall',
3840         DEFAULT, DEFAULT, '5 seconds', 'due_date', 'usr',
3841         DEFAULT, DEFAULT, DEFAULT, DEFAULT,
3842         $$
3843 [% phone = target.0.usr.day_phone | replace('[\s\-\(\)]', '') -%]
3844 [% IF phone.match('^[2-9]') %][% country = 1 %][% ELSE %][% country = '' %][% END -%]
3845 Channel: [% channel_prefix %]/[% country %][% phone %]
3846 Context: overdue-test
3847 MaxRetries: 1
3848 RetryTime: 60
3849 WaitTime: 30
3850 Extension: 10
3851 Archive: 1
3852 Set: eg_user_id=[% target.0.usr.id %]
3853 Set: items=[% target.size %]
3854 Set: titlestring=[% titles = [] %][% FOR circ IN target %][% titles.push(circ.target_copy.call_number.record.simple_record.title) %][% END %][% titles.join(". ") %]
3855 $$
3856     );
3857
3858 INSERT INTO
3859     action_trigger.environment (id, event_def, path)
3860     VALUES
3861         (DEFAULT, 24, 'target_copy.call_number.record.simple_record'),
3862         (DEFAULT, 24, 'usr')
3863     ;
3864
3865 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES (
3866         'circ.format.history.email',
3867         'circ', 
3868         oils_i18n_gettext(
3869             'circ.format.history.email',
3870             'An email has been requested for a circ history.',
3871             'ath',
3872             'description'
3873         ), 
3874         FALSE
3875     )
3876     ,(
3877         'circ.format.history.print',
3878         'circ', 
3879         oils_i18n_gettext(
3880             'circ.format.history.print',
3881             'A circ history needs to be formatted for printing.',
3882             'ath',
3883             'description'
3884         ), 
3885         FALSE
3886     )
3887     ,(
3888         'ahr.format.history.email',
3889         'ahr', 
3890         oils_i18n_gettext(
3891             'ahr.format.history.email',
3892             'An email has been requested for a hold request history.',
3893             'ath',
3894             'description'
3895         ), 
3896         FALSE
3897     )
3898     ,(
3899         'ahr.format.history.print',
3900         'ahr', 
3901         oils_i18n_gettext(
3902             'ahr.format.history.print',
3903             'A hold request history needs to be formatted for printing.',
3904             'ath',
3905             'description'
3906         ), 
3907         FALSE
3908     )
3909
3910 ;
3911
3912 INSERT INTO action_trigger.event_definition (
3913         id,
3914         active,
3915         owner,
3916         name,
3917         hook,
3918         validator,
3919         reactor,
3920         group_field,
3921         granularity,
3922         template
3923     ) VALUES (
3924         25,
3925         TRUE,
3926         1,
3927         'circ.history.email',
3928         'circ.format.history.email',
3929         'NOOP_True',
3930         'SendEmail',
3931         'usr',
3932         NULL,
3933 $$
3934 [%- USE date -%]
3935 [%- SET user = target.0.usr -%]
3936 To: [%- params.recipient_email || user.email %]
3937 From: [%- params.sender_email || default_sender %]
3938 Subject: Circulation History
3939
3940     [% FOR circ IN target %]
3941             [% helpers.get_copy_bib_basics(circ.target_copy.id).title %]
3942             Barcode: [% circ.target_copy.barcode %]
3943             Checked Out: [% date.format(helpers.format_date(circ.xact_start), '%Y-%m-%d') %]
3944             Due Date: [% date.format(helpers.format_date(circ.due_date), '%Y-%m-%d') %]
3945             Returned: [% date.format(helpers.format_date(circ.checkin_time), '%Y-%m-%d') %]
3946     [% END %]
3947 $$
3948     )
3949     ,(
3950         26,
3951         TRUE,
3952         1,
3953         'circ.history.print',
3954         'circ.format.history.print',
3955         'NOOP_True',
3956         'ProcessTemplate',
3957         'usr',
3958         'print-on-demand',
3959 $$
3960 [%- USE date -%]
3961 <div>
3962     <style> li { padding: 8px; margin 5px; }</style>
3963     <div>[% date.format %]</div>
3964     <br/>
3965
3966     [% user.family_name %], [% user.first_given_name %]
3967     <ol>
3968     [% FOR circ IN target %]
3969         <li>
3970             <div>[% helpers.get_copy_bib_basics(circ.target_copy.id).title %]</div>
3971             <div>Barcode: [% circ.target_copy.barcode %]</div>
3972             <div>Checked Out: [% date.format(helpers.format_date(circ.xact_start), '%Y-%m-%d') %]</div>
3973             <div>Due Date: [% date.format(helpers.format_date(circ.due_date), '%Y-%m-%d') %]</div>
3974             <div>Returned: [% date.format(helpers.format_date(circ.checkin_time), '%Y-%m-%d') %]</div>
3975         </li>
3976     [% END %]
3977     </ol>
3978 </div>
3979 $$
3980     )
3981     ,(
3982         27,
3983         TRUE,
3984         1,
3985         'ahr.history.email',
3986         'ahr.format.history.email',
3987         'NOOP_True',
3988         'SendEmail',
3989         'usr',
3990         NULL,
3991 $$
3992 [%- USE date -%]
3993 [%- SET user = target.0.usr -%]
3994 To: [%- params.recipient_email || user.email %]
3995 From: [%- params.sender_email || default_sender %]
3996 Subject: Hold Request History
3997
3998     [% FOR hold IN target %]
3999             [% helpers.get_copy_bib_basics(hold.current_copy.id).title %]
4000             Requested: [% date.format(helpers.format_date(hold.request_time), '%Y-%m-%d') %]
4001             [% IF hold.fulfillment_time %]Fulfilled: [% date.format(helpers.format_date(hold.fulfillment_time), '%Y-%m-%d') %][% END %]
4002     [% END %]
4003 $$
4004     )
4005     ,(
4006         28,
4007         TRUE,
4008         1,
4009         'ahr.history.print',
4010         'ahr.format.history.print',
4011         'NOOP_True',
4012         'ProcessTemplate',
4013         'usr',
4014         'print-on-demand',
4015 $$
4016 [%- USE date -%]
4017 <div>
4018     <style> li { padding: 8px; margin 5px; }</style>
4019     <div>[% date.format %]</div>
4020     <br/>
4021
4022     [% user.family_name %], [% user.first_given_name %]
4023     <ol>
4024     [% FOR hold IN target %]
4025         <li>
4026             <div>[% helpers.get_copy_bib_basics(hold.current_copy.id).title %]</div>
4027             <div>Requested: [% date.format(helpers.format_date(hold.request_time), '%Y-%m-%d') %]</div>
4028             [% IF hold.fulfillment_time %]<div>Fulfilled: [% date.format(helpers.format_date(hold.fulfillment_time), '%Y-%m-%d') %]</div>[% END %]
4029         </li>
4030     [% END %]
4031     </ol>
4032 </div>
4033 $$
4034     )
4035
4036 ;
4037
4038 INSERT INTO action_trigger.environment (
4039         event_def,
4040         path
4041     ) VALUES 
4042          ( 25, 'target_copy')
4043         ,( 25, 'usr' )
4044         ,( 26, 'target_copy' )
4045         ,( 26, 'usr' )
4046         ,( 27, 'current_copy' )
4047         ,( 27, 'usr' )
4048         ,( 28, 'current_copy' )
4049         ,( 28, 'usr' )
4050 ;
4051
4052 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES (
4053         'money.format.payment_receipt.email',
4054         'mp', 
4055         oils_i18n_gettext(
4056             'money.format.payment_receipt.email',
4057             'An email has been requested for a payment receipt.',
4058             'ath',
4059             'description'
4060         ), 
4061         FALSE
4062     )
4063     ,(
4064         'money.format.payment_receipt.print',
4065         'mp', 
4066         oils_i18n_gettext(
4067             'money.format.payment_receipt.print',
4068             'A payment receipt needs to be formatted for printing.',
4069             'ath',
4070             'description'
4071         ), 
4072         FALSE
4073     )
4074 ;
4075
4076 INSERT INTO action_trigger.event_definition (
4077         id,
4078         active,
4079         owner,
4080         name,
4081         hook,
4082         validator,
4083         reactor,
4084         group_field,
4085         granularity,
4086         template
4087     ) VALUES (
4088         29,
4089         TRUE,
4090         1,
4091         'money.payment_receipt.email',
4092         'money.format.payment_receipt.email',
4093         'NOOP_True',
4094         'SendEmail',
4095         'xact.usr',
4096         NULL,
4097 $$
4098 [%- USE date -%]
4099 [%- SET user = target.0.xact.usr -%]
4100 To: [%- params.recipient_email || user.email %]
4101 From: [%- params.sender_email || default_sender %]
4102 Subject: Payment Receipt
4103
4104 [% date.format -%]
4105 [%- SET xact_mp_hash = {} -%]
4106 [%- FOR mp IN target %][%# Template is hooked around payments, but let us make the receipt focused on transactions -%]
4107     [%- SET xact_id = mp.xact.id -%]
4108     [%- IF ! xact_mp_hash.defined( xact_id ) -%][%- xact_mp_hash.$xact_id = { 'xact' => mp.xact, 'payments' => [] } -%][%- END -%]
4109     [%- xact_mp_hash.$xact_id.payments.push(mp) -%]
4110 [%- END -%]
4111 [%- FOR xact_id IN xact_mp_hash.keys.sort -%]
4112     [%- SET xact = xact_mp_hash.$xact_id.xact %]
4113 Transaction ID: [% xact_id %]
4114     [% IF xact.circulation %][% helpers.get_copy_bib_basics(xact.circulation.target_copy).title %]
4115     [% ELSE %]Miscellaneous
4116     [% END %]
4117     Line item billings:
4118         [%- SET mb_type_hash = {} -%]
4119         [%- FOR mb IN xact.billings %][%# Group billings by their btype -%]
4120             [%- IF mb.voided == 'f' -%]
4121                 [%- SET mb_type = mb.btype.id -%]
4122                 [%- IF ! mb_type_hash.defined( mb_type ) -%][%- mb_type_hash.$mb_type = { 'sum' => 0.00, 'billings' => [] } -%][%- END -%]
4123                 [%- IF ! mb_type_hash.$mb_type.defined( 'first_ts' ) -%][%- mb_type_hash.$mb_type.first_ts = mb.billing_ts -%][%- END -%]
4124                 [%- mb_type_hash.$mb_type.last_ts = mb.billing_ts -%]
4125                 [%- mb_type_hash.$mb_type.sum = mb_type_hash.$mb_type.sum + mb.amount -%]
4126                 [%- mb_type_hash.$mb_type.billings.push( mb ) -%]
4127             [%- END -%]
4128         [%- END -%]
4129         [%- FOR mb_type IN mb_type_hash.keys.sort -%]
4130             [%- IF mb_type == 1 %][%-# Consolidated view of overdue billings -%]
4131                 $[% mb_type_hash.$mb_type.sum %] for [% mb_type_hash.$mb_type.billings.0.btype.name %] 
4132                     on [% mb_type_hash.$mb_type.first_ts %] through [% mb_type_hash.$mb_type.last_ts %]
4133             [%- ELSE -%][%# all other billings show individually %]
4134                 [% FOR mb IN mb_type_hash.$mb_type.billings %]
4135                     $[% mb.amount %] for [% mb.btype.name %] on [% mb.billing_ts %] [% mb.note %]
4136                 [% END %]
4137             [% END %]
4138         [% END %]
4139     Line item payments:
4140         [% FOR mp IN xact_mp_hash.$xact_id.payments %]
4141             Payment ID: [% mp.id %]
4142                 Paid [% mp.amount %] via [% SWITCH mp.payment_type -%]
4143                     [% CASE "cash_payment" %]cash
4144                     [% CASE "check_payment" %]check
4145                     [% CASE "credit_card_payment" %]credit card (
4146                         [%- SET cc_chunks = mp.credit_card_payment.cc_number.replace(' ','').chunk(4); -%]
4147                         [%- cc_chunks.slice(0, -1+cc_chunks.max).join.replace('\S','X') -%] 
4148                         [% cc_chunks.last -%]
4149                         exp [% mp.credit_card_payment.expire_month %]/[% mp.credit_card_payment.expire_year -%]
4150                     )
4151                     [% CASE "credit_payment" %]credit
4152                     [% CASE "forgive_payment" %]forgiveness
4153                     [% CASE "goods_payment" %]goods
4154                     [% CASE "work_payment" %]work
4155                 [%- END %] on [% mp.payment_ts %] [% mp.note %]
4156         [% END %]
4157 [% END %]
4158 $$
4159     )
4160     ,(
4161         30,
4162         TRUE,
4163         1,
4164         'money.payment_receipt.print',
4165         'money.format.payment_receipt.print',
4166         'NOOP_True',
4167         'ProcessTemplate',
4168         'xact.usr',
4169         'print-on-demand',
4170 $$
4171 [%- USE date -%][%- SET user = target.0.xact.usr -%]
4172 <div style="li { padding: 8px; margin 5px; }">
4173     <div>[% date.format %]</div><br/>
4174     <ol>
4175     [% SET xact_mp_hash = {} %]
4176     [% FOR mp IN target %][%# Template is hooked around payments, but let us make the receipt focused on transactions %]
4177         [% SET xact_id = mp.xact.id %]
4178         [% IF ! xact_mp_hash.defined( xact_id ) %][% xact_mp_hash.$xact_id = { 'xact' => mp.xact, 'payments' => [] } %][% END %]
4179         [% xact_mp_hash.$xact_id.payments.push(mp) %]
4180     [% END %]
4181     [% FOR xact_id IN xact_mp_hash.keys.sort %]
4182         [% SET xact = xact_mp_hash.$xact_id.xact %]
4183         <li>Transaction ID: [% xact_id %]
4184             [% IF xact.circulation %][% helpers.get_copy_bib_basics(xact.circulation.target_copy).title %]
4185             [% ELSE %]Miscellaneous
4186             [% END %]
4187             Line item billings:<ol>
4188                 [% SET mb_type_hash = {} %]
4189                 [% FOR mb IN xact.billings %][%# Group billings by their btype %]
4190                     [% IF mb.voided == 'f' %]
4191                         [% SET mb_type = mb.btype.id %]
4192                         [% IF ! mb_type_hash.defined( mb_type ) %][% mb_type_hash.$mb_type = { 'sum' => 0.00, 'billings' => [] } %][% END %]
4193                         [% IF ! mb_type_hash.$mb_type.defined( 'first_ts' ) %][% mb_type_hash.$mb_type.first_ts = mb.billing_ts %][% END %]
4194                         [% mb_type_hash.$mb_type.last_ts = mb.billing_ts %]
4195                         [% mb_type_hash.$mb_type.sum = mb_type_hash.$mb_type.sum + mb.amount %]
4196                         [% mb_type_hash.$mb_type.billings.push( mb ) %]
4197                     [% END %]
4198                 [% END %]
4199                 [% FOR mb_type IN mb_type_hash.keys.sort %]
4200                     <li>[% IF mb_type == 1 %][%# Consolidated view of overdue billings %]
4201                         $[% mb_type_hash.$mb_type.sum %] for [% mb_type_hash.$mb_type.billings.0.btype.name %] 
4202                             on [% mb_type_hash.$mb_type.first_ts %] through [% mb_type_hash.$mb_type.last_ts %]
4203                     [% ELSE %][%# all other billings show individually %]
4204                         [% FOR mb IN mb_type_hash.$mb_type.billings %]
4205                             $[% mb.amount %] for [% mb.btype.name %] on [% mb.billing_ts %] [% mb.note %]
4206                         [% END %]
4207                     [% END %]</li>
4208                 [% END %]
4209             </ol>
4210             Line item payments:<ol>
4211                 [% FOR mp IN xact_mp_hash.$xact_id.payments %]
4212                     <li>Payment ID: [% mp.id %]
4213                         Paid [% mp.amount %] via [% SWITCH mp.payment_type -%]
4214                             [% CASE "cash_payment" %]cash
4215                             [% CASE "check_payment" %]check
4216                             [% CASE "credit_card_payment" %]credit card (
4217                                 [%- SET cc_chunks = mp.credit_card_payment.cc_number.replace(' ','').chunk(4); -%]
4218                                 [%- cc_chunks.slice(0, -1+cc_chunks.max).join.replace('\S','X') -%] 
4219                                 [% cc_chunks.last -%]
4220                                 exp [% mp.credit_card_payment.expire_month %]/[% mp.credit_card_payment.expire_year -%]
4221                             )
4222                             [% CASE "credit_payment" %]credit
4223                             [% CASE "forgive_payment" %]forgiveness
4224                             [% CASE "goods_payment" %]goods
4225                             [% CASE "work_payment" %]work
4226                         [%- END %] on [% mp.payment_ts %] [% mp.note %]
4227                     </li>
4228                 [% END %]
4229             </ol>
4230         </li>
4231     [% END %]
4232     </ol>
4233 </div>
4234 $$
4235     )
4236 ;
4237
4238 INSERT INTO action_trigger.environment (
4239         event_def,
4240         path
4241     ) VALUES -- for fleshing mp objects
4242          ( 29, 'xact')
4243         ,( 29, 'xact.usr')
4244         ,( 29, 'xact.grocery' )
4245         ,( 29, 'xact.circulation' )
4246         ,( 29, 'xact.summary' )
4247         ,( 30, 'xact')
4248         ,( 30, 'xact.usr')
4249         ,( 30, 'xact.grocery' )
4250         ,( 30, 'xact.circulation' )
4251         ,( 30, 'xact.summary' )
4252 ;
4253
4254 INSERT INTO action_trigger.cleanup ( module, description ) VALUES (
4255     'DeleteTempBiblioBucket',
4256     oils_i18n_gettext(
4257         'DeleteTempBiblioBucket',
4258         'Deletes a cbreb object used as a target if it has a btype of "temp"',
4259         'atclean',
4260         'description'
4261     )
4262 );
4263
4264 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES (
4265         'biblio.format.record_entry.email',
4266         'cbreb', 
4267         oils_i18n_gettext(
4268             'biblio.format.record_entry.email',
4269             'An email has been requested for one or more biblio record entries.',
4270             'ath',
4271             'description'
4272         ), 
4273         FALSE
4274     )
4275     ,(
4276         'biblio.format.record_entry.print',
4277         'cbreb', 
4278         oils_i18n_gettext(
4279             'biblio.format.record_entry.print',
4280             'One or more biblio record entries need to be formatted for printing.',
4281             'ath',
4282             'description'
4283         ), 
4284         FALSE
4285     )
4286 ;
4287
4288 INSERT INTO action_trigger.event_definition (
4289         id,
4290         active,
4291         owner,
4292         name,
4293         hook,
4294         validator,
4295         reactor,
4296         cleanup_success,
4297         cleanup_failure,
4298         group_field,
4299         granularity,
4300         template
4301     ) VALUES (
4302         31,
4303         TRUE,
4304         1,
4305         'biblio.record_entry.email',
4306         'biblio.format.record_entry.email',
4307         'NOOP_True',
4308         'SendEmail',
4309         'DeleteTempBiblioBucket',
4310         'DeleteTempBiblioBucket',
4311         'owner',
4312         NULL,
4313 $$
4314 [%- USE date -%]
4315 [%- SET user = target.0.owner -%]
4316 To: [%- params.recipient_email || user.email %]
4317 From: [%- params.sender_email || default_sender %]
4318 Subject: Bibliographic Records
4319
4320     [% FOR cbreb IN target %]
4321     [% FOR cbrebi IN cbreb.items %]
4322         Bib ID# [% cbrebi.target_biblio_record_entry.id %] ISBN: [% crebi.target_biblio_record_entry.simple_record.isbn %]
4323         Title: [% cbrebi.target_biblio_record_entry.simple_record.title %]
4324         Author: [% cbrebi.target_biblio_record_entry.simple_record.author %]
4325         Publication Year: [% cbrebi.target_biblio_record_entry.simple_record.pubdate %]
4326
4327     [% END %]
4328     [% END %]
4329 $$
4330     )
4331     ,(
4332         32,
4333         TRUE,
4334         1,
4335         'biblio.record_entry.print',
4336         'biblio.format.record_entry.print',
4337         'NOOP_True',
4338         'ProcessTemplate',
4339         'DeleteTempBiblioBucket',
4340         'DeleteTempBiblioBucket',
4341         'owner',
4342         'print-on-demand',
4343 $$
4344 [%- USE date -%]
4345 <div>
4346     <style> li { padding: 8px; margin 5px; }</style>
4347     <ol>
4348     [% FOR cbreb IN target %]
4349     [% FOR cbrebi IN cbreb.items %]
4350         <li>Bib ID# [% cbrebi.target_biblio_record_entry.id %] ISBN: [% crebi.target_biblio_record_entry.simple_record.isbn %]<br />
4351             Title: [% cbrebi.target_biblio_record_entry.simple_record.title %]<br />
4352             Author: [% cbrebi.target_biblio_record_entry.simple_record.author %]<br />
4353             Publication Year: [% cbrebi.target_biblio_record_entry.simple_record.pubdate %]
4354         </li>
4355     [% END %]
4356     [% END %]
4357     </ol>
4358 </div>
4359 $$
4360     )
4361 ;
4362
4363 INSERT INTO action_trigger.environment (
4364         event_def,
4365         path
4366     ) VALUES -- for fleshing cbreb objects
4367          ( 31, 'owner' )
4368         ,( 31, 'items' )
4369         ,( 31, 'items.target_biblio_record_entry' )
4370         ,( 31, 'items.target_biblio_record_entry.simple_record' )
4371         ,( 31, 'items.target_biblio_record_entry.call_numbers' )
4372         ,( 31, 'items.target_biblio_record_entry.fixed_fields' )
4373         ,( 31, 'items.target_biblio_record_entry.notes' )
4374         ,( 31, 'items.target_biblio_record_entry.full_record_entries' )
4375         ,( 32, 'owner' )
4376         ,( 32, 'items' )
4377         ,( 32, 'items.target_biblio_record_entry' )
4378         ,( 32, 'items.target_biblio_record_entry.simple_record' )
4379         ,( 32, 'items.target_biblio_record_entry.call_numbers' )
4380         ,( 32, 'items.target_biblio_record_entry.fixed_fields' )
4381         ,( 32, 'items.target_biblio_record_entry.notes' )
4382         ,( 32, 'items.target_biblio_record_entry.full_record_entries' )
4383 ;
4384
4385 INSERT INTO action_trigger.environment (
4386         event_def,
4387         path
4388     ) VALUES -- for fleshing mp objects
4389          ( 29, 'credit_card_payment')
4390         ,( 29, 'xact.billings')
4391         ,( 29, 'xact.billings.btype')
4392         ,( 30, 'credit_card_payment')
4393         ,( 30, 'xact.billings')
4394         ,( 30, 'xact.billings.btype')
4395 ;
4396
4397 INSERT INTO action_trigger.hook (key,core_type,description,passive) VALUES 
4398     (   'circ.format.missing_pieces.slip.print',
4399         'circ', 
4400         oils_i18n_gettext(
4401             'circ.format.missing_pieces.slip.print',
4402             'A missing pieces slip needs to be formatted for printing.',
4403             'ath',
4404             'description'
4405         ), 
4406         FALSE
4407     )
4408     ,(  'circ.format.missing_pieces.letter.print',
4409         'circ', 
4410         oils_i18n_gettext(
4411             'circ.format.missing_pieces.letter.print',
4412             'A missing pieces patron letter needs to be formatted for printing.',
4413             'ath',
4414             'description'
4415         ), 
4416         FALSE
4417     )
4418 ;
4419
4420 INSERT INTO action_trigger.event_definition (
4421         id,
4422         active,
4423         owner,
4424         name,
4425         hook,
4426         validator,
4427         reactor,
4428         group_field,
4429         granularity,
4430         template
4431     ) VALUES (
4432         33,
4433         TRUE,
4434         1,
4435         'circ.missing_pieces.slip.print',
4436         'circ.format.missing_pieces.slip.print',
4437         'NOOP_True',
4438         'ProcessTemplate',
4439         'usr',
4440         'print-on-demand',
4441 $$
4442 [%- USE date -%]
4443 [%- SET user = target.0.usr -%]
4444 <div style="li { padding: 8px; margin 5px; }">
4445     <div>[% date.format %]</div><br/>
4446     Missing pieces for:
4447     <ol>
4448     [% FOR circ IN target %]
4449         <li>Barcode: [% circ.target_copy.barcode %] Transaction ID: [% circ.id %] Due: [% circ.due_date.format %]<br />
4450             [% helpers.get_copy_bib_basics(circ.target_copy.id).title %]
4451         </li>
4452     [% END %]
4453     </ol>
4454 </div>
4455 $$
4456     )
4457     ,(
4458         34,
4459         TRUE,
4460         1,
4461         'circ.missing_pieces.letter.print',
4462         'circ.format.missing_pieces.letter.print',
4463         'NOOP_True',
4464         'ProcessTemplate',
4465         'usr',
4466         'print-on-demand',
4467 $$
4468 [%- USE date -%]
4469 [%- SET user = target.0.usr -%]
4470 [% date.format %]
4471 Dear [% user.prefix %] [% user.first_given_name %] [% user.family_name %],
4472
4473 We are missing pieces for the following returned items:
4474 [% FOR circ IN target %]
4475 Barcode: [% circ.target_copy.barcode %] Transaction ID: [% circ.id %] Due: [% circ.due_date.format %]
4476 [% helpers.get_copy_bib_basics(circ.target_copy.id).title %]
4477 [% END %]
4478
4479 Please return these pieces as soon as possible.
4480
4481 Thanks!
4482
4483 Library Staff
4484 $$
4485     )
4486 ;
4487
4488 INSERT INTO action_trigger.environment (
4489         event_def,
4490         path
4491     ) VALUES -- for fleshing circ objects
4492          ( 33, 'usr')
4493         ,( 33, 'target_copy')
4494         ,( 33, 'target_copy.circ_lib')
4495         ,( 33, 'target_copy.circ_lib.mailing_address')
4496         ,( 33, 'target_copy.circ_lib.billing_address')
4497         ,( 33, 'target_copy.call_number')
4498         ,( 33, 'target_copy.call_number.owning_lib')
4499         ,( 33, 'target_copy.call_number.owning_lib.mailing_address')
4500         ,( 33, 'target_copy.call_number.owning_lib.billing_address')
4501         ,( 33, 'circ_lib')
4502         ,( 33, 'circ_lib.mailing_address')
4503         ,( 33, 'circ_lib.billing_address')
4504         ,( 34, 'usr')
4505         ,( 34, 'target_copy')
4506         ,( 34, 'target_copy.circ_lib')
4507         ,( 34, 'target_copy.circ_lib.mailing_address')
4508         ,( 34, 'target_copy.circ_lib.billing_address')
4509         ,( 34, 'target_copy.call_number')
4510         ,( 34, 'target_copy.call_number.owning_lib')
4511         ,( 34, 'target_copy.call_number.owning_lib.mailing_address')
4512         ,( 34, 'target_copy.call_number.owning_lib.billing_address')
4513         ,( 34, 'circ_lib')
4514         ,( 34, 'circ_lib.mailing_address')
4515         ,( 34, 'circ_lib.billing_address')
4516 ;
4517
4518 INSERT INTO action_trigger.hook (key,core_type,description,passive) 
4519     VALUES (   
4520         'ahr.format.pull_list',
4521         'ahr', 
4522         oils_i18n_gettext(
4523             'ahr.format.pull_list',
4524             'Format holds pull list for printing',
4525             'ath',
4526             'description'
4527         ), 
4528         FALSE
4529     );
4530
4531 INSERT INTO action_trigger.event_definition (
4532         id,
4533         active,
4534         owner,
4535         name,
4536         hook,
4537         validator,
4538         reactor,
4539         group_field,
4540         granularity,
4541         template
4542     ) VALUES (
4543         35,
4544         TRUE,
4545         1,
4546         'Holds Pull List',
4547         'ahr.format.pull_list',
4548         'NOOP_True',
4549         'ProcessTemplate',
4550         'pickup_lib',
4551         'print-on-demand',
4552 $$
4553 [%- USE date -%]
4554 <style>
4555     table { border-collapse: collapse; } 
4556     td { padding: 5px; border-bottom: 1px solid #888; } 
4557     th { font-weight: bold; }
4558 </style>
4559 [% 
4560     # Sort the holds into copy-location buckets
4561     # In the main print loop, sort each bucket by callnumber before printing
4562     SET holds_list = [];
4563     SET loc_data = [];
4564     SET current_location = target.0.current_copy.location.id;
4565     FOR hold IN target;
4566         IF current_location != hold.current_copy.location.id;
4567             SET current_location = hold.current_copy.location.id;
4568             holds_list.push(loc_data);
4569             SET loc_data = [];
4570         END;
4571         SET hold_data = {
4572             'hold' => hold,
4573             'callnumber' => hold.current_copy.call_number.label
4574         };
4575         loc_data.push(hold_data);
4576     END;
4577     holds_list.push(loc_data)
4578 %]
4579 <table>
4580     <thead>
4581         <tr>
4582             <th>Title</th>
4583             <th>Author</th>
4584             <th>Shelving Location</th>
4585             <th>Call Number</th>
4586             <th>Barcode</th>
4587             <th>Patron</th>
4588         </tr>
4589     </thead>
4590     <tbody>
4591     [% FOR loc_data IN holds_list  %]
4592         [% FOR hold_data IN loc_data.sort('callnumber') %]
4593             [% 
4594                 SET hold = hold_data.hold;
4595                 SET copy_data = helpers.get_copy_bib_basics(hold.current_copy.id);
4596             %]
4597             <tr>
4598                 <td>[% copy_data.title | truncate %]</td>
4599                 <td>[% copy_data.author | truncate %]</td>
4600                 <td>[% hold.current_copy.location.name %]</td>
4601                 <td>[% hold.current_copy.call_number.label %]</td>
4602                 <td>[% hold.current_copy.barcode %]</td>
4603                 <td>[% hold.usr.card.barcode %]</td>
4604             </tr>
4605         [% END %]
4606     [% END %]
4607     <tbody>
4608 </table>
4609 $$
4610 );
4611
4612 INSERT INTO action_trigger.environment (
4613         event_def,
4614         path
4615     ) VALUES
4616         (35, 'current_copy.location'),
4617         (35, 'current_copy.call_number'),
4618         (35, 'usr.card'),
4619         (35, 'pickup_lib')
4620 ;
4621
4622 -- Create the query schema, and the tables and views therein
4623
4624 DROP SCHEMA IF EXISTS sql CASCADE;
4625 DROP SCHEMA IF EXISTS query CASCADE;
4626
4627 CREATE SCHEMA query;
4628
4629 CREATE TABLE query.datatype (
4630         id              SERIAL            PRIMARY KEY,
4631         datatype_name   TEXT              NOT NULL UNIQUE,
4632         is_numeric      BOOL              NOT NULL DEFAULT FALSE,
4633         is_composite    BOOL              NOT NULL DEFAULT FALSE,
4634         CONSTRAINT qdt_comp_not_num CHECK
4635         ( is_numeric IS FALSE OR is_composite IS FALSE )
4636 );
4637
4638 -- Define the most common datatypes in query.datatype.  Note that none of
4639 -- these stock datatypes specifies a width or precision.
4640
4641 -- Also: set the sequence for query.datatype to 1000, leaving plenty of
4642 -- room for more stock datatypes if we ever want to add them.
4643
4644 SELECT setval( 'query.datatype_id_seq', 1000 );
4645
4646 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4647   VALUES (1, 'SMALLINT', true);
4648  
4649 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4650   VALUES (2, 'INTEGER', true);
4651  
4652 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4653   VALUES (3, 'BIGINT', true);
4654  
4655 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4656   VALUES (4, 'DECIMAL', true);
4657  
4658 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4659   VALUES (5, 'NUMERIC', true);
4660  
4661 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4662   VALUES (6, 'REAL', true);
4663  
4664 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4665   VALUES (7, 'DOUBLE PRECISION', true);
4666  
4667 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4668   VALUES (8, 'SERIAL', true);
4669  
4670 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4671   VALUES (9, 'BIGSERIAL', true);
4672  
4673 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4674   VALUES (10, 'MONEY', false);
4675  
4676 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4677   VALUES (11, 'VARCHAR', false);
4678  
4679 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4680   VALUES (12, 'CHAR', false);
4681  
4682 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4683   VALUES (13, 'TEXT', false);
4684  
4685 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4686   VALUES (14, '"char"', false);
4687  
4688 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4689   VALUES (15, 'NAME', false);
4690  
4691 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4692   VALUES (16, 'BYTEA', false);
4693  
4694 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4695   VALUES (17, 'TIMESTAMP WITHOUT TIME ZONE', false);
4696  
4697 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4698   VALUES (18, 'TIMESTAMP WITH TIME ZONE', false);
4699  
4700 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4701   VALUES (19, 'DATE', false);
4702  
4703 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4704   VALUES (20, 'TIME WITHOUT TIME ZONE', false);
4705  
4706 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4707   VALUES (21, 'TIME WITH TIME ZONE', false);
4708  
4709 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4710   VALUES (22, 'INTERVAL', false);
4711  
4712 INSERT INTO query.datatype (id, datatype_name, is_numeric )
4713   VALUES (23, 'BOOLEAN', false);
4714  
4715 CREATE TABLE query.subfield (
4716         id              SERIAL            PRIMARY KEY,
4717         composite_type  INT               NOT NULL
4718                                           REFERENCES query.datatype(id)
4719                                           ON DELETE CASCADE
4720                                           DEFERRABLE INITIALLY DEFERRED,
4721         seq_no          INT               NOT NULL
4722                                           CONSTRAINT qsf_pos_seq_no
4723                                           CHECK( seq_no > 0 ),
4724         subfield_type   INT               NOT NULL
4725                                           REFERENCES query.datatype(id)
4726                                           DEFERRABLE INITIALLY DEFERRED,
4727         CONSTRAINT qsf_datatype_seq_no UNIQUE (composite_type, seq_no)
4728 );
4729
4730 CREATE TABLE query.function_sig (
4731         id              SERIAL            PRIMARY KEY,
4732         function_name   TEXT              NOT NULL,
4733         return_type     INT               REFERENCES query.datatype(id)
4734                                           DEFERRABLE INITIALLY DEFERRED,
4735         is_aggregate    BOOL              NOT NULL DEFAULT FALSE,
4736         CONSTRAINT qfd_rtn_or_aggr CHECK
4737         ( return_type IS NULL OR is_aggregate = FALSE )
4738 );
4739
4740 CREATE INDEX query_function_sig_name_idx 
4741         ON query.function_sig (function_name);
4742
4743 CREATE TABLE query.function_param_def (
4744         id              SERIAL            PRIMARY KEY,
4745         function_id     INT               NOT NULL
4746                                           REFERENCES query.function_sig( id )
4747                                           ON DELETE CASCADE
4748                                           DEFERRABLE INITIALLY DEFERRED,
4749         seq_no          INT               NOT NULL
4750                                           CONSTRAINT qfpd_pos_seq_no CHECK
4751                                           ( seq_no > 0 ),
4752         datatype        INT               NOT NULL
4753                                           REFERENCES query.datatype( id )
4754                                           DEFERRABLE INITIALLY DEFERRED,
4755         CONSTRAINT qfpd_function_param_seq UNIQUE (function_id, seq_no)
4756 );
4757
4758 CREATE TABLE  query.stored_query (
4759         id            SERIAL         PRIMARY KEY,
4760         type          TEXT           NOT NULL CONSTRAINT query_type CHECK
4761                                      ( type IN ( 'SELECT', 'UNION', 'INTERSECT', 'EXCEPT' ) ),
4762         use_all       BOOLEAN        NOT NULL DEFAULT FALSE,
4763         use_distinct  BOOLEAN        NOT NULL DEFAULT FALSE,
4764         from_clause   INT            , --REFERENCES query.from_clause
4765                                      --DEFERRABLE INITIALLY DEFERRED,
4766         where_clause  INT            , --REFERENCES query.expression
4767                                      --DEFERRABLE INITIALLY DEFERRED,
4768         having_clause INT            , --REFERENCES query.expression
4769                                      --DEFERRABLE INITIALLY DEFERRED
4770         limit_count   INT            , --REFERENCES query.expression( id )
4771                                      --DEFERRABLE INITIALLY DEFERRED,
4772         offset_count  INT            --REFERENCES query.expression( id )
4773                                      --DEFERRABLE INITIALLY DEFERRED
4774 );
4775
4776 -- (Foreign keys to be defined later after other tables are created)
4777
4778 CREATE TABLE query.query_sequence (
4779         id              SERIAL            PRIMARY KEY,
4780         parent_query    INT               NOT NULL
4781                                           REFERENCES query.stored_query
4782                                                                           ON DELETE CASCADE
4783                                                                           DEFERRABLE INITIALLY DEFERRED,
4784         seq_no          INT               NOT NULL,
4785         child_query     INT               NOT NULL
4786                                           REFERENCES query.stored_query
4787                                                                           ON DELETE CASCADE
4788                                                                           DEFERRABLE INITIALLY DEFERRED,
4789         CONSTRAINT query_query_seq UNIQUE( parent_query, seq_no )
4790 );
4791
4792 CREATE TABLE query.bind_variable (
4793         name          TEXT             PRIMARY KEY,
4794         type          TEXT             NOT NULL
4795                                            CONSTRAINT bind_variable_type CHECK
4796                                            ( type in ( 'string', 'number', 'string_list', 'number_list' )),
4797         description   TEXT             NOT NULL,
4798         default_value TEXT,            -- to be encoded in JSON
4799         label         TEXT             NOT NULL
4800 );
4801
4802 CREATE TABLE query.expression (
4803         id            SERIAL        PRIMARY KEY,
4804         type          TEXT          NOT NULL CONSTRAINT expression_type CHECK
4805                                     ( type IN (
4806                                     'xbet',    -- between
4807                                     'xbind',   -- bind variable
4808                                     'xbool',   -- boolean
4809                                     'xcase',   -- case
4810                                     'xcast',   -- cast
4811                                     'xcol',    -- column
4812                                     'xex',     -- exists
4813                                     'xfunc',   -- function
4814                                     'xin',     -- in
4815                                     'xisnull', -- is null
4816                                     'xnull',   -- null
4817                                     'xnum',    -- number
4818                                     'xop',     -- operator
4819                                     'xser',    -- series
4820                                     'xstr',    -- string
4821                                     'xsubq'    -- subquery
4822                                                                 ) ),
4823         parenthesize  BOOL          NOT NULL DEFAULT FALSE,
4824         parent_expr   INT           REFERENCES query.expression
4825                                     ON DELETE CASCADE
4826                                     DEFERRABLE INITIALLY DEFERRED,
4827         seq_no        INT           NOT NULL DEFAULT 1,
4828         literal       TEXT,
4829         table_alias   TEXT,
4830         column_name   TEXT,
4831         left_operand  INT           REFERENCES query.expression
4832                                     DEFERRABLE INITIALLY DEFERRED,
4833         operator      TEXT,
4834         right_operand INT           REFERENCES query.expression
4835                                     DEFERRABLE INITIALLY DEFERRED,
4836         function_id   INT           REFERENCES query.function_sig
4837                                     DEFERRABLE INITIALLY DEFERRED,
4838         subquery      INT           REFERENCES query.stored_query
4839                                     DEFERRABLE INITIALLY DEFERRED,
4840         cast_type     INT           REFERENCES query.datatype
4841                                     DEFERRABLE INITIALLY DEFERRED,
4842         negate        BOOL          NOT NULL DEFAULT FALSE,
4843         bind_variable TEXT          REFERENCES query.bind_variable
4844                                         DEFERRABLE INITIALLY DEFERRED
4845 );
4846
4847 CREATE UNIQUE INDEX query_expr_parent_seq
4848         ON query.expression( parent_expr, seq_no )
4849         WHERE parent_expr IS NOT NULL;
4850
4851 -- Due to some circular references, the following foreign key definitions
4852 -- had to be deferred until query.expression existed:
4853
4854 ALTER TABLE query.stored_query
4855         ADD FOREIGN KEY ( where_clause )
4856         REFERENCES query.expression( id )
4857         DEFERRABLE INITIALLY DEFERRED;
4858
4859 ALTER TABLE query.stored_query
4860         ADD FOREIGN KEY ( having_clause )
4861         REFERENCES query.expression( id )
4862         DEFERRABLE INITIALLY DEFERRED;
4863
4864 ALTER TABLE query.stored_query
4865     ADD FOREIGN KEY ( limit_count )
4866     REFERENCES query.expression( id )
4867     DEFERRABLE INITIALLY DEFERRED;
4868
4869 ALTER TABLE query.stored_query
4870     ADD FOREIGN KEY ( offset_count )
4871     REFERENCES query.expression( id )
4872     DEFERRABLE INITIALLY DEFERRED;
4873
4874 CREATE TABLE query.case_branch (
4875         id            SERIAL        PRIMARY KEY,
4876         parent_expr   INT           NOT NULL REFERENCES query.expression
4877                                     ON DELETE CASCADE
4878                                     DEFERRABLE INITIALLY DEFERRED,
4879         seq_no        INT           NOT NULL,
4880         condition     INT           REFERENCES query.expression
4881                                     DEFERRABLE INITIALLY DEFERRED,
4882         result        INT           NOT NULL REFERENCES query.expression
4883                                     DEFERRABLE INITIALLY DEFERRED,
4884         CONSTRAINT case_branch_parent_seq UNIQUE (parent_expr, seq_no)
4885 );
4886
4887 CREATE TABLE query.from_relation (
4888         id               SERIAL        PRIMARY KEY,
4889         type             TEXT          NOT NULL CONSTRAINT relation_type CHECK (
4890                                            type IN ( 'RELATION', 'SUBQUERY', 'FUNCTION' ) ),
4891         table_name       TEXT,
4892         class_name       TEXT,
4893         subquery         INT           REFERENCES query.stored_query,
4894         function_call    INT           REFERENCES query.expression,
4895         table_alias      TEXT,
4896         parent_relation  INT           REFERENCES query.from_relation
4897                                        ON DELETE CASCADE
4898                                        DEFERRABLE INITIALLY DEFERRED,
4899         seq_no           INT           NOT NULL DEFAULT 1,
4900         join_type        TEXT          CONSTRAINT good_join_type CHECK (
4901                                            join_type IS NULL OR join_type IN
4902                                            ( 'INNER', 'LEFT', 'RIGHT', 'FULL' )
4903                                        ),
4904         on_clause        INT           REFERENCES query.expression
4905                                        DEFERRABLE INITIALLY DEFERRED,
4906         CONSTRAINT join_or_core CHECK (
4907         ( parent_relation IS NULL AND join_type IS NULL
4908           AND on_clause IS NULL )
4909         OR
4910         ( parent_relation IS NOT NULL AND join_type IS NOT NULL
4911           AND on_clause IS NOT NULL )
4912         )
4913 );
4914
4915 CREATE UNIQUE INDEX from_parent_seq
4916         ON query.from_relation( parent_relation, seq_no )
4917         WHERE parent_relation IS NOT NULL;
4918
4919 -- The following foreign key had to be deferred until
4920 -- query.from_relation existed
4921
4922 ALTER TABLE query.stored_query
4923         ADD FOREIGN KEY (from_clause)
4924         REFERENCES query.from_relation
4925         DEFERRABLE INITIALLY DEFERRED;
4926
4927 CREATE TABLE query.record_column (
4928         id            SERIAL            PRIMARY KEY,
4929         from_relation INT               NOT NULL REFERENCES query.from_relation
4930                                         ON DELETE CASCADE
4931                                         DEFERRABLE INITIALLY DEFERRED,
4932         seq_no        INT               NOT NULL,
4933         column_name   TEXT              NOT NULL,
4934         column_type   INT               NOT NULL REFERENCES query.datatype
4935                                         ON DELETE CASCADE
4936                                                                         DEFERRABLE INITIALLY DEFERRED,
4937         CONSTRAINT column_sequence UNIQUE (from_relation, seq_no)
4938 );
4939
4940 CREATE TABLE query.select_item (
4941         id               SERIAL         PRIMARY KEY,
4942         stored_query     INT            NOT NULL REFERENCES query.stored_query
4943                                         ON DELETE CASCADE
4944                                         DEFERRABLE INITIALLY DEFERRED,
4945         seq_no           INT            NOT NULL,
4946         expression       INT            NOT NULL REFERENCES query.expression
4947                                         DEFERRABLE INITIALLY DEFERRED,
4948         column_alias     TEXT,
4949         grouped_by       BOOL           NOT NULL DEFAULT FALSE,
4950         CONSTRAINT select_sequence UNIQUE( stored_query, seq_no )
4951 );
4952
4953 CREATE TABLE query.order_by_item (
4954         id               SERIAL         PRIMARY KEY,
4955         stored_query     INT            NOT NULL REFERENCES query.stored_query
4956                                         ON DELETE CASCADE
4957                                         DEFERRABLE INITIALLY DEFERRED,
4958         seq_no           INT            NOT NULL,
4959         expression       INT            NOT NULL REFERENCES query.expression
4960                                         ON DELETE CASCADE
4961                                         DEFERRABLE INITIALLY DEFERRED,
4962         CONSTRAINT order_by_sequence UNIQUE( stored_query, seq_no )
4963 );
4964
4965 ------------------------------------------------------------
4966 -- Create updatable views for different kinds of expressions
4967 ------------------------------------------------------------
4968
4969 -- Create updatable view for BETWEEN expressions
4970
4971 CREATE OR REPLACE VIEW query.expr_xbet AS
4972     SELECT
4973                 id,
4974                 parenthesize,
4975                 parent_expr,
4976                 seq_no,
4977                 left_operand,
4978                 negate
4979     FROM
4980         query.expression
4981     WHERE
4982         type = 'xbet';
4983
4984 CREATE OR REPLACE RULE query_expr_xbet_insert_rule AS
4985     ON INSERT TO query.expr_xbet
4986     DO INSTEAD
4987     INSERT INTO query.expression (
4988                 id,
4989                 type,
4990                 parenthesize,
4991                 parent_expr,
4992                 seq_no,
4993                 left_operand,
4994                 negate
4995     ) VALUES (
4996         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
4997         'xbet',
4998         COALESCE(NEW.parenthesize, FALSE),
4999         NEW.parent_expr,
5000         COALESCE(NEW.seq_no, 1),
5001                 NEW.left_operand,
5002                 COALESCE(NEW.negate, false)
5003     );
5004
5005 CREATE OR REPLACE RULE query_expr_xbet_update_rule AS
5006     ON UPDATE TO query.expr_xbet
5007     DO INSTEAD
5008     UPDATE query.expression SET
5009         id = NEW.id,
5010         parenthesize = NEW.parenthesize,
5011         parent_expr = NEW.parent_expr,
5012         seq_no = NEW.seq_no,
5013                 left_operand = NEW.left_operand,
5014                 negate = NEW.negate
5015     WHERE
5016         id = OLD.id;
5017
5018 CREATE OR REPLACE RULE query_expr_xbet_delete_rule AS
5019     ON DELETE TO query.expr_xbet
5020     DO INSTEAD
5021     DELETE FROM query.expression WHERE id = OLD.id;
5022
5023 -- Create updatable view for bind variable expressions
5024
5025 CREATE OR REPLACE VIEW query.expr_xbind AS
5026     SELECT
5027                 id,
5028                 parenthesize,
5029                 parent_expr,
5030                 seq_no,
5031                 bind_variable
5032     FROM
5033         query.expression
5034     WHERE
5035         type = 'xbind';
5036
5037 CREATE OR REPLACE RULE query_expr_xbind_insert_rule AS
5038     ON INSERT TO query.expr_xbind
5039     DO INSTEAD
5040     INSERT INTO query.expression (
5041                 id,
5042                 type,
5043                 parenthesize,
5044                 parent_expr,
5045                 seq_no,
5046                 bind_variable
5047     ) VALUES (
5048         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5049         'xbind',
5050         COALESCE(NEW.parenthesize, FALSE),
5051         NEW.parent_expr,
5052         COALESCE(NEW.seq_no, 1),
5053                 NEW.bind_variable
5054     );
5055
5056 CREATE OR REPLACE RULE query_expr_xbind_update_rule AS
5057     ON UPDATE TO query.expr_xbind
5058     DO INSTEAD
5059     UPDATE query.expression SET
5060         id = NEW.id,
5061         parenthesize = NEW.parenthesize,
5062         parent_expr = NEW.parent_expr,
5063         seq_no = NEW.seq_no,
5064                 bind_variable = NEW.bind_variable
5065     WHERE
5066         id = OLD.id;
5067
5068 CREATE OR REPLACE RULE query_expr_xbind_delete_rule AS
5069     ON DELETE TO query.expr_xbind
5070     DO INSTEAD
5071     DELETE FROM query.expression WHERE id = OLD.id;
5072
5073 -- Create updatable view for boolean expressions
5074
5075 CREATE OR REPLACE VIEW query.expr_xbool AS
5076     SELECT
5077                 id,
5078                 parenthesize,
5079                 parent_expr,
5080                 seq_no,
5081                 literal,
5082                 negate
5083     FROM
5084         query.expression
5085     WHERE
5086         type = 'xbool';
5087
5088 CREATE OR REPLACE RULE query_expr_xbool_insert_rule AS
5089     ON INSERT TO query.expr_xbool
5090     DO INSTEAD
5091     INSERT INTO query.expression (
5092                 id,
5093                 type,
5094                 parenthesize,
5095                 parent_expr,
5096                 seq_no,
5097                 literal,
5098                 negate
5099     ) VALUES (
5100         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5101         'xbool',
5102         COALESCE(NEW.parenthesize, FALSE),
5103         NEW.parent_expr,
5104         COALESCE(NEW.seq_no, 1),
5105         NEW.literal,
5106                 COALESCE(NEW.negate, false)
5107     );
5108
5109 CREATE OR REPLACE RULE query_expr_xbool_update_rule AS
5110     ON UPDATE TO query.expr_xbool
5111     DO INSTEAD
5112     UPDATE query.expression SET
5113         id = NEW.id,
5114         parenthesize = NEW.parenthesize,
5115         parent_expr = NEW.parent_expr,
5116         seq_no = NEW.seq_no,
5117         literal = NEW.literal,
5118                 negate = NEW.negate
5119     WHERE
5120         id = OLD.id;
5121
5122 CREATE OR REPLACE RULE query_expr_xbool_delete_rule AS
5123     ON DELETE TO query.expr_xbool
5124     DO INSTEAD
5125     DELETE FROM query.expression WHERE id = OLD.id;
5126
5127 -- Create updatable view for CASE expressions
5128
5129 CREATE OR REPLACE VIEW query.expr_xcase AS
5130     SELECT
5131                 id,
5132                 parenthesize,
5133                 parent_expr,
5134                 seq_no,
5135                 left_operand,
5136                 negate
5137     FROM
5138         query.expression
5139     WHERE
5140         type = 'xcase';
5141
5142 CREATE OR REPLACE RULE query_expr_xcase_insert_rule AS
5143     ON INSERT TO query.expr_xcase
5144     DO INSTEAD
5145     INSERT INTO query.expression (
5146                 id,
5147                 type,
5148                 parenthesize,
5149                 parent_expr,
5150                 seq_no,
5151                 left_operand,
5152                 negate
5153     ) VALUES (
5154         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5155         'xcase',
5156         COALESCE(NEW.parenthesize, FALSE),
5157         NEW.parent_expr,
5158         COALESCE(NEW.seq_no, 1),
5159                 NEW.left_operand,
5160                 COALESCE(NEW.negate, false)
5161     );
5162
5163 CREATE OR REPLACE RULE query_expr_xcase_update_rule AS
5164     ON UPDATE TO query.expr_xcase
5165     DO INSTEAD
5166     UPDATE query.expression SET
5167         id = NEW.id,
5168         parenthesize = NEW.parenthesize,
5169         parent_expr = NEW.parent_expr,
5170         seq_no = NEW.seq_no,
5171                 left_operand = NEW.left_operand,
5172                 negate = NEW.negate
5173     WHERE
5174         id = OLD.id;
5175
5176 CREATE OR REPLACE RULE query_expr_xcase_delete_rule AS
5177     ON DELETE TO query.expr_xcase
5178     DO INSTEAD
5179     DELETE FROM query.expression WHERE id = OLD.id;
5180
5181 -- Create updatable view for cast expressions
5182
5183 CREATE OR REPLACE VIEW query.expr_xcast AS
5184     SELECT
5185                 id,
5186                 parenthesize,
5187                 parent_expr,
5188                 seq_no,
5189                 left_operand,
5190                 cast_type,
5191                 negate
5192     FROM
5193         query.expression
5194     WHERE
5195         type = 'xcast';
5196
5197 CREATE OR REPLACE RULE query_expr_xcast_insert_rule AS
5198     ON INSERT TO query.expr_xcast
5199     DO INSTEAD
5200     INSERT INTO query.expression (
5201         id,
5202         type,
5203         parenthesize,
5204         parent_expr,
5205         seq_no,
5206         left_operand,
5207         cast_type,
5208         negate
5209     ) VALUES (
5210         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5211         'xcast',
5212         COALESCE(NEW.parenthesize, FALSE),
5213         NEW.parent_expr,
5214         COALESCE(NEW.seq_no, 1),
5215         NEW.left_operand,
5216         NEW.cast_type,
5217         COALESCE(NEW.negate, false)
5218     );
5219
5220 CREATE OR REPLACE RULE query_expr_xcast_update_rule AS
5221     ON UPDATE TO query.expr_xcast
5222     DO INSTEAD
5223     UPDATE query.expression SET
5224         id = NEW.id,
5225         parenthesize = NEW.parenthesize,
5226         parent_expr = NEW.parent_expr,
5227         seq_no = NEW.seq_no,
5228                 left_operand = NEW.left_operand,
5229                 cast_type = NEW.cast_type,
5230                 negate = NEW.negate
5231     WHERE
5232         id = OLD.id;
5233
5234 CREATE OR REPLACE RULE query_expr_xcast_delete_rule AS
5235     ON DELETE TO query.expr_xcast
5236     DO INSTEAD
5237     DELETE FROM query.expression WHERE id = OLD.id;
5238
5239 -- Create updatable view for column expressions
5240
5241 CREATE OR REPLACE VIEW query.expr_xcol AS
5242     SELECT
5243                 id,
5244                 parenthesize,
5245                 parent_expr,
5246                 seq_no,
5247                 table_alias,
5248                 column_name,
5249                 negate
5250     FROM
5251         query.expression
5252     WHERE
5253         type = 'xcol';
5254
5255 CREATE OR REPLACE RULE query_expr_xcol_insert_rule AS
5256     ON INSERT TO query.expr_xcol
5257     DO INSTEAD
5258     INSERT INTO query.expression (
5259                 id,
5260                 type,
5261                 parenthesize,
5262                 parent_expr,
5263                 seq_no,
5264                 table_alias,
5265                 column_name,
5266                 negate
5267     ) VALUES (
5268         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5269         'xcol',
5270         COALESCE(NEW.parenthesize, FALSE),
5271         NEW.parent_expr,
5272         COALESCE(NEW.seq_no, 1),
5273                 NEW.table_alias,
5274                 NEW.column_name,
5275                 COALESCE(NEW.negate, false)
5276     );
5277
5278 CREATE OR REPLACE RULE query_expr_xcol_update_rule AS
5279     ON UPDATE TO query.expr_xcol
5280     DO INSTEAD
5281     UPDATE query.expression SET
5282         id = NEW.id,
5283         parenthesize = NEW.parenthesize,
5284         parent_expr = NEW.parent_expr,
5285         seq_no = NEW.seq_no,
5286                 table_alias = NEW.table_alias,
5287                 column_name = NEW.column_name,
5288                 negate = NEW.negate
5289     WHERE
5290         id = OLD.id;
5291
5292 CREATE OR REPLACE RULE query_expr_xcol_delete_rule AS
5293     ON DELETE TO query.expr_xcol
5294     DO INSTEAD
5295     DELETE FROM query.expression WHERE id = OLD.id;
5296
5297 -- Create updatable view for EXISTS expressions
5298
5299 CREATE OR REPLACE VIEW query.expr_xex AS
5300     SELECT
5301                 id,
5302                 parenthesize,
5303                 parent_expr,
5304                 seq_no,
5305                 subquery,
5306                 negate
5307     FROM
5308         query.expression
5309     WHERE
5310         type = 'xex';
5311
5312 CREATE OR REPLACE RULE query_expr_xex_insert_rule AS
5313     ON INSERT TO query.expr_xex
5314     DO INSTEAD
5315     INSERT INTO query.expression (
5316                 id,
5317                 type,
5318                 parenthesize,
5319                 parent_expr,
5320                 seq_no,
5321                 subquery,
5322                 negate
5323     ) VALUES (
5324         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5325         'xex',
5326         COALESCE(NEW.parenthesize, FALSE),
5327         NEW.parent_expr,
5328         COALESCE(NEW.seq_no, 1),
5329                 NEW.subquery,
5330                 COALESCE(NEW.negate, false)
5331     );
5332
5333 CREATE OR REPLACE RULE query_expr_xex_update_rule AS
5334     ON UPDATE TO query.expr_xex
5335     DO INSTEAD
5336     UPDATE query.expression SET
5337         id = NEW.id,
5338         parenthesize = NEW.parenthesize,
5339         parent_expr = NEW.parent_expr,
5340         seq_no = NEW.seq_no,
5341                 subquery = NEW.subquery,
5342                 negate = NEW.negate
5343     WHERE
5344         id = OLD.id;
5345
5346 CREATE OR REPLACE RULE query_expr_xex_delete_rule AS
5347     ON DELETE TO query.expr_xex
5348     DO INSTEAD
5349     DELETE FROM query.expression WHERE id = OLD.id;
5350
5351 -- Create updatable view for function call expressions
5352
5353 CREATE OR REPLACE VIEW query.expr_xfunc AS
5354     SELECT
5355         id,
5356         parenthesize,
5357         parent_expr,
5358         seq_no,
5359         column_name,
5360         function_id,
5361         negate
5362     FROM
5363         query.expression
5364     WHERE
5365         type = 'xfunc';
5366
5367 CREATE OR REPLACE RULE query_expr_xfunc_insert_rule AS
5368     ON INSERT TO query.expr_xfunc
5369     DO INSTEAD
5370     INSERT INTO query.expression (
5371         id,
5372         type,
5373         parenthesize,
5374         parent_expr,
5375         seq_no,
5376         column_name,
5377         function_id,
5378         negate
5379     ) VALUES (
5380         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5381         'xfunc',
5382         COALESCE(NEW.parenthesize, FALSE),
5383         NEW.parent_expr,
5384         COALESCE(NEW.seq_no, 1),
5385         NEW.column_name,
5386         NEW.function_id,
5387         COALESCE(NEW.negate, false)
5388     );
5389
5390 CREATE OR REPLACE RULE query_expr_xfunc_update_rule AS
5391     ON UPDATE TO query.expr_xfunc
5392     DO INSTEAD
5393     UPDATE query.expression SET
5394         id = NEW.id,
5395         parenthesize = NEW.parenthesize,
5396         parent_expr = NEW.parent_expr,
5397         seq_no = NEW.seq_no,
5398         column_name = NEW.column_name,
5399         function_id = NEW.function_id,
5400         negate = NEW.negate
5401     WHERE
5402         id = OLD.id;
5403
5404 CREATE OR REPLACE RULE query_expr_xfunc_delete_rule AS
5405     ON DELETE TO query.expr_xfunc
5406     DO INSTEAD
5407     DELETE FROM query.expression WHERE id = OLD.id;
5408
5409 -- Create updatable view for IN expressions
5410
5411 CREATE OR REPLACE VIEW query.expr_xin AS
5412     SELECT
5413                 id,
5414                 parenthesize,
5415                 parent_expr,
5416                 seq_no,
5417                 left_operand,
5418                 subquery,
5419                 negate
5420     FROM
5421         query.expression
5422     WHERE
5423         type = 'xin';
5424
5425 CREATE OR REPLACE RULE query_expr_xin_insert_rule AS
5426     ON INSERT TO query.expr_xin
5427     DO INSTEAD
5428     INSERT INTO query.expression (
5429                 id,
5430                 type,
5431                 parenthesize,
5432                 parent_expr,
5433                 seq_no,
5434                 left_operand,
5435                 subquery,
5436                 negate
5437     ) VALUES (
5438         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5439         'xin',
5440         COALESCE(NEW.parenthesize, FALSE),
5441         NEW.parent_expr,
5442         COALESCE(NEW.seq_no, 1),
5443                 NEW.left_operand,
5444                 NEW.subquery,
5445                 COALESCE(NEW.negate, false)
5446     );
5447
5448 CREATE OR REPLACE RULE query_expr_xin_update_rule AS
5449     ON UPDATE TO query.expr_xin
5450     DO INSTEAD
5451     UPDATE query.expression SET
5452         id = NEW.id,
5453         parenthesize = NEW.parenthesize,
5454         parent_expr = NEW.parent_expr,
5455         seq_no = NEW.seq_no,
5456                 left_operand = NEW.left_operand,
5457                 subquery = NEW.subquery,
5458                 negate = NEW.negate
5459     WHERE
5460         id = OLD.id;
5461
5462 CREATE OR REPLACE RULE query_expr_xin_delete_rule AS
5463     ON DELETE TO query.expr_xin
5464     DO INSTEAD
5465     DELETE FROM query.expression WHERE id = OLD.id;
5466
5467 -- Create updatable view for IS NULL expressions
5468
5469 CREATE OR REPLACE VIEW query.expr_xisnull AS
5470     SELECT
5471                 id,
5472                 parenthesize,
5473                 parent_expr,
5474                 seq_no,
5475                 left_operand,
5476                 negate
5477     FROM
5478         query.expression
5479     WHERE
5480         type = 'xisnull';
5481
5482 CREATE OR REPLACE RULE query_expr_xisnull_insert_rule AS
5483     ON INSERT TO query.expr_xisnull
5484     DO INSTEAD
5485     INSERT INTO query.expression (
5486                 id,
5487                 type,
5488                 parenthesize,
5489                 parent_expr,
5490                 seq_no,
5491                 left_operand,
5492                 negate
5493     ) VALUES (
5494         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5495         'xisnull',
5496         COALESCE(NEW.parenthesize, FALSE),
5497         NEW.parent_expr,
5498         COALESCE(NEW.seq_no, 1),
5499                 NEW.left_operand,
5500                 COALESCE(NEW.negate, false)
5501     );
5502
5503 CREATE OR REPLACE RULE query_expr_xisnull_update_rule AS
5504     ON UPDATE TO query.expr_xisnull
5505     DO INSTEAD
5506     UPDATE query.expression SET
5507         id = NEW.id,
5508         parenthesize = NEW.parenthesize,
5509         parent_expr = NEW.parent_expr,
5510         seq_no = NEW.seq_no,
5511                 left_operand = NEW.left_operand,
5512                 negate = NEW.negate
5513     WHERE
5514         id = OLD.id;
5515
5516 CREATE OR REPLACE RULE query_expr_xisnull_delete_rule AS
5517     ON DELETE TO query.expr_xisnull
5518     DO INSTEAD
5519     DELETE FROM query.expression WHERE id = OLD.id;
5520
5521 -- Create updatable view for NULL expressions
5522
5523 CREATE OR REPLACE VIEW query.expr_xnull AS
5524     SELECT
5525                 id,
5526                 parenthesize,
5527                 parent_expr,
5528                 seq_no,
5529                 negate
5530     FROM
5531         query.expression
5532     WHERE
5533         type = 'xnull';
5534
5535 CREATE OR REPLACE RULE query_expr_xnull_insert_rule AS
5536     ON INSERT TO query.expr_xnull
5537     DO INSTEAD
5538     INSERT INTO query.expression (
5539                 id,
5540                 type,
5541                 parenthesize,
5542                 parent_expr,
5543                 seq_no,
5544                 negate
5545     ) VALUES (
5546         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5547         'xnull',
5548         COALESCE(NEW.parenthesize, FALSE),
5549         NEW.parent_expr,
5550         COALESCE(NEW.seq_no, 1),
5551                 COALESCE(NEW.negate, false)
5552     );
5553
5554 CREATE OR REPLACE RULE query_expr_xnull_update_rule AS
5555     ON UPDATE TO query.expr_xnull
5556     DO INSTEAD
5557     UPDATE query.expression SET
5558         id = NEW.id,
5559         parenthesize = NEW.parenthesize,
5560         parent_expr = NEW.parent_expr,
5561         seq_no = NEW.seq_no,
5562                 negate = NEW.negate
5563     WHERE
5564         id = OLD.id;
5565
5566 CREATE OR REPLACE RULE query_expr_xnull_delete_rule AS
5567     ON DELETE TO query.expr_xnull
5568     DO INSTEAD
5569     DELETE FROM query.expression WHERE id = OLD.id;
5570
5571 -- Create updatable view for numeric literal expressions
5572
5573 CREATE OR REPLACE VIEW query.expr_xnum AS
5574     SELECT
5575                 id,
5576                 parenthesize,
5577                 parent_expr,
5578                 seq_no,
5579                 literal
5580     FROM
5581         query.expression
5582     WHERE
5583         type = 'xnum';
5584
5585 CREATE OR REPLACE RULE query_expr_xnum_insert_rule AS
5586     ON INSERT TO query.expr_xnum
5587     DO INSTEAD
5588     INSERT INTO query.expression (
5589                 id,
5590                 type,
5591                 parenthesize,
5592                 parent_expr,
5593                 seq_no,
5594                 literal
5595     ) VALUES (
5596         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5597         'xnum',
5598         COALESCE(NEW.parenthesize, FALSE),
5599         NEW.parent_expr,
5600         COALESCE(NEW.seq_no, 1),
5601         NEW.literal
5602     );
5603
5604 CREATE OR REPLACE RULE query_expr_xnum_update_rule AS
5605     ON UPDATE TO query.expr_xnum
5606     DO INSTEAD
5607     UPDATE query.expression SET
5608         id = NEW.id,
5609         parenthesize = NEW.parenthesize,
5610         parent_expr = NEW.parent_expr,
5611         seq_no = NEW.seq_no,
5612         literal = NEW.literal
5613     WHERE
5614         id = OLD.id;
5615
5616 CREATE OR REPLACE RULE query_expr_xnum_delete_rule AS
5617     ON DELETE TO query.expr_xnum
5618     DO INSTEAD
5619     DELETE FROM query.expression WHERE id = OLD.id;
5620
5621 -- Create updatable view for operator expressions
5622
5623 CREATE OR REPLACE VIEW query.expr_xop AS
5624     SELECT
5625                 id,
5626                 parenthesize,
5627                 parent_expr,
5628                 seq_no,
5629                 left_operand,
5630                 operator,
5631                 right_operand,
5632                 negate
5633     FROM
5634         query.expression
5635     WHERE
5636         type = 'xop';
5637
5638 CREATE OR REPLACE RULE query_expr_xop_insert_rule AS
5639     ON INSERT TO query.expr_xop
5640     DO INSTEAD
5641     INSERT INTO query.expression (
5642                 id,
5643                 type,
5644                 parenthesize,
5645                 parent_expr,
5646                 seq_no,
5647                 left_operand,
5648                 operator,
5649                 right_operand,
5650                 negate
5651     ) VALUES (
5652         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5653         'xop',
5654         COALESCE(NEW.parenthesize, FALSE),
5655         NEW.parent_expr,
5656         COALESCE(NEW.seq_no, 1),
5657                 NEW.left_operand,
5658                 NEW.operator,
5659                 NEW.right_operand,
5660                 COALESCE(NEW.negate, false)
5661     );
5662
5663 CREATE OR REPLACE RULE query_expr_xop_update_rule AS
5664     ON UPDATE TO query.expr_xop
5665     DO INSTEAD
5666     UPDATE query.expression SET
5667         id = NEW.id,
5668         parenthesize = NEW.parenthesize,
5669         parent_expr = NEW.parent_expr,
5670         seq_no = NEW.seq_no,
5671                 left_operand = NEW.left_operand,
5672                 operator = NEW.operator,
5673                 right_operand = NEW.right_operand,
5674                 negate = NEW.negate
5675     WHERE
5676         id = OLD.id;
5677
5678 CREATE OR REPLACE RULE query_expr_xop_delete_rule AS
5679     ON DELETE TO query.expr_xop
5680     DO INSTEAD
5681     DELETE FROM query.expression WHERE id = OLD.id;
5682
5683 -- Create updatable view for series expressions
5684 -- i.e. series of expressions separated by operators
5685
5686 CREATE OR REPLACE VIEW query.expr_xser AS
5687     SELECT
5688                 id,
5689                 parenthesize,
5690                 parent_expr,
5691                 seq_no,
5692                 operator,
5693                 negate
5694     FROM
5695         query.expression
5696     WHERE
5697         type = 'xser';
5698
5699 CREATE OR REPLACE RULE query_expr_xser_insert_rule AS
5700     ON INSERT TO query.expr_xser
5701     DO INSTEAD
5702     INSERT INTO query.expression (
5703                 id,
5704                 type,
5705                 parenthesize,
5706                 parent_expr,
5707                 seq_no,
5708                 operator,
5709                 negate
5710     ) VALUES (
5711         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5712         'xser',
5713         COALESCE(NEW.parenthesize, FALSE),
5714         NEW.parent_expr,
5715         COALESCE(NEW.seq_no, 1),
5716                 NEW.operator,
5717                 COALESCE(NEW.negate, false)
5718     );
5719
5720 CREATE OR REPLACE RULE query_expr_xser_update_rule AS
5721     ON UPDATE TO query.expr_xser
5722     DO INSTEAD
5723     UPDATE query.expression SET
5724         id = NEW.id,
5725         parenthesize = NEW.parenthesize,
5726         parent_expr = NEW.parent_expr,
5727         seq_no = NEW.seq_no,
5728                 operator = NEW.operator,
5729                 negate = NEW.negate
5730     WHERE
5731         id = OLD.id;
5732
5733 CREATE OR REPLACE RULE query_expr_xser_delete_rule AS
5734     ON DELETE TO query.expr_xser
5735     DO INSTEAD
5736     DELETE FROM query.expression WHERE id = OLD.id;
5737
5738 -- Create updatable view for string literal expressions
5739
5740 CREATE OR REPLACE VIEW query.expr_xstr AS
5741     SELECT
5742         id,
5743         parenthesize,
5744         parent_expr,
5745         seq_no,
5746         literal
5747     FROM
5748         query.expression
5749     WHERE
5750         type = 'xstr';
5751
5752 CREATE OR REPLACE RULE query_expr_string_insert_rule AS
5753     ON INSERT TO query.expr_xstr
5754     DO INSTEAD
5755     INSERT INTO query.expression (
5756         id,
5757         type,
5758         parenthesize,
5759         parent_expr,
5760         seq_no,
5761         literal
5762     ) VALUES (
5763         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5764         'xstr',
5765         COALESCE(NEW.parenthesize, FALSE),
5766         NEW.parent_expr,
5767         COALESCE(NEW.seq_no, 1),
5768         NEW.literal
5769     );
5770
5771 CREATE OR REPLACE RULE query_expr_string_update_rule AS
5772     ON UPDATE TO query.expr_xstr
5773     DO INSTEAD
5774     UPDATE query.expression SET
5775         id = NEW.id,
5776         parenthesize = NEW.parenthesize,
5777         parent_expr = NEW.parent_expr,
5778         seq_no = NEW.seq_no,
5779         literal = NEW.literal
5780     WHERE
5781         id = OLD.id;
5782
5783 CREATE OR REPLACE RULE query_expr_string_delete_rule AS
5784     ON DELETE TO query.expr_xstr
5785     DO INSTEAD
5786     DELETE FROM query.expression WHERE id = OLD.id;
5787
5788 -- Create updatable view for subquery expressions
5789
5790 CREATE OR REPLACE VIEW query.expr_xsubq AS
5791     SELECT
5792                 id,
5793                 parenthesize,
5794                 parent_expr,
5795                 seq_no,
5796                 subquery,
5797                 negate
5798     FROM
5799         query.expression
5800     WHERE
5801         type = 'xsubq';
5802
5803 CREATE OR REPLACE RULE query_expr_xsubq_insert_rule AS
5804     ON INSERT TO query.expr_xsubq
5805     DO INSTEAD
5806     INSERT INTO query.expression (
5807                 id,
5808                 type,
5809                 parenthesize,
5810                 parent_expr,
5811                 seq_no,
5812                 subquery,
5813                 negate
5814     ) VALUES (
5815         COALESCE(NEW.id, NEXTVAL('query.expression_id_seq'::REGCLASS)),
5816         'xsubq',
5817         COALESCE(NEW.parenthesize, FALSE),
5818         NEW.parent_expr,
5819         COALESCE(NEW.seq_no, 1),
5820                 NEW.subquery,
5821                 COALESCE(NEW.negate, false)
5822     );
5823
5824 CREATE OR REPLACE RULE query_expr_xsubq_update_rule AS
5825     ON UPDATE TO query.expr_xsubq
5826     DO INSTEAD
5827     UPDATE query.expression SET
5828         id = NEW.id,
5829         parenthesize = NEW.parenthesize,
5830         parent_expr = NEW.parent_expr,
5831         seq_no = NEW.seq_no,
5832                 subquery = NEW.subquery,
5833                 negate = NEW.negate
5834     WHERE
5835         id = OLD.id;
5836
5837 CREATE OR REPLACE RULE query_expr_xsubq_delete_rule AS
5838     ON DELETE TO query.expr_xsubq
5839     DO INSTEAD
5840     DELETE FROM query.expression WHERE id = OLD.id;
5841
5842 CREATE TABLE action.fieldset (
5843     id              SERIAL          PRIMARY KEY,
5844     owner           INT             NOT NULL REFERENCES actor.usr (id)
5845                                     DEFERRABLE INITIALLY DEFERRED,
5846     owning_lib      INT             NOT NULL REFERENCES actor.org_unit (id)
5847                                     DEFERRABLE INITIALLY DEFERRED,
5848     status          TEXT            NOT NULL
5849                                     CONSTRAINT valid_status CHECK ( status in
5850                                     ( 'PENDING', 'APPLIED', 'ERROR' )),
5851     creation_time   TIMESTAMPTZ     NOT NULL DEFAULT NOW(),
5852     scheduled_time  TIMESTAMPTZ,
5853     applied_time    TIMESTAMPTZ,
5854     classname       TEXT            NOT NULL, -- an IDL class name
5855     name            TEXT            NOT NULL,
5856     stored_query    INT             REFERENCES query.stored_query (id)
5857                                     DEFERRABLE INITIALLY DEFERRED,
5858     pkey_value      TEXT,
5859     CONSTRAINT lib_name_unique UNIQUE (owning_lib, name),
5860     CONSTRAINT fieldset_one_or_the_other CHECK (
5861         (stored_query IS NOT NULL AND pkey_value IS NULL) OR
5862         (pkey_value IS NOT NULL AND stored_query IS NULL)
5863     )
5864     -- the CHECK constraint means we can update the fields for a single
5865     -- row without all the extra overhead involved in a query
5866 );
5867
5868 CREATE INDEX action_fieldset_sched_time_idx ON action.fieldset( scheduled_time );
5869 CREATE INDEX action_owner_idx               ON action.fieldset( owner );
5870
5871 CREATE TABLE action.fieldset_col_val (
5872     id              SERIAL  PRIMARY KEY,
5873     fieldset        INT     NOT NULL REFERENCES action.fieldset
5874                                          ON DELETE CASCADE
5875                                          DEFERRABLE INITIALLY DEFERRED,
5876     col             TEXT    NOT NULL,  -- "field" from the idl ... the column on the table
5877     val             TEXT,              -- value for the column ... NULL means, well, NULL
5878     CONSTRAINT fieldset_col_once_per_set UNIQUE (fieldset, col)
5879 );
5880
5881 CREATE OR REPLACE FUNCTION action.apply_fieldset(
5882         fieldset_id IN INT,        -- id from action.fieldset
5883         table_name  IN TEXT,       -- table to be updated
5884         pkey_name   IN TEXT,       -- name of primary key column in that table
5885         query       IN TEXT        -- query constructed by qstore (for query-based
5886                                    --    fieldsets only; otherwise null
5887 )
5888 RETURNS TEXT AS $$
5889 DECLARE
5890         statement TEXT;
5891         fs_status TEXT;
5892         fs_pkey_value TEXT;
5893         fs_query TEXT;
5894         sep CHAR;
5895         status_code TEXT;
5896         msg TEXT;
5897         update_count INT;
5898         cv RECORD;
5899 BEGIN
5900         -- Sanity checks
5901         IF fieldset_id IS NULL THEN
5902                 RETURN 'Fieldset ID parameter is NULL';
5903         END IF;
5904         IF table_name IS NULL THEN
5905                 RETURN 'Table name parameter is NULL';
5906         END IF;
5907         IF pkey_name IS NULL THEN
5908                 RETURN 'Primary key name parameter is NULL';
5909         END IF;
5910         --
5911         statement := 'UPDATE ' || table_name || ' SET';
5912         --
5913         SELECT
5914                 status,
5915                 quote_literal( pkey_value )
5916         INTO
5917                 fs_status,
5918                 fs_pkey_value
5919         FROM
5920                 action.fieldset
5921         WHERE
5922                 id = fieldset_id;
5923         --
5924         IF fs_status IS NULL THEN
5925                 RETURN 'No fieldset found for id = ' || fieldset_id;
5926         ELSIF fs_status = 'APPLIED' THEN
5927                 RETURN 'Fieldset ' || fieldset_id || ' has already been applied';
5928         END IF;
5929         --
5930         sep := '';
5931         FOR cv IN
5932                 SELECT  col,
5933                                 val
5934                 FROM    action.fieldset_col_val
5935                 WHERE   fieldset = fieldset_id
5936         LOOP
5937                 statement := statement || sep || ' ' || cv.col
5938                                          || ' = ' || coalesce( quote_literal( cv.val ), 'NULL' );
5939                 sep := ',';
5940         END LOOP;
5941         --
5942         IF sep = '' THEN
5943                 RETURN 'Fieldset ' || fieldset_id || ' has no column values defined';
5944         END IF;
5945         --
5946         -- Add the WHERE clause.  This differs according to whether it's a
5947         -- single-row fieldset or a query-based fieldset.
5948         --
5949         IF query IS NULL        AND fs_pkey_value IS NULL THEN
5950                 RETURN 'Incomplete fieldset: neither a primary key nor a query available';
5951         ELSIF query IS NOT NULL AND fs_pkey_value IS NULL THEN
5952             fs_query := rtrim( query, ';' );
5953             statement := statement || ' WHERE ' || pkey_name || ' IN ( '
5954                          || fs_query || ' );';
5955         ELSIF query IS NULL     AND fs_pkey_value IS NOT NULL THEN
5956                 statement := statement || ' WHERE ' || pkey_name || ' = '
5957                                      || fs_pkey_value || ';';
5958         ELSE  -- both are not null
5959                 RETURN 'Ambiguous fieldset: both a primary key and a query provided';
5960         END IF;
5961         --
5962         -- Execute the update
5963         --
5964         BEGIN
5965                 EXECUTE statement;
5966                 GET DIAGNOSTICS update_count = ROW_COUNT;
5967                 --
5968                 IF UPDATE_COUNT > 0 THEN
5969                         status_code := 'APPLIED';
5970                         msg := NULL;
5971                 ELSE
5972                         status_code := 'ERROR';
5973                         msg := 'No eligible rows found for fieldset ' || fieldset_id;
5974         END IF;
5975         EXCEPTION WHEN OTHERS THEN
5976                 status_code := 'ERROR';
5977                 msg := 'Unable to apply fieldset ' || fieldset_id
5978                            || ': ' || sqlerrm;
5979         END;
5980         --
5981         -- Update fieldset status
5982         --
5983         UPDATE action.fieldset
5984         SET status       = status_code,
5985             applied_time = now()
5986         WHERE id = fieldset_id;
5987         --
5988         RETURN msg;
5989 END;
5990 $$ LANGUAGE plpgsql;
5991
5992 COMMENT ON FUNCTION action.apply_fieldset( INT, TEXT, TEXT, TEXT ) IS $$
5993 /**
5994  * Applies a specified fieldset, using a supplied table name and primary
5995  * key name.  The query parameter should be non-null only for
5996  * query-based fieldsets.
5997  *
5998  * Returns NULL if successful, or an error message if not.
5999  */
6000 $$;
6001
6002 CREATE INDEX uhr_hold_idx ON action.unfulfilled_hold_list (hold);
6003
6004 CREATE OR REPLACE VIEW action.unfulfilled_hold_loops AS
6005     SELECT  u.hold,
6006             c.circ_lib,
6007             count(*)
6008       FROM  action.unfulfilled_hold_list u
6009             JOIN asset.copy c ON (c.id = u.current_copy)
6010       GROUP BY 1,2;
6011
6012 CREATE OR REPLACE VIEW action.unfulfilled_hold_min_loop AS
6013     SELECT  hold,
6014             min(count)
6015       FROM  action.unfulfilled_hold_loops
6016       GROUP BY 1;
6017
6018 CREATE OR REPLACE VIEW action.unfulfilled_hold_innermost_loop AS
6019     SELECT  DISTINCT l.*
6020       FROM  action.unfulfilled_hold_loops l
6021             JOIN action.unfulfilled_hold_min_loop m USING (hold)
6022       WHERE l.count = m.min;
6023
6024 ALTER TABLE asset.copy
6025 ADD COLUMN dummy_isbn TEXT;
6026
6027 ALTER TABLE auditor.asset_copy_history
6028 ADD COLUMN dummy_isbn TEXT;
6029
6030 -- Add new column status_changed_date to asset.copy, with trigger to maintain it
6031 -- Add corresponding new column to auditor.asset_copy_history
6032
6033 ALTER TABLE asset.copy
6034         ADD COLUMN status_changed_time TIMESTAMPTZ;
6035
6036 ALTER TABLE auditor.asset_copy_history
6037         ADD COLUMN status_changed_time TIMESTAMPTZ;
6038
6039 CREATE OR REPLACE FUNCTION asset.acp_status_changed()
6040 RETURNS TRIGGER AS $$
6041 BEGIN
6042         IF NEW.status <> OLD.status THEN
6043                 NEW.status_changed_time := now();
6044         END IF;
6045         RETURN NEW;
6046 END;
6047 $$ LANGUAGE plpgsql;
6048
6049 CREATE TRIGGER acp_status_changed_trig
6050         BEFORE UPDATE ON asset.copy
6051         FOR EACH ROW EXECUTE PROCEDURE asset.acp_status_changed();
6052
6053 ALTER TABLE asset.copy
6054 ADD COLUMN mint_condition boolean NOT NULL DEFAULT TRUE;
6055
6056 ALTER TABLE auditor.asset_copy_history
6057 ADD COLUMN mint_condition boolean NOT NULL DEFAULT TRUE;
6058
6059 ALTER TABLE asset.copy ADD COLUMN floating BOOL NOT NULL DEFAULT FALSE;
6060 ALTER TABLE auditor.asset_copy_history ADD COLUMN floating BOOL;
6061
6062 DROP INDEX IF EXISTS asset.copy_barcode_key;
6063 CREATE UNIQUE INDEX copy_barcode_key ON asset.copy (barcode) WHERE deleted = FALSE OR deleted IS FALSE;
6064
6065 -- Note: later we create a trigger a_opac_vis_mat_view_tgr
6066 -- AFTER INSERT OR UPDATE ON asset.copy
6067
6068 ALTER TABLE asset.copy ADD COLUMN cost NUMERIC(8,2);
6069 ALTER TABLE auditor.asset_copy_history ADD COLUMN cost NUMERIC(8,2);
6070
6071 -- Moke mostly parallel changes to action.circulation
6072 -- and action.aged_circulation
6073
6074 ALTER TABLE action.circulation
6075 ADD COLUMN workstation INT
6076     REFERENCES actor.workstation
6077         ON DELETE SET NULL
6078         DEFERRABLE INITIALLY DEFERRED;
6079
6080 ALTER TABLE action.aged_circulation
6081 ADD COLUMN workstation INT;
6082
6083 ALTER TABLE action.circulation
6084 ADD COLUMN parent_circ BIGINT
6085         REFERENCES action.circulation(id)
6086         DEFERRABLE INITIALLY DEFERRED;
6087
6088 CREATE UNIQUE INDEX circ_parent_idx
6089 ON action.circulation( parent_circ )
6090 WHERE parent_circ IS NOT NULL;
6091
6092 ALTER TABLE action.aged_circulation
6093 ADD COLUMN parent_circ BIGINT;
6094
6095 ALTER TABLE action.circulation
6096 ADD COLUMN checkin_workstation INT
6097         REFERENCES actor.workstation(id)
6098         ON DELETE SET NULL
6099         DEFERRABLE INITIALLY DEFERRED;
6100
6101 ALTER TABLE action.aged_circulation
6102 ADD COLUMN checkin_workstation INT;
6103
6104 ALTER TABLE action.circulation
6105 ADD COLUMN checkin_scan_time TIMESTAMPTZ;
6106
6107 ALTER TABLE action.aged_circulation
6108 ADD COLUMN checkin_scan_time TIMESTAMPTZ;
6109
6110 CREATE INDEX action_circulation_target_copy_idx
6111 ON action.circulation (target_copy);
6112
6113 CREATE INDEX action_aged_circulation_target_copy_idx
6114 ON action.aged_circulation (target_copy);
6115
6116 ALTER TABLE action.circulation
6117 DROP CONSTRAINT circulation_stop_fines_check;
6118
6119 ALTER TABLE action.circulation
6120         ADD CONSTRAINT circulation_stop_fines_check
6121         CHECK (stop_fines IN (
6122         'CHECKIN','CLAIMSRETURNED','LOST','MAXFINES','RENEW','LONGOVERDUE','CLAIMSNEVERCHECKEDOUT'));
6123
6124 -- Correct some long-standing misspellings involving variations of "recur"
6125
6126 ALTER TABLE action.circulation RENAME COLUMN recuring_fine TO recurring_fine;
6127 ALTER TABLE action.circulation RENAME COLUMN recuring_fine_rule TO recurring_fine_rule;
6128
6129 ALTER TABLE action.aged_circulation RENAME COLUMN recuring_fine TO recurring_fine;
6130 ALTER TABLE action.aged_circulation RENAME COLUMN recuring_fine_rule TO recurring_fine_rule;
6131
6132 ALTER TABLE config.rule_recuring_fine RENAME TO rule_recurring_fine;
6133 ALTER TABLE config.rule_recuring_fine_id_seq RENAME TO rule_recurring_fine_id_seq;
6134
6135 ALTER TABLE config.rule_recurring_fine RENAME COLUMN recurance_interval TO recurrence_interval;
6136
6137 -- Might as well keep the comment in sync as well
6138 COMMENT ON TABLE config.rule_recurring_fine IS $$
6139 /*
6140  * Copyright (C) 2005  Georgia Public Library Service 
6141  * Mike Rylander <mrylander@gmail.com>
6142  *
6143  * Circulation Recurring Fine rules
6144  *
6145  * Each circulation is given a recurring fine amount based on one of
6146  * these rules.  The recurrence_interval should not be any shorter
6147  * than the interval between runs of the fine_processor.pl script
6148  * (which is run from CRON), or you could miss fines.
6149  * 
6150  *
6151  * ****
6152  *
6153  * This program is free software; you can redistribute it and/or
6154  * modify it under the terms of the GNU General Public License
6155  * as published by the Free Software Foundation; either version 2
6156  * of the License, or (at your option) any later version.
6157  *
6158  * This program is distributed in the hope that it will be useful,
6159  * but WITHOUT ANY WARRANTY; without even the implied warranty of
6160  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
6161  * GNU General Public License for more details.
6162  */
6163 $$;
6164
6165 -- Extend the name change to some related views:
6166
6167 DROP VIEW IF EXISTS stats.fleshed_circulation;
6168
6169 DROP VIEW IF EXISTS stats.fleshed_copy;
6170
6171 CREATE VIEW stats.fleshed_copy AS
6172         SELECT  cp.*,
6173         CAST(cp.create_date AS DATE) AS create_date_day,
6174         CAST(cp.edit_date AS DATE) AS edit_date_day,
6175         DATE_TRUNC('hour', cp.create_date) AS create_date_hour,
6176         DATE_TRUNC('hour', cp.edit_date) AS edit_date_hour,
6177                 cn.label AS call_number_label,
6178                 cn.owning_lib,
6179                 rd.item_lang,
6180                 rd.item_type,
6181                 rd.item_form
6182         FROM    asset.copy cp
6183                 JOIN asset.call_number cn ON (cp.call_number = cn.id)
6184                 JOIN metabib.rec_descriptor rd ON (rd.record = cn.record);
6185
6186 CREATE VIEW stats.fleshed_circulation AS
6187         SELECT  c.*,
6188                 CAST(c.xact_start AS DATE) AS start_date_day,
6189                 CAST(c.xact_finish AS DATE) AS finish_date_day,
6190                 DATE_TRUNC('hour', c.xact_start) AS start_date_hour,
6191                 DATE_TRUNC('hour', c.xact_finish) AS finish_date_hour,
6192                 cp.call_number_label,
6193                 cp.owning_lib,
6194                 cp.item_lang,
6195                 cp.item_type,
6196                 cp.item_form
6197         FROM    action.circulation c
6198                 JOIN stats.fleshed_copy cp ON (cp.id = c.target_copy);
6199
6200 -- Drop a view temporarily in order to alter action.all_circulation, upon
6201 -- which it is dependent.  We will recreate the view later.
6202
6203 DROP VIEW IF EXISTS extend_reporter.full_circ_count;
6204
6205 -- You would think that CREATE OR REPLACE would be enough, but in testing
6206 -- PostgreSQL complained about renaming the columns in the view. So we
6207 -- drop the view first.
6208 DROP VIEW IF EXISTS action.all_circulation;
6209
6210 CREATE OR REPLACE VIEW action.all_circulation AS
6211     SELECT  id,usr_post_code, usr_home_ou, usr_profile, usr_birth_year, copy_call_number, copy_location,
6212         copy_owning_lib, copy_circ_lib, copy_bib_record, xact_start, xact_finish, target_copy,
6213         circ_lib, circ_staff, checkin_staff, checkin_lib, renewal_remaining, due_date,
6214         stop_fines_time, checkin_time, create_time, duration, fine_interval, recurring_fine,
6215         max_fine, phone_renewal, desk_renewal, opac_renewal, duration_rule, recurring_fine_rule,
6216         max_fine_rule, stop_fines, workstation, checkin_workstation, checkin_scan_time, parent_circ
6217       FROM  action.aged_circulation
6218             UNION ALL
6219     SELECT  DISTINCT circ.id,COALESCE(a.post_code,b.post_code) AS usr_post_code, p.home_ou AS usr_home_ou, p.profile AS usr_profile, EXTRACT(YEAR FROM p.dob)::INT AS usr_birth_year,
6220         cp.call_number AS copy_call_number, cp.location AS copy_location, cn.owning_lib AS copy_owning_lib, cp.circ_lib AS copy_circ_lib,
6221         cn.record AS copy_bib_record, circ.xact_start, circ.xact_finish, circ.target_copy, circ.circ_lib, circ.circ_staff, circ.checkin_staff,
6222         circ.checkin_lib, circ.renewal_remaining, circ.due_date, circ.stop_fines_time, circ.checkin_time, circ.create_time, circ.duration,
6223         circ.fine_interval, circ.recurring_fine, circ.max_fine, circ.phone_renewal, circ.desk_renewal, circ.opac_renewal, circ.duration_rule,
6224         circ.recurring_fine_rule, circ.max_fine_rule, circ.stop_fines, circ.workstation, circ.checkin_workstation, circ.checkin_scan_time,
6225         circ.parent_circ
6226       FROM  action.circulation circ
6227         JOIN asset.copy cp ON (circ.target_copy = cp.id)
6228         JOIN asset.call_number cn ON (cp.call_number = cn.id)
6229         JOIN actor.usr p ON (circ.usr = p.id)
6230         LEFT JOIN actor.usr_address a ON (p.mailing_address = a.id)
6231         LEFT JOIN actor.usr_address b ON (p.billing_address = a.id);
6232
6233 -- Recreate the temporarily dropped view, having altered the action.all_circulation view:
6234
6235 CREATE OR REPLACE VIEW extend_reporter.full_circ_count AS
6236  SELECT cp.id, COALESCE(sum(c.circ_count), 0::bigint) + COALESCE(count(circ.id), 0::bigint) + COALESCE(count(acirc.id), 0::bigint) AS circ_count
6237    FROM asset."copy" cp
6238    LEFT JOIN extend_reporter.legacy_circ_count c USING (id)
6239    LEFT JOIN "action".circulation circ ON circ.target_copy = cp.id
6240    LEFT JOIN "action".aged_circulation acirc ON acirc.target_copy = cp.id
6241   GROUP BY cp.id;
6242
6243 CREATE UNIQUE INDEX only_one_concurrent_checkout_per_copy ON action.circulation(target_copy) WHERE checkin_time IS NULL;
6244
6245 ALTER TABLE action.circulation DROP CONSTRAINT action_circulation_target_copy_fkey;
6246
6247 CREATE OR REPLACE FUNCTION action.age_circ_on_delete () RETURNS TRIGGER AS $$
6248 DECLARE
6249 found char := 'N';
6250 BEGIN
6251
6252     -- If there are any renewals for this circulation, don't archive or delete
6253     -- it yet.   We'll do so later, when we archive and delete the renewals.
6254
6255     SELECT 'Y' INTO found
6256     FROM action.circulation
6257     WHERE parent_circ = OLD.id
6258     LIMIT 1;
6259
6260     IF found = 'Y' THEN
6261         RETURN NULL;  -- don't delete
6262         END IF;
6263
6264     -- Archive a copy of the old row to action.aged_circulation
6265
6266     INSERT INTO action.aged_circulation
6267         (id,usr_post_code, usr_home_ou, usr_profile, usr_birth_year, copy_call_number, copy_location,
6268         copy_owning_lib, copy_circ_lib, copy_bib_record, xact_start, xact_finish, target_copy,
6269         circ_lib, circ_staff, checkin_staff, checkin_lib, renewal_remaining, due_date,
6270         stop_fines_time, checkin_time, create_time, duration, fine_interval, recurring_fine,
6271         max_fine, phone_renewal, desk_renewal, opac_renewal, duration_rule, recurring_fine_rule,
6272         max_fine_rule, stop_fines, workstation, checkin_workstation, checkin_scan_time, parent_circ)
6273       SELECT
6274         id,usr_post_code, usr_home_ou, usr_profile, usr_birth_year, copy_call_number, copy_location,
6275         copy_owning_lib, copy_circ_lib, copy_bib_record, xact_start, xact_finish, target_copy,
6276         circ_lib, circ_staff, checkin_staff, checkin_lib, renewal_remaining, due_date,
6277         stop_fines_time, checkin_time, create_time, duration, fine_interval, recurring_fine,
6278         max_fine, phone_renewal, desk_renewal, opac_renewal, duration_rule, recurring_fine_rule,
6279         max_fine_rule, stop_fines, workstation, checkin_workstation, checkin_scan_time, parent_circ
6280         FROM action.all_circulation WHERE id = OLD.id;
6281
6282     RETURN OLD;
6283 END;
6284 $$ LANGUAGE 'plpgsql';
6285
6286 UPDATE config.z3950_attr SET truncation = 1 WHERE source = 'biblios' AND name = 'title';
6287
6288 UPDATE config.z3950_attr SET truncation = 1 WHERE source = 'biblios' AND truncation = 0;
6289
6290 -- Adding circ.holds.target_skip_me OU setting logic to the pre-matchpoint tests
6291
6292 CREATE OR REPLACE FUNCTION action.hold_request_permit_test( pickup_ou INT, request_ou INT, match_item BIGINT, match_user INT, match_requestor INT ) RETURNS SETOF action.matrix_test_result AS $func$
6293 DECLARE
6294     matchpoint_id        INT;
6295     user_object        actor.usr%ROWTYPE;
6296     age_protect_object    config.rule_age_hold_protect%ROWTYPE;
6297     standing_penalty    config.standing_penalty%ROWTYPE;
6298     transit_range_ou_type    actor.org_unit_type%ROWTYPE;
6299     transit_source        actor.org_unit%ROWTYPE;
6300     item_object        asset.copy%ROWTYPE;
6301     ou_skip              actor.org_unit_setting%ROWTYPE;
6302     result            action.matrix_test_result;
6303     hold_test        config.hold_matrix_matchpoint%ROWTYPE;
6304     hold_count        INT;
6305     hold_transit_prox    INT;
6306     frozen_hold_count    INT;
6307     context_org_list    INT[];
6308     done            BOOL := FALSE;
6309 BEGIN
6310     SELECT INTO user_object * FROM actor.usr WHERE id = match_user;
6311     SELECT INTO context_org_list ARRAY_ACCUM(id) FROM actor.org_unit_full_path( pickup_ou );
6312
6313     result.success := TRUE;
6314
6315     -- Fail if we couldn't find a user
6316     IF user_object.id IS NULL THEN
6317         result.fail_part := 'no_user';
6318         result.success := FALSE;
6319         done := TRUE;
6320         RETURN NEXT result;
6321         RETURN;
6322     END IF;
6323
6324     SELECT INTO item_object * FROM asset.copy WHERE id = match_item;
6325
6326     -- Fail if we couldn't find a copy
6327     IF item_object.id IS NULL THEN
6328         result.fail_part := 'no_item';
6329         result.success := FALSE;
6330         done := TRUE;
6331         RETURN NEXT result;
6332         RETURN;
6333     END IF;
6334
6335     SELECT INTO matchpoint_id action.find_hold_matrix_matchpoint(pickup_ou, request_ou, match_item, match_user, match_requestor);
6336     result.matchpoint := matchpoint_id;
6337
6338     SELECT INTO ou_skip * FROM actor.org_unit_setting WHERE name = 'circ.holds.target_skip_me' AND org_unit = item_object.circ_lib;
6339
6340     -- Fail if the circ_lib for the item has circ.holds.target_skip_me set to true
6341     IF ou_skip.id IS NOT NULL AND ou_skip.value = 'true' THEN
6342         result.fail_part := 'circ.holds.target_skip_me';
6343         result.success := FALSE;
6344         done := TRUE;
6345         RETURN NEXT result;
6346         RETURN;
6347     END IF;
6348
6349     -- Fail if user is barred
6350     IF user_object.barred IS TRUE THEN
6351         result.fail_part := 'actor.usr.barred';
6352         result.success := FALSE;
6353         done := TRUE;
6354         RETURN NEXT result;
6355         RETURN;
6356     END IF;
6357
6358     -- Fail if we couldn't find any matchpoint (requires a default)
6359     IF matchpoint_id IS NULL THEN
6360         result.fail_part := 'no_matchpoint';
6361         result.success := FALSE;
6362         done := TRUE;
6363         RETURN NEXT result;
6364         RETURN;
6365     END IF;
6366
6367     SELECT INTO hold_test * FROM config.hold_matrix_matchpoint WHERE id = matchpoint_id;
6368
6369     IF hold_test.holdable IS FALSE THEN
6370         result.fail_part := 'config.hold_matrix_test.holdable';
6371         result.success := FALSE;
6372         done := TRUE;
6373         RETURN NEXT result;
6374     END IF;
6375
6376     IF hold_test.transit_range IS NOT NULL THEN
6377         SELECT INTO transit_range_ou_type * FROM actor.org_unit_type WHERE id = hold_test.transit_range;
6378         IF hold_test.distance_is_from_owner THEN
6379             SELECT INTO transit_source ou.* FROM actor.org_unit ou JOIN asset.call_number cn ON (cn.owning_lib = ou.id) WHERE cn.id = item_object.call_number;
6380         ELSE
6381             SELECT INTO transit_source * FROM actor.org_unit WHERE id = item_object.circ_lib;
6382         END IF;
6383
6384         PERFORM * FROM actor.org_unit_descendants( transit_source.id, transit_range_ou_type.depth ) WHERE id = pickup_ou;
6385
6386         IF NOT FOUND THEN
6387             result.fail_part := 'transit_range';
6388             result.success := FALSE;
6389             done := TRUE;
6390             RETURN NEXT result;
6391         END IF;
6392     END IF;
6393  
6394     FOR standing_penalty IN
6395         SELECT  DISTINCT csp.*
6396           FROM  actor.usr_standing_penalty usp
6397                 JOIN config.standing_penalty csp ON (csp.id = usp.standing_penalty)
6398           WHERE usr = match_user
6399                 AND usp.org_unit IN ( SELECT * FROM explode_array(context_org_list) )
6400                 AND (usp.stop_date IS NULL or usp.stop_date > NOW())
6401                 AND csp.block_list LIKE '%HOLD%' LOOP
6402
6403         result.fail_part := standing_penalty.name;
6404         result.success := FALSE;
6405         done := TRUE;
6406         RETURN NEXT result;
6407     END LOOP;
6408
6409     IF hold_test.stop_blocked_user IS TRUE THEN
6410         FOR standing_penalty IN
6411             SELECT  DISTINCT csp.*
6412               FROM  actor.usr_standing_penalty usp
6413                     JOIN config.standing_penalty csp ON (csp.id = usp.standing_penalty)
6414               WHERE usr = match_user
6415                     AND usp.org_unit IN ( SELECT * FROM explode_array(context_org_list) )
6416                     AND (usp.stop_date IS NULL or usp.stop_date > NOW())
6417                     AND csp.block_list LIKE '%CIRC%' LOOP
6418     
6419             result.fail_part := standing_penalty.name;
6420             result.success := FALSE;
6421             done := TRUE;
6422             RETURN NEXT result;
6423         END LOOP;
6424     END IF;
6425
6426     IF hold_test.max_holds IS NOT NULL THEN
6427         SELECT    INTO hold_count COUNT(*)
6428           FROM    action.hold_request
6429           WHERE    usr = match_user
6430             AND fulfillment_time IS NULL
6431             AND cancel_time IS NULL
6432             AND CASE WHEN hold_test.include_frozen_holds THEN TRUE ELSE frozen IS FALSE END;
6433
6434         IF hold_count >= hold_test.max_holds THEN
6435             result.fail_part := 'config.hold_matrix_test.max_holds';
6436             result.success := FALSE;
6437             done := TRUE;
6438             RETURN NEXT result;
6439         END IF;
6440     END IF;
6441
6442     IF item_object.age_protect IS NOT NULL THEN
6443         SELECT INTO age_protect_object * FROM config.rule_age_hold_protect WHERE id = item_object.age_protect;
6444
6445         IF item_object.create_date + age_protect_object.age > NOW() THEN
6446             IF hold_test.distance_is_from_owner THEN
6447                 SELECT INTO hold_transit_prox prox FROM actor.org_unit_proximity WHERE from_org = item_cn_object.owning_lib AND to_org = pickup_ou;
6448             ELSE
6449                 SELECT INTO hold_transit_prox prox FROM actor.org_unit_proximity WHERE from_org = item_object.circ_lib AND to_org = pickup_ou;
6450             END IF;
6451
6452             IF hold_transit_prox > age_protect_object.prox THEN
6453                 result.fail_part := 'config.rule_age_hold_protect.prox';
6454                 result.success := FALSE;
6455                 done := TRUE;
6456                 RETURN NEXT result;
6457             END IF;
6458         END IF;
6459     END IF;
6460
6461     IF NOT done THEN
6462         RETURN NEXT result;
6463     END IF;
6464
6465     RETURN;
6466 END;
6467 $func$ LANGUAGE plpgsql;
6468
6469 -- New post-delete trigger to propagate deletions to parent(s)
6470
6471 CREATE OR REPLACE FUNCTION action.age_parent_circ_on_delete () RETURNS TRIGGER AS $$
6472 BEGIN
6473
6474     -- Having deleted a renewal, we can delete the original circulation (or a previous
6475     -- renewal, if that's what parent_circ is pointing to).  That deletion will trigger
6476     -- deletion of any prior parents, etc. recursively.
6477
6478     IF OLD.parent_circ IS NOT NULL THEN
6479         DELETE FROM action.circulation
6480         WHERE id = OLD.parent_circ;
6481     END IF;
6482
6483     RETURN OLD;
6484 END;
6485 $$ LANGUAGE 'plpgsql';
6486
6487 CREATE TRIGGER age_parent_circ AFTER DELETE ON action.circulation
6488 FOR EACH ROW EXECUTE PROCEDURE action.age_parent_circ_on_delete ();
6489
6490 -- This only gets inserted if there are no other id > 100 billing types
6491 INSERT INTO config.billing_type (id, name, owner) SELECT DISTINCT 101, oils_i18n_gettext(101, 'Misc', 'cbt', 'name'), 1 FROM config.billing_type_id_seq WHERE last_value < 101;
6492 SELECT SETVAL('config.billing_type_id_seq'::TEXT, 101) FROM config.billing_type_id_seq WHERE last_value < 101;
6493
6494 -- Populate xact_type column in the materialized version of billable_xact_summary
6495
6496 CREATE OR REPLACE FUNCTION money.mat_summary_create () RETURNS TRIGGER AS $$
6497 BEGIN
6498         INSERT INTO money.materialized_billable_xact_summary (id, usr, xact_start, xact_finish, total_paid, total_owed, balance_owed, xact_type)
6499                 VALUES ( NEW.id, NEW.usr, NEW.xact_start, NEW.xact_finish, 0.0, 0.0, 0.0, TG_ARGV[0]);
6500         RETURN NEW;
6501 END;
6502 $$ LANGUAGE PLPGSQL;
6503  
6504 DROP TRIGGER IF EXISTS mat_summary_create_tgr ON action.circulation;
6505 CREATE TRIGGER mat_summary_create_tgr AFTER INSERT ON action.circulation FOR EACH ROW EXECUTE PROCEDURE money.mat_summary_create ('circulation');
6506  
6507 DROP TRIGGER IF EXISTS mat_summary_create_tgr ON money.grocery;
6508 CREATE TRIGGER mat_summary_create_tgr AFTER INSERT ON money.grocery FOR EACH ROW EXECUTE PROCEDURE money.mat_summary_create ('grocery');
6509
6510 CREATE RULE money_payment_view_update AS ON UPDATE TO money.payment_view DO INSTEAD 
6511     UPDATE money.payment SET xact = NEW.xact, payment_ts = NEW.payment_ts, voided = NEW.voided, amount = NEW.amount, note = NEW.note WHERE id = NEW.id;
6512
6513 -- Generate the equivalent of compound subject entries from the existing rows
6514 -- so that we don't have to laboriously reindex them
6515
6516 --INSERT INTO config.metabib_field (field_class, name, format, xpath ) VALUES
6517 --    ( 'subject', 'complete', 'mods32', $$//mods32:mods/mods32:subject//text()$$ );
6518 --
6519 --CREATE INDEX metabib_subject_field_entry_source_idx ON metabib.subject_field_entry (source);
6520 --
6521 --INSERT INTO metabib.subject_field_entry (source, field, value)
6522 --    SELECT source, (
6523 --            SELECT id 
6524 --            FROM config.metabib_field
6525 --            WHERE field_class = 'subject' AND name = 'complete'
6526 --        ), 
6527 --        ARRAY_TO_STRING ( 
6528 --            ARRAY (
6529 --                SELECT value 
6530 --                FROM metabib.subject_field_entry msfe
6531 --                WHERE msfe.source = groupee.source
6532 --                ORDER BY source 
6533 --            ), ' ' 
6534 --        ) AS grouped
6535 --    FROM ( 
6536 --        SELECT source
6537 --        FROM metabib.subject_field_entry
6538 --        GROUP BY source
6539 --    ) AS groupee;
6540
6541 CREATE OR REPLACE FUNCTION money.materialized_summary_billing_del () RETURNS TRIGGER AS $$
6542 DECLARE
6543         prev_billing    money.billing%ROWTYPE;
6544         old_billing     money.billing%ROWTYPE;
6545 BEGIN
6546         SELECT * INTO prev_billing FROM money.billing WHERE xact = OLD.xact AND NOT voided ORDER BY billing_ts DESC LIMIT 1 OFFSET 1;
6547         SELECT * INTO old_billing FROM money.billing WHERE xact = OLD.xact AND NOT voided ORDER BY billing_ts DESC LIMIT 1;
6548
6549         IF OLD.id = old_billing.id THEN
6550                 UPDATE  money.materialized_billable_xact_summary
6551                   SET   last_billing_ts = prev_billing.billing_ts,
6552                         last_billing_note = prev_billing.note,
6553                         last_billing_type = prev_billing.billing_type
6554                   WHERE id = OLD.xact;
6555         END IF;
6556
6557         IF NOT OLD.voided THEN
6558                 UPDATE  money.materialized_billable_xact_summary
6559                   SET   total_owed = total_owed - OLD.amount,
6560                         balance_owed = balance_owed + OLD.amount
6561                   WHERE id = OLD.xact;
6562         END IF;
6563
6564         RETURN OLD;
6565 END;
6566 $$ LANGUAGE PLPGSQL;
6567
6568 -- ARG! need to rid ourselves of the broken table definition ... this mechanism is not ideal, sorry.
6569 DROP TABLE IF EXISTS config.index_normalizer CASCADE;
6570
6571 CREATE OR REPLACE FUNCTION public.naco_normalize( TEXT, TEXT ) RETURNS TEXT AS $func$
6572         use Unicode::Normalize;
6573         use Encode;
6574
6575         # When working with Unicode data, the first step is to decode it to
6576         # a byte string; after that, lowercasing is safe
6577         my $txt = lc(decode_utf8(shift));
6578         my $sf = shift;
6579
6580         $txt = NFD($txt);
6581         $txt =~ s/\pM+//go;     # Remove diacritics
6582
6583         $txt =~ s/\xE6/AE/go;   # Convert ae digraph
6584         $txt =~ s/\x{153}/OE/go;# Convert oe digraph
6585         $txt =~ s/\xFE/TH/go;   # Convert Icelandic thorn
6586
6587         $txt =~ tr/\x{2070}\x{2071}\x{2072}\x{2073}\x{2074}\x{2075}\x{2076}\x{2077}\x{2078}\x{2079}\x{207A}\x{207B}/0123456789+-/;# Convert superscript numbers
6588         $txt =~ tr/\x{2080}\x{2081}\x{2082}\x{2083}\x{2084}\x{2085}\x{2086}\x{2087}\x{2088}\x{2089}\x{208A}\x{208B}/0123456889+-/;# Convert subscript numbers
6589
6590         $txt =~ tr/\x{0251}\x{03B1}\x{03B2}\x{0262}\x{03B3}/AABGG/;             # Convert Latin and Greek
6591         $txt =~ tr/\x{2113}\xF0\!\"\(\)\-\{\}\<\>\;\:\.\?\xA1\xBF\/\\\@\*\%\=\xB1\+\xAE\xA9\x{2117}\$\xA3\x{FFE1}\xB0\^\_\~\`/LD /;     # Convert Misc
6592         $txt =~ tr/\'\[\]\|//d;                                                 # Remove Misc
6593
6594         if ($sf && $sf =~ /^a/o) {
6595                 my $commapos = index($txt,',');
6596                 if ($commapos > -1) {
6597                         if ($commapos != length($txt) - 1) {
6598                                 my @list = split /,/, $txt;
6599                                 my $first = shift @list;
6600                                 $txt = $first . ',' . join(' ', @list);
6601                         } else {
6602                                 $txt =~ s/,/ /go;
6603                         }
6604                 }
6605         } else {
6606                 $txt =~ s/,/ /go;
6607         }
6608
6609         $txt =~ s/\s+/ /go;     # Compress multiple spaces
6610         $txt =~ s/^\s+//o;      # Remove leading space
6611         $txt =~ s/\s+$//o;      # Remove trailing space
6612
6613         # Encoding the outgoing string is good practice, but not strictly
6614         # necessary in this case because we've stripped everything from it
6615         return encode_utf8($txt);
6616 $func$ LANGUAGE 'plperlu' STRICT IMMUTABLE;
6617
6618 -- Some handy functions, based on existing ones, to provide optional ingest normalization
6619
6620 CREATE OR REPLACE FUNCTION public.left_trunc( TEXT, INT ) RETURNS TEXT AS $func$
6621         SELECT SUBSTRING($1,$2);
6622 $func$ LANGUAGE SQL STRICT IMMUTABLE;
6623
6624 CREATE OR REPLACE FUNCTION public.right_trunc( TEXT, INT ) RETURNS TEXT AS $func$
6625         SELECT SUBSTRING($1,1,$2);
6626 $func$ LANGUAGE SQL STRICT IMMUTABLE;
6627
6628 CREATE OR REPLACE FUNCTION public.naco_normalize_keep_comma( TEXT ) RETURNS TEXT AS $func$
6629         SELECT public.naco_normalize($1,'a');
6630 $func$ LANGUAGE SQL STRICT IMMUTABLE;
6631
6632 CREATE OR REPLACE FUNCTION public.split_date_range( TEXT ) RETURNS TEXT AS $func$
6633         SELECT REGEXP_REPLACE( $1, E'(\\d{4})-(\\d{4})', E'\\1 \\2', 'g' );
6634 $func$ LANGUAGE SQL STRICT IMMUTABLE;
6635
6636 -- And ... a table in which to register them
6637
6638 CREATE TABLE config.index_normalizer (
6639         id              SERIAL  PRIMARY KEY,
6640         name            TEXT    UNIQUE NOT NULL,
6641         description     TEXT,
6642         func            TEXT    NOT NULL,
6643         param_count     INT     NOT NULL DEFAULT 0
6644 );
6645
6646 CREATE TABLE config.metabib_field_index_norm_map (
6647         id      SERIAL  PRIMARY KEY,
6648         field   INT     NOT NULL REFERENCES config.metabib_field (id) ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED,
6649         norm    INT     NOT NULL REFERENCES config.index_normalizer (id) ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED,
6650         params  TEXT,
6651         pos     INT     NOT NULL DEFAULT 0
6652 );
6653
6654 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6655         'NACO Normalize',
6656         'Apply NACO normalization rules to the extracted text.  See http://www.loc.gov/catdir/pcc/naco/normrule-2.html for details.',
6657         'naco_normalize',
6658         0
6659 );
6660
6661 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6662         'Normalize date range',
6663         'Split date ranges in the form of "XXXX-YYYY" into "XXXX YYYY" for proper index.',
6664         'split_date_range',
6665         1
6666 );
6667
6668 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6669         'NACO Normalize -- retain first comma',
6670         'Apply NACO normalization rules to the extracted text, retaining the first comma.  See http://www.loc.gov/catdir/pcc/naco/normrule-2.html for details.',
6671         'naco_normalize_keep_comma',
6672         0
6673 );
6674
6675 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6676         'Strip Diacritics',
6677         'Convert text to NFD form and remove non-spacing combining marks.',
6678         'remove_diacritics',
6679         0
6680 );
6681
6682 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6683         'Up-case',
6684         'Convert text upper case.',
6685         'uppercase',
6686         0
6687 );
6688
6689 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6690         'Down-case',
6691         'Convert text lower case.',
6692         'lowercase',
6693         0
6694 );
6695
6696 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6697         'Extract Dewey-like number',
6698         'Extract a string of numeric characters ther resembles a DDC number.',
6699         'call_number_dewey',
6700         0
6701 );
6702
6703 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6704         'Left truncation',
6705         'Discard the specified number of characters from the left side of the string.',
6706         'left_trunc',
6707         1
6708 );
6709
6710 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6711         'Right truncation',
6712         'Include only the specified number of characters from the left side of the string.',
6713         'right_trunc',
6714         1
6715 );
6716
6717 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
6718         'First word',
6719         'Include only the first space-separated word of a string.',
6720         'first_word',
6721         0
6722 );
6723
6724 INSERT INTO config.metabib_field_index_norm_map (field,norm)
6725         SELECT  m.id,
6726                 i.id
6727           FROM  config.metabib_field m,
6728                 config.index_normalizer i
6729           WHERE i.func IN ('naco_normalize','split_date_range');
6730
6731 CREATE OR REPLACE FUNCTION oils_tsearch2 () RETURNS TRIGGER AS $$
6732 DECLARE
6733     normalizer      RECORD;
6734     value           TEXT := '';
6735 BEGIN
6736
6737     value := NEW.value;
6738
6739     IF TG_TABLE_NAME::TEXT ~ 'field_entry$' THEN
6740         FOR normalizer IN
6741             SELECT  n.func AS func,
6742                     n.param_count AS param_count,
6743                     m.params AS params
6744               FROM  config.index_normalizer n
6745                     JOIN config.metabib_field_index_norm_map m ON (m.norm = n.id)
6746               WHERE field = NEW.field AND m.pos < 0
6747               ORDER BY m.pos LOOP
6748                 EXECUTE 'SELECT ' || normalizer.func || '(' ||
6749                     quote_literal( value ) ||
6750                     CASE
6751                         WHEN normalizer.param_count > 0
6752                             THEN ',' || REPLACE(REPLACE(BTRIM(normalizer.params,'[]'),E'\'',E'\\\''),E'"',E'\'')
6753                             ELSE ''
6754                         END ||
6755                     ')' INTO value;
6756
6757         END LOOP;
6758
6759         NEW.value := value;
6760     END IF;
6761
6762     IF NEW.index_vector = ''::tsvector THEN
6763         RETURN NEW;
6764     END IF;
6765
6766     IF TG_TABLE_NAME::TEXT ~ 'field_entry$' THEN
6767         FOR normalizer IN
6768             SELECT  n.func AS func,
6769                     n.param_count AS param_count,
6770                     m.params AS params
6771               FROM  config.index_normalizer n
6772                     JOIN config.metabib_field_index_norm_map m ON (m.norm = n.id)
6773               WHERE field = NEW.field AND m.pos >= 0
6774               ORDER BY m.pos LOOP
6775                 EXECUTE 'SELECT ' || normalizer.func || '(' ||
6776                     quote_literal( value ) ||
6777                     CASE
6778                         WHEN normalizer.param_count > 0
6779                             THEN ',' || REPLACE(REPLACE(BTRIM(normalizer.params,'[]'),E'\'',E'\\\''),E'"',E'\'')
6780                             ELSE ''
6781                         END ||
6782                     ')' INTO value;
6783
6784         END LOOP;
6785     END IF;
6786
6787     IF REGEXP_REPLACE(VERSION(),E'^.+?(\\d+\\.\\d+).*?$',E'\\1')::FLOAT > 8.2 THEN
6788         NEW.index_vector = to_tsvector((TG_ARGV[0])::regconfig, value);
6789     ELSE
6790         NEW.index_vector = to_tsvector(TG_ARGV[0], value);
6791     END IF;
6792
6793     RETURN NEW;
6794 END;
6795 $$ LANGUAGE PLPGSQL;
6796
6797 CREATE OR REPLACE FUNCTION oils_xpath ( TEXT, TEXT, ANYARRAY ) RETURNS TEXT[] AS 'SELECT XPATH( $1, $2::XML, $3 )::TEXT[];' LANGUAGE SQL IMMUTABLE;
6798
6799 CREATE OR REPLACE FUNCTION oils_xpath ( TEXT, TEXT ) RETURNS TEXT[] AS 'SELECT XPATH( $1, $2::XML )::TEXT[];' LANGUAGE SQL IMMUTABLE;
6800
6801 CREATE OR REPLACE FUNCTION oils_xpath_string ( TEXT, TEXT, TEXT, ANYARRAY ) RETURNS TEXT AS $func$
6802     SELECT  ARRAY_TO_STRING(
6803                 oils_xpath(
6804                     $1 ||
6805                         CASE WHEN $1 ~ $re$/[^/[]*@[^]]+$$re$ OR $1 ~ $re$text\(\)$$re$ THEN '' ELSE '//text()' END,
6806                     $2,
6807                     $4
6808                 ),
6809                 $3
6810             );
6811 $func$ LANGUAGE SQL IMMUTABLE;
6812
6813 CREATE OR REPLACE FUNCTION oils_xpath_string ( TEXT, TEXT, TEXT ) RETURNS TEXT AS $func$
6814     SELECT oils_xpath_string( $1, $2, $3, '{}'::TEXT[] );
6815 $func$ LANGUAGE SQL IMMUTABLE;
6816
6817 CREATE OR REPLACE FUNCTION oils_xpath_string ( TEXT, TEXT, ANYARRAY ) RETURNS TEXT AS $func$
6818     SELECT oils_xpath_string( $1, $2, '', $3 );
6819 $func$ LANGUAGE SQL IMMUTABLE;
6820
6821 CREATE OR REPLACE FUNCTION oils_xpath_string ( TEXT, TEXT ) RETURNS TEXT AS $func$
6822     SELECT oils_xpath_string( $1, $2, '{}'::TEXT[] );
6823 $func$ LANGUAGE SQL IMMUTABLE;
6824
6825 CREATE TYPE metabib.field_entry_template AS (
6826         field_class     TEXT,
6827         field           INT,
6828         source          BIGINT,
6829         value           TEXT
6830 );
6831
6832 CREATE OR REPLACE FUNCTION oils_xslt_process(TEXT, TEXT) RETURNS TEXT AS $func$
6833   use strict;
6834
6835   use XML::LibXSLT;
6836   use XML::LibXML;
6837
6838   my $doc = shift;
6839   my $xslt = shift;
6840
6841   # The following approach uses the older XML::LibXML 1.69 / XML::LibXSLT 1.68
6842   # methods of parsing XML documents and stylesheets, in the hopes of broader
6843   # compatibility with distributions
6844   my $parser = $_SHARED{'_xslt_process'}{parsers}{xml} || XML::LibXML->new();
6845
6846   # Cache the XML parser, if we do not already have one
6847   $_SHARED{'_xslt_process'}{parsers}{xml} = $parser
6848     unless ($_SHARED{'_xslt_process'}{parsers}{xml});
6849
6850   my $xslt_parser = $_SHARED{'_xslt_process'}{parsers}{xslt} || XML::LibXSLT->new();
6851
6852   # Cache the XSLT processor, if we do not already have one
6853   $_SHARED{'_xslt_process'}{parsers}{xslt} = $xslt_parser
6854     unless ($_SHARED{'_xslt_process'}{parsers}{xslt});
6855
6856   my $stylesheet = $_SHARED{'_xslt_process'}{stylesheets}{$xslt} ||
6857     $xslt_parser->parse_stylesheet( $parser->parse_string($xslt) );
6858
6859   $_SHARED{'_xslt_process'}{stylesheets}{$xslt} = $stylesheet
6860     unless ($_SHARED{'_xslt_process'}{stylesheets}{$xslt});
6861
6862   return $stylesheet->output_string(
6863     $stylesheet->transform(
6864       $parser->parse_string($doc)
6865     )
6866   );
6867
6868 $func$ LANGUAGE 'plperlu' STRICT IMMUTABLE;
6869
6870 -- Add two columns so that the following function will compile.
6871 -- Eventually the label column will be NOT NULL, but not yet.
6872 ALTER TABLE config.metabib_field ADD COLUMN label TEXT;
6873 ALTER TABLE config.metabib_field ADD COLUMN facet_xpath TEXT;
6874
6875 CREATE OR REPLACE FUNCTION biblio.extract_metabib_field_entry ( rid BIGINT, default_joiner TEXT ) RETURNS SETOF metabib.field_entry_template AS $func$
6876 DECLARE
6877     bib     biblio.record_entry%ROWTYPE;
6878     idx     config.metabib_field%ROWTYPE;
6879     xfrm        config.xml_transform%ROWTYPE;
6880     prev_xfrm   TEXT;
6881     transformed_xml TEXT;
6882     xml_node    TEXT;
6883     xml_node_list   TEXT[];
6884     facet_text  TEXT;
6885     raw_text    TEXT;
6886     curr_text   TEXT;
6887     joiner      TEXT := default_joiner; -- XXX will index defs supply a joiner?
6888     output_row  metabib.field_entry_template%ROWTYPE;
6889 BEGIN
6890
6891     -- Get the record
6892     SELECT INTO bib * FROM biblio.record_entry WHERE id = rid;
6893
6894     -- Loop over the indexing entries
6895     FOR idx IN SELECT * FROM config.metabib_field ORDER BY format LOOP
6896
6897         SELECT INTO xfrm * from config.xml_transform WHERE name = idx.format;
6898
6899         -- See if we can skip the XSLT ... it's expensive
6900         IF prev_xfrm IS NULL OR prev_xfrm <> xfrm.name THEN
6901             -- Can't skip the transform
6902             IF xfrm.xslt <> '---' THEN
6903                 transformed_xml := oils_xslt_process(bib.marc,xfrm.xslt);
6904             ELSE
6905                 transformed_xml := bib.marc;
6906             END IF;
6907
6908             prev_xfrm := xfrm.name;
6909         END IF;
6910
6911         xml_node_list := oils_xpath( idx.xpath, transformed_xml, ARRAY[ARRAY[xfrm.prefix, xfrm.namespace_uri]] );
6912
6913         raw_text := NULL;
6914         FOR xml_node IN SELECT x FROM explode_array(xml_node_list) AS x LOOP
6915             CONTINUE WHEN xml_node !~ E'^\\s*<';
6916
6917             curr_text := ARRAY_TO_STRING(
6918                 oils_xpath( '//text()',
6919                     REGEXP_REPLACE( -- This escapes all &s not followed by "amp;".  Data ise returned from oils_xpath (above) in UTF-8, not entity encoded
6920                         REGEXP_REPLACE( -- This escapes embeded <s
6921                             xml_node,
6922                             $re$(>[^<]+)(<)([^>]+<)$re$,
6923                             E'\\1&lt;\\3',
6924                             'g'
6925                         ),
6926                         '&(?!amp;)',
6927                         '&amp;',
6928                         'g'
6929                     )
6930                 ),
6931                 ' '
6932             );
6933
6934             CONTINUE WHEN curr_text IS NULL OR curr_text = '';
6935
6936             IF raw_text IS NOT NULL THEN
6937                 raw_text := raw_text || joiner;
6938             END IF;
6939
6940             raw_text := COALESCE(raw_text,'') || curr_text;
6941
6942             -- insert raw node text for faceting
6943             IF idx.facet_field THEN
6944
6945                 IF idx.facet_xpath IS NOT NULL AND idx.facet_xpath <> '' THEN
6946                     facet_text := oils_xpath_string( idx.facet_xpath, xml_node, joiner, ARRAY[ARRAY[xfrm.prefix, xfrm.namespace_uri]] );
6947                 ELSE
6948                     facet_text := curr_text;
6949                 END IF;
6950
6951                 output_row.field_class = idx.field_class;
6952                 output_row.field = -1 * idx.id;
6953                 output_row.source = rid;
6954                 output_row.value = BTRIM(REGEXP_REPLACE(facet_text, E'\\s+', ' ', 'g'));
6955
6956                 RETURN NEXT output_row;
6957             END IF;
6958
6959         END LOOP;
6960
6961         CONTINUE WHEN raw_text IS NULL OR raw_text = '';
6962
6963         -- insert combined node text for searching
6964         IF idx.search_field THEN
6965             output_row.field_class = idx.field_class;
6966             output_row.field = idx.id;
6967             output_row.source = rid;
6968             output_row.value = BTRIM(REGEXP_REPLACE(raw_text, E'\\s+', ' ', 'g'));
6969
6970             RETURN NEXT output_row;
6971         END IF;
6972
6973     END LOOP;
6974
6975 END;
6976 $func$ LANGUAGE PLPGSQL;
6977
6978 -- default to a space joiner
6979 CREATE OR REPLACE FUNCTION biblio.extract_metabib_field_entry ( BIGINT ) RETURNS SETOF metabib.field_entry_template AS $func$
6980         SELECT * FROM biblio.extract_metabib_field_entry($1, ' ');
6981 $func$ LANGUAGE SQL;
6982
6983 CREATE OR REPLACE FUNCTION biblio.flatten_marc ( TEXT ) RETURNS SETOF metabib.full_rec AS $func$
6984
6985 use MARC::Record;
6986 use MARC::File::XML (BinaryEncoding => 'UTF-8');
6987
6988 my $xml = shift;
6989 my $r = MARC::Record->new_from_xml( $xml );
6990
6991 return_next( { tag => 'LDR', value => $r->leader } );
6992
6993 for my $f ( $r->fields ) {
6994     if ($f->is_control_field) {
6995         return_next({ tag => $f->tag, value => $f->data });
6996     } else {
6997         for my $s ($f->subfields) {
6998             return_next({
6999                 tag      => $f->tag,
7000                 ind1     => $f->indicator(1),
7001                 ind2     => $f->indicator(2),
7002                 subfield => $s->[0],
7003                 value    => $s->[1]
7004             });
7005
7006             if ( $f->tag eq '245' and $s->[0] eq 'a' ) {
7007                 my $trim = $f->indicator(2) || 0;
7008                 return_next({
7009                     tag      => 'tnf',
7010                     ind1     => $f->indicator(1),
7011                     ind2     => $f->indicator(2),
7012                     subfield => 'a',
7013                     value    => substr( $s->[1], $trim )
7014                 });
7015             }
7016         }
7017     }
7018 }
7019
7020 return undef;
7021
7022 $func$ LANGUAGE PLPERLU;
7023
7024 CREATE OR REPLACE FUNCTION biblio.flatten_marc ( rid BIGINT ) RETURNS SETOF metabib.full_rec AS $func$
7025 DECLARE
7026     bib biblio.record_entry%ROWTYPE;
7027     output  metabib.full_rec%ROWTYPE;
7028     field   RECORD;
7029 BEGIN
7030     SELECT INTO bib * FROM biblio.record_entry WHERE id = rid;
7031
7032     FOR field IN SELECT * FROM biblio.flatten_marc( bib.marc ) LOOP
7033         output.record := rid;
7034         output.ind1 := field.ind1;
7035         output.ind2 := field.ind2;
7036         output.tag := field.tag;
7037         output.subfield := field.subfield;
7038         IF field.subfield IS NOT NULL AND field.tag NOT IN ('020','022','024') THEN -- exclude standard numbers and control fields
7039             output.value := naco_normalize(field.value, field.subfield);
7040         ELSE
7041             output.value := field.value;
7042         END IF;
7043
7044         CONTINUE WHEN output.value IS NULL;
7045
7046         RETURN NEXT output;
7047     END LOOP;
7048 END;
7049 $func$ LANGUAGE PLPGSQL;
7050
7051 ALTER TABLE action.hold_request ADD COLUMN cut_in_line BOOL;
7052
7053 ALTER TABLE action.hold_request
7054 ADD COLUMN mint_condition boolean NOT NULL DEFAULT TRUE;
7055
7056 ALTER TABLE action.hold_request
7057 ADD COLUMN shelf_expire_time TIMESTAMPTZ;
7058
7059 ALTER TABLE action.hold_request DROP CONSTRAINT hold_request_current_copy_fkey;
7060
7061 ALTER TABLE action.hold_request DROP CONSTRAINT hold_request_hold_type_check;
7062
7063 UPDATE config.index_normalizer SET param_count = 0 WHERE func = 'split_date_range';
7064
7065 ALTER TABLE actor.usr ADD COLUMN
7066         claims_never_checked_out_count  INT         NOT NULL DEFAULT 0;
7067
7068 CREATE INDEX actor_usr_usrgroup_idx ON actor.usr (usrgroup);
7069
7070 ALTER TABLE AUDITOR.actor_usr_history ADD COLUMN 
7071         claims_never_checked_out_count INT NOT NULL DEFAULT 0;
7072
7073 CREATE OR REPLACE FUNCTION action.circulation_claims_returned () RETURNS TRIGGER AS $$
7074 BEGIN
7075         IF OLD.stop_fines IS NULL OR OLD.stop_fines <> NEW.stop_fines THEN
7076                 IF NEW.stop_fines = 'CLAIMSRETURNED' THEN
7077                         UPDATE actor.usr SET claims_returned_count = claims_returned_count + 1 WHERE id = NEW.usr;
7078                 END IF;
7079                 IF NEW.stop_fines = 'CLAIMSNEVERCHECKEDOUT' THEN
7080                         UPDATE actor.usr SET claims_never_checked_out_count = claims_never_checked_out_count + 1 WHERE id = NEW.usr;
7081                 END IF;
7082                 IF NEW.stop_fines = 'LOST' THEN
7083                         UPDATE asset.copy SET status = 3 WHERE id = NEW.target_copy;
7084                 END IF;
7085         END IF;
7086         RETURN NEW;
7087 END;
7088 $$ LANGUAGE 'plpgsql';
7089
7090 -- Create new table acq.fund_allocation_percent
7091 -- Populate it from acq.fund_allocation
7092 -- Convert all percentages to amounts in acq.fund_allocation
7093
7094 CREATE TABLE acq.fund_allocation_percent
7095 (
7096     id                   SERIAL            PRIMARY KEY,
7097     funding_source       INT               NOT NULL REFERENCES acq.funding_source
7098                                                DEFERRABLE INITIALLY DEFERRED,
7099     org                  INT               NOT NULL REFERENCES actor.org_unit
7100                                                DEFERRABLE INITIALLY DEFERRED,
7101     fund_code            TEXT,
7102     percent              NUMERIC           NOT NULL,
7103     allocator            INTEGER           NOT NULL REFERENCES actor.usr
7104                                                DEFERRABLE INITIALLY DEFERRED,
7105     note                 TEXT,
7106     create_time          TIMESTAMPTZ       NOT NULL DEFAULT now(),
7107     CONSTRAINT logical_key UNIQUE( funding_source, org, fund_code ),
7108     CONSTRAINT percentage_range CHECK( percent >= 0 AND percent <= 100 )
7109 );
7110
7111 -- Trigger function to validate combination of org_unit and fund_code
7112
7113 CREATE OR REPLACE FUNCTION acq.fund_alloc_percent_val()
7114 RETURNS TRIGGER AS $$
7115 --
7116 DECLARE
7117 --
7118 dummy int := 0;
7119 --
7120 BEGIN
7121     SELECT
7122         1
7123     INTO
7124         dummy
7125     FROM
7126         acq.fund
7127     WHERE
7128         org = NEW.org
7129         AND code = NEW.fund_code
7130         LIMIT 1;
7131     --
7132     IF dummy = 1 then
7133         RETURN NEW;
7134     ELSE
7135         RAISE EXCEPTION 'No fund exists for org % and code %', NEW.org, NEW.fund_code;
7136     END IF;
7137 END;
7138 $$ LANGUAGE plpgsql;
7139
7140 CREATE TRIGGER acq_fund_alloc_percent_val_trig
7141     BEFORE INSERT OR UPDATE ON acq.fund_allocation_percent
7142     FOR EACH ROW EXECUTE PROCEDURE acq.fund_alloc_percent_val();
7143
7144 CREATE OR REPLACE FUNCTION acq.fap_limit_100()
7145 RETURNS TRIGGER AS $$
7146 DECLARE
7147 --
7148 total_percent numeric;
7149 --
7150 BEGIN
7151     SELECT
7152         sum( percent )
7153     INTO
7154         total_percent
7155     FROM
7156         acq.fund_allocation_percent AS fap
7157     WHERE
7158         fap.funding_source = NEW.funding_source;
7159     --
7160     IF total_percent > 100 THEN
7161         RAISE EXCEPTION 'Total percentages exceed 100 for funding_source %',
7162             NEW.funding_source;
7163     ELSE
7164         RETURN NEW;
7165     END IF;
7166 END;
7167 $$ LANGUAGE plpgsql;
7168
7169 CREATE TRIGGER acqfap_limit_100_trig
7170     AFTER INSERT OR UPDATE ON acq.fund_allocation_percent
7171     FOR EACH ROW EXECUTE PROCEDURE acq.fap_limit_100();
7172
7173 -- Populate new table from acq.fund_allocation
7174
7175 INSERT INTO acq.fund_allocation_percent
7176 (
7177     funding_source,
7178     org,
7179     fund_code,
7180     percent,
7181     allocator,
7182     note,
7183     create_time
7184 )
7185     SELECT
7186         fa.funding_source,
7187         fund.org,
7188         fund.code,
7189         fa.percent,
7190         fa.allocator,
7191         fa.note,
7192         fa.create_time
7193     FROM
7194         acq.fund_allocation AS fa
7195             INNER JOIN acq.fund AS fund
7196                 ON ( fa.fund = fund.id )
7197     WHERE
7198         fa.percent is not null
7199     ORDER BY
7200         fund.org;
7201
7202 -- Temporary function to convert percentages to amounts in acq.fund_allocation
7203
7204 -- Algorithm to apply to each funding source:
7205
7206 -- 1. Add up the credits.
7207 -- 2. Add up the percentages.
7208 -- 3. Multiply the sum of the percentages times the sum of the credits.  Drop any
7209 --    fractional cents from the result.  This is the total amount to be allocated.
7210 -- 4. For each allocation: multiply the percentage by the total allocation.  Drop any
7211 --    fractional cents to get a preliminary amount.
7212 -- 5. Add up the preliminary amounts for all the allocations.
7213 -- 6. Subtract the results of step 5 from the result of step 3.  The difference is the
7214 --    number of residual cents (resulting from having dropped fractional cents) that
7215 --    must be distributed across the funds in order to make the total of the amounts
7216 --    match the total allocation.
7217 -- 7. Make a second pass through the allocations, in decreasing order of the fractional
7218 --    cents that were dropped from their amounts in step 4.  Add one cent to the amount
7219 --    for each successive fund, until all the residual cents have been exhausted.
7220
7221 -- Result: the sum of the individual allocations now equals the total to be allocated,
7222 -- to the penny.  The individual amounts match the percentages as closely as possible,
7223 -- given the constraint that the total must match.
7224
7225 CREATE OR REPLACE FUNCTION acq.apply_percents()
7226 RETURNS VOID AS $$
7227 declare
7228 --
7229 tot              RECORD;
7230 fund             RECORD;
7231 tot_cents        INTEGER;
7232 src              INTEGER;
7233 id               INTEGER[];
7234 curr_id          INTEGER;
7235 pennies          NUMERIC[];
7236 curr_amount      NUMERIC;
7237 i                INTEGER;
7238 total_of_floors  INTEGER;
7239 total_percent    NUMERIC;
7240 total_allocation INTEGER;
7241 residue          INTEGER;
7242 --
7243 begin
7244         RAISE NOTICE 'Applying percents';
7245         FOR tot IN
7246                 SELECT
7247                         fsrc.funding_source,
7248                         sum( fsrc.amount ) AS total
7249                 FROM
7250                         acq.funding_source_credit AS fsrc
7251                 WHERE fsrc.funding_source IN
7252                         ( SELECT DISTINCT fa.funding_source
7253                           FROM acq.fund_allocation AS fa
7254                           WHERE fa.percent IS NOT NULL )
7255                 GROUP BY
7256                         fsrc.funding_source
7257         LOOP
7258                 tot_cents = floor( tot.total * 100 );
7259                 src = tot.funding_source;
7260                 RAISE NOTICE 'Funding source % total %',
7261                         src, tot_cents;
7262                 i := 0;
7263                 total_of_floors := 0;
7264                 total_percent := 0;
7265                 --
7266                 FOR fund in
7267                         SELECT
7268                                 fa.id,
7269                                 fa.percent,
7270                                 floor( fa.percent * tot_cents / 100 ) as floor_pennies
7271                         FROM
7272                                 acq.fund_allocation AS fa
7273                         WHERE
7274                                 fa.funding_source = src
7275                                 AND fa.percent IS NOT NULL
7276                         ORDER BY
7277                                 mod( fa.percent * tot_cents / 100, 1 ),
7278                                 fa.fund,
7279                                 fa.id
7280                 LOOP
7281                         RAISE NOTICE '   %: %',
7282                                 fund.id,
7283                                 fund.floor_pennies;
7284                         i := i + 1;
7285                         id[i] = fund.id;
7286                         pennies[i] = fund.floor_pennies;
7287                         total_percent := total_percent + fund.percent;
7288                         total_of_floors := total_of_floors + pennies[i];
7289                 END LOOP;
7290                 total_allocation := floor( total_percent * tot_cents /100 );
7291                 RAISE NOTICE 'Total before distributing residue: %', total_of_floors;
7292                 residue := total_allocation - total_of_floors;
7293                 RAISE NOTICE 'Residue: %', residue;
7294                 --
7295                 -- Post the calculated amounts, revising as needed to
7296                 -- distribute the rounding error
7297                 --
7298                 WHILE i > 0 LOOP
7299                         IF residue > 0 THEN
7300                                 pennies[i] = pennies[i] + 1;
7301                                 residue := residue - 1;
7302                         END IF;
7303                         --
7304                         -- Post amount
7305                         --
7306                         curr_id     := id[i];
7307                         curr_amount := trunc( pennies[i] / 100, 2 );
7308                         --
7309                         UPDATE
7310                                 acq.fund_allocation AS fa
7311                         SET
7312                                 amount = curr_amount,
7313                                 percent = NULL
7314                         WHERE
7315                                 fa.id = curr_id;
7316                         --
7317                         RAISE NOTICE '   ID % and amount %',
7318                                 curr_id,
7319                                 curr_amount;
7320                         i = i - 1;
7321                 END LOOP;
7322         END LOOP;
7323 end;
7324 $$ LANGUAGE 'plpgsql';
7325
7326 -- Run the temporary function
7327
7328 select * from acq.apply_percents();
7329
7330 -- Drop the temporary function now that we're done with it
7331
7332 DROP FUNCTION IF EXISTS acq.apply_percents();
7333
7334 -- Eliminate acq.fund_allocation.percent, which has been moved to the acq.fund_allocation_percent table.
7335
7336 -- If the following step fails, it's probably because there are still some non-null percent values in
7337 -- acq.fund_allocation.  They should have all been converted to amounts, and then set to null, by a
7338 -- previous upgrade step based on 0049.schema.acq_funding_allocation_percent.sql.  If there are any
7339 -- non-null values, then either that step didn't run, or it didn't work, or some non-null values
7340 -- slipped in afterwards.
7341
7342 -- To convert any remaining percents to amounts: create, run, and then drop the temporary stored
7343 -- procedure acq.apply_percents() as defined above.
7344
7345 ALTER TABLE acq.fund_allocation
7346 ALTER COLUMN amount SET NOT NULL;
7347
7348 CREATE OR REPLACE VIEW acq.fund_allocation_total AS
7349     SELECT  fund,
7350             SUM(a.amount * acq.exchange_ratio(s.currency_type, f.currency_type))::NUMERIC(100,2) AS amount
7351     FROM acq.fund_allocation a
7352          JOIN acq.fund f ON (a.fund = f.id)
7353          JOIN acq.funding_source s ON (a.funding_source = s.id)
7354     GROUP BY 1;
7355
7356 CREATE OR REPLACE VIEW acq.funding_source_allocation_total AS
7357     SELECT  funding_source,
7358             SUM(a.amount)::NUMERIC(100,2) AS amount
7359     FROM  acq.fund_allocation a
7360     GROUP BY 1;
7361
7362 ALTER TABLE acq.fund_allocation
7363 DROP COLUMN percent;
7364
7365 CREATE TABLE asset.copy_location_order
7366 (
7367         id              SERIAL           PRIMARY KEY,
7368         location        INT              NOT NULL
7369                                              REFERENCES asset.copy_location
7370                                              ON DELETE CASCADE
7371                                              DEFERRABLE INITIALLY DEFERRED,
7372         org             INT              NOT NULL
7373                                              REFERENCES actor.org_unit
7374                                              ON DELETE CASCADE
7375                                              DEFERRABLE INITIALLY DEFERRED,
7376         position        INT              NOT NULL DEFAULT 0,
7377         CONSTRAINT acplo_once_per_org UNIQUE ( location, org )
7378 );
7379
7380 ALTER TABLE money.credit_card_payment ADD COLUMN cc_processor TEXT;
7381
7382 -- If you ran this before its most recent incarnation:
7383 -- delete from config.upgrade_log where version = '0328';
7384 -- alter table money.credit_card_payment drop column cc_name;
7385
7386 ALTER TABLE money.credit_card_payment ADD COLUMN cc_first_name TEXT;
7387 ALTER TABLE money.credit_card_payment ADD COLUMN cc_last_name TEXT;
7388
7389 CREATE OR REPLACE FUNCTION action.find_circ_matrix_matchpoint( context_ou INT, match_item BIGINT, match_user INT, renewal BOOL ) RETURNS config.circ_matrix_matchpoint AS $func$
7390 DECLARE
7391     current_group    permission.grp_tree%ROWTYPE;
7392     user_object    actor.usr%ROWTYPE;
7393     item_object    asset.copy%ROWTYPE;
7394     cn_object    asset.call_number%ROWTYPE;
7395     rec_descriptor    metabib.rec_descriptor%ROWTYPE;
7396     current_mp    config.circ_matrix_matchpoint%ROWTYPE;
7397     matchpoint    config.circ_matrix_matchpoint%ROWTYPE;
7398 BEGIN
7399     SELECT INTO user_object * FROM actor.usr WHERE id = match_user;
7400     SELECT INTO item_object * FROM asset.copy WHERE id = match_item;
7401     SELECT INTO cn_object * FROM asset.call_number WHERE id = item_object.call_number;
7402     SELECT INTO rec_descriptor r.* FROM metabib.rec_descriptor r JOIN asset.call_number c USING (record) WHERE c.id = item_object.call_number;
7403     SELECT INTO current_group * FROM permission.grp_tree WHERE id = user_object.profile;
7404
7405     LOOP 
7406         -- for each potential matchpoint for this ou and group ...
7407         FOR current_mp IN
7408             SELECT  m.*
7409               FROM  config.circ_matrix_matchpoint m
7410                     JOIN actor.org_unit_ancestors( context_ou ) d ON (m.org_unit = d.id)
7411                     LEFT JOIN actor.org_unit_proximity p ON (p.from_org = context_ou AND p.to_org = d.id)
7412               WHERE m.grp = current_group.id
7413                     AND m.active
7414                     AND (m.copy_owning_lib IS NULL OR cn_object.owning_lib IN ( SELECT id FROM actor.org_unit_descendants(m.copy_owning_lib) ))
7415                     AND (m.copy_circ_lib   IS NULL OR item_object.circ_lib IN ( SELECT id FROM actor.org_unit_descendants(m.copy_circ_lib)   ))
7416               ORDER BY    CASE WHEN p.prox        IS NULL THEN 999 ELSE p.prox END,
7417                     CASE WHEN m.copy_owning_lib IS NOT NULL
7418                         THEN 256 / ( SELECT COALESCE(prox, 255) + 1 FROM actor.org_unit_proximity WHERE to_org = cn_object.owning_lib AND from_org = m.copy_owning_lib LIMIT 1 )
7419                         ELSE 0
7420                     END +
7421                     CASE WHEN m.copy_circ_lib IS NOT NULL
7422                         THEN 256 / ( SELECT COALESCE(prox, 255) + 1 FROM actor.org_unit_proximity WHERE to_org = item_object.circ_lib AND from_org = m.copy_circ_lib LIMIT 1 )
7423                         ELSE 0
7424                     END +
7425                     CASE WHEN m.is_renewal = renewal        THEN 128 ELSE 0 END +
7426                     CASE WHEN m.juvenile_flag    IS NOT NULL THEN 64 ELSE 0 END +
7427                     CASE WHEN m.circ_modifier    IS NOT NULL THEN 32 ELSE 0 END +
7428                     CASE WHEN m.marc_type        IS NOT NULL THEN 16 ELSE 0 END +
7429                     CASE WHEN m.marc_form        IS NOT NULL THEN 8 ELSE 0 END +
7430                     CASE WHEN m.marc_vr_format    IS NOT NULL THEN 4 ELSE 0 END +
7431                     CASE WHEN m.ref_flag        IS NOT NULL THEN 2 ELSE 0 END +
7432                     CASE WHEN m.usr_age_lower_bound    IS NOT NULL THEN 0.5 ELSE 0 END +
7433                     CASE WHEN m.usr_age_upper_bound    IS NOT NULL THEN 0.5 ELSE 0 END DESC LOOP
7434
7435             IF current_mp.is_renewal IS NOT NULL THEN
7436                 CONTINUE WHEN current_mp.is_renewal <> renewal;
7437             END IF;
7438
7439             IF current_mp.circ_modifier IS NOT NULL THEN
7440                 CONTINUE WHEN current_mp.circ_modifier <> item_object.circ_modifier OR item_object.circ_modifier IS NULL;
7441             END IF;
7442
7443             IF current_mp.marc_type IS NOT NULL THEN
7444                 IF item_object.circ_as_type IS NOT NULL THEN
7445                     CONTINUE WHEN current_mp.marc_type <> item_object.circ_as_type;
7446                 ELSE
7447                     CONTINUE WHEN current_mp.marc_type <> rec_descriptor.item_type;
7448                 END IF;
7449             END IF;
7450
7451             IF current_mp.marc_form IS NOT NULL THEN
7452                 CONTINUE WHEN current_mp.marc_form <> rec_descriptor.item_form;
7453             END IF;
7454
7455             IF current_mp.marc_vr_format IS NOT NULL THEN
7456                 CONTINUE WHEN current_mp.marc_vr_format <> rec_descriptor.vr_format;
7457             END IF;
7458
7459             IF current_mp.ref_flag IS NOT NULL THEN
7460                 CONTINUE WHEN current_mp.ref_flag <> item_object.ref;
7461             END IF;
7462
7463             IF current_mp.juvenile_flag IS NOT NULL THEN
7464                 CONTINUE WHEN current_mp.juvenile_flag <> user_object.juvenile;
7465             END IF;
7466
7467             IF current_mp.usr_age_lower_bound IS NOT NULL THEN
7468                 CONTINUE WHEN user_object.dob IS NULL OR current_mp.usr_age_lower_bound < age(user_object.dob);
7469             END IF;
7470
7471             IF current_mp.usr_age_upper_bound IS NOT NULL THEN
7472                 CONTINUE WHEN user_object.dob IS NULL OR current_mp.usr_age_upper_bound > age(user_object.dob);
7473             END IF;
7474
7475
7476             -- everything was undefined or matched
7477             matchpoint = current_mp;
7478
7479             EXIT WHEN matchpoint.id IS NOT NULL;
7480         END LOOP;
7481
7482         EXIT WHEN current_group.parent IS NULL OR matchpoint.id IS NOT NULL;
7483
7484         SELECT INTO current_group * FROM permission.grp_tree WHERE id = current_group.parent;
7485     END LOOP;
7486
7487     RETURN matchpoint;
7488 END;
7489 $func$ LANGUAGE plpgsql;
7490
7491 CREATE TYPE action.hold_stats AS (
7492     hold_count              INT,
7493     copy_count              INT,
7494     available_count         INT,
7495     total_copy_ratio        FLOAT,
7496     available_copy_ratio    FLOAT
7497 );
7498
7499 CREATE OR REPLACE FUNCTION action.copy_related_hold_stats (copy_id INT) RETURNS action.hold_stats AS $func$
7500 DECLARE
7501     output          action.hold_stats%ROWTYPE;
7502     hold_count      INT := 0;
7503     copy_count      INT := 0;
7504     available_count INT := 0;
7505     hold_map_data   RECORD;
7506 BEGIN
7507
7508     output.hold_count := 0;
7509     output.copy_count := 0;
7510     output.available_count := 0;
7511
7512     SELECT  COUNT( DISTINCT m.hold ) INTO hold_count
7513       FROM  action.hold_copy_map m
7514             JOIN action.hold_request h ON (m.hold = h.id)
7515       WHERE m.target_copy = copy_id
7516             AND NOT h.frozen;
7517
7518     output.hold_count := hold_count;
7519
7520     IF output.hold_count > 0 THEN
7521         FOR hold_map_data IN
7522             SELECT  DISTINCT m.target_copy,
7523                     acp.status
7524               FROM  action.hold_copy_map m
7525                     JOIN asset.copy acp ON (m.target_copy = acp.id)
7526                     JOIN action.hold_request h ON (m.hold = h.id)
7527               WHERE m.hold IN ( SELECT DISTINCT hold FROM action.hold_copy_map WHERE target_copy = copy_id ) AND NOT h.frozen
7528         LOOP
7529             output.copy_count := output.copy_count + 1;
7530             IF hold_map_data.status IN (0,7,12) THEN
7531                 output.available_count := output.available_count + 1;
7532             END IF;
7533         END LOOP;
7534         output.total_copy_ratio = output.copy_count::FLOAT / output.hold_count::FLOAT;
7535         output.available_copy_ratio = output.available_count::FLOAT / output.hold_count::FLOAT;
7536
7537     END IF;
7538
7539     RETURN output;
7540
7541 END;
7542 $func$ LANGUAGE PLPGSQL;
7543
7544 ALTER TABLE config.circ_matrix_matchpoint ADD COLUMN total_copy_hold_ratio FLOAT;
7545 ALTER TABLE config.circ_matrix_matchpoint ADD COLUMN available_copy_hold_ratio FLOAT;
7546
7547 ALTER TABLE config.circ_matrix_matchpoint DROP CONSTRAINT ep_once_per_grp_loc_mod_marc;
7548
7549 ALTER TABLE config.circ_matrix_matchpoint ADD COLUMN copy_circ_lib   INT REFERENCES actor.org_unit (id) DEFERRABLE INITIALLY DEFERRED;
7550 ALTER TABLE config.circ_matrix_matchpoint ADD COLUMN copy_owning_lib INT REFERENCES actor.org_unit (id) DEFERRABLE INITIALLY DEFERRED;
7551
7552 ALTER TABLE config.circ_matrix_matchpoint ADD CONSTRAINT ep_once_per_grp_loc_mod_marc UNIQUE (
7553     grp, org_unit, circ_modifier, marc_type, marc_form, marc_vr_format, ref_flag,
7554     juvenile_flag, usr_age_lower_bound, usr_age_upper_bound, is_renewal, copy_circ_lib,
7555     copy_owning_lib
7556 );
7557
7558 -- Return the correct fail_part when the item can't be found
7559 CREATE OR REPLACE FUNCTION action.item_user_circ_test( circ_ou INT, match_item BIGINT, match_user INT, renewal BOOL ) RETURNS SETOF action.matrix_test_result AS $func$
7560 DECLARE
7561     user_object        actor.usr%ROWTYPE;
7562     standing_penalty    config.standing_penalty%ROWTYPE;
7563     item_object        asset.copy%ROWTYPE;
7564     item_status_object    config.copy_status%ROWTYPE;
7565     item_location_object    asset.copy_location%ROWTYPE;
7566     result            action.matrix_test_result;
7567     circ_test        config.circ_matrix_matchpoint%ROWTYPE;
7568     out_by_circ_mod        config.circ_matrix_circ_mod_test%ROWTYPE;
7569     circ_mod_map        config.circ_matrix_circ_mod_test_map%ROWTYPE;
7570     hold_ratio          action.hold_stats%ROWTYPE;
7571     penalty_type         TEXT;
7572     tmp_grp         INT;
7573     items_out        INT;
7574     context_org_list        INT[];
7575     done            BOOL := FALSE;
7576 BEGIN
7577     result.success := TRUE;
7578
7579     -- Fail if the user is BARRED
7580     SELECT INTO user_object * FROM actor.usr WHERE id = match_user;
7581
7582     -- Fail if we couldn't find the user 
7583     IF user_object.id IS NULL THEN
7584         result.fail_part := 'no_user';
7585         result.success := FALSE;
7586         done := TRUE;
7587         RETURN NEXT result;
7588         RETURN;
7589     END IF;
7590
7591     SELECT INTO item_object * FROM asset.copy WHERE id = match_item;
7592
7593     -- Fail if we couldn't find the item 
7594     IF item_object.id IS NULL THEN
7595         result.fail_part := 'no_item';
7596         result.success := FALSE;
7597         done := TRUE;
7598         RETURN NEXT result;
7599         RETURN;
7600     END IF;
7601
7602     SELECT INTO circ_test * FROM action.find_circ_matrix_matchpoint(circ_ou, match_item, match_user, renewal);
7603     result.matchpoint := circ_test.id;
7604
7605     -- Fail if we couldn't find a matchpoint
7606     IF result.matchpoint IS NULL THEN
7607         result.fail_part := 'no_matchpoint';
7608         result.success := FALSE;
7609         done := TRUE;
7610         RETURN NEXT result;
7611     END IF;
7612
7613     IF user_object.barred IS TRUE THEN
7614         result.fail_part := 'actor.usr.barred';
7615         result.success := FALSE;
7616         done := TRUE;
7617         RETURN NEXT result;
7618     END IF;
7619
7620     -- Fail if the item can't circulate
7621     IF item_object.circulate IS FALSE THEN
7622         result.fail_part := 'asset.copy.circulate';
7623         result.success := FALSE;
7624         done := TRUE;
7625         RETURN NEXT result;
7626     END IF;
7627
7628     -- Fail if the item isn't in a circulateable status on a non-renewal
7629     IF NOT renewal AND item_object.status NOT IN ( 0, 7, 8 ) THEN
7630         result.fail_part := 'asset.copy.status';
7631         result.success := FALSE;
7632         done := TRUE;
7633         RETURN NEXT result;
7634     ELSIF renewal AND item_object.status <> 1 THEN
7635         result.fail_part := 'asset.copy.status';
7636         result.success := FALSE;
7637         done := TRUE;
7638         RETURN NEXT result;
7639     END IF;
7640
7641     -- Fail if the item can't circulate because of the shelving location
7642     SELECT INTO item_location_object * FROM asset.copy_location WHERE id = item_object.location;
7643     IF item_location_object.circulate IS FALSE THEN
7644         result.fail_part := 'asset.copy_location.circulate';
7645         result.success := FALSE;
7646         done := TRUE;
7647         RETURN NEXT result;
7648     END IF;
7649
7650     SELECT INTO context_org_list ARRAY_ACCUM(id) FROM actor.org_unit_full_path( circ_test.org_unit );
7651
7652     -- Fail if the test is set to hard non-circulating
7653     IF circ_test.circulate IS FALSE THEN
7654         result.fail_part := 'config.circ_matrix_test.circulate';
7655         result.success := FALSE;
7656         done := TRUE;
7657         RETURN NEXT result;
7658     END IF;
7659
7660     -- Fail if the total copy-hold ratio is too low
7661     IF circ_test.total_copy_hold_ratio IS NOT NULL THEN
7662         SELECT INTO hold_ratio * FROM action.copy_related_hold_stats(match_item);
7663         IF hold_ratio.total_copy_ratio IS NOT NULL AND hold_ratio.total_copy_ratio < circ_test.total_copy_hold_ratio THEN
7664             result.fail_part := 'config.circ_matrix_test.total_copy_hold_ratio';
7665             result.success := FALSE;
7666             done := TRUE;
7667             RETURN NEXT result;
7668         END IF;
7669     END IF;
7670
7671     -- Fail if the available copy-hold ratio is too low
7672     IF circ_test.available_copy_hold_ratio IS NOT NULL THEN
7673         SELECT INTO hold_ratio * FROM action.copy_related_hold_stats(match_item);
7674         IF hold_ratio.available_copy_ratio IS NOT NULL AND hold_ratio.available_copy_ratio < circ_test.available_copy_hold_ratio THEN
7675             result.fail_part := 'config.circ_matrix_test.available_copy_hold_ratio';
7676             result.success := FALSE;
7677             done := TRUE;
7678             RETURN NEXT result;
7679         END IF;
7680     END IF;
7681
7682     IF renewal THEN
7683         penalty_type = '%RENEW%';
7684     ELSE
7685         penalty_type = '%CIRC%';
7686     END IF;
7687
7688     FOR standing_penalty IN
7689         SELECT  DISTINCT csp.*
7690           FROM  actor.usr_standing_penalty usp
7691                 JOIN config.standing_penalty csp ON (csp.id = usp.standing_penalty)
7692           WHERE usr = match_user
7693                 AND usp.org_unit IN ( SELECT * FROM explode_array(context_org_list) )
7694                 AND (usp.stop_date IS NULL or usp.stop_date > NOW())
7695                 AND csp.block_list LIKE penalty_type LOOP
7696
7697         result.fail_part := standing_penalty.name;
7698         result.success := FALSE;
7699         done := TRUE;
7700         RETURN NEXT result;
7701     END LOOP;
7702
7703     -- Fail if the user has too many items with specific circ_modifiers checked out
7704     FOR out_by_circ_mod IN SELECT * FROM config.circ_matrix_circ_mod_test WHERE matchpoint = circ_test.id LOOP
7705         SELECT  INTO items_out COUNT(*)
7706           FROM  action.circulation circ
7707             JOIN asset.copy cp ON (cp.id = circ.target_copy)
7708           WHERE circ.usr = match_user
7709                AND circ.circ_lib IN ( SELECT * FROM explode_array(context_org_list) )
7710             AND circ.checkin_time IS NULL
7711             AND (circ.stop_fines IN ('MAXFINES','LONGOVERDUE') OR circ.stop_fines IS NULL)
7712             AND cp.circ_modifier IN (SELECT circ_mod FROM config.circ_matrix_circ_mod_test_map WHERE circ_mod_test = out_by_circ_mod.id);
7713         IF items_out >= out_by_circ_mod.items_out THEN
7714             result.fail_part := 'config.circ_matrix_circ_mod_test';
7715             result.success := FALSE;
7716             done := TRUE;
7717             RETURN NEXT result;
7718         END IF;
7719     END LOOP;
7720
7721     -- If we passed everything, return the successful matchpoint id
7722     IF NOT done THEN
7723         RETURN NEXT result;
7724     END IF;
7725
7726     RETURN;
7727 END;
7728 $func$ LANGUAGE plpgsql;
7729
7730 CREATE TABLE config.remote_account (
7731     id          SERIAL  PRIMARY KEY,
7732     label       TEXT    NOT NULL,
7733     host        TEXT    NOT NULL,   -- name or IP, :port optional
7734     username    TEXT,               -- optional, since we could default to $USER
7735     password    TEXT,               -- optional, since we could use SSH keys, or anonymous login.
7736     account     TEXT,               -- aka profile or FTP "account" command
7737     path        TEXT,               -- aka directory
7738     owner       INT     NOT NULL REFERENCES actor.org_unit (id) DEFERRABLE INITIALLY DEFERRED,
7739     last_activity TIMESTAMP WITH TIME ZONE
7740 );
7741
7742 CREATE TABLE acq.edi_account (      -- similar tables can extend remote_account for other parts of EG
7743     provider    INT     NOT NULL REFERENCES acq.provider          (id) ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED,
7744     in_dir      TEXT,   -- incoming messages dir (probably different than config.remote_account.path, the outgoing dir)
7745         vendcode    TEXT,
7746         vendacct    TEXT
7747
7748 ) INHERITS (config.remote_account);
7749
7750 ALTER TABLE acq.edi_account ADD PRIMARY KEY (id);
7751
7752 CREATE TABLE acq.claim_type (
7753         id             SERIAL           PRIMARY KEY,
7754         org_unit       INT              NOT NULL REFERENCES actor.org_unit(id)
7755                                                  DEFERRABLE INITIALLY DEFERRED,
7756         code           TEXT             NOT NULL,
7757         description    TEXT             NOT NULL,
7758         CONSTRAINT claim_type_once_per_org UNIQUE ( org_unit, code )
7759 );
7760
7761 CREATE TABLE acq.claim (
7762         id             SERIAL           PRIMARY KEY,
7763         type           INT              NOT NULL REFERENCES acq.claim_type
7764                                                  DEFERRABLE INITIALLY DEFERRED,
7765         lineitem_detail BIGINT          NOT NULL REFERENCES acq.lineitem_detail
7766                                                  DEFERRABLE INITIALLY DEFERRED
7767 );
7768
7769 CREATE TABLE acq.claim_policy (
7770         id              SERIAL       PRIMARY KEY,
7771         org_unit        INT          NOT NULL REFERENCES actor.org_unit
7772                                      DEFERRABLE INITIALLY DEFERRED,
7773         name            TEXT         NOT NULL,
7774         description     TEXT         NOT NULL,
7775         CONSTRAINT name_once_per_org UNIQUE (org_unit, name)
7776 );
7777
7778 -- Add a san column for EDI. 
7779 -- See: http://isbn.org/standards/home/isbn/us/san/san-qa.asp
7780
7781 ALTER TABLE acq.provider ADD COLUMN san INT;
7782
7783 ALTER TABLE acq.provider ALTER COLUMN san TYPE TEXT USING lpad(text(san), 7, '0');
7784
7785 -- null edi_default is OK... it has to be, since we have no values in acq.edi_account yet
7786 ALTER TABLE acq.provider ADD COLUMN edi_default INT REFERENCES acq.edi_account (id) DEFERRABLE INITIALLY DEFERRED;
7787
7788 ALTER TABLE acq.provider
7789         ADD COLUMN active BOOL NOT NULL DEFAULT TRUE;
7790
7791 ALTER TABLE acq.provider
7792         ADD COLUMN prepayment_required BOOLEAN NOT NULL DEFAULT FALSE;
7793
7794 ALTER TABLE acq.provider
7795         ADD COLUMN url TEXT;
7796
7797 ALTER TABLE acq.provider
7798         ADD COLUMN email TEXT;
7799
7800 ALTER TABLE acq.provider
7801         ADD COLUMN phone TEXT;
7802
7803 ALTER TABLE acq.provider
7804         ADD COLUMN fax_phone TEXT;
7805
7806 ALTER TABLE acq.provider
7807         ADD COLUMN default_claim_policy INT
7808                 REFERENCES acq.claim_policy
7809                 DEFERRABLE INITIALLY DEFERRED;
7810
7811 ALTER TABLE action.transit_copy
7812 ADD COLUMN prev_dest INTEGER REFERENCES actor.org_unit( id )
7813                                                          DEFERRABLE INITIALLY DEFERRED;
7814
7815 DROP SCHEMA IF EXISTS booking CASCADE;
7816
7817 CREATE SCHEMA booking;
7818
7819 CREATE TABLE booking.resource_type (
7820         id             SERIAL          PRIMARY KEY,
7821         name           TEXT            NOT NULL,
7822         fine_interval  INTERVAL,
7823         fine_amount    DECIMAL(8,2)    NOT NULL DEFAULT 0,
7824         owner          INT             NOT NULL
7825                                        REFERENCES actor.org_unit( id )
7826                                        DEFERRABLE INITIALLY DEFERRED,
7827         catalog_item   BOOLEAN         NOT NULL DEFAULT FALSE,
7828         transferable   BOOLEAN         NOT NULL DEFAULT FALSE,
7829     record         BIGINT          REFERENCES biblio.record_entry (id)
7830                                        DEFERRABLE INITIALLY DEFERRED,
7831     max_fine       NUMERIC(8,2),
7832     elbow_room     INTERVAL,
7833     CONSTRAINT brt_name_or_record_once_per_owner UNIQUE(owner, name, record)
7834 );
7835
7836 CREATE TABLE booking.resource (
7837         id             SERIAL           PRIMARY KEY,
7838         owner          INT              NOT NULL
7839                                         REFERENCES actor.org_unit(id)
7840                                         DEFERRABLE INITIALLY DEFERRED,
7841         type           INT              NOT NULL
7842                                         REFERENCES booking.resource_type(id)
7843                                         DEFERRABLE INITIALLY DEFERRED,
7844         overbook       BOOLEAN          NOT NULL DEFAULT FALSE,
7845         barcode        TEXT             NOT NULL,
7846         deposit        BOOLEAN          NOT NULL DEFAULT FALSE,
7847         deposit_amount DECIMAL(8,2)     NOT NULL DEFAULT 0.00,
7848         user_fee       DECIMAL(8,2)     NOT NULL DEFAULT 0.00,
7849         CONSTRAINT br_unique UNIQUE (owner, barcode)
7850 );
7851
7852 -- For non-catalog items: hijack barcode for name/description
7853
7854 CREATE TABLE booking.resource_attr (
7855         id              SERIAL          PRIMARY KEY,
7856         owner           INT             NOT NULL
7857                                         REFERENCES actor.org_unit(id)
7858                                         DEFERRABLE INITIALLY DEFERRED,
7859         name            TEXT            NOT NULL,
7860         resource_type   INT             NOT NULL
7861                                         REFERENCES booking.resource_type(id)
7862                                         ON DELETE CASCADE
7863                                         DEFERRABLE INITIALLY DEFERRED,
7864         required        BOOLEAN         NOT NULL DEFAULT FALSE,
7865         CONSTRAINT bra_name_once_per_type UNIQUE(resource_type, name)
7866 );
7867
7868 CREATE TABLE booking.resource_attr_value (
7869         id               SERIAL         PRIMARY KEY,
7870         owner            INT            NOT NULL
7871                                         REFERENCES actor.org_unit(id)
7872                                         DEFERRABLE INITIALLY DEFERRED,
7873         attr             INT            NOT NULL
7874                                         REFERENCES booking.resource_attr(id)
7875                                         DEFERRABLE INITIALLY DEFERRED,
7876         valid_value      TEXT           NOT NULL,
7877         CONSTRAINT brav_logical_key UNIQUE(owner, attr, valid_value)
7878 );
7879
7880 CREATE TABLE booking.resource_attr_map (
7881         id               SERIAL         PRIMARY KEY,
7882         resource         INT            NOT NULL
7883                                         REFERENCES booking.resource(id)
7884                                         ON DELETE CASCADE
7885                                         DEFERRABLE INITIALLY DEFERRED,
7886         resource_attr    INT            NOT NULL
7887                                         REFERENCES booking.resource_attr(id)
7888                                         ON DELETE CASCADE
7889                                         DEFERRABLE INITIALLY DEFERRED,
7890         value            INT            NOT NULL
7891                                         REFERENCES booking.resource_attr_value(id)
7892                                         DEFERRABLE INITIALLY DEFERRED,
7893         CONSTRAINT bram_one_value_per_attr UNIQUE(resource, resource_attr)
7894 );
7895
7896 CREATE TABLE booking.reservation (
7897         request_time     TIMESTAMPTZ   NOT NULL DEFAULT now(),
7898         start_time       TIMESTAMPTZ,
7899         end_time         TIMESTAMPTZ,
7900         capture_time     TIMESTAMPTZ,
7901         cancel_time      TIMESTAMPTZ,
7902         pickup_time      TIMESTAMPTZ,
7903         return_time      TIMESTAMPTZ,
7904         booking_interval INTERVAL,
7905         fine_interval    INTERVAL,
7906         fine_amount      DECIMAL(8,2),
7907         target_resource_type  INT       NOT NULL
7908                                         REFERENCES booking.resource_type(id)
7909                                         ON DELETE CASCADE
7910                                         DEFERRABLE INITIALLY DEFERRED,
7911         target_resource  INT            REFERENCES booking.resource(id)
7912                                         ON DELETE CASCADE
7913                                         DEFERRABLE INITIALLY DEFERRED,
7914         current_resource INT            REFERENCES booking.resource(id)
7915                                         ON DELETE CASCADE
7916                                         DEFERRABLE INITIALLY DEFERRED,
7917         request_lib      INT            NOT NULL
7918                                         REFERENCES actor.org_unit(id)
7919                                         DEFERRABLE INITIALLY DEFERRED,
7920         pickup_lib       INT            REFERENCES actor.org_unit(id)
7921                                         DEFERRABLE INITIALLY DEFERRED,
7922         capture_staff    INT            REFERENCES actor.usr(id)
7923                                         DEFERRABLE INITIALLY DEFERRED,
7924     max_fine         NUMERIC(8,2)
7925 ) INHERITS (money.billable_xact);
7926
7927 ALTER TABLE booking.reservation ADD PRIMARY KEY (id);
7928
7929 ALTER TABLE booking.reservation
7930         ADD CONSTRAINT booking_reservation_usr_fkey
7931         FOREIGN KEY (usr) REFERENCES actor.usr (id)
7932         DEFERRABLE INITIALLY DEFERRED;
7933
7934 CREATE TABLE booking.reservation_attr_value_map (
7935         id               SERIAL         PRIMARY KEY,
7936         reservation      INT            NOT NULL
7937                                         REFERENCES booking.reservation(id)
7938                                         ON DELETE CASCADE
7939                                         DEFERRABLE INITIALLY DEFERRED,
7940         attr_value       INT            NOT NULL
7941                                         REFERENCES booking.resource_attr_value(id)
7942                                         ON DELETE CASCADE
7943                                         DEFERRABLE INITIALLY DEFERRED,
7944         CONSTRAINT bravm_logical_key UNIQUE(reservation, attr_value)
7945 );
7946
7947 CREATE FUNCTION auditor.create_auditor_seq     ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
7948 BEGIN
7949     EXECUTE $$
7950         CREATE SEQUENCE auditor.$$ || sch || $$_$$ || tbl || $$_pkey_seq;
7951     $$;
7952         RETURN TRUE;
7953 END;
7954 $creator$ LANGUAGE 'plpgsql';
7955
7956 CREATE FUNCTION auditor.create_auditor_history ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
7957 BEGIN
7958     EXECUTE $$
7959         CREATE TABLE auditor.$$ || sch || $$_$$ || tbl || $$_history (
7960             audit_id    BIGINT                          PRIMARY KEY,
7961             audit_time  TIMESTAMP WITH TIME ZONE        NOT NULL,
7962             audit_action        TEXT                            NOT NULL,
7963             LIKE $$ || sch || $$.$$ || tbl || $$
7964         );
7965     $$;
7966         RETURN TRUE;
7967 END;
7968 $creator$ LANGUAGE 'plpgsql';
7969
7970 CREATE FUNCTION auditor.create_auditor_func    ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
7971 BEGIN
7972     EXECUTE $$
7973         CREATE FUNCTION auditor.audit_$$ || sch || $$_$$ || tbl || $$_func ()
7974         RETURNS TRIGGER AS $func$
7975         BEGIN
7976             INSERT INTO auditor.$$ || sch || $$_$$ || tbl || $$_history
7977                 SELECT  nextval('auditor.$$ || sch || $$_$$ || tbl || $$_pkey_seq'),
7978                     now(),
7979                     SUBSTR(TG_OP,1,1),
7980                     OLD.*;
7981             RETURN NULL;
7982         END;
7983         $func$ LANGUAGE 'plpgsql';
7984     $$;
7985     RETURN TRUE;
7986 END;
7987 $creator$ LANGUAGE 'plpgsql';
7988
7989 CREATE FUNCTION auditor.create_auditor_update_trigger ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
7990 BEGIN
7991     EXECUTE $$
7992         CREATE TRIGGER audit_$$ || sch || $$_$$ || tbl || $$_update_trigger
7993             AFTER UPDATE OR DELETE ON $$ || sch || $$.$$ || tbl || $$ FOR EACH ROW
7994             EXECUTE PROCEDURE auditor.audit_$$ || sch || $$_$$ || tbl || $$_func ();
7995     $$;
7996         RETURN TRUE;
7997 END;
7998 $creator$ LANGUAGE 'plpgsql';
7999
8000 CREATE FUNCTION auditor.create_auditor_lifecycle     ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
8001 BEGIN
8002     EXECUTE $$
8003         CREATE VIEW auditor.$$ || sch || $$_$$ || tbl || $$_lifecycle AS
8004             SELECT      -1, now() as audit_time, '-' as audit_action, *
8005               FROM      $$ || sch || $$.$$ || tbl || $$
8006                 UNION ALL
8007             SELECT      *
8008               FROM      auditor.$$ || sch || $$_$$ || tbl || $$_history;
8009     $$;
8010         RETURN TRUE;
8011 END;
8012 $creator$ LANGUAGE 'plpgsql';
8013
8014 DROP FUNCTION IF EXISTS auditor.create_auditor (TEXT, TEXT);
8015
8016 -- The main event
8017
8018 CREATE FUNCTION auditor.create_auditor ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
8019 BEGIN
8020     PERFORM auditor.create_auditor_seq(sch, tbl);
8021     PERFORM auditor.create_auditor_history(sch, tbl);
8022     PERFORM auditor.create_auditor_func(sch, tbl);
8023     PERFORM auditor.create_auditor_update_trigger(sch, tbl);
8024     PERFORM auditor.create_auditor_lifecycle(sch, tbl);
8025         RETURN TRUE;
8026 END;
8027 $creator$ LANGUAGE 'plpgsql';
8028
8029 -- represents a circ chain summary
8030 CREATE TYPE action.circ_chain_summary AS (
8031     num_circs INTEGER,
8032     start_time TIMESTAMP WITH TIME ZONE,
8033     checkout_workstation TEXT,
8034     last_renewal_time TIMESTAMP WITH TIME ZONE, -- NULL if no renewals
8035     last_stop_fines TEXT,
8036     last_stop_fines_time TIMESTAMP WITH TIME ZONE,
8037     last_renewal_workstation TEXT, -- NULL if no renewals
8038     last_checkin_workstation TEXT,
8039     last_checkin_time TIMESTAMP WITH TIME ZONE,
8040     last_checkin_scan_time TIMESTAMP WITH TIME ZONE
8041 );
8042
8043 CREATE OR REPLACE FUNCTION action.circ_chain ( ctx_circ_id INTEGER ) RETURNS SETOF action.circulation AS $$
8044 DECLARE
8045     tmp_circ action.circulation%ROWTYPE;
8046     circ_0 action.circulation%ROWTYPE;
8047 BEGIN
8048
8049     SELECT INTO tmp_circ * FROM action.circulation WHERE id = ctx_circ_id;
8050
8051     IF tmp_circ IS NULL THEN
8052         RETURN NEXT tmp_circ;
8053     END IF;
8054     circ_0 := tmp_circ;
8055
8056     -- find the front of the chain
8057     WHILE TRUE LOOP
8058         SELECT INTO tmp_circ * FROM action.circulation WHERE id = tmp_circ.parent_circ;
8059         IF tmp_circ IS NULL THEN
8060             EXIT;
8061         END IF;
8062         circ_0 := tmp_circ;
8063     END LOOP;
8064
8065     -- now send the circs to the caller, oldest to newest
8066     tmp_circ := circ_0;
8067     WHILE TRUE LOOP
8068         IF tmp_circ IS NULL THEN
8069             EXIT;
8070         END IF;
8071         RETURN NEXT tmp_circ;
8072         SELECT INTO tmp_circ * FROM action.circulation WHERE parent_circ = tmp_circ.id;
8073     END LOOP;
8074
8075 END;
8076 $$ LANGUAGE 'plpgsql';
8077
8078 CREATE OR REPLACE FUNCTION action.summarize_circ_chain ( ctx_circ_id INTEGER ) RETURNS action.circ_chain_summary AS $$
8079
8080 DECLARE
8081
8082     -- first circ in the chain
8083     circ_0 action.circulation%ROWTYPE;
8084
8085     -- last circ in the chain
8086     circ_n action.circulation%ROWTYPE;
8087
8088     -- circ chain under construction
8089     chain action.circ_chain_summary;
8090     tmp_circ action.circulation%ROWTYPE;
8091
8092 BEGIN
8093     
8094     chain.num_circs := 0;
8095     FOR tmp_circ IN SELECT * FROM action.circ_chain(ctx_circ_id) LOOP
8096
8097         IF chain.num_circs = 0 THEN
8098             circ_0 := tmp_circ;
8099         END IF;
8100
8101         chain.num_circs := chain.num_circs + 1;
8102         circ_n := tmp_circ;
8103     END LOOP;
8104
8105     chain.start_time := circ_0.xact_start;
8106     chain.last_stop_fines := circ_n.stop_fines;
8107     chain.last_stop_fines_time := circ_n.stop_fines_time;
8108     chain.last_checkin_time := circ_n.checkin_time;
8109     chain.last_checkin_scan_time := circ_n.checkin_scan_time;
8110     SELECT INTO chain.checkout_workstation name FROM actor.workstation WHERE id = circ_0.workstation;
8111     SELECT INTO chain.last_checkin_workstation name FROM actor.workstation WHERE id = circ_n.checkin_workstation;
8112
8113     IF chain.num_circs > 1 THEN
8114         chain.last_renewal_time := circ_n.xact_start;
8115         SELECT INTO chain.last_renewal_workstation name FROM actor.workstation WHERE id = circ_n.workstation;
8116     END IF;
8117
8118     RETURN chain;
8119
8120 END;
8121 $$ LANGUAGE 'plpgsql';
8122
8123 CREATE TRIGGER mat_summary_create_tgr AFTER INSERT ON booking.reservation FOR EACH ROW EXECUTE PROCEDURE money.mat_summary_create ('reservation');
8124 CREATE TRIGGER mat_summary_change_tgr AFTER UPDATE ON booking.reservation FOR EACH ROW EXECUTE PROCEDURE money.mat_summary_update ();
8125 CREATE TRIGGER mat_summary_remove_tgr AFTER DELETE ON booking.reservation FOR EACH ROW EXECUTE PROCEDURE money.mat_summary_delete ();
8126
8127 ALTER TABLE config.standing_penalty
8128         ADD COLUMN org_depth   INTEGER;
8129
8130 CREATE OR REPLACE FUNCTION actor.calculate_system_penalties( match_user INT, context_org INT ) RETURNS SETOF actor.usr_standing_penalty AS $func$
8131 DECLARE
8132     user_object         actor.usr%ROWTYPE;
8133     new_sp_row          actor.usr_standing_penalty%ROWTYPE;
8134     existing_sp_row     actor.usr_standing_penalty%ROWTYPE;
8135     collections_fines   permission.grp_penalty_threshold%ROWTYPE;
8136     max_fines           permission.grp_penalty_threshold%ROWTYPE;
8137     max_overdue         permission.grp_penalty_threshold%ROWTYPE;
8138     max_items_out       permission.grp_penalty_threshold%ROWTYPE;
8139     tmp_grp             INT;
8140     items_overdue       INT;
8141     items_out           INT;
8142     context_org_list    INT[];
8143     current_fines        NUMERIC(8,2) := 0.0;
8144     tmp_fines            NUMERIC(8,2);
8145     tmp_groc            RECORD;
8146     tmp_circ            RECORD;
8147     tmp_org             actor.org_unit%ROWTYPE;
8148     tmp_penalty         config.standing_penalty%ROWTYPE;
8149     tmp_depth           INTEGER;
8150 BEGIN
8151     SELECT INTO user_object * FROM actor.usr WHERE id = match_user;
8152
8153     -- Max fines
8154     SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8155
8156     -- Fail if the user has a high fine balance
8157     LOOP
8158         tmp_grp := user_object.profile;
8159         LOOP
8160             SELECT * INTO max_fines FROM permission.grp_penalty_threshold WHERE grp = tmp_grp AND penalty = 1 AND org_unit = tmp_org.id;
8161
8162             IF max_fines.threshold IS NULL THEN
8163                 SELECT parent INTO tmp_grp FROM permission.grp_tree WHERE id = tmp_grp;
8164             ELSE
8165                 EXIT;
8166             END IF;
8167
8168             IF tmp_grp IS NULL THEN
8169                 EXIT;
8170             END IF;
8171         END LOOP;
8172
8173         IF max_fines.threshold IS NOT NULL OR tmp_org.parent_ou IS NULL THEN
8174             EXIT;
8175         END IF;
8176
8177         SELECT * INTO tmp_org FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8178
8179     END LOOP;
8180
8181     IF max_fines.threshold IS NOT NULL THEN
8182
8183         FOR existing_sp_row IN
8184                 SELECT  *
8185                   FROM  actor.usr_standing_penalty
8186                   WHERE usr = match_user
8187                         AND org_unit = max_fines.org_unit
8188                         AND (stop_date IS NULL or stop_date > NOW())
8189                         AND standing_penalty = 1
8190                 LOOP
8191             RETURN NEXT existing_sp_row;
8192         END LOOP;
8193
8194         SELECT  SUM(f.balance_owed) INTO current_fines
8195           FROM  money.materialized_billable_xact_summary f
8196                 JOIN (
8197                     SELECT  r.id
8198                       FROM  booking.reservation r
8199                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (r.pickup_lib = fp.id)
8200                       WHERE usr = match_user
8201                             AND xact_finish IS NULL
8202                                 UNION ALL
8203                     SELECT  g.id
8204                       FROM  money.grocery g
8205                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (g.billing_location = fp.id)
8206                       WHERE usr = match_user
8207                             AND xact_finish IS NULL
8208                                 UNION ALL
8209                     SELECT  circ.id
8210                       FROM  action.circulation circ
8211                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (circ.circ_lib = fp.id)
8212                       WHERE usr = match_user
8213                             AND xact_finish IS NULL ) l USING (id);
8214
8215         IF current_fines >= max_fines.threshold THEN
8216             new_sp_row.usr := match_user;
8217             new_sp_row.org_unit := max_fines.org_unit;
8218             new_sp_row.standing_penalty := 1;
8219             RETURN NEXT new_sp_row;
8220         END IF;
8221     END IF;
8222
8223     -- Start over for max overdue
8224     SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8225
8226     -- Fail if the user has too many overdue items
8227     LOOP
8228         tmp_grp := user_object.profile;
8229         LOOP
8230
8231             SELECT * INTO max_overdue FROM permission.grp_penalty_threshold WHERE grp = tmp_grp AND penalty = 2 AND org_unit = tmp_org.id;
8232
8233             IF max_overdue.threshold IS NULL THEN
8234                 SELECT parent INTO tmp_grp FROM permission.grp_tree WHERE id = tmp_grp;
8235             ELSE
8236                 EXIT;
8237             END IF;
8238
8239             IF tmp_grp IS NULL THEN
8240                 EXIT;
8241             END IF;
8242         END LOOP;
8243
8244         IF max_overdue.threshold IS NOT NULL OR tmp_org.parent_ou IS NULL THEN
8245             EXIT;
8246         END IF;
8247
8248         SELECT INTO tmp_org * FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8249
8250     END LOOP;
8251
8252     IF max_overdue.threshold IS NOT NULL THEN
8253
8254         FOR existing_sp_row IN
8255                 SELECT  *
8256                   FROM  actor.usr_standing_penalty
8257                   WHERE usr = match_user
8258                         AND org_unit = max_overdue.org_unit
8259                         AND (stop_date IS NULL or stop_date > NOW())
8260                         AND standing_penalty = 2
8261                 LOOP
8262             RETURN NEXT existing_sp_row;
8263         END LOOP;
8264
8265         SELECT  INTO items_overdue COUNT(*)
8266           FROM  action.circulation circ
8267                 JOIN  actor.org_unit_full_path( max_overdue.org_unit ) fp ON (circ.circ_lib = fp.id)
8268           WHERE circ.usr = match_user
8269             AND circ.checkin_time IS NULL
8270             AND circ.due_date < NOW()
8271             AND (circ.stop_fines = 'MAXFINES' OR circ.stop_fines IS NULL);
8272
8273         IF items_overdue >= max_overdue.threshold::INT THEN
8274             new_sp_row.usr := match_user;
8275             new_sp_row.org_unit := max_overdue.org_unit;
8276             new_sp_row.standing_penalty := 2;
8277             RETURN NEXT new_sp_row;
8278         END IF;
8279     END IF;
8280
8281     -- Start over for max out
8282     SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8283
8284     -- Fail if the user has too many checked out items
8285     LOOP
8286         tmp_grp := user_object.profile;
8287         LOOP
8288             SELECT * INTO max_items_out FROM permission.grp_penalty_threshold WHERE grp = tmp_grp AND penalty = 3 AND org_unit = tmp_org.id;
8289
8290             IF max_items_out.threshold IS NULL THEN
8291                 SELECT parent INTO tmp_grp FROM permission.grp_tree WHERE id = tmp_grp;
8292             ELSE
8293                 EXIT;
8294             END IF;
8295
8296             IF tmp_grp IS NULL THEN
8297                 EXIT;
8298             END IF;
8299         END LOOP;
8300
8301         IF max_items_out.threshold IS NOT NULL OR tmp_org.parent_ou IS NULL THEN
8302             EXIT;
8303         END IF;
8304
8305         SELECT INTO tmp_org * FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8306
8307     END LOOP;
8308
8309
8310     -- Fail if the user has too many items checked out
8311     IF max_items_out.threshold IS NOT NULL THEN
8312
8313         FOR existing_sp_row IN
8314                 SELECT  *
8315                   FROM  actor.usr_standing_penalty
8316                   WHERE usr = match_user
8317                         AND org_unit = max_items_out.org_unit
8318                         AND (stop_date IS NULL or stop_date > NOW())
8319                         AND standing_penalty = 3
8320                 LOOP
8321             RETURN NEXT existing_sp_row;
8322         END LOOP;
8323
8324         SELECT  INTO items_out COUNT(*)
8325           FROM  action.circulation circ
8326                 JOIN  actor.org_unit_full_path( max_items_out.org_unit ) fp ON (circ.circ_lib = fp.id)
8327           WHERE circ.usr = match_user
8328                 AND circ.checkin_time IS NULL
8329                 AND (circ.stop_fines IN ('MAXFINES','LONGOVERDUE') OR circ.stop_fines IS NULL);
8330
8331            IF items_out >= max_items_out.threshold::INT THEN
8332             new_sp_row.usr := match_user;
8333             new_sp_row.org_unit := max_items_out.org_unit;
8334             new_sp_row.standing_penalty := 3;
8335             RETURN NEXT new_sp_row;
8336            END IF;
8337     END IF;
8338
8339     -- Start over for collections warning
8340     SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8341
8342     -- Fail if the user has a collections-level fine balance
8343     LOOP
8344         tmp_grp := user_object.profile;
8345         LOOP
8346             SELECT * INTO max_fines FROM permission.grp_penalty_threshold WHERE grp = tmp_grp AND penalty = 4 AND org_unit = tmp_org.id;
8347
8348             IF max_fines.threshold IS NULL THEN
8349                 SELECT parent INTO tmp_grp FROM permission.grp_tree WHERE id = tmp_grp;
8350             ELSE
8351                 EXIT;
8352             END IF;
8353
8354             IF tmp_grp IS NULL THEN
8355                 EXIT;
8356             END IF;
8357         END LOOP;
8358
8359         IF max_fines.threshold IS NOT NULL OR tmp_org.parent_ou IS NULL THEN
8360             EXIT;
8361         END IF;
8362
8363         SELECT * INTO tmp_org FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8364
8365     END LOOP;
8366
8367     IF max_fines.threshold IS NOT NULL THEN
8368
8369         FOR existing_sp_row IN
8370                 SELECT  *
8371                   FROM  actor.usr_standing_penalty
8372                   WHERE usr = match_user
8373                         AND org_unit = max_fines.org_unit
8374                         AND (stop_date IS NULL or stop_date > NOW())
8375                         AND standing_penalty = 4
8376                 LOOP
8377             RETURN NEXT existing_sp_row;
8378         END LOOP;
8379
8380         SELECT  SUM(f.balance_owed) INTO current_fines
8381           FROM  money.materialized_billable_xact_summary f
8382                 JOIN (
8383                     SELECT  r.id
8384                       FROM  booking.reservation r
8385                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (r.pickup_lib = fp.id)
8386                       WHERE usr = match_user
8387                             AND xact_finish IS NULL
8388                                 UNION ALL
8389                     SELECT  g.id
8390                       FROM  money.grocery g
8391                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (g.billing_location = fp.id)
8392                       WHERE usr = match_user
8393                             AND xact_finish IS NULL
8394                                 UNION ALL
8395                     SELECT  circ.id
8396                       FROM  action.circulation circ
8397                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (circ.circ_lib = fp.id)
8398                       WHERE usr = match_user
8399                             AND xact_finish IS NULL ) l USING (id);
8400
8401         IF current_fines >= max_fines.threshold THEN
8402             new_sp_row.usr := match_user;
8403             new_sp_row.org_unit := max_fines.org_unit;
8404             new_sp_row.standing_penalty := 4;
8405             RETURN NEXT new_sp_row;
8406         END IF;
8407     END IF;
8408
8409     -- Start over for in collections
8410     SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8411
8412     -- Remove the in-collections penalty if the user has paid down enough
8413     -- This penalty is different, because this code is not responsible for creating 
8414     -- new in-collections penalties, only for removing them
8415     LOOP
8416         tmp_grp := user_object.profile;
8417         LOOP
8418             SELECT * INTO max_fines FROM permission.grp_penalty_threshold WHERE grp = tmp_grp AND penalty = 30 AND org_unit = tmp_org.id;
8419
8420             IF max_fines.threshold IS NULL THEN
8421                 SELECT parent INTO tmp_grp FROM permission.grp_tree WHERE id = tmp_grp;
8422             ELSE
8423                 EXIT;
8424             END IF;
8425
8426             IF tmp_grp IS NULL THEN
8427                 EXIT;
8428             END IF;
8429         END LOOP;
8430
8431         IF max_fines.threshold IS NOT NULL OR tmp_org.parent_ou IS NULL THEN
8432             EXIT;
8433         END IF;
8434
8435         SELECT * INTO tmp_org FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8436
8437     END LOOP;
8438
8439     IF max_fines.threshold IS NOT NULL THEN
8440
8441         -- first, see if the user had paid down to the threshold
8442         SELECT  SUM(f.balance_owed) INTO current_fines
8443           FROM  money.materialized_billable_xact_summary f
8444                 JOIN (
8445                     SELECT  r.id
8446                       FROM  booking.reservation r
8447                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (r.pickup_lib = fp.id)
8448                       WHERE usr = match_user
8449                             AND xact_finish IS NULL
8450                                 UNION ALL
8451                     SELECT  g.id
8452                       FROM  money.grocery g
8453                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (g.billing_location = fp.id)
8454                       WHERE usr = match_user
8455                             AND xact_finish IS NULL
8456                                 UNION ALL
8457                     SELECT  circ.id
8458                       FROM  action.circulation circ
8459                             JOIN  actor.org_unit_full_path( max_fines.org_unit ) fp ON (circ.circ_lib = fp.id)
8460                       WHERE usr = match_user
8461                             AND xact_finish IS NULL ) l USING (id);
8462
8463         IF current_fines IS NULL OR current_fines <= max_fines.threshold THEN
8464             -- patron has paid down enough
8465
8466             SELECT INTO tmp_penalty * FROM config.standing_penalty WHERE id = 30;
8467
8468             IF tmp_penalty.org_depth IS NOT NULL THEN
8469
8470                 -- since this code is not responsible for applying the penalty, it can't 
8471                 -- guarantee the current context org will match the org at which the penalty 
8472                 --- was applied.  search up the org tree until we hit the configured penalty depth
8473                 SELECT INTO tmp_org * FROM actor.org_unit WHERE id = context_org;
8474                 SELECT INTO tmp_depth depth FROM actor.org_unit_type WHERE id = tmp_org.ou_type;
8475
8476                 WHILE tmp_depth >= tmp_penalty.org_depth LOOP
8477
8478                     FOR existing_sp_row IN
8479                             SELECT  *
8480                             FROM  actor.usr_standing_penalty
8481                             WHERE usr = match_user
8482                                     AND org_unit = tmp_org.id
8483                                     AND (stop_date IS NULL or stop_date > NOW())
8484                                     AND standing_penalty = 30 
8485                             LOOP
8486
8487                         -- Penalty exists, return it for removal
8488                         RETURN NEXT existing_sp_row;
8489                     END LOOP;
8490
8491                     IF tmp_org.parent_ou IS NULL THEN
8492                         EXIT;
8493                     END IF;
8494
8495                     SELECT * INTO tmp_org FROM actor.org_unit WHERE id = tmp_org.parent_ou;
8496                     SELECT INTO tmp_depth depth FROM actor.org_unit_type WHERE id = tmp_org.ou_type;
8497                 END LOOP;
8498
8499             ELSE
8500
8501                 -- no penalty depth is defined, look for exact matches
8502
8503                 FOR existing_sp_row IN
8504                         SELECT  *
8505                         FROM  actor.usr_standing_penalty
8506                         WHERE usr = match_user
8507                                 AND org_unit = max_fines.org_unit
8508                                 AND (stop_date IS NULL or stop_date > NOW())
8509                                 AND standing_penalty = 30 
8510                         LOOP
8511                     -- Penalty exists, return it for removal
8512                     RETURN NEXT existing_sp_row;
8513                 END LOOP;
8514             END IF;
8515     
8516         END IF;
8517
8518     END IF;
8519
8520     RETURN;
8521 END;
8522 $func$ LANGUAGE plpgsql;
8523
8524 -- Create a default row in acq.fiscal_calendar
8525 -- Add a column in actor.org_unit to point to it
8526
8527 INSERT INTO acq.fiscal_calendar ( id, name ) VALUES ( 1, 'Default' );
8528
8529 ALTER TABLE actor.org_unit
8530 ADD COLUMN fiscal_calendar INT NOT NULL
8531         REFERENCES acq.fiscal_calendar( id )
8532         DEFERRABLE INITIALLY DEFERRED
8533         DEFAULT 1;
8534
8535 ALTER TABLE auditor.actor_org_unit_history
8536         ADD COLUMN fiscal_calendar INT;
8537
8538 ALTER TABLE acq.funding_source_credit
8539 ADD COLUMN deadline_date TIMESTAMPTZ;
8540
8541 ALTER TABLE acq.funding_source_credit
8542 ADD COLUMN effective_date TIMESTAMPTZ NOT NULL DEFAULT now();
8543
8544 INSERT INTO config.standing_penalty (id,name,label) VALUES (30,'PATRON_IN_COLLECTIONS','Patron has been referred to a collections agency');
8545
8546 CREATE TABLE acq.fund_transfer (
8547         id               SERIAL         PRIMARY KEY,
8548         src_fund         INT            NOT NULL REFERENCES acq.fund( id )
8549                                         DEFERRABLE INITIALLY DEFERRED,
8550         src_amount       NUMERIC        NOT NULL,
8551         dest_fund        INT            REFERENCES acq.fund( id )
8552                                         DEFERRABLE INITIALLY DEFERRED,
8553         dest_amount      NUMERIC,
8554         transfer_time    TIMESTAMPTZ    NOT NULL DEFAULT now(),
8555         transfer_user    INT            NOT NULL REFERENCES actor.usr( id )
8556                                         DEFERRABLE INITIALLY DEFERRED,
8557         note             TEXT,
8558     funding_source_credit INTEGER   NOT NULL
8559                                         REFERENCES acq.funding_source_credit(id)
8560                                         DEFERRABLE INITIALLY DEFERRED
8561 );
8562
8563 CREATE INDEX acqftr_usr_idx
8564 ON acq.fund_transfer( transfer_user );
8565
8566 COMMENT ON TABLE acq.fund_transfer IS $$
8567 /*
8568  * Copyright (C) 2009  Georgia Public Library Service
8569  * Scott McKellar <scott@esilibrary.com>
8570  *
8571  * Fund Transfer
8572  *
8573  * Each row represents the transfer of money from a source fund
8574  * to a destination fund.  There should be corresponding entries
8575  * in acq.fund_allocation.  The purpose of acq.fund_transfer is
8576  * to record how much money moved from which fund to which other
8577  * fund.
8578  * 
8579  * The presence of two amount fields, rather than one, reflects
8580  * the possibility that the two funds are denominated in different
8581  * currencies.  If they use the same currency type, the two
8582  * amounts should be the same.
8583  *
8584  * ****
8585  *
8586  * This program is free software; you can redistribute it and/or
8587  * modify it under the terms of the GNU General Public License
8588  * as published by the Free Software Foundation; either version 2
8589  * of the License, or (at your option) any later version.
8590  *
8591  * This program is distributed in the hope that it will be useful,
8592  * but WITHOUT ANY WARRANTY; without even the implied warranty of
8593  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
8594  * GNU General Public License for more details.
8595  */
8596 $$;
8597
8598 CREATE TABLE acq.claim_event_type (
8599         id             SERIAL           PRIMARY KEY,
8600         org_unit       INT              NOT NULL REFERENCES actor.org_unit(id)
8601                                                  DEFERRABLE INITIALLY DEFERRED,
8602         code           TEXT             NOT NULL,
8603         description    TEXT             NOT NULL,
8604         library_initiated BOOL          NOT NULL DEFAULT FALSE,
8605         CONSTRAINT event_type_once_per_org UNIQUE ( org_unit, code )
8606 );
8607
8608 CREATE TABLE acq.claim_event (
8609         id             BIGSERIAL        PRIMARY KEY,
8610         type           INT              NOT NULL REFERENCES acq.claim_event_type
8611                                                  DEFERRABLE INITIALLY DEFERRED,
8612         claim          SERIAL           NOT NULL REFERENCES acq.claim
8613                                                  DEFERRABLE INITIALLY DEFERRED,
8614         event_date     TIMESTAMPTZ      NOT NULL DEFAULT now(),
8615         creator        INT              NOT NULL REFERENCES actor.usr
8616                                                  DEFERRABLE INITIALLY DEFERRED,
8617         note           TEXT
8618 );
8619
8620 CREATE INDEX claim_event_claim_date_idx ON acq.claim_event( claim, event_date );
8621
8622 CREATE OR REPLACE FUNCTION actor.usr_purge_data(
8623         src_usr  IN INTEGER,
8624         dest_usr IN INTEGER
8625 ) RETURNS VOID AS $$
8626 DECLARE
8627         suffix TEXT;
8628         renamable_row RECORD;
8629 BEGIN
8630
8631         UPDATE actor.usr SET
8632                 active = FALSE,
8633                 card = NULL,
8634                 mailing_address = NULL,
8635                 billing_address = NULL
8636         WHERE id = src_usr;
8637
8638         -- acq.*
8639         UPDATE acq.fund_allocation SET allocator = dest_usr WHERE allocator = src_usr;
8640         UPDATE acq.lineitem SET creator = dest_usr WHERE creator = src_usr;
8641         UPDATE acq.lineitem SET editor = dest_usr WHERE editor = src_usr;
8642         UPDATE acq.lineitem SET selector = dest_usr WHERE selector = src_usr;
8643         UPDATE acq.lineitem_note SET creator = dest_usr WHERE creator = src_usr;
8644         UPDATE acq.lineitem_note SET editor = dest_usr WHERE editor = src_usr;
8645         DELETE FROM acq.lineitem_usr_attr_definition WHERE usr = src_usr;
8646
8647         -- Update with a rename to avoid collisions
8648         FOR renamable_row in
8649                 SELECT id, name
8650                 FROM   acq.picklist
8651                 WHERE  owner = src_usr
8652         LOOP
8653                 suffix := ' (' || src_usr || ')';
8654                 LOOP
8655                         BEGIN
8656                                 UPDATE  acq.picklist
8657                                 SET     owner = dest_usr, name = name || suffix
8658                                 WHERE   id = renamable_row.id;
8659                         EXCEPTION WHEN unique_violation THEN
8660                                 suffix := suffix || ' ';
8661                                 CONTINUE;
8662                         END;
8663                         EXIT;
8664                 END LOOP;
8665         END LOOP;
8666
8667         UPDATE acq.picklist SET creator = dest_usr WHERE creator = src_usr;
8668         UPDATE acq.picklist SET editor = dest_usr WHERE editor = src_usr;
8669         UPDATE acq.po_note SET creator = dest_usr WHERE creator = src_usr;
8670         UPDATE acq.po_note SET editor = dest_usr WHERE editor = src_usr;
8671         UPDATE acq.purchase_order SET owner = dest_usr WHERE owner = src_usr;
8672         UPDATE acq.purchase_order SET creator = dest_usr WHERE creator = src_usr;
8673         UPDATE acq.purchase_order SET editor = dest_usr WHERE editor = src_usr;
8674         UPDATE acq.claim_event SET creator = dest_usr WHERE creator = src_usr;
8675
8676         -- action.*
8677         DELETE FROM action.circulation WHERE usr = src_usr;
8678         UPDATE action.circulation SET circ_staff = dest_usr WHERE circ_staff = src_usr;
8679         UPDATE action.circulation SET checkin_staff = dest_usr WHERE checkin_staff = src_usr;
8680         UPDATE action.hold_notification SET notify_staff = dest_usr WHERE notify_staff = src_usr;
8681         UPDATE action.hold_request SET fulfillment_staff = dest_usr WHERE fulfillment_staff = src_usr;
8682         UPDATE action.hold_request SET requestor = dest_usr WHERE requestor = src_usr;
8683         DELETE FROM action.hold_request WHERE usr = src_usr;
8684         UPDATE action.in_house_use SET staff = dest_usr WHERE staff = src_usr;
8685         UPDATE action.non_cat_in_house_use SET staff = dest_usr WHERE staff = src_usr;
8686         DELETE FROM action.non_cataloged_circulation WHERE patron = src_usr;
8687         UPDATE action.non_cataloged_circulation SET staff = dest_usr WHERE staff = src_usr;
8688         DELETE FROM action.survey_response WHERE usr = src_usr;
8689         UPDATE action.fieldset SET owner = dest_usr WHERE owner = src_usr;
8690
8691         -- actor.*
8692         DELETE FROM actor.card WHERE usr = src_usr;
8693         DELETE FROM actor.stat_cat_entry_usr_map WHERE target_usr = src_usr;
8694
8695         -- The following update is intended to avoid transient violations of a foreign
8696         -- key constraint, whereby actor.usr_address references itself.  It may not be
8697         -- necessary, but it does no harm.
8698         UPDATE actor.usr_address SET replaces = NULL
8699                 WHERE usr = src_usr AND replaces IS NOT NULL;
8700         DELETE FROM actor.usr_address WHERE usr = src_usr;
8701         DELETE FROM actor.usr_note WHERE usr = src_usr;
8702         UPDATE actor.usr_note SET creator = dest_usr WHERE creator = src_usr;
8703         DELETE FROM actor.usr_org_unit_opt_in WHERE usr = src_usr;
8704         UPDATE actor.usr_org_unit_opt_in SET staff = dest_usr WHERE staff = src_usr;
8705         DELETE FROM actor.usr_setting WHERE usr = src_usr;
8706         DELETE FROM actor.usr_standing_penalty WHERE usr = src_usr;
8707         UPDATE actor.usr_standing_penalty SET staff = dest_usr WHERE staff = src_usr;
8708
8709         -- asset.*
8710         UPDATE asset.call_number SET creator = dest_usr WHERE creator = src_usr;
8711         UPDATE asset.call_number SET editor = dest_usr WHERE editor = src_usr;
8712         UPDATE asset.call_number_note SET creator = dest_usr WHERE creator = src_usr;
8713         UPDATE asset.copy SET creator = dest_usr WHERE creator = src_usr;
8714         UPDATE asset.copy SET editor = dest_usr WHERE editor = src_usr;
8715         UPDATE asset.copy_note SET creator = dest_usr WHERE creator = src_usr;
8716
8717         -- auditor.*
8718         DELETE FROM auditor.actor_usr_address_history WHERE id = src_usr;
8719         DELETE FROM auditor.actor_usr_history WHERE id = src_usr;
8720         UPDATE auditor.asset_call_number_history SET creator = dest_usr WHERE creator = src_usr;
8721         UPDATE auditor.asset_call_number_history SET editor  = dest_usr WHERE editor  = src_usr;
8722         UPDATE auditor.asset_copy_history SET creator = dest_usr WHERE creator = src_usr;
8723         UPDATE auditor.asset_copy_history SET editor  = dest_usr WHERE editor  = src_usr;
8724         UPDATE auditor.biblio_record_entry_history SET creator = dest_usr WHERE creator = src_usr;
8725         UPDATE auditor.biblio_record_entry_history SET editor  = dest_usr WHERE editor  = src_usr;
8726
8727         -- biblio.*
8728         UPDATE biblio.record_entry SET creator = dest_usr WHERE creator = src_usr;
8729         UPDATE biblio.record_entry SET editor = dest_usr WHERE editor = src_usr;
8730         UPDATE biblio.record_note SET creator = dest_usr WHERE creator = src_usr;
8731         UPDATE biblio.record_note SET editor = dest_usr WHERE editor = src_usr;
8732
8733         -- container.*
8734         -- Update buckets with a rename to avoid collisions
8735         FOR renamable_row in
8736                 SELECT id, name
8737                 FROM   container.biblio_record_entry_bucket
8738                 WHERE  owner = src_usr
8739         LOOP
8740                 suffix := ' (' || src_usr || ')';
8741                 LOOP
8742                         BEGIN
8743                                 UPDATE  container.biblio_record_entry_bucket
8744                                 SET     owner = dest_usr, name = name || suffix
8745                                 WHERE   id = renamable_row.id;
8746                         EXCEPTION WHEN unique_violation THEN
8747                                 suffix := suffix || ' ';
8748                                 CONTINUE;
8749                         END;
8750                         EXIT;
8751                 END LOOP;
8752         END LOOP;
8753
8754         FOR renamable_row in
8755                 SELECT id, name
8756                 FROM   container.call_number_bucket
8757                 WHERE  owner = src_usr
8758         LOOP
8759                 suffix := ' (' || src_usr || ')';
8760                 LOOP
8761                         BEGIN
8762                                 UPDATE  container.call_number_bucket
8763                                 SET     owner = dest_usr, name = name || suffix
8764                                 WHERE   id = renamable_row.id;
8765                         EXCEPTION WHEN unique_violation THEN
8766                                 suffix := suffix || ' ';
8767                                 CONTINUE;
8768                         END;
8769                         EXIT;
8770                 END LOOP;
8771         END LOOP;
8772
8773         FOR renamable_row in
8774                 SELECT id, name
8775                 FROM   container.copy_bucket
8776                 WHERE  owner = src_usr
8777         LOOP
8778                 suffix := ' (' || src_usr || ')';
8779                 LOOP
8780                         BEGIN
8781                                 UPDATE  container.copy_bucket
8782                                 SET     owner = dest_usr, name = name || suffix
8783                                 WHERE   id = renamable_row.id;
8784                         EXCEPTION WHEN unique_violation THEN
8785                                 suffix := suffix || ' ';
8786                                 CONTINUE;
8787                         END;
8788                         EXIT;
8789                 END LOOP;
8790         END LOOP;
8791
8792         FOR renamable_row in
8793                 SELECT id, name
8794                 FROM   container.user_bucket
8795                 WHERE  owner = src_usr
8796         LOOP
8797                 suffix := ' (' || src_usr || ')';
8798                 LOOP
8799                         BEGIN
8800                                 UPDATE  container.user_bucket
8801                                 SET     owner = dest_usr, name = name || suffix
8802                                 WHERE   id = renamable_row.id;
8803                         EXCEPTION WHEN unique_violation THEN
8804                                 suffix := suffix || ' ';
8805                                 CONTINUE;
8806                         END;
8807                         EXIT;
8808                 END LOOP;
8809         END LOOP;
8810
8811         DELETE FROM container.user_bucket_item WHERE target_user = src_usr;
8812
8813         -- money.*
8814         DELETE FROM money.billable_xact WHERE usr = src_usr;
8815         DELETE FROM money.collections_tracker WHERE usr = src_usr;
8816         UPDATE money.collections_tracker SET collector = dest_usr WHERE collector = src_usr;
8817
8818         -- permission.*
8819         DELETE FROM permission.usr_grp_map WHERE usr = src_usr;
8820         DELETE FROM permission.usr_object_perm_map WHERE usr = src_usr;
8821         DELETE FROM permission.usr_perm_map WHERE usr = src_usr;
8822         DELETE FROM permission.usr_work_ou_map WHERE usr = src_usr;
8823
8824         -- reporter.*
8825         -- Update with a rename to avoid collisions
8826         BEGIN
8827                 FOR renamable_row in
8828                         SELECT id, name
8829                         FROM   reporter.output_folder
8830                         WHERE  owner = src_usr
8831                 LOOP
8832                         suffix := ' (' || src_usr || ')';
8833                         LOOP
8834                                 BEGIN
8835                                         UPDATE  reporter.output_folder
8836                                         SET     owner = dest_usr, name = name || suffix
8837                                         WHERE   id = renamable_row.id;
8838                                 EXCEPTION WHEN unique_violation THEN
8839                                         suffix := suffix || ' ';
8840                                         CONTINUE;
8841                                 END;
8842                                 EXIT;
8843                         END LOOP;
8844                 END LOOP;
8845         EXCEPTION WHEN undefined_table THEN
8846                 -- do nothing
8847         END;
8848
8849         BEGIN
8850                 UPDATE reporter.report SET owner = dest_usr WHERE owner = src_usr;
8851         EXCEPTION WHEN undefined_table THEN
8852                 -- do nothing
8853         END;
8854
8855         -- Update with a rename to avoid collisions
8856         BEGIN
8857                 FOR renamable_row in
8858                         SELECT id, name
8859                         FROM   reporter.report_folder
8860                         WHERE  owner = src_usr
8861                 LOOP
8862                         suffix := ' (' || src_usr || ')';
8863                         LOOP
8864                                 BEGIN
8865                                         UPDATE  reporter.report_folder
8866                                         SET     owner = dest_usr, name = name || suffix
8867                                         WHERE   id = renamable_row.id;
8868                                 EXCEPTION WHEN unique_violation THEN
8869                                         suffix := suffix || ' ';
8870                                         CONTINUE;
8871                                 END;
8872                                 EXIT;
8873                         END LOOP;
8874                 END LOOP;
8875         EXCEPTION WHEN undefined_table THEN
8876                 -- do nothing
8877         END;
8878
8879         BEGIN
8880                 UPDATE reporter.schedule SET runner = dest_usr WHERE runner = src_usr;
8881         EXCEPTION WHEN undefined_table THEN
8882                 -- do nothing
8883         END;
8884
8885         BEGIN
8886                 UPDATE reporter.template SET owner = dest_usr WHERE owner = src_usr;
8887         EXCEPTION WHEN undefined_table THEN
8888                 -- do nothing
8889         END;
8890
8891         -- Update with a rename to avoid collisions
8892         BEGIN
8893                 FOR renamable_row in
8894                         SELECT id, name
8895                         FROM   reporter.template_folder
8896                         WHERE  owner = src_usr
8897                 LOOP
8898                         suffix := ' (' || src_usr || ')';
8899                         LOOP
8900                                 BEGIN
8901                                         UPDATE  reporter.template_folder
8902                                         SET     owner = dest_usr, name = name || suffix
8903                                         WHERE   id = renamable_row.id;
8904                                 EXCEPTION WHEN unique_violation THEN
8905                                         suffix := suffix || ' ';
8906                                         CONTINUE;
8907                                 END;
8908                                 EXIT;
8909                         END LOOP;
8910                 END LOOP;
8911         EXCEPTION WHEN undefined_table THEN
8912         -- do nothing
8913         END;
8914
8915         -- vandelay.*
8916         -- Update with a rename to avoid collisions
8917         FOR renamable_row in
8918                 SELECT id, name
8919                 FROM   vandelay.queue
8920                 WHERE  owner = src_usr
8921         LOOP
8922                 suffix := ' (' || src_usr || ')';
8923                 LOOP
8924                         BEGIN
8925                                 UPDATE  vandelay.queue
8926                                 SET     owner = dest_usr, name = name || suffix
8927                                 WHERE   id = renamable_row.id;
8928                         EXCEPTION WHEN unique_violation THEN
8929                                 suffix := suffix || ' ';
8930                                 CONTINUE;
8931                         END;
8932                         EXIT;
8933                 END LOOP;
8934         END LOOP;
8935
8936 END;
8937 $$ LANGUAGE plpgsql;
8938
8939 -- INSERT INTO config.copy_status (id,name) VALUES (15,oils_i18n_gettext(15, 'On reservation shelf', 'ccs', 'name'));
8940
8941 ALTER TABLE acq.fund
8942 ADD COLUMN rollover BOOL NOT NULL DEFAULT FALSE;
8943
8944 ALTER TABLE acq.fund
8945         ADD COLUMN propagate BOOLEAN NOT NULL DEFAULT TRUE;
8946
8947 -- A fund can't roll over if it doesn't propagate from one year to the next
8948
8949 ALTER TABLE acq.fund
8950         ADD CONSTRAINT acq_fund_rollover_implies_propagate CHECK
8951         ( propagate OR NOT rollover );
8952
8953 ALTER TABLE acq.fund
8954         ADD COLUMN active BOOL NOT NULL DEFAULT TRUE;
8955
8956 ALTER TABLE acq.fund
8957     ADD COLUMN balance_warning_percent INT
8958     CONSTRAINT balance_warning_percent_limit
8959         CHECK( balance_warning_percent <= 100 );
8960
8961 ALTER TABLE acq.fund
8962     ADD COLUMN balance_stop_percent INT
8963     CONSTRAINT balance_stop_percent_limit
8964         CHECK( balance_stop_percent <= 100 );
8965
8966 CREATE VIEW acq.ordered_funding_source_credit AS
8967         SELECT
8968                 CASE WHEN deadline_date IS NULL THEN
8969                         2
8970                 ELSE
8971                         1
8972                 END AS sort_priority,
8973                 CASE WHEN deadline_date IS NULL THEN
8974                         effective_date
8975                 ELSE
8976                         deadline_date
8977                 END AS sort_date,
8978                 id,
8979                 funding_source,
8980                 amount,
8981                 note
8982         FROM
8983                 acq.funding_source_credit;
8984
8985 COMMENT ON VIEW acq.ordered_funding_source_credit IS $$
8986 /*
8987  * Copyright (C) 2009  Georgia Public Library Service
8988  * Scott McKellar <scott@gmail.com>
8989  *
8990  * The acq.ordered_funding_source_credit view is a prioritized
8991  * ordering of funding source credits.  When ordered by the first
8992  * three columns, this view defines the order in which the various
8993  * credits are to be tapped for spending, subject to the allocations
8994  * in the acq.fund_allocation table.
8995  *
8996  * The first column reflects the principle that we should spend
8997  * money with deadlines before spending money without deadlines.
8998  *
8999  * The second column reflects the principle that we should spend the
9000  * oldest money first.  For money with deadlines, that means that we
9001  * spend first from the credit with the earliest deadline.  For
9002  * money without deadlines, we spend first from the credit with the
9003  * earliest effective date.  
9004  *
9005  * The third column is a tie breaker to ensure a consistent
9006  * ordering.
9007  *
9008  * ****
9009  *
9010  * This program is free software; you can redistribute it and/or
9011  * modify it under the terms of the GNU General Public License
9012  * as published by the Free Software Foundation; either version 2
9013  * of the License, or (at your option) any later version.
9014  *
9015  * This program is distributed in the hope that it will be useful,
9016  * but WITHOUT ANY WARRANTY; without even the implied warranty of
9017  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
9018  * GNU General Public License for more details.
9019  */
9020 $$;
9021
9022 CREATE OR REPLACE VIEW money.billable_xact_summary_location_view AS
9023     SELECT  m.*, COALESCE(c.circ_lib, g.billing_location, r.pickup_lib) AS billing_location
9024       FROM  money.materialized_billable_xact_summary m
9025             LEFT JOIN action.circulation c ON (c.id = m.id)
9026             LEFT JOIN money.grocery g ON (g.id = m.id)
9027             LEFT JOIN booking.reservation r ON (r.id = m.id);
9028
9029 CREATE TABLE config.marc21_rec_type_map (
9030     code        TEXT    PRIMARY KEY,
9031     type_val    TEXT    NOT NULL,
9032     blvl_val    TEXT    NOT NULL
9033 );
9034
9035 CREATE TABLE config.marc21_ff_pos_map (
9036     id          SERIAL  PRIMARY KEY,
9037     fixed_field TEXT    NOT NULL,
9038     tag         TEXT    NOT NULL,
9039     rec_type    TEXT    NOT NULL,
9040     start_pos   INT     NOT NULL,
9041     length      INT     NOT NULL,
9042     default_val TEXT    NOT NULL DEFAULT ' '
9043 );
9044
9045 CREATE TABLE config.marc21_physical_characteristic_type_map (
9046     ptype_key   TEXT    PRIMARY KEY,
9047     label       TEXT    NOT NULL -- I18N
9048 );
9049
9050 CREATE TABLE config.marc21_physical_characteristic_subfield_map (
9051     id          SERIAL  PRIMARY KEY,
9052     ptype_key   TEXT    NOT NULL REFERENCES config.marc21_physical_characteristic_type_map (ptype_key) ON DELETE CASCADE ON UPDATE CASCADE,
9053     subfield    TEXT    NOT NULL,
9054     start_pos   INT     NOT NULL,
9055     length      INT     NOT NULL,
9056     label       TEXT    NOT NULL -- I18N
9057 );
9058
9059 CREATE TABLE config.marc21_physical_characteristic_value_map (
9060     id              SERIAL  PRIMARY KEY,
9061     value           TEXT    NOT NULL,
9062     ptype_subfield  INT     NOT NULL REFERENCES config.marc21_physical_characteristic_subfield_map (id),
9063     label           TEXT    NOT NULL -- I18N
9064 );
9065
9066 ----------------------------------
9067 -- MARC21 record structure data --
9068 ----------------------------------
9069
9070 -- Record type map
9071 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('BKS','at','acdm');
9072 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('SER','a','bsi');
9073 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('VIS','gkro','abcdmsi');
9074 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('MIX','p','cdi');
9075 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('MAP','ef','abcdmsi');
9076 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('SCO','cd','abcdmsi');
9077 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('REC','ij','abcdmsi');
9078 INSERT INTO config.marc21_rec_type_map (code, type_val, blvl_val) VALUES ('COM','m','abcdmsi');
9079
9080 ------ Physical Characteristics
9081
9082 -- Map
9083 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('a','Map');
9084 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','b','1','1','SMD');
9085 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Atlas');
9086 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Diagram');
9087 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Map');
9088 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Profile');
9089 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Model');
9090 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Remote-sensing image');
9091 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Section');
9092 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9093 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('y',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'View');
9094 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9095 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','d','3','1','Color');
9096 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'One color');
9097 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9098 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','e','4','1','Physical medium');
9099 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paper');
9100 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Wood');
9101 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stone');
9102 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Metal');
9103 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9104 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Skins');
9105 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Textile');
9106 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Plaster');
9107 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Flexible base photographic medium, positive');
9108 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Flexible base photographic medium, negative');
9109 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Non-flexible base photographic medium, positive');
9110 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Non-flexible base photographic medium, negative');
9111 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9112 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('y',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other photographic medium');
9113 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9114 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','f','5','1','Type of reproduction');
9115 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Facsimile');
9116 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9117 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9118 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9119 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','g','6','1','Production/reproduction details');
9120 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Photocopy, blueline print');
9121 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Photocopy');
9122 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Pre-production');
9123 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film');
9124 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9125 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9126 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('a','h','7','1','Positive/negative');
9127 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Positive');
9128 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Negative');
9129 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9130 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9131
9132 -- Electronic Resource
9133 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('c','Electronic Resource');
9134 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','b','1','1','SMD');
9135 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Tape Cartridge');
9136 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Chip cartridge');
9137 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Computer optical disk cartridge');
9138 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Tape cassette');
9139 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Tape reel');
9140 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic disk');
9141 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magneto-optical disk');
9142 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical disk');
9143 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Remote');
9144 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9145 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9146 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','d','3','1','Color');
9147 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'One color');
9148 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9149 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9150 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Gray scale');
9151 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9152 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9153 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9154 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9155 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','e','4','1','Dimensions');
9156 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 1/2 in.');
9157 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'12 in.');
9158 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'4 3/4 in. or 12 cm.');
9159 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1 1/8 x 2 3/8 in.');
9160 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 7/8 x 2 1/2 in.');
9161 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9162 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'5 1/4 in.');
9163 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9164 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('v',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 in.');
9165 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9166 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','f','5','1','Sound');
9167 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES (' ',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'No sound (Silent)');
9168 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound');
9169 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9170 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','g','6','3','Image bit depth');
9171 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('---',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9172 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('mmm',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multiple');
9173 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('nnn',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9174 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','h','9','1','File formats');
9175 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'One file format');
9176 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multiple file formats');
9177 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9178 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','i','10','1','Quality assurance target(s)');
9179 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Absent');
9180 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9181 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Present');
9182 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9183 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','j','11','1','Antecedent/Source');
9184 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'File reproduced from original');
9185 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'File reproduced from microform');
9186 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'File reproduced from electronic resource');
9187 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'File reproduced from an intermediate (not microform)');
9188 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9189 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9190 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9191 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','k','12','1','Level of compression');
9192 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Uncompressed');
9193 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Lossless');
9194 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Lossy');
9195 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9196 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9197 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('c','l','13','1','Reformatting quality');
9198 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Access');
9199 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9200 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Preservation');
9201 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Replacement');
9202 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9203
9204 -- Globe
9205 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('d','Globe');
9206 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('d','b','1','1','SMD');
9207 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Celestial globe');
9208 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Planetary or lunar globe');
9209 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Terrestrial globe');
9210 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Earth moon globe');
9211 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9212 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9213 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('d','d','3','1','Color');
9214 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'One color');
9215 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9216 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('d','e','4','1','Physical medium');
9217 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paper');
9218 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Wood');
9219 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stone');
9220 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Metal');
9221 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9222 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Skins');
9223 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Textile');
9224 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Plaster');
9225 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9226 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9227 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('d','f','5','1','Type of reproduction');
9228 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Facsimile');
9229 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9230 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9231 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9232
9233 -- Tactile Material
9234 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('f','Tactile Material');
9235 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('f','b','1','1','SMD');
9236 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Moon');
9237 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Braille');
9238 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Combination');
9239 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Tactile, with no writing system');
9240 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9241 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9242 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('f','d','3','2','Class of braille writing');
9243 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Literary braille');
9244 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Format code braille');
9245 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mathematics and scientific braille');
9246 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Computer braille');
9247 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Music braille');
9248 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multiple braille types');
9249 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9250 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9251 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9252 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('f','e','4','1','Level of contraction');
9253 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Uncontracted');
9254 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Contracted');
9255 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Combination');
9256 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9257 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9258 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9259 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('f','f','6','3','Braille music format');
9260 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Bar over bar');
9261 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Bar by bar');
9262 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Line over line');
9263 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paragraph');
9264 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Single line');
9265 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Section by section');
9266 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Line by line');
9267 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Open score');
9268 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Spanner short form scoring');
9269 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Short form scoring');
9270 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Outline');
9271 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Vertical score');
9272 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9273 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9274 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9275 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('f','g','9','1','Special physical characteristics');
9276 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Print/braille');
9277 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Jumbo or enlarged braille');
9278 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9279 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9280 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9281
9282 -- Projected Graphic
9283 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('g','Projected Graphic');
9284 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','b','1','1','SMD');
9285 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film cartridge');
9286 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Filmstrip');
9287 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film filmstrip type');
9288 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Filmstrip roll');
9289 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Slide');
9290 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Transparency');
9291 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9292 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','d','3','1','Color');
9293 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9294 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9295 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hand-colored');
9296 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9297 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9298 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9299 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9300 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','e','4','1','Base of emulsion');
9301 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Glass');
9302 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9303 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety film');
9304 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film base, other than safety film');
9305 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed collection');
9306 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paper');
9307 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9308 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9309 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','f','5','1','Sound on medium or separate');
9310 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound on medium');
9311 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound separate from medium');
9312 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9313 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','g','6','1','Medium for sound');
9314 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical sound track on motion picture film');
9315 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic sound track on motion picture film');
9316 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cartridge');
9317 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound disc');
9318 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape on reel');
9319 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cassette');
9320 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical and magnetic sound track on film');
9321 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videotape');
9322 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videodisc');
9323 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9324 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9325 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','h','7','1','Dimensions');
9326 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Standard 8 mm.');
9327 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Super 8 mm./single 8 mm.');
9328 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'9.5 mm.');
9329 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 mm.');
9330 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'28 mm.');
9331 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'35 mm.');
9332 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'70 mm.');
9333 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'2 x 2 in. (5 x 5 cm.)');
9334 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'2 1/4 x 2 1/4 in. (6 x 6 cm.)');
9335 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'4 x 5 in. (10 x 13 cm.)');
9336 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'5 x 7 in. (13 x 18 cm.)');
9337 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9338 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('v',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 x 10 in. (21 x 26 cm.)');
9339 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('w',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'9 x 9 in. (23 x 23 cm.)');
9340 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('x',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'10 x 10 in. (26 x 26 cm.)');
9341 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('y',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'7 x 7 in. (18 x 18 cm.)');
9342 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9343 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('g','i','8','1','Secondary support material');
9344 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Cardboard');
9345 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Glass');
9346 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9347 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'metal');
9348 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Metal and glass');
9349 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics and glass');
9350 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed collection');
9351 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9352 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9353
9354 -- Microform
9355 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('h','Microform');
9356 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','b','1','1','SMD');
9357 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Aperture card');
9358 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microfilm cartridge');
9359 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microfilm cassette');
9360 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microfilm reel');
9361 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microfiche');
9362 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microfiche cassette');
9363 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microopaque');
9364 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9365 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9366 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','d','3','1','Positive/negative');
9367 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Positive');
9368 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Negative');
9369 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9370 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9371 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','e','4','1','Dimensions');
9372 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 mm.');
9373 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 mm.');
9374 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'35 mm.');
9375 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'70mm.');
9376 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'105 mm.');
9377 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 x 5 in. (8 x 13 cm.)');
9378 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'4 x 6 in. (11 x 15 cm.)');
9379 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'6 x 9 in. (16 x 23 cm.)');
9380 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 1/4 x 7 3/8 in. (9 x 19 cm.)');
9381 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9382 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9383 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','f','5','4','Reduction ratio range/Reduction ratio');
9384 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Low (1-16x)');
9385 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Normal (16-30x)');
9386 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'High (31-60x)');
9387 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Very high (61-90x)');
9388 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Ultra (90x-)');
9389 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9390 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('v',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Reduction ratio varies');
9391 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','g','9','1','Color');
9392 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9393 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9394 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9395 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9396 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9397 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','h','10','1','Emulsion on film');
9398 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Silver halide');
9399 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Diazo');
9400 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Vesicular');
9401 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9402 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9403 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9404 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9405 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','i','11','1','Quality assurance target(s)');
9406 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1st gen. master');
9407 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Printing master');
9408 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Service copy');
9409 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed generation');
9410 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9411 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('h','j','12','1','Base of film');
9412 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, undetermined');
9413 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, acetate undetermined');
9414 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, diacetate');
9415 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Nitrate base');
9416 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed base');
9417 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9418 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, polyester');
9419 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, mixed');
9420 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Safety base, triacetate');
9421 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9422 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9423
9424 -- Non-projected Graphic
9425 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('k','Non-projected Graphic');
9426 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('k','b','1','1','SMD');
9427 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Collage');
9428 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Drawing');
9429 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Painting');
9430 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Photo-mechanical print');
9431 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Photonegative');
9432 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Photoprint');
9433 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Picture');
9434 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Print');
9435 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Technical drawing');
9436 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Chart');
9437 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Flash/activity card');
9438 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9439 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9440 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('k','d','3','1','Color');
9441 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'One color');
9442 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9443 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9444 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hand-colored');
9445 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9446 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9447 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9448 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('k','e','4','1','Primary support material');
9449 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Canvas');
9450 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Bristol board');
9451 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Cardboard/illustration board');
9452 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Glass');
9453 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9454 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Skins');
9455 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Textile');
9456 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Metal');
9457 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed collection');
9458 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paper');
9459 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Plaster');
9460 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hardboard');
9461 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Porcelain');
9462 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stone');
9463 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Wood');
9464 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9465 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9466 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('k','f','5','1','Secondary support material');
9467 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Canvas');
9468 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Bristol board');
9469 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Cardboard/illustration board');
9470 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Glass');
9471 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetics');
9472 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Skins');
9473 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Textile');
9474 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Metal');
9475 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed collection');
9476 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Paper');
9477 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Plaster');
9478 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hardboard');
9479 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Porcelain');
9480 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stone');
9481 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Wood');
9482 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9483 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9484
9485 -- Motion Picture
9486 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('m','Motion Picture');
9487 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','b','1','1','SMD');
9488 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film cartridge');
9489 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film cassette');
9490 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Film reel');
9491 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9492 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9493 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','d','3','1','Color');
9494 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9495 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9496 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hand-colored');
9497 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9498 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9499 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9500 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','e','4','1','Motion picture presentation format');
9501 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Standard sound aperture, reduced frame');
9502 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Nonanamorphic (wide-screen)');
9503 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3D');
9504 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Anamorphic (wide-screen)');
9505 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other-wide screen format');
9506 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Standard. silent aperture, full frame');
9507 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9508 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9509 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','f','5','1','Sound on medium or separate');
9510 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound on medium');
9511 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound separate from medium');
9512 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9513 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','g','6','1','Medium for sound');
9514 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical sound track on motion picture film');
9515 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic sound track on motion picture film');
9516 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cartridge');
9517 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound disc');
9518 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape on reel');
9519 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cassette');
9520 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical and magnetic sound track on film');
9521 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videotape');
9522 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videodisc');
9523 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9524 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9525 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','h','7','1','Dimensions');
9526 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Standard 8 mm.');
9527 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Super 8 mm./single 8 mm.');
9528 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'9.5 mm.');
9529 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 mm.');
9530 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'28 mm.');
9531 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'35 mm.');
9532 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'70 mm.');
9533 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9534 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9535 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','i','8','1','Configuration of playback channels');
9536 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9537 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Monaural');
9538 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9539 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multichannel, surround or quadraphonic');
9540 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stereophonic');
9541 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9542 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9543 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('m','j','9','1','Production elements');
9544 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Work print');
9545 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Trims');
9546 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Outtakes');
9547 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Rushes');
9548 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixing tracks');
9549 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Title bands/inter-title rolls');
9550 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Production rolls');
9551 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9552 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9553
9554 -- Remote-sensing Image
9555 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('r','Remote-sensing Image');
9556 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','b','1','1','SMD');
9557 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9558 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','d','3','1','Altitude of sensor');
9559 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Surface');
9560 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Airborne');
9561 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Spaceborne');
9562 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9563 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9564 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9565 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','e','4','1','Attitude of sensor');
9566 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Low oblique');
9567 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'High oblique');
9568 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Vertical');
9569 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9570 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9571 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','f','5','1','Cloud cover');
9572 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('0',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'0-09%');
9573 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('1',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'10-19%');
9574 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('2',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'20-29%');
9575 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('3',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'30-39%');
9576 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('4',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'40-49%');
9577 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('5',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'50-59%');
9578 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('6',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'60-69%');
9579 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('7',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'70-79%');
9580 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('8',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'80-89%');
9581 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('9',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'90-100%');
9582 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9583 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9584 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','g','6','1','Platform construction type');
9585 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Balloon');
9586 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Aircraft-low altitude');
9587 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Aircraft-medium altitude');
9588 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Aircraft-high altitude');
9589 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Manned spacecraft');
9590 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unmanned spacecraft');
9591 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Land-based remote-sensing device');
9592 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Water surface-based remote-sensing device');
9593 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Submersible remote-sensing device');
9594 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9595 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9596 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9597 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','h','7','1','Platform use category');
9598 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Meteorological');
9599 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Surface observing');
9600 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Space observing');
9601 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed uses');
9602 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9603 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9604 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9605 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','i','8','1','Sensor type');
9606 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Active');
9607 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Passive');
9608 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9609 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9610 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('r','j','9','2','Data type');
9611 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('aa',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Visible light');
9612 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('da',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Near infrared');
9613 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('db',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Middle infrared');
9614 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('dc',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Far infrared');
9615 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('dd',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Thermal infrared');
9616 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('de',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Shortwave infrared (SWIR)');
9617 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('df',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Reflective infrared');
9618 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('dv',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Combinations');
9619 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('dz',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other infrared data');
9620 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ga',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sidelooking airborne radar (SLAR)');
9621 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gb',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Synthetic aperture radar (SAR-single frequency)');
9622 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gc',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'SAR-multi-frequency (multichannel)');
9623 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gd',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'SAR-like polarization');
9624 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ge',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'SAR-cross polarization');
9625 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gf',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Infometric SAR');
9626 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gg',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Polarmetric SAR');
9627 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gu',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Passive microwave mapping');
9628 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('gz',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other microwave data');
9629 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ja',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Far ultraviolet');
9630 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('jb',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Middle ultraviolet');
9631 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('jc',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Near ultraviolet');
9632 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('jv',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Ultraviolet combinations');
9633 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('jz',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other ultraviolet data');
9634 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ma',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multi-spectral, multidata');
9635 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('mb',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multi-temporal');
9636 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('mm',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Combination of various data types');
9637 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('nn',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9638 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pa',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sonar-water depth');
9639 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pb',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sonar-bottom topography images, sidescan');
9640 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pc',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sonar-bottom topography, near-surface');
9641 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pd',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sonar-bottom topography, near-bottom');
9642 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pe',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Seismic surveys');
9643 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('pz',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other acoustical data');
9644 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ra',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Gravity anomales (general)');
9645 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('rb',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Free-air');
9646 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('rc',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Bouger');
9647 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('rd',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Isostatic');
9648 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('sa',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic field');
9649 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('ta',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Radiometric surveys');
9650 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('uu',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9651 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('zz',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9652
9653 -- Sound Recording
9654 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('s','Sound Recording');
9655 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','b','1','1','SMD');
9656 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound disc');
9657 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Cylinder');
9658 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound cartridge');
9659 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound-track film');
9660 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Roll');
9661 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound cassette');
9662 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('t',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound-tape reel');
9663 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9664 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('w',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Wire recording');
9665 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9666 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','d','3','1','Speed');
9667 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 rpm');
9668 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'33 1/3 rpm');
9669 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'45 rpm');
9670 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'78 rpm');
9671 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 rpm');
9672 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1.4 mps');
9673 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'120 rpm');
9674 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'160 rpm');
9675 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'15/16 ips');
9676 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1 7/8 ips');
9677 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 3/4 ips');
9678 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'7 1/2 ips');
9679 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'15 ips');
9680 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'30 ips');
9681 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9682 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9683 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','e','4','1','Configuration of playback channels');
9684 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Monaural');
9685 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Quadraphonic');
9686 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stereophonic');
9687 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9688 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9689 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','f','5','1','Groove width or pitch');
9690 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Microgroove/fine');
9691 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9692 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Coarse/standard');
9693 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9694 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9695 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','g','6','1','Dimensions');
9696 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 in.');
9697 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'5 in.');
9698 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'7 in.');
9699 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'10 in.');
9700 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'12 in.');
9701 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 in.');
9702 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'4 3/4 in. (12 cm.)');
9703 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3 7/8 x 2 1/2 in.');
9704 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9705 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'5 1/4 x 3 7/8 in.');
9706 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'2 3/4 x 4 in.');
9707 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9708 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9709 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','h','7','1','Tape width');
9710 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('l',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1/8 in.');
9711 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1/4in.');
9712 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9713 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1/2 in.');
9714 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1 in.');
9715 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9716 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9717 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','i','8','1','Tape configuration ');
9718 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Full (1) track');
9719 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Half (2) track');
9720 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Quarter (4) track');
9721 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 track');
9722 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'12 track');
9723 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'16 track');
9724 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9725 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9726 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9727 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','m','12','1','Special playback');
9728 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'NAB standard');
9729 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'CCIR standard');
9730 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Dolby-B encoded, standard Dolby');
9731 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'dbx encoded');
9732 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Digital recording');
9733 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Dolby-A encoded');
9734 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Dolby-C encoded');
9735 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'CX encoded');
9736 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9737 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9738 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9739 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('s','n','13','1','Capture and storage');
9740 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Acoustical capture, direct storage');
9741 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Direct storage, not acoustical');
9742 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Digital storage');
9743 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Analog electrical storage');
9744 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9745 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9746
9747 -- Videorecording
9748 INSERT INTO config.marc21_physical_characteristic_type_map (ptype_key, label) VALUES ('v','Videorecording');
9749 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','b','1','1','SMD');
9750 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videocartridge');
9751 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videodisc');
9752 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videocassette');
9753 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videoreel');
9754 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unspecified');
9755 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9756 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','d','3','1','Color');
9757 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Black-and-white');
9758 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multicolored');
9759 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9760 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9761 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9762 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9763 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','e','4','1','Videorecording format');
9764 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Beta');
9765 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'VHS');
9766 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'U-matic');
9767 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'EIAJ');
9768 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Type C');
9769 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Quadruplex');
9770 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Laserdisc');
9771 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'CED');
9772 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Betacam');
9773 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('j',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Betacam SP');
9774 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Super-VHS');
9775 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'M-II');
9776 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'D-2');
9777 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 mm.');
9778 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Hi-8 mm.');
9779 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9780 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('v',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'DVD');
9781 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9782 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','f','5','1','Sound on medium or separate');
9783 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound on medium');
9784 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound separate from medium');
9785 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9786 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','g','6','1','Medium for sound');
9787 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical sound track on motion picture film');
9788 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('b',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic sound track on motion picture film');
9789 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('c',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cartridge');
9790 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('d',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Sound disc');
9791 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('e',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape on reel');
9792 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('f',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Magnetic audio tape in cassette');
9793 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('g',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Optical and magnetic sound track on motion picture film');
9794 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('h',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videotape');
9795 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('i',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Videodisc');
9796 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9797 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9798 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','h','7','1','Dimensions');
9799 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('a',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'8 mm.');
9800 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1/4 in.');
9801 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('o',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1/2 in.');
9802 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('p',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'1 in.');
9803 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'2 in.');
9804 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('r',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'3/4 in.');
9805 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9806 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9807 INSERT INTO config.marc21_physical_characteristic_subfield_map (ptype_key,subfield,start_pos,length,label) VALUES ('v','i','8','1','Configuration of playback channel');
9808 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('k',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Mixed');
9809 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('m',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Monaural');
9810 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('n',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Not applicable');
9811 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('q',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Multichannel, surround or quadraphonic');
9812 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('s',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Stereophonic');
9813 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('u',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Unknown');
9814 INSERT INTO config.marc21_physical_characteristic_value_map (value,ptype_subfield,label) VALUES ('z',CURRVAL('config.marc21_physical_characteristic_subfield_map_id_seq'),'Other');
9815
9816 -- Fixed Field position data -- 0-based!
9817 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Alph', '006', 'SER', 16, 1, ' ');
9818 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Alph', '008', 'SER', 33, 1, ' ');
9819 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'BKS', 5, 1, ' ');
9820 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'COM', 5, 1, ' ');
9821 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'REC', 5, 1, ' ');
9822 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'SCO', 5, 1, ' ');
9823 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'SER', 5, 1, ' ');
9824 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '006', 'VIS', 5, 1, ' ');
9825 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'BKS', 22, 1, ' ');
9826 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'COM', 22, 1, ' ');
9827 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'REC', 22, 1, ' ');
9828 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'SCO', 22, 1, ' ');
9829 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'SER', 22, 1, ' ');
9830 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Audn', '008', 'VIS', 22, 1, ' ');
9831 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'BKS', 7, 1, 'm');
9832 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'COM', 7, 1, 'm');
9833 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'MAP', 7, 1, 'm');
9834 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'MIX', 7, 1, 'c');
9835 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'REC', 7, 1, 'm');
9836 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'SCO', 7, 1, 'm');
9837 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'SER', 7, 1, 's');
9838 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('BLvl', 'ldr', 'VIS', 7, 1, 'm');
9839 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Biog', '006', 'BKS', 17, 1, ' ');
9840 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Biog', '008', 'BKS', 34, 1, ' ');
9841 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Conf', '006', 'BKS', 7, 4, ' ');
9842 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Conf', '006', 'SER', 8, 3, ' ');
9843 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Conf', '008', 'BKS', 24, 4, ' ');
9844 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Conf', '008', 'SER', 25, 3, ' ');
9845 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'BKS', 8, 1, ' ');
9846 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'COM', 8, 1, ' ');
9847 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'MAP', 8, 1, ' ');
9848 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'MIX', 8, 1, ' ');
9849 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'REC', 8, 1, ' ');
9850 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'SCO', 8, 1, ' ');
9851 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'SER', 8, 1, ' ');
9852 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctrl', 'ldr', 'VIS', 8, 1, ' ');
9853 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'BKS', 15, 3, ' ');
9854 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'COM', 15, 3, ' ');
9855 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'MAP', 15, 3, ' ');
9856 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'MIX', 15, 3, ' ');
9857 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'REC', 15, 3, ' ');
9858 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'SCO', 15, 3, ' ');
9859 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'SER', 15, 3, ' ');
9860 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ctry', '008', 'VIS', 15, 3, ' ');
9861 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'BKS', 7, 4, ' ');
9862 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'COM', 7, 4, ' ');
9863 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'MAP', 7, 4, ' ');
9864 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'MIX', 7, 4, ' ');
9865 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'REC', 7, 4, ' ');
9866 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'SCO', 7, 4, ' ');
9867 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'SER', 7, 4, ' ');
9868 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date1', '008', 'VIS', 7, 4, ' ');
9869 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'BKS', 11, 4, ' ');
9870 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'COM', 11, 4, ' ');
9871 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'MAP', 11, 4, ' ');
9872 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'MIX', 11, 4, ' ');
9873 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'REC', 11, 4, ' ');
9874 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'SCO', 11, 4, ' ');
9875 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'SER', 11, 4, '9');
9876 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Date2', '008', 'VIS', 11, 4, ' ');
9877 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'BKS', 18, 1, ' ');
9878 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'COM', 18, 1, ' ');
9879 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'MAP', 18, 1, ' ');
9880 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'MIX', 18, 1, ' ');
9881 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'REC', 18, 1, ' ');
9882 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'SCO', 18, 1, ' ');
9883 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'SER', 18, 1, ' ');
9884 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Desc', 'ldr', 'VIS', 18, 1, ' ');
9885 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'BKS', 6, 1, ' ');
9886 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'COM', 6, 1, ' ');
9887 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'MAP', 6, 1, ' ');
9888 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'MIX', 6, 1, ' ');
9889 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'REC', 6, 1, ' ');
9890 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'SCO', 6, 1, ' ');
9891 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'SER', 6, 1, 'c');
9892 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('DtSt', '008', 'VIS', 6, 1, ' ');
9893 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'BKS', 17, 1, ' ');
9894 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'COM', 17, 1, ' ');
9895 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'MAP', 17, 1, ' ');
9896 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'MIX', 17, 1, ' ');
9897 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'REC', 17, 1, ' ');
9898 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'SCO', 17, 1, ' ');
9899 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'SER', 17, 1, ' ');
9900 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('ELvl', 'ldr', 'VIS', 17, 1, ' ');
9901 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Fest', '006', 'BKS', 13, 1, '0');
9902 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Fest', '008', 'BKS', 30, 1, '0');
9903 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'BKS', 6, 1, ' ');
9904 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'MAP', 12, 1, ' ');
9905 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'MIX', 6, 1, ' ');
9906 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'REC', 6, 1, ' ');
9907 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'SCO', 6, 1, ' ');
9908 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'SER', 6, 1, ' ');
9909 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '006', 'VIS', 12, 1, ' ');
9910 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'BKS', 23, 1, ' ');
9911 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'MAP', 29, 1, ' ');
9912 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'MIX', 23, 1, ' ');
9913 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'REC', 23, 1, ' ');
9914 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'SCO', 23, 1, ' ');
9915 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'SER', 23, 1, ' ');
9916 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Form', '008', 'VIS', 29, 1, ' ');
9917 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '006', 'BKS', 11, 1, ' ');
9918 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '006', 'COM', 11, 1, ' ');
9919 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '006', 'MAP', 11, 1, ' ');
9920 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '006', 'SER', 11, 1, ' ');
9921 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '006', 'VIS', 11, 1, ' ');
9922 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '008', 'BKS', 28, 1, ' ');
9923 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '008', 'COM', 28, 1, ' ');
9924 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '008', 'MAP', 28, 1, ' ');
9925 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '008', 'SER', 28, 1, ' ');
9926 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('GPub', '008', 'VIS', 28, 1, ' ');
9927 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ills', '006', 'BKS', 1, 4, ' ');
9928 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Ills', '008', 'BKS', 18, 4, ' ');
9929 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Indx', '006', 'BKS', 14, 1, '0');
9930 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Indx', '006', 'MAP', 14, 1, '0');
9931 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Indx', '008', 'BKS', 31, 1, '0');
9932 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Indx', '008', 'MAP', 31, 1, '0');
9933 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'BKS', 35, 3, ' ');
9934 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'COM', 35, 3, ' ');
9935 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'MAP', 35, 3, ' ');
9936 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'MIX', 35, 3, ' ');
9937 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'REC', 35, 3, ' ');
9938 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'SCO', 35, 3, ' ');
9939 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'SER', 35, 3, ' ');
9940 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Lang', '008', 'VIS', 35, 3, ' ');
9941 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('LitF', '006', 'BKS', 16, 1, '0');
9942 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('LitF', '008', 'BKS', 33, 1, '0');
9943 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'BKS', 38, 1, ' ');
9944 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'COM', 38, 1, ' ');
9945 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'MAP', 38, 1, ' ');
9946 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'MIX', 38, 1, ' ');
9947 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'REC', 38, 1, ' ');
9948 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'SCO', 38, 1, ' ');
9949 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'SER', 38, 1, ' ');
9950 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('MRec', '008', 'VIS', 38, 1, ' ');
9951 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('S/L', '006', 'SER', 17, 1, '0');
9952 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('S/L', '008', 'SER', 34, 1, '0');
9953 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('TMat', '006', 'VIS', 16, 1, ' ');
9954 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('TMat', '008', 'VIS', 33, 1, ' ');
9955 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'BKS', 6, 1, 'a');
9956 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'COM', 6, 1, 'm');
9957 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'MAP', 6, 1, 'e');
9958 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'MIX', 6, 1, 'p');
9959 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'REC', 6, 1, 'i');
9960 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'SCO', 6, 1, 'c');
9961 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'SER', 6, 1, 'a');
9962 INSERT INTO config.marc21_ff_pos_map (fixed_field, tag, rec_type,start_pos, length, default_val) VALUES ('Type', 'ldr', 'VIS', 6, 1, 'g');
9963
9964 CREATE OR REPLACE FUNCTION biblio.marc21_record_type( rid BIGINT ) RETURNS config.marc21_rec_type_map AS $func$
9965 DECLARE
9966         ldr         RECORD;
9967         tval        TEXT;
9968         tval_rec    RECORD;
9969         bval        TEXT;
9970         bval_rec    RECORD;
9971     retval      config.marc21_rec_type_map%ROWTYPE;
9972 BEGIN
9973     SELECT * INTO ldr FROM metabib.full_rec WHERE record = rid AND tag = 'LDR' LIMIT 1;
9974
9975     IF ldr.id IS NULL THEN
9976         SELECT * INTO retval FROM config.marc21_rec_type_map WHERE code = 'BKS';
9977         RETURN retval;
9978     END IF;
9979
9980     SELECT * INTO tval_rec FROM config.marc21_ff_pos_map WHERE fixed_field = 'Type' LIMIT 1; -- They're all the same
9981     SELECT * INTO bval_rec FROM config.marc21_ff_pos_map WHERE fixed_field = 'BLvl' LIMIT 1; -- They're all the same
9982
9983
9984     tval := SUBSTRING( ldr.value, tval_rec.start_pos + 1, tval_rec.length );
9985     bval := SUBSTRING( ldr.value, bval_rec.start_pos + 1, bval_rec.length );
9986
9987     -- RAISE NOTICE 'type %, blvl %, ldr %', tval, bval, ldr.value;
9988
9989     SELECT * INTO retval FROM config.marc21_rec_type_map WHERE type_val LIKE '%' || tval || '%' AND blvl_val LIKE '%' || bval || '%';
9990
9991
9992     IF retval.code IS NULL THEN
9993         SELECT * INTO retval FROM config.marc21_rec_type_map WHERE code = 'BKS';
9994     END IF;
9995
9996     RETURN retval;
9997 END;
9998 $func$ LANGUAGE PLPGSQL;
9999
10000 CREATE OR REPLACE FUNCTION biblio.marc21_extract_fixed_field( rid BIGINT, ff TEXT ) RETURNS TEXT AS $func$
10001 DECLARE
10002     rtype       TEXT;
10003     ff_pos      RECORD;
10004     tag_data    RECORD;
10005     val         TEXT;
10006 BEGIN
10007     rtype := (biblio.marc21_record_type( rid )).code;
10008     FOR ff_pos IN SELECT * FROM config.marc21_ff_pos_map WHERE fixed_field = ff AND rec_type = rtype ORDER BY tag DESC LOOP
10009         FOR tag_data IN SELECT * FROM metabib.full_rec WHERE tag = UPPER(ff_pos.tag) AND record = rid LOOP
10010             val := SUBSTRING( tag_data.value, ff_pos.start_pos + 1, ff_pos.length );
10011             RETURN val;
10012         END LOOP;
10013         val := REPEAT( ff_pos.default_val, ff_pos.length );
10014         RETURN val;
10015     END LOOP;
10016
10017     RETURN NULL;
10018 END;
10019 $func$ LANGUAGE PLPGSQL;
10020
10021 CREATE TYPE biblio.marc21_physical_characteristics AS ( id INT, record BIGINT, ptype TEXT, subfield INT, value INT );
10022 CREATE OR REPLACE FUNCTION biblio.marc21_physical_characteristics( rid BIGINT ) RETURNS SETOF biblio.marc21_physical_characteristics AS $func$
10023 DECLARE
10024     rowid   INT := 0;
10025     _007    RECORD;
10026     ptype   config.marc21_physical_characteristic_type_map%ROWTYPE;
10027     psf     config.marc21_physical_characteristic_subfield_map%ROWTYPE;
10028     pval    config.marc21_physical_characteristic_value_map%ROWTYPE;
10029     retval  biblio.marc21_physical_characteristics%ROWTYPE;
10030 BEGIN
10031
10032     SELECT * INTO _007 FROM metabib.full_rec WHERE record = rid AND tag = '007' LIMIT 1;
10033
10034     IF _007.id IS NOT NULL THEN
10035         SELECT * INTO ptype FROM config.marc21_physical_characteristic_type_map WHERE ptype_key = SUBSTRING( _007.value, 1, 1 );
10036
10037         IF ptype.ptype_key IS NOT NULL THEN
10038             FOR psf IN SELECT * FROM config.marc21_physical_characteristic_subfield_map WHERE ptype_key = ptype.ptype_key LOOP
10039                 SELECT * INTO pval FROM config.marc21_physical_characteristic_value_map WHERE ptype_subfield = psf.id AND value = SUBSTRING( _007.value, psf.start_pos + 1, psf.length );
10040
10041                 IF pval.id IS NOT NULL THEN
10042                     rowid := rowid + 1;
10043                     retval.id := rowid;
10044                     retval.record := rid;
10045                     retval.ptype := ptype.ptype_key;
10046                     retval.subfield := psf.id;
10047                     retval.value := pval.id;
10048                     RETURN NEXT retval;
10049                 END IF;
10050
10051             END LOOP;
10052         END IF;
10053     END IF;
10054
10055     RETURN;
10056 END;
10057 $func$ LANGUAGE PLPGSQL;
10058
10059 DROP VIEW IF EXISTS money.open_usr_circulation_summary;
10060 DROP VIEW IF EXISTS money.open_usr_summary;
10061 DROP VIEW IF EXISTS money.open_billable_xact_summary;
10062
10063 -- The view should supply defaults for numeric (amount) columns
10064 CREATE OR REPLACE VIEW money.billable_xact_summary AS
10065     SELECT  xact.id,
10066         xact.usr,
10067         xact.xact_start,
10068         xact.xact_finish,
10069         COALESCE(credit.amount, 0.0::numeric) AS total_paid,
10070         credit.payment_ts AS last_payment_ts,
10071         credit.note AS last_payment_note,
10072         credit.payment_type AS last_payment_type,
10073         COALESCE(debit.amount, 0.0::numeric) AS total_owed,
10074         debit.billing_ts AS last_billing_ts,
10075         debit.note AS last_billing_note,
10076         debit.billing_type AS last_billing_type,
10077         COALESCE(debit.amount, 0.0::numeric) - COALESCE(credit.amount, 0.0::numeric) AS balance_owed,
10078         p.relname AS xact_type
10079       FROM  money.billable_xact xact
10080         JOIN pg_class p ON xact.tableoid = p.oid
10081         LEFT JOIN (
10082             SELECT  billing.xact,
10083                 sum(billing.amount) AS amount,
10084                 max(billing.billing_ts) AS billing_ts,
10085                 last(billing.note) AS note,
10086                 last(billing.billing_type) AS billing_type
10087               FROM  money.billing
10088               WHERE billing.voided IS FALSE
10089               GROUP BY billing.xact
10090             ) debit ON xact.id = debit.xact
10091         LEFT JOIN (
10092             SELECT  payment_view.xact,
10093                 sum(payment_view.amount) AS amount,
10094                 max(payment_view.payment_ts) AS payment_ts,
10095                 last(payment_view.note) AS note,
10096                 last(payment_view.payment_type) AS payment_type
10097               FROM  money.payment_view
10098               WHERE payment_view.voided IS FALSE
10099               GROUP BY payment_view.xact
10100             ) credit ON xact.id = credit.xact
10101       ORDER BY debit.billing_ts, credit.payment_ts;
10102
10103 CREATE OR REPLACE VIEW money.open_billable_xact_summary AS 
10104     SELECT * FROM money.billable_xact_summary_location_view
10105     WHERE xact_finish IS NULL;
10106
10107 CREATE OR REPLACE VIEW money.open_usr_circulation_summary AS
10108     SELECT 
10109         usr,
10110         SUM(total_paid) AS total_paid,
10111         SUM(total_owed) AS total_owed,
10112         SUM(balance_owed) AS balance_owed
10113     FROM  money.materialized_billable_xact_summary
10114     WHERE xact_type = 'circulation' AND xact_finish IS NULL
10115     GROUP BY usr;
10116
10117 CREATE OR REPLACE VIEW money.usr_summary AS
10118     SELECT 
10119         usr, 
10120         sum(total_paid) AS total_paid, 
10121         sum(total_owed) AS total_owed, 
10122         sum(balance_owed) AS balance_owed
10123     FROM money.materialized_billable_xact_summary
10124     GROUP BY usr;
10125
10126 CREATE OR REPLACE VIEW money.open_usr_summary AS
10127     SELECT 
10128         usr, 
10129         sum(total_paid) AS total_paid, 
10130         sum(total_owed) AS total_owed, 
10131         sum(balance_owed) AS balance_owed
10132     FROM money.materialized_billable_xact_summary
10133     WHERE xact_finish IS NULL
10134     GROUP BY usr;
10135
10136 -- CREATE RULE protect_mfhd_delete AS ON DELETE TO serial.record_entry DO INSTEAD UPDATE serial.record_entry SET deleted = true WHERE old.id = serial.record_entry.id;
10137
10138 CREATE TABLE config.biblio_fingerprint (
10139         id                      SERIAL  PRIMARY KEY,
10140         name            TEXT    NOT NULL, 
10141         xpath           TEXT    NOT NULL,
10142     first_word  BOOL    NOT NULL DEFAULT FALSE,
10143         format          TEXT    NOT NULL DEFAULT 'marcxml'
10144 );
10145
10146 INSERT INTO config.biblio_fingerprint (name, xpath, format)
10147     VALUES (
10148         'Title',
10149         '//marc:datafield[@tag="700"]/marc:subfield[@code="t"]|' ||
10150             '//marc:datafield[@tag="240"]/marc:subfield[@code="a"]|' ||
10151             '//marc:datafield[@tag="242"]/marc:subfield[@code="a"]|' ||
10152             '//marc:datafield[@tag="246"]/marc:subfield[@code="a"]|' ||
10153             '//marc:datafield[@tag="245"]/marc:subfield[@code="a"]',
10154         'marcxml'
10155     );
10156
10157 INSERT INTO config.biblio_fingerprint (name, xpath, format, first_word)
10158     VALUES (
10159         'Author',
10160         '//marc:datafield[@tag="700" and ./*[@code="t"]]/marc:subfield[@code="a"]|'
10161             '//marc:datafield[@tag="100"]/marc:subfield[@code="a"]|'
10162             '//marc:datafield[@tag="110"]/marc:subfield[@code="a"]|'
10163             '//marc:datafield[@tag="111"]/marc:subfield[@code="a"]|'
10164             '//marc:datafield[@tag="260"]/marc:subfield[@code="b"]',
10165         'marcxml',
10166         TRUE
10167     );
10168
10169 CREATE OR REPLACE FUNCTION biblio.extract_quality ( marc TEXT, best_lang TEXT, best_type TEXT ) RETURNS INT AS $func$
10170 DECLARE
10171     qual        INT;
10172     ldr         TEXT;
10173     tval        TEXT;
10174     tval_rec    RECORD;
10175     bval        TEXT;
10176     bval_rec    RECORD;
10177     type_map    RECORD;
10178     ff_pos      RECORD;
10179     ff_tag_data TEXT;
10180 BEGIN
10181
10182     IF marc IS NULL OR marc = '' THEN
10183         RETURN NULL;
10184     END IF;
10185
10186     -- First, the count of tags
10187     qual := ARRAY_UPPER(oils_xpath('*[local-name()="datafield"]', marc), 1);
10188
10189     -- now go through a bunch of pain to get the record type
10190     IF best_type IS NOT NULL THEN
10191         ldr := (oils_xpath('//*[local-name()="leader"]/text()', marc))[1];
10192
10193         IF ldr IS NOT NULL THEN
10194             SELECT * INTO tval_rec FROM config.marc21_ff_pos_map WHERE fixed_field = 'Type' LIMIT 1; -- They're all the same
10195             SELECT * INTO bval_rec FROM config.marc21_ff_pos_map WHERE fixed_field = 'BLvl' LIMIT 1; -- They're all the same
10196
10197
10198             tval := SUBSTRING( ldr, tval_rec.start_pos + 1, tval_rec.length );
10199             bval := SUBSTRING( ldr, bval_rec.start_pos + 1, bval_rec.length );
10200
10201             -- RAISE NOTICE 'type %, blvl %, ldr %', tval, bval, ldr;
10202
10203             SELECT * INTO type_map FROM config.marc21_rec_type_map WHERE type_val LIKE '%' || tval || '%' AND blvl_val LIKE '%' || bval || '%';
10204
10205             IF type_map.code IS NOT NULL THEN
10206                 IF best_type = type_map.code THEN
10207                     qual := qual + qual / 2;
10208                 END IF;
10209
10210                 FOR ff_pos IN SELECT * FROM config.marc21_ff_pos_map WHERE fixed_field = 'Lang' AND rec_type = type_map.code ORDER BY tag DESC LOOP
10211                     ff_tag_data := SUBSTRING((oils_xpath('//*[@tag="' || ff_pos.tag || '"]/text()',marc))[1], ff_pos.start_pos + 1, ff_pos.length);
10212                     IF ff_tag_data = best_lang THEN
10213                             qual := qual + 100;
10214                     END IF;
10215                 END LOOP;
10216             END IF;
10217         END IF;
10218     END IF;
10219
10220     -- Now look for some quality metrics
10221     -- DCL record?
10222     IF ARRAY_UPPER(oils_xpath('//*[@tag="040"]/*[@code="a" and contains(.,"DLC")]', marc), 1) = 1 THEN
10223         qual := qual + 10;
10224     END IF;
10225
10226     -- From OCLC?
10227     IF (oils_xpath('//*[@tag="003"]/text()', marc))[1] ~* E'oclo?c' THEN
10228         qual := qual + 10;
10229     END IF;
10230
10231     RETURN qual;
10232
10233 END;
10234 $func$ LANGUAGE PLPGSQL;
10235
10236 CREATE OR REPLACE FUNCTION biblio.extract_fingerprint ( marc text ) RETURNS TEXT AS $func$
10237 DECLARE
10238     idx     config.biblio_fingerprint%ROWTYPE;
10239     xfrm        config.xml_transform%ROWTYPE;
10240     prev_xfrm   TEXT;
10241     transformed_xml TEXT;
10242     xml_node    TEXT;
10243     xml_node_list   TEXT[];
10244     raw_text    TEXT;
10245     output_text TEXT := '';
10246 BEGIN
10247
10248     IF marc IS NULL OR marc = '' THEN
10249         RETURN NULL;
10250     END IF;
10251
10252     -- Loop over the indexing entries
10253     FOR idx IN SELECT * FROM config.biblio_fingerprint ORDER BY format, id LOOP
10254
10255         SELECT INTO xfrm * from config.xml_transform WHERE name = idx.format;
10256
10257         -- See if we can skip the XSLT ... it's expensive
10258         IF prev_xfrm IS NULL OR prev_xfrm <> xfrm.name THEN
10259             -- Can't skip the transform
10260             IF xfrm.xslt <> '---' THEN
10261                 transformed_xml := oils_xslt_process(marc,xfrm.xslt);
10262             ELSE
10263                 transformed_xml := marc;
10264             END IF;
10265
10266             prev_xfrm := xfrm.name;
10267         END IF;
10268
10269         raw_text := COALESCE(
10270             naco_normalize(
10271                 ARRAY_TO_STRING(
10272                     oils_xpath(
10273                         '//text()',
10274                         (oils_xpath(
10275                             idx.xpath,
10276                             transformed_xml,
10277                             ARRAY[ARRAY[xfrm.prefix, xfrm.namespace_uri]]
10278                         ))[1]
10279                     ),
10280                     ''
10281                 )
10282             ),
10283             ''
10284         );
10285
10286         raw_text := REGEXP_REPLACE(raw_text, E'\\[.+?\\]', E'');
10287         raw_text := REGEXP_REPLACE(raw_text, E'\\mthe\\M|\\man?d?d\\M', E'', 'g'); -- arg! the pain!
10288
10289         IF idx.first_word IS TRUE THEN
10290             raw_text := REGEXP_REPLACE(raw_text, E'^(\\w+).*?$', E'\\1');
10291         END IF;
10292
10293         output_text := output_text || REGEXP_REPLACE(raw_text, E'\\s+', '', 'g');
10294
10295     END LOOP;
10296
10297     RETURN output_text;
10298
10299 END;
10300 $func$ LANGUAGE PLPGSQL;
10301
10302 -- BEFORE UPDATE OR INSERT trigger for biblio.record_entry
10303 CREATE OR REPLACE FUNCTION biblio.fingerprint_trigger () RETURNS TRIGGER AS $func$
10304 BEGIN
10305
10306     -- For TG_ARGV, first param is language (like 'eng'), second is record type (like 'BKS')
10307
10308     IF NEW.deleted IS TRUE THEN -- we don't much care, then, do we?
10309         RETURN NEW;
10310     END IF;
10311
10312     NEW.fingerprint := biblio.extract_fingerprint(NEW.marc);
10313     NEW.quality := biblio.extract_quality(NEW.marc, TG_ARGV[0], TG_ARGV[1]);
10314
10315     RETURN NEW;
10316
10317 END;
10318 $func$ LANGUAGE PLPGSQL;
10319
10320 CREATE TABLE config.internal_flag (
10321     name    TEXT    PRIMARY KEY,
10322     value   TEXT,
10323     enabled BOOL    NOT NULL DEFAULT FALSE
10324 );
10325 INSERT INTO config.internal_flag (name) VALUES ('ingest.metarecord_mapping.skip_on_insert');
10326 INSERT INTO config.internal_flag (name) VALUES ('ingest.reingest.force_on_same_marc');
10327 INSERT INTO config.internal_flag (name) VALUES ('ingest.reingest.skip_located_uri');
10328 INSERT INTO config.internal_flag (name) VALUES ('ingest.disable_located_uri');
10329 INSERT INTO config.internal_flag (name) VALUES ('ingest.disable_metabib_full_rec');
10330 INSERT INTO config.internal_flag (name) VALUES ('ingest.disable_metabib_rec_descriptor');
10331 INSERT INTO config.internal_flag (name) VALUES ('ingest.disable_metabib_field_entry');
10332 INSERT INTO config.internal_flag (name) VALUES ('ingest.disable_authority_linking');
10333
10334 CREATE TABLE authority.bib_linking (
10335     id          BIGSERIAL   PRIMARY KEY,
10336     bib         BIGINT      NOT NULL REFERENCES biblio.record_entry (id),
10337     authority   BIGINT      NOT NULL REFERENCES authority.record_entry (id)
10338 );
10339 CREATE INDEX authority_bl_bib_idx ON authority.bib_linking ( bib );
10340 CREATE UNIQUE INDEX authority_bl_bib_authority_once_idx ON authority.bib_linking ( authority, bib );
10341
10342 CREATE OR REPLACE FUNCTION public.remove_paren_substring( TEXT ) RETURNS TEXT AS $func$
10343     SELECT regexp_replace($1, $$\([^)]+\)$$, '', 'g');
10344 $func$ LANGUAGE SQL STRICT IMMUTABLE;
10345
10346 CREATE OR REPLACE FUNCTION biblio.map_authority_linking (bibid BIGINT, marc TEXT) RETURNS BIGINT AS $func$
10347     DELETE FROM authority.bib_linking WHERE bib = $1;
10348     INSERT INTO authority.bib_linking (bib, authority)
10349         SELECT  y.bib,
10350                 y.authority
10351           FROM (    SELECT  DISTINCT $1 AS bib,
10352                             BTRIM(remove_paren_substring(txt))::BIGINT AS authority
10353                       FROM  explode_array(oils_xpath('//*[@code="0"]/text()',$2)) x(txt)
10354                       WHERE BTRIM(remove_paren_substring(txt)) ~ $re$^\d+$$re$
10355                 ) y JOIN authority.record_entry r ON r.id = y.authority;
10356     SELECT $1;
10357 $func$ LANGUAGE SQL;
10358
10359 CREATE OR REPLACE FUNCTION metabib.reingest_metabib_rec_descriptor( bib_id BIGINT ) RETURNS VOID AS $func$
10360 BEGIN
10361     DELETE FROM metabib.rec_descriptor WHERE record = bib_id;
10362     INSERT INTO metabib.rec_descriptor (record, item_type, item_form, bib_level, control_type, enc_level, audience, lit_form, type_mat, cat_form, pub_status, item_lang, vr_format, date1, date2)
10363         SELECT  bib_id,
10364                 biblio.marc21_extract_fixed_field( bib_id, 'Type' ),
10365                 biblio.marc21_extract_fixed_field( bib_id, 'Form' ),
10366                 biblio.marc21_extract_fixed_field( bib_id, 'BLvl' ),
10367                 biblio.marc21_extract_fixed_field( bib_id, 'Ctrl' ),
10368                 biblio.marc21_extract_fixed_field( bib_id, 'ELvl' ),
10369                 biblio.marc21_extract_fixed_field( bib_id, 'Audn' ),
10370                 biblio.marc21_extract_fixed_field( bib_id, 'LitF' ),
10371                 biblio.marc21_extract_fixed_field( bib_id, 'TMat' ),
10372                 biblio.marc21_extract_fixed_field( bib_id, 'Desc' ),
10373                 biblio.marc21_extract_fixed_field( bib_id, 'DtSt' ),
10374                 biblio.marc21_extract_fixed_field( bib_id, 'Lang' ),
10375                 (   SELECT  v.value
10376                       FROM  biblio.marc21_physical_characteristics( bib_id) p
10377                             JOIN config.marc21_physical_characteristic_subfield_map s ON (s.id = p.subfield)
10378                             JOIN config.marc21_physical_characteristic_value_map v ON (v.id = p.value)
10379                       WHERE p.ptype = 'v' AND s.subfield = 'e'    ),
10380                 biblio.marc21_extract_fixed_field( bib_id, 'Date1'),
10381                 biblio.marc21_extract_fixed_field( bib_id, 'Date2');
10382
10383     RETURN;
10384 END;
10385 $func$ LANGUAGE PLPGSQL;
10386
10387 CREATE TABLE config.metabib_class (
10388     name    TEXT    PRIMARY KEY,
10389     label   TEXT    NOT NULL UNIQUE
10390 );
10391
10392 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'keyword', oils_i18n_gettext('keyword', 'Keyword', 'cmc', 'label') );
10393 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'title', oils_i18n_gettext('title', 'Title', 'cmc', 'label') );
10394 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'author', oils_i18n_gettext('author', 'Author', 'cmc', 'label') );
10395 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'subject', oils_i18n_gettext('subject', 'Subject', 'cmc', 'label') );
10396 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'series', oils_i18n_gettext('series', 'Series', 'cmc', 'label') );
10397
10398 CREATE TABLE metabib.facet_entry (
10399         id              BIGSERIAL       PRIMARY KEY,
10400         source          BIGINT          NOT NULL,
10401         field           INT             NOT NULL,
10402         value           TEXT            NOT NULL
10403 );
10404
10405 CREATE OR REPLACE FUNCTION metabib.reingest_metabib_field_entries( bib_id BIGINT ) RETURNS VOID AS $func$
10406 DECLARE
10407     fclass          RECORD;
10408     ind_data        metabib.field_entry_template%ROWTYPE;
10409 BEGIN
10410     FOR fclass IN SELECT * FROM config.metabib_class LOOP
10411         -- RAISE NOTICE 'Emptying out %', fclass.name;
10412         EXECUTE $$DELETE FROM metabib.$$ || fclass.name || $$_field_entry WHERE source = $$ || bib_id;
10413     END LOOP;
10414
10415     DELETE FROM metabib.facet_entry WHERE source = bib_id;
10416
10417     FOR ind_data IN SELECT * FROM biblio.extract_metabib_field_entry( bib_id ) LOOP
10418         IF ind_data.field < 0 THEN
10419             ind_data.field = -1 * ind_data.field;
10420             INSERT INTO metabib.facet_entry (field, source, value)
10421                 VALUES (ind_data.field, ind_data.source, ind_data.value);
10422         ELSE
10423             EXECUTE $$
10424                 INSERT INTO metabib.$$ || ind_data.field_class || $$_field_entry (field, source, value)
10425                     VALUES ($$ ||
10426                         quote_literal(ind_data.field) || $$, $$ ||
10427                         quote_literal(ind_data.source) || $$, $$ ||
10428                         quote_literal(ind_data.value) ||
10429                     $$);$$;
10430         END IF;
10431
10432     END LOOP;
10433
10434     RETURN;
10435 END;
10436 $func$ LANGUAGE PLPGSQL;
10437
10438 CREATE OR REPLACE FUNCTION biblio.extract_located_uris( bib_id BIGINT, marcxml TEXT, editor_id INT ) RETURNS VOID AS $func$
10439 DECLARE
10440     uris            TEXT[];
10441     uri_xml         TEXT;
10442     uri_label       TEXT;
10443     uri_href        TEXT;
10444     uri_use         TEXT;
10445     uri_owner       TEXT;
10446     uri_owner_id    INT;
10447     uri_id          INT;
10448     uri_cn_id       INT;
10449     uri_map_id      INT;
10450 BEGIN
10451
10452     uris := oils_xpath('//*[@tag="856" and (@ind1="4" or @ind1="1") and (@ind2="0" or @ind2="1")]',marcxml);
10453     IF ARRAY_UPPER(uris,1) > 0 THEN
10454         FOR i IN 1 .. ARRAY_UPPER(uris, 1) LOOP
10455             -- First we pull info out of the 856
10456             uri_xml     := uris[i];
10457
10458             uri_href    := (oils_xpath('//*[@code="u"]/text()',uri_xml))[1];
10459             CONTINUE WHEN uri_href IS NULL;
10460
10461             uri_label   := (oils_xpath('//*[@code="y"]/text()|//*[@code="3"]/text()|//*[@code="u"]/text()',uri_xml))[1];
10462             CONTINUE WHEN uri_label IS NULL;
10463
10464             uri_owner   := (oils_xpath('//*[@code="9"]/text()|//*[@code="w"]/text()|//*[@code="n"]/text()',uri_xml))[1];
10465             CONTINUE WHEN uri_owner IS NULL;
10466
10467             uri_use     := (oils_xpath('//*[@code="z"]/text()|//*[@code="2"]/text()|//*[@code="n"]/text()',uri_xml))[1];
10468
10469             uri_owner := REGEXP_REPLACE(uri_owner, $re$^.*?\((\w+)\).*$$re$, E'\\1');
10470
10471             SELECT id INTO uri_owner_id FROM actor.org_unit WHERE shortname = uri_owner;
10472             CONTINUE WHEN NOT FOUND;
10473
10474             -- now we look for a matching uri
10475             SELECT id INTO uri_id FROM asset.uri WHERE label = uri_label AND href = uri_href AND use_restriction = uri_use AND active;
10476             IF NOT FOUND THEN -- create one
10477                 INSERT INTO asset.uri (label, href, use_restriction) VALUES (uri_label, uri_href, uri_use);
10478                 SELECT id INTO uri_id FROM asset.uri WHERE label = uri_label AND href = uri_href AND use_restriction = uri_use AND active;
10479             END IF;
10480
10481             -- we need a call number to link through
10482             SELECT id INTO uri_cn_id FROM asset.call_number WHERE owning_lib = uri_owner_id AND record = bib_id AND label = '##URI##' AND NOT deleted;
10483             IF NOT FOUND THEN
10484                 INSERT INTO asset.call_number (owning_lib, record, create_date, edit_date, creator, editor, label)
10485                     VALUES (uri_owner_id, bib_id, 'now', 'now', editor_id, editor_id, '##URI##');
10486                 SELECT id INTO uri_cn_id FROM asset.call_number WHERE owning_lib = uri_owner_id AND record = bib_id AND label = '##URI##' AND NOT deleted;
10487             END IF;
10488
10489             -- now, link them if they're not already
10490             SELECT id INTO uri_map_id FROM asset.uri_call_number_map WHERE call_number = uri_cn_id AND uri = uri_id;
10491             IF NOT FOUND THEN
10492                 INSERT INTO asset.uri_call_number_map (call_number, uri) VALUES (uri_cn_id, uri_id);
10493             END IF;
10494
10495         END LOOP;
10496     END IF;
10497
10498     RETURN;
10499 END;
10500 $func$ LANGUAGE PLPGSQL;
10501
10502 CREATE OR REPLACE FUNCTION metabib.remap_metarecord_for_bib( bib_id BIGINT, fp TEXT ) RETURNS BIGINT AS $func$
10503 DECLARE
10504     source_count    INT;
10505     old_mr          BIGINT;
10506     tmp_mr          metabib.metarecord%ROWTYPE;
10507     deleted_mrs     BIGINT[];
10508 BEGIN
10509
10510     DELETE FROM metabib.metarecord_source_map WHERE source = bib_id; -- Rid ourselves of the search-estimate-killing linkage
10511
10512     FOR tmp_mr IN SELECT  m.* FROM  metabib.metarecord m JOIN metabib.metarecord_source_map s ON (s.metarecord = m.id) WHERE s.source = bib_id LOOP
10513
10514         IF old_mr IS NULL AND fp = tmp_mr.fingerprint THEN -- Find the first fingerprint-matching
10515             old_mr := tmp_mr.id;
10516         ELSE
10517             SELECT COUNT(*) INTO source_count FROM metabib.metarecord_source_map WHERE metarecord = tmp_mr.id;
10518             IF source_count = 0 THEN -- No other records
10519                 deleted_mrs := ARRAY_APPEND(deleted_mrs, tmp_mr.id);
10520                 DELETE FROM metabib.metarecord WHERE id = tmp_mr.id;
10521             END IF;
10522         END IF;
10523
10524     END LOOP;
10525
10526     IF old_mr IS NULL THEN -- we found no suitable, preexisting MR based on old source maps
10527         SELECT id INTO old_mr FROM metabib.metarecord WHERE fingerprint = fp; -- is there one for our current fingerprint?
10528         IF old_mr IS NULL THEN -- nope, create one and grab its id
10529             INSERT INTO metabib.metarecord ( fingerprint, master_record ) VALUES ( fp, bib_id );
10530             SELECT id INTO old_mr FROM metabib.metarecord WHERE fingerprint = fp;
10531         ELSE -- indeed there is. update it with a null cache and recalcualated master record
10532             UPDATE  metabib.metarecord
10533               SET   mods = NULL,
10534                     master_record = ( SELECT id FROM biblio.record_entry WHERE fingerprint = fp ORDER BY quality DESC LIMIT 1)
10535               WHERE id = old_mr;
10536         END IF;
10537     ELSE -- there was one we already attached to, update its mods cache and master_record
10538         UPDATE  metabib.metarecord
10539           SET   mods = NULL,
10540                 master_record = ( SELECT id FROM biblio.record_entry WHERE fingerprint = fp ORDER BY quality DESC LIMIT 1)
10541           WHERE id = old_mr;
10542     END IF;
10543
10544     INSERT INTO metabib.metarecord_source_map (metarecord, source) VALUES (old_mr, bib_id); -- new source mapping
10545
10546     IF ARRAY_UPPER(deleted_mrs,1) > 0 THEN
10547         UPDATE action.hold_request SET target = old_mr WHERE target IN ( SELECT explode_array(deleted_mrs) ) AND hold_type = 'M'; -- if we had to delete any MRs above, make sure their holds are moved
10548     END IF;
10549
10550     RETURN old_mr;
10551
10552 END;
10553 $func$ LANGUAGE PLPGSQL;
10554
10555 CREATE OR REPLACE FUNCTION metabib.reingest_metabib_full_rec( bib_id BIGINT ) RETURNS VOID AS $func$
10556 BEGIN
10557     DELETE FROM metabib.real_full_rec WHERE record = bib_id;
10558     INSERT INTO metabib.real_full_rec (record, tag, ind1, ind2, subfield, value)
10559         SELECT record, tag, ind1, ind2, subfield, value FROM biblio.flatten_marc( bib_id );
10560
10561     RETURN;
10562 END;
10563 $func$ LANGUAGE PLPGSQL;
10564
10565 -- AFTER UPDATE OR INSERT trigger for biblio.record_entry
10566 CREATE OR REPLACE FUNCTION biblio.indexing_ingest_or_delete () RETURNS TRIGGER AS $func$
10567 BEGIN
10568
10569     IF NEW.deleted IS TRUE THEN -- If this bib is deleted
10570         DELETE FROM metabib.metarecord_source_map WHERE source = NEW.id; -- Rid ourselves of the search-estimate-killing linkage
10571         DELETE FROM authority.bib_linking WHERE bib = NEW.id; -- Avoid updating fields in bibs that are no longer visible
10572         RETURN NEW; -- and we're done
10573     END IF;
10574
10575     IF TG_OP = 'UPDATE' THEN -- re-ingest?
10576         PERFORM * FROM config.internal_flag WHERE name = 'ingest.reingest.force_on_same_marc' AND enabled;
10577
10578         IF NOT FOUND AND OLD.marc = NEW.marc THEN -- don't do anything if the MARC didn't change
10579             RETURN NEW;
10580         END IF;
10581     END IF;
10582
10583     -- Record authority linking
10584     PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_linking' AND enabled;
10585     IF NOT FOUND THEN
10586         PERFORM biblio.map_authority_linking( NEW.id, NEW.marc );
10587     END IF;
10588
10589     -- Flatten and insert the mfr data
10590     PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_metabib_full_rec' AND enabled;
10591     IF NOT FOUND THEN
10592         PERFORM metabib.reingest_metabib_full_rec(NEW.id);
10593         PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_metabib_rec_descriptor' AND enabled;
10594         IF NOT FOUND THEN
10595             PERFORM metabib.reingest_metabib_rec_descriptor(NEW.id);
10596         END IF;
10597     END IF;
10598
10599     -- Gather and insert the field entry data
10600     PERFORM metabib.reingest_metabib_field_entries(NEW.id);
10601
10602     -- Located URI magic
10603     IF TG_OP = 'INSERT' THEN
10604         PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_located_uri' AND enabled;
10605         IF NOT FOUND THEN
10606             PERFORM biblio.extract_located_uris( NEW.id, NEW.marc, NEW.editor );
10607         END IF;
10608     ELSE
10609         PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_located_uri' AND enabled;
10610         IF NOT FOUND THEN
10611             PERFORM biblio.extract_located_uris( NEW.id, NEW.marc, NEW.editor );
10612         END IF;
10613     END IF;
10614
10615     -- (re)map metarecord-bib linking
10616     IF TG_OP = 'INSERT' THEN -- if not deleted and performing an insert, check for the flag
10617         PERFORM * FROM config.internal_flag WHERE name = 'ingest.metarecord_mapping.skip_on_insert' AND enabled;
10618         IF NOT FOUND THEN
10619             PERFORM metabib.remap_metarecord_for_bib( NEW.id, NEW.fingerprint );
10620         END IF;
10621     ELSE -- we're doing an update, and we're not deleted, remap
10622         PERFORM metabib.remap_metarecord_for_bib( NEW.id, NEW.fingerprint );
10623     END IF;
10624
10625     RETURN NEW;
10626 END;
10627 $func$ LANGUAGE PLPGSQL;
10628
10629 CREATE TRIGGER fingerprint_tgr BEFORE INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.fingerprint_trigger ('eng','BKS');
10630 CREATE TRIGGER aaa_indexing_ingest_or_delete AFTER INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.indexing_ingest_or_delete ();
10631
10632 DROP TRIGGER IF EXISTS zzz_update_materialized_simple_rec_delete_tgr ON biblio.record_entry;
10633
10634 CREATE OR REPLACE FUNCTION oils_xpath_table ( key TEXT, document_field TEXT, relation_name TEXT, xpaths TEXT, criteria TEXT )
10635 RETURNS SETOF RECORD AS $func$
10636 DECLARE
10637     xpath_list  TEXT[];
10638     select_list TEXT[];
10639     where_list  TEXT[];
10640     q           TEXT;
10641     out_record  RECORD;
10642     empty_test  RECORD;
10643 BEGIN
10644     xpath_list := STRING_TO_ARRAY( xpaths, '|' );
10645
10646     select_list := ARRAY_APPEND( select_list, key || '::INT AS key' );
10647
10648     FOR i IN 1 .. ARRAY_UPPER(xpath_list,1) LOOP
10649         select_list := ARRAY_APPEND(
10650             select_list,
10651             $sel$
10652             EXPLODE_ARRAY(
10653                 COALESCE(
10654                     NULLIF(
10655                         oils_xpath(
10656                             $sel$ ||
10657                                 quote_literal(
10658                                     CASE
10659                                         WHEN xpath_list[i] ~ $re$/[^/[]*@[^/]+$$re$ OR xpath_list[i] ~ $re$text\(\)$$re$ THEN xpath_list[i]
10660                                         ELSE xpath_list[i] || '//text()'
10661                                     END
10662                                 ) ||
10663                             $sel$,
10664                             $sel$ || document_field || $sel$
10665                         ),
10666                        '{}'::TEXT[]
10667                     ),
10668                     '{NULL}'::TEXT[]
10669                 )
10670             ) AS c_$sel$ || i
10671         );
10672         where_list := ARRAY_APPEND(
10673             where_list,
10674             'c_' || i || ' IS NOT NULL'
10675         );
10676     END LOOP;
10677
10678     q := $q$
10679 SELECT * FROM (
10680     SELECT $q$ || ARRAY_TO_STRING( select_list, ', ' ) || $q$ FROM $q$ || relation_name || $q$ WHERE ($q$ || criteria || $q$)
10681 )x WHERE $q$ || ARRAY_TO_STRING( where_list, ' AND ' );
10682     -- RAISE NOTICE 'query: %', q;
10683
10684     FOR out_record IN EXECUTE q LOOP
10685         RETURN NEXT out_record;
10686     END LOOP;
10687
10688     RETURN;
10689 END;
10690 $func$ LANGUAGE PLPGSQL;
10691
10692 CREATE OR REPLACE FUNCTION vandelay.ingest_items ( import_id BIGINT, attr_def_id BIGINT ) RETURNS SETOF vandelay.import_item AS $$
10693 DECLARE
10694
10695     owning_lib      TEXT;
10696     circ_lib        TEXT;
10697     call_number     TEXT;
10698     copy_number     TEXT;
10699     status          TEXT;
10700     location        TEXT;
10701     circulate       TEXT;
10702     deposit         TEXT;
10703     deposit_amount  TEXT;
10704     ref             TEXT;
10705     holdable        TEXT;
10706     price           TEXT;
10707     barcode         TEXT;
10708     circ_modifier   TEXT;
10709     circ_as_type    TEXT;
10710     alert_message   TEXT;
10711     opac_visible    TEXT;
10712     pub_note        TEXT;
10713     priv_note       TEXT;
10714
10715     attr_def        RECORD;
10716     tmp_attr_set    RECORD;
10717     attr_set        vandelay.import_item%ROWTYPE;
10718
10719     xpath           TEXT;
10720
10721 BEGIN
10722
10723     SELECT * INTO attr_def FROM vandelay.import_item_attr_definition WHERE id = attr_def_id;
10724
10725     IF FOUND THEN
10726
10727         attr_set.definition := attr_def.id; 
10728     
10729         -- Build the combined XPath
10730     
10731         owning_lib :=
10732             CASE
10733                 WHEN attr_def.owning_lib IS NULL THEN 'null()'
10734                 WHEN LENGTH( attr_def.owning_lib ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.owning_lib || '"]'
10735                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.owning_lib
10736             END;
10737     
10738         circ_lib :=
10739             CASE
10740                 WHEN attr_def.circ_lib IS NULL THEN 'null()'
10741                 WHEN LENGTH( attr_def.circ_lib ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.circ_lib || '"]'
10742                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.circ_lib
10743             END;
10744     
10745         call_number :=
10746             CASE
10747                 WHEN attr_def.call_number IS NULL THEN 'null()'
10748                 WHEN LENGTH( attr_def.call_number ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.call_number || '"]'
10749                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.call_number
10750             END;
10751     
10752         copy_number :=
10753             CASE
10754                 WHEN attr_def.copy_number IS NULL THEN 'null()'
10755                 WHEN LENGTH( attr_def.copy_number ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.copy_number || '"]'
10756                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.copy_number
10757             END;
10758     
10759         status :=
10760             CASE
10761                 WHEN attr_def.status IS NULL THEN 'null()'
10762                 WHEN LENGTH( attr_def.status ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.status || '"]'
10763                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.status
10764             END;
10765     
10766         location :=
10767             CASE
10768                 WHEN attr_def.location IS NULL THEN 'null()'
10769                 WHEN LENGTH( attr_def.location ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.location || '"]'
10770                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.location
10771             END;
10772     
10773         circulate :=
10774             CASE
10775                 WHEN attr_def.circulate IS NULL THEN 'null()'
10776                 WHEN LENGTH( attr_def.circulate ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.circulate || '"]'
10777                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.circulate
10778             END;
10779     
10780         deposit :=
10781             CASE
10782                 WHEN attr_def.deposit IS NULL THEN 'null()'
10783                 WHEN LENGTH( attr_def.deposit ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.deposit || '"]'
10784                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.deposit
10785             END;
10786     
10787         deposit_amount :=
10788             CASE
10789                 WHEN attr_def.deposit_amount IS NULL THEN 'null()'
10790                 WHEN LENGTH( attr_def.deposit_amount ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.deposit_amount || '"]'
10791                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.deposit_amount
10792             END;
10793     
10794         ref :=
10795             CASE
10796                 WHEN attr_def.ref IS NULL THEN 'null()'
10797                 WHEN LENGTH( attr_def.ref ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.ref || '"]'
10798                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.ref
10799             END;
10800     
10801         holdable :=
10802             CASE
10803                 WHEN attr_def.holdable IS NULL THEN 'null()'
10804                 WHEN LENGTH( attr_def.holdable ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.holdable || '"]'
10805                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.holdable
10806             END;
10807     
10808         price :=
10809             CASE
10810                 WHEN attr_def.price IS NULL THEN 'null()'
10811                 WHEN LENGTH( attr_def.price ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.price || '"]'
10812                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.price
10813             END;
10814     
10815         barcode :=
10816             CASE
10817                 WHEN attr_def.barcode IS NULL THEN 'null()'
10818                 WHEN LENGTH( attr_def.barcode ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.barcode || '"]'
10819                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.barcode
10820             END;
10821     
10822         circ_modifier :=
10823             CASE
10824                 WHEN attr_def.circ_modifier IS NULL THEN 'null()'
10825                 WHEN LENGTH( attr_def.circ_modifier ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.circ_modifier || '"]'
10826                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.circ_modifier
10827             END;
10828     
10829         circ_as_type :=
10830             CASE
10831                 WHEN attr_def.circ_as_type IS NULL THEN 'null()'
10832                 WHEN LENGTH( attr_def.circ_as_type ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.circ_as_type || '"]'
10833                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.circ_as_type
10834             END;
10835     
10836         alert_message :=
10837             CASE
10838                 WHEN attr_def.alert_message IS NULL THEN 'null()'
10839                 WHEN LENGTH( attr_def.alert_message ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.alert_message || '"]'
10840                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.alert_message
10841             END;
10842     
10843         opac_visible :=
10844             CASE
10845                 WHEN attr_def.opac_visible IS NULL THEN 'null()'
10846                 WHEN LENGTH( attr_def.opac_visible ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.opac_visible || '"]'
10847                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.opac_visible
10848             END;
10849
10850         pub_note :=
10851             CASE
10852                 WHEN attr_def.pub_note IS NULL THEN 'null()'
10853                 WHEN LENGTH( attr_def.pub_note ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.pub_note || '"]'
10854                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.pub_note
10855             END;
10856         priv_note :=
10857             CASE
10858                 WHEN attr_def.priv_note IS NULL THEN 'null()'
10859                 WHEN LENGTH( attr_def.priv_note ) = 1 THEN '//*[@tag="' || attr_def.tag || '"]/*[@code="' || attr_def.priv_note || '"]'
10860                 ELSE '//*[@tag="' || attr_def.tag || '"]/*' || attr_def.priv_note
10861             END;
10862     
10863     
10864         xpath := 
10865             owning_lib      || '|' || 
10866             circ_lib        || '|' || 
10867             call_number     || '|' || 
10868             copy_number     || '|' || 
10869             status          || '|' || 
10870             location        || '|' || 
10871             circulate       || '|' || 
10872             deposit         || '|' || 
10873             deposit_amount  || '|' || 
10874             ref             || '|' || 
10875             holdable        || '|' || 
10876             price           || '|' || 
10877             barcode         || '|' || 
10878             circ_modifier   || '|' || 
10879             circ_as_type    || '|' || 
10880             alert_message   || '|' || 
10881             pub_note        || '|' || 
10882             priv_note       || '|' || 
10883             opac_visible;
10884
10885         -- RAISE NOTICE 'XPath: %', xpath;
10886         
10887         FOR tmp_attr_set IN
10888                 SELECT  *
10889                   FROM  oils_xpath_table( 'id', 'marc', 'vandelay.queued_bib_record', xpath, 'id = ' || import_id )
10890                             AS t( id INT, ol TEXT, clib TEXT, cn TEXT, cnum TEXT, cs TEXT, cl TEXT, circ TEXT,
10891                                   dep TEXT, dep_amount TEXT, r TEXT, hold TEXT, pr TEXT, bc TEXT, circ_mod TEXT,
10892                                   circ_as TEXT, amessage TEXT, note TEXT, pnote TEXT, opac_vis TEXT )
10893         LOOP
10894     
10895             tmp_attr_set.pr = REGEXP_REPLACE(tmp_attr_set.pr, E'[^0-9\\.]', '', 'g');
10896             tmp_attr_set.dep_amount = REGEXP_REPLACE(tmp_attr_set.dep_amount, E'[^0-9\\.]', '', 'g');
10897
10898             tmp_attr_set.pr := NULLIF( tmp_attr_set.pr, '' );
10899             tmp_attr_set.dep_amount := NULLIF( tmp_attr_set.dep_amount, '' );
10900     
10901             SELECT id INTO attr_set.owning_lib FROM actor.org_unit WHERE shortname = UPPER(tmp_attr_set.ol); -- INT
10902             SELECT id INTO attr_set.circ_lib FROM actor.org_unit WHERE shortname = UPPER(tmp_attr_set.clib); -- INT
10903             SELECT id INTO attr_set.status FROM config.copy_status WHERE LOWER(name) = LOWER(tmp_attr_set.cs); -- INT
10904     
10905             SELECT  id INTO attr_set.location
10906               FROM  asset.copy_location
10907               WHERE LOWER(name) = LOWER(tmp_attr_set.cl)
10908                     AND asset.copy_location.owning_lib = COALESCE(attr_set.owning_lib, attr_set.circ_lib); -- INT
10909     
10910             attr_set.circulate      :=
10911                 LOWER( SUBSTRING( tmp_attr_set.circ, 1, 1)) IN ('t','y','1')
10912                 OR LOWER(tmp_attr_set.circ) = 'circulating'; -- BOOL
10913
10914             attr_set.deposit        :=
10915                 LOWER( SUBSTRING( tmp_attr_set.dep, 1, 1 ) ) IN ('t','y','1')
10916                 OR LOWER(tmp_attr_set.dep) = 'deposit'; -- BOOL
10917
10918             attr_set.holdable       :=
10919                 LOWER( SUBSTRING( tmp_attr_set.hold, 1, 1 ) ) IN ('t','y','1')
10920                 OR LOWER(tmp_attr_set.hold) = 'holdable'; -- BOOL
10921
10922             attr_set.opac_visible   :=
10923                 LOWER( SUBSTRING( tmp_attr_set.opac_vis, 1, 1 ) ) IN ('t','y','1')
10924                 OR LOWER(tmp_attr_set.opac_vis) = 'visible'; -- BOOL
10925
10926             attr_set.ref            :=
10927                 LOWER( SUBSTRING( tmp_attr_set.r, 1, 1 ) ) IN ('t','y','1')
10928                 OR LOWER(tmp_attr_set.r) = 'reference'; -- BOOL
10929     
10930             attr_set.copy_number    := tmp_attr_set.cnum::INT; -- INT,
10931             attr_set.deposit_amount := tmp_attr_set.dep_amount::NUMERIC(6,2); -- NUMERIC(6,2),
10932             attr_set.price          := tmp_attr_set.pr::NUMERIC(8,2); -- NUMERIC(8,2),
10933     
10934             attr_set.call_number    := tmp_attr_set.cn; -- TEXT
10935             attr_set.barcode        := tmp_attr_set.bc; -- TEXT,
10936             attr_set.circ_modifier  := tmp_attr_set.circ_mod; -- TEXT,
10937             attr_set.circ_as_type   := tmp_attr_set.circ_as; -- TEXT,
10938             attr_set.alert_message  := tmp_attr_set.amessage; -- TEXT,
10939             attr_set.pub_note       := tmp_attr_set.note; -- TEXT,
10940             attr_set.priv_note      := tmp_attr_set.pnote; -- TEXT,
10941             attr_set.alert_message  := tmp_attr_set.amessage; -- TEXT,
10942     
10943             RETURN NEXT attr_set;
10944     
10945         END LOOP;
10946     
10947     END IF;
10948
10949     RETURN;
10950
10951 END;
10952 $$ LANGUAGE PLPGSQL;
10953
10954 CREATE OR REPLACE FUNCTION vandelay.ingest_bib_items ( ) RETURNS TRIGGER AS $func$
10955 DECLARE
10956     attr_def    BIGINT;
10957     item_data   vandelay.import_item%ROWTYPE;
10958 BEGIN
10959
10960     SELECT item_attr_def INTO attr_def FROM vandelay.bib_queue WHERE id = NEW.queue;
10961
10962     FOR item_data IN SELECT * FROM vandelay.ingest_items( NEW.id::BIGINT, attr_def ) LOOP
10963         INSERT INTO vandelay.import_item (
10964             record,
10965             definition,
10966             owning_lib,
10967             circ_lib,
10968             call_number,
10969             copy_number,
10970             status,
10971             location,
10972             circulate,
10973             deposit,
10974             deposit_amount,
10975             ref,
10976             holdable,
10977             price,
10978             barcode,
10979             circ_modifier,
10980             circ_as_type,
10981             alert_message,
10982             pub_note,
10983             priv_note,
10984             opac_visible
10985         ) VALUES (
10986             NEW.id,
10987             item_data.definition,
10988             item_data.owning_lib,
10989             item_data.circ_lib,
10990             item_data.call_number,
10991             item_data.copy_number,
10992             item_data.status,
10993             item_data.location,
10994             item_data.circulate,
10995             item_data.deposit,
10996             item_data.deposit_amount,
10997             item_data.ref,
10998             item_data.holdable,
10999             item_data.price,
11000             item_data.barcode,
11001             item_data.circ_modifier,
11002             item_data.circ_as_type,
11003             item_data.alert_message,
11004             item_data.pub_note,
11005             item_data.priv_note,
11006             item_data.opac_visible
11007         );
11008     END LOOP;
11009
11010     RETURN NULL;
11011 END;
11012 $func$ LANGUAGE PLPGSQL;
11013
11014 CREATE OR REPLACE FUNCTION acq.create_acq_seq     ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11015 BEGIN
11016     EXECUTE $$
11017         CREATE SEQUENCE acq.$$ || sch || $$_$$ || tbl || $$_pkey_seq;
11018     $$;
11019         RETURN TRUE;
11020 END;
11021 $creator$ LANGUAGE 'plpgsql';
11022
11023 CREATE OR REPLACE FUNCTION acq.create_acq_history ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11024 BEGIN
11025     EXECUTE $$
11026         CREATE TABLE acq.$$ || sch || $$_$$ || tbl || $$_history (
11027             audit_id    BIGINT                          PRIMARY KEY,
11028             audit_time  TIMESTAMP WITH TIME ZONE        NOT NULL,
11029             audit_action        TEXT                            NOT NULL,
11030             LIKE $$ || sch || $$.$$ || tbl || $$
11031         );
11032     $$;
11033         RETURN TRUE;
11034 END;
11035 $creator$ LANGUAGE 'plpgsql';
11036
11037 CREATE OR REPLACE FUNCTION acq.create_acq_func    ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11038 BEGIN
11039     EXECUTE $$
11040         CREATE OR REPLACE FUNCTION acq.audit_$$ || sch || $$_$$ || tbl || $$_func ()
11041         RETURNS TRIGGER AS $func$
11042         BEGIN
11043             INSERT INTO acq.$$ || sch || $$_$$ || tbl || $$_history
11044                 SELECT  nextval('acq.$$ || sch || $$_$$ || tbl || $$_pkey_seq'),
11045                     now(),
11046                     SUBSTR(TG_OP,1,1),
11047                     OLD.*;
11048             RETURN NULL;
11049         END;
11050         $func$ LANGUAGE 'plpgsql';
11051     $$;
11052         RETURN TRUE;
11053 END;
11054 $creator$ LANGUAGE 'plpgsql';
11055
11056 CREATE OR REPLACE FUNCTION acq.create_acq_update_trigger ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11057 BEGIN
11058     EXECUTE $$
11059         CREATE TRIGGER audit_$$ || sch || $$_$$ || tbl || $$_update_trigger
11060             AFTER UPDATE OR DELETE ON $$ || sch || $$.$$ || tbl || $$ FOR EACH ROW
11061             EXECUTE PROCEDURE acq.audit_$$ || sch || $$_$$ || tbl || $$_func ();
11062     $$;
11063         RETURN TRUE;
11064 END;
11065 $creator$ LANGUAGE 'plpgsql';
11066
11067 CREATE OR REPLACE FUNCTION acq.create_acq_lifecycle     ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11068 BEGIN
11069     EXECUTE $$
11070         CREATE OR REPLACE VIEW acq.$$ || sch || $$_$$ || tbl || $$_lifecycle AS
11071             SELECT      -1, now() as audit_time, '-' as audit_action, *
11072               FROM      $$ || sch || $$.$$ || tbl || $$
11073                 UNION ALL
11074             SELECT      *
11075               FROM      acq.$$ || sch || $$_$$ || tbl || $$_history;
11076     $$;
11077         RETURN TRUE;
11078 END;
11079 $creator$ LANGUAGE 'plpgsql';
11080
11081 -- The main event
11082
11083 CREATE OR REPLACE FUNCTION acq.create_acq_auditor ( sch TEXT, tbl TEXT ) RETURNS BOOL AS $creator$
11084 BEGIN
11085     PERFORM acq.create_acq_seq(sch, tbl);
11086     PERFORM acq.create_acq_history(sch, tbl);
11087     PERFORM acq.create_acq_func(sch, tbl);
11088     PERFORM acq.create_acq_update_trigger(sch, tbl);
11089     PERFORM acq.create_acq_lifecycle(sch, tbl);
11090     RETURN TRUE;
11091 END;
11092 $creator$ LANGUAGE 'plpgsql';
11093
11094 SELECT acq.create_acq_auditor ( 'acq', 'purchase_order' );
11095 CREATE INDEX acq_po_hist_id_idx            ON acq.acq_purchase_order_history( id );
11096
11097 SELECT acq.create_acq_auditor ( 'acq', 'lineitem' );
11098 CREATE INDEX acq_lineitem_hist_id_idx            ON acq.acq_lineitem_history( id );
11099
11100 CREATE OR REPLACE VIEW acq.fund_debit_total AS
11101     SELECT  fund.id AS fund,
11102             fund_debit.encumbrance AS encumbrance,
11103             SUM( COALESCE( fund_debit.amount, 0 ) ) AS amount
11104       FROM acq.fund AS fund
11105                         LEFT JOIN acq.fund_debit AS fund_debit
11106                                 ON ( fund.id = fund_debit.fund )
11107       GROUP BY 1,2;
11108
11109 CREATE TABLE acq.debit_attribution (
11110         id                     INT         NOT NULL PRIMARY KEY,
11111         fund_debit             INT         NOT NULL
11112                                            REFERENCES acq.fund_debit
11113                                            DEFERRABLE INITIALLY DEFERRED,
11114     debit_amount           NUMERIC     NOT NULL,
11115         funding_source_credit  INT         REFERENCES acq.funding_source_credit
11116                                            DEFERRABLE INITIALLY DEFERRED,
11117     credit_amount          NUMERIC
11118 );
11119
11120 CREATE INDEX acq_attribution_debit_idx
11121         ON acq.debit_attribution( fund_debit );
11122
11123 CREATE INDEX acq_attribution_credit_idx
11124         ON acq.debit_attribution( funding_source_credit );
11125
11126 CREATE OR REPLACE FUNCTION acq.attribute_debits() RETURNS VOID AS $$
11127 /*
11128 Function to attribute expenditures and encumbrances to funding source credits,
11129 and thereby to funding sources.
11130
11131 Read the debits in chonological order, attributing each one to one or
11132 more funding source credits.  Constraints:
11133
11134 1. Don't attribute more to a credit than the amount of the credit.
11135
11136 2. For a given fund, don't attribute more to a funding source than the
11137 source has allocated to that fund.
11138
11139 3. Attribute debits to credits with deadlines before attributing them to
11140 credits without deadlines.  Otherwise attribute to the earliest credits
11141 first, based on the deadline date when present, or on the effective date
11142 when there is no deadline.  Use funding_source_credit.id as a tie-breaker.
11143 This ordering is defined by an ORDER BY clause on the view
11144 acq.ordered_funding_source_credit.
11145
11146 Start by truncating the table acq.debit_attribution.  Then insert a row
11147 into that table for each attribution.  If a debit cannot be fully
11148 attributed, insert a row for the unattributable balance, with the 
11149 funding_source_credit and credit_amount columns NULL.
11150 */
11151 DECLARE
11152         curr_fund_source_bal RECORD;
11153         seqno                INT;     -- sequence num for credits applicable to a fund
11154         fund_credit          RECORD;  -- current row in temp t_fund_credit table
11155         fc                   RECORD;  -- used for loading t_fund_credit table
11156         sc                   RECORD;  -- used for loading t_fund_credit table
11157         --
11158         -- Used exclusively in the main loop:
11159         --
11160         deb                 RECORD;   -- current row from acq.fund_debit table
11161         curr_credit_bal     RECORD;   -- current row from temp t_credit table
11162         debit_balance       NUMERIC;  -- amount left to attribute for current debit
11163         conv_debit_balance  NUMERIC;  -- debit balance in currency of the fund
11164         attr_amount         NUMERIC;  -- amount being attributed, in currency of debit
11165         conv_attr_amount    NUMERIC;  -- amount being attributed, in currency of source
11166         conv_cred_balance   NUMERIC;  -- credit_balance in the currency of the fund
11167         conv_alloc_balance  NUMERIC;  -- allocated balance in the currency of the fund
11168         attrib_count        INT;      -- populates id of acq.debit_attribution
11169 BEGIN
11170         --
11171         -- Load a temporary table.  For each combination of fund and funding source,
11172         -- load an entry with the total amount allocated to that fund by that source.
11173         -- This sum may reflect transfers as well as original allocations.  We will
11174         -- reduce this balance whenever we attribute debits to it.
11175         --
11176         CREATE TEMP TABLE t_fund_source_bal
11177         ON COMMIT DROP AS
11178                 SELECT
11179                         fund AS fund,
11180                         funding_source AS source,
11181                         sum( amount ) AS balance
11182                 FROM
11183                         acq.fund_allocation
11184                 GROUP BY
11185                         fund,
11186                         funding_source
11187                 HAVING
11188                         sum( amount ) > 0;
11189         --
11190         CREATE INDEX t_fund_source_bal_idx
11191                 ON t_fund_source_bal( fund, source );
11192         -------------------------------------------------------------------------------
11193         --
11194         -- Load another temporary table.  For each fund, load zero or more
11195         -- funding source credits from which that fund can get money.
11196         --
11197         CREATE TEMP TABLE t_fund_credit (
11198                 fund        INT,
11199                 seq         INT,
11200                 credit      INT
11201         ) ON COMMIT DROP;
11202         --
11203         FOR fc IN
11204                 SELECT DISTINCT fund
11205                 FROM acq.fund_allocation
11206                 ORDER BY fund
11207         LOOP                  -- Loop over the funds
11208                 seqno := 1;
11209                 FOR sc IN
11210                         SELECT
11211                                 ofsc.id
11212                         FROM
11213                                 acq.ordered_funding_source_credit AS ofsc
11214                         WHERE
11215                                 ofsc.funding_source IN
11216                                 (
11217                                         SELECT funding_source
11218                                         FROM acq.fund_allocation
11219                                         WHERE fund = fc.fund
11220                                 )
11221                 ORDER BY
11222                     ofsc.sort_priority,
11223                     ofsc.sort_date,
11224                     ofsc.id
11225                 LOOP                        -- Add each credit to the list
11226                         INSERT INTO t_fund_credit (
11227                                 fund,
11228                                 seq,
11229                                 credit
11230                         ) VALUES (
11231                                 fc.fund,
11232                                 seqno,
11233                                 sc.id
11234                         );
11235                         --RAISE NOTICE 'Fund % credit %', fc.fund, sc.id;
11236                         seqno := seqno + 1;
11237                 END LOOP;     -- Loop over credits for a given fund
11238         END LOOP;         -- Loop over funds
11239         --
11240         CREATE INDEX t_fund_credit_idx
11241                 ON t_fund_credit( fund, seq );
11242         -------------------------------------------------------------------------------
11243         --
11244         -- Load yet another temporary table.  This one is a list of funding source
11245         -- credits, with their balances.  We shall reduce those balances as we
11246         -- attribute debits to them.
11247         --
11248         CREATE TEMP TABLE t_credit
11249         ON COMMIT DROP AS
11250         SELECT
11251             fsc.id AS credit,
11252             fsc.funding_source AS source,
11253             fsc.amount AS balance,
11254             fs.currency_type AS currency_type
11255         FROM
11256             acq.funding_source_credit AS fsc,
11257             acq.funding_source fs
11258         WHERE
11259             fsc.funding_source = fs.id
11260                         AND fsc.amount > 0;
11261         --
11262         CREATE INDEX t_credit_idx
11263                 ON t_credit( credit );
11264         --
11265         -------------------------------------------------------------------------------
11266         --
11267         -- Now that we have loaded the lookup tables: loop through the debits,
11268         -- attributing each one to one or more funding source credits.
11269         -- 
11270         truncate table acq.debit_attribution;
11271         --
11272         attrib_count := 0;
11273         FOR deb in
11274                 SELECT
11275                         fd.id,
11276                         fd.fund,
11277                         fd.amount,
11278                         f.currency_type,
11279                         fd.encumbrance
11280                 FROM
11281                         acq.fund_debit fd,
11282                         acq.fund f
11283                 WHERE
11284                         fd.fund = f.id
11285                 ORDER BY
11286                         fd.id
11287         LOOP
11288                 --RAISE NOTICE 'Debit %, fund %', deb.id, deb.fund;
11289                 --
11290                 debit_balance := deb.amount;
11291                 --
11292                 -- Loop over the funding source credits that are eligible
11293                 -- to pay for this debit
11294                 --
11295                 FOR fund_credit IN
11296                         SELECT
11297                                 credit
11298                         FROM
11299                                 t_fund_credit
11300                         WHERE
11301                                 fund = deb.fund
11302                         ORDER BY
11303                                 seq
11304                 LOOP
11305                         --RAISE NOTICE '   Examining credit %', fund_credit.credit;
11306                         --
11307                         -- Look up the balance for this credit.  If it's zero, then
11308                         -- it's not useful, so treat it as if you didn't find it.
11309                         -- (Actually there shouldn't be any zero balances in the table,
11310                         -- but we check just to make sure.)
11311                         --
11312                         SELECT *
11313                         INTO curr_credit_bal
11314                         FROM t_credit
11315                         WHERE
11316                                 credit = fund_credit.credit
11317                                 AND balance > 0;
11318                         --
11319                         IF curr_credit_bal IS NULL THEN
11320                                 --
11321                                 -- This credit is exhausted; try the next one.
11322                                 --
11323                                 CONTINUE;
11324                         END IF;
11325                         --
11326                         --
11327                         -- At this point we have an applicable credit with some money left.
11328                         -- Now see if the relevant funding_source has any money left.
11329                         --
11330                         -- Look up the balance of the allocation for this combination of
11331                         -- fund and source.  If you find such an entry, but it has a zero
11332                         -- balance, then it's not useful, so treat it as unfound.
11333                         -- (Actually there shouldn't be any zero balances in the table,
11334                         -- but we check just to make sure.)
11335                         --
11336                         SELECT *
11337                         INTO curr_fund_source_bal
11338                         FROM t_fund_source_bal
11339                         WHERE
11340                                 fund = deb.fund
11341                                 AND source = curr_credit_bal.source
11342                                 AND balance > 0;
11343                         --
11344                         IF curr_fund_source_bal IS NULL THEN
11345                                 --
11346                                 -- This fund/source doesn't exist or is already exhausted,
11347                                 -- so we can't use this credit.  Go on to the next one.
11348                                 --
11349                                 CONTINUE;
11350                         END IF;
11351                         --
11352                         -- Convert the available balances to the currency of the fund
11353                         --
11354                         conv_alloc_balance := curr_fund_source_bal.balance * acq.exchange_ratio(
11355                                 curr_credit_bal.currency_type, deb.currency_type );
11356                         conv_cred_balance := curr_credit_bal.balance * acq.exchange_ratio(
11357                                 curr_credit_bal.currency_type, deb.currency_type );
11358                         --
11359                         -- Determine how much we can attribute to this credit: the minimum
11360                         -- of the debit amount, the fund/source balance, and the
11361                         -- credit balance
11362                         --
11363                         --RAISE NOTICE '   deb bal %', debit_balance;
11364                         --RAISE NOTICE '      source % balance %', curr_credit_bal.source, conv_alloc_balance;
11365                         --RAISE NOTICE '      credit % balance %', curr_credit_bal.credit, conv_cred_balance;
11366                         --
11367                         conv_attr_amount := NULL;
11368                         attr_amount := debit_balance;
11369                         --
11370                         IF attr_amount > conv_alloc_balance THEN
11371                                 attr_amount := conv_alloc_balance;
11372                                 conv_attr_amount := curr_fund_source_bal.balance;
11373                         END IF;
11374                         IF attr_amount > conv_cred_balance THEN
11375                                 attr_amount := conv_cred_balance;
11376                                 conv_attr_amount := curr_credit_bal.balance;
11377                         END IF;
11378                         --
11379                         -- If we're attributing all of one of the balances, then that's how
11380                         -- much we will deduct from the balances, and we already captured
11381                         -- that amount above.  Otherwise we must convert the amount of the
11382                         -- attribution from the currency of the fund back to the currency of
11383                         -- the funding source.
11384                         --
11385                         IF conv_attr_amount IS NULL THEN
11386                                 conv_attr_amount := attr_amount * acq.exchange_ratio(
11387                                         deb.currency_type, curr_credit_bal.currency_type );
11388                         END IF;
11389                         --
11390                         -- Insert a row to record the attribution
11391                         --
11392                         attrib_count := attrib_count + 1;
11393                         INSERT INTO acq.debit_attribution (
11394                                 id,
11395                                 fund_debit,
11396                                 debit_amount,
11397                                 funding_source_credit,
11398                                 credit_amount
11399                         ) VALUES (
11400                                 attrib_count,
11401                                 deb.id,
11402                                 attr_amount,
11403                                 curr_credit_bal.credit,
11404                                 conv_attr_amount
11405                         );
11406                         --
11407                         -- Subtract the attributed amount from the various balances
11408                         --
11409                         debit_balance := debit_balance - attr_amount;
11410                         curr_fund_source_bal.balance := curr_fund_source_bal.balance - conv_attr_amount;
11411                         --
11412                         IF curr_fund_source_bal.balance <= 0 THEN
11413                                 --
11414                                 -- This allocation is exhausted.  Delete it so
11415                                 -- that we don't waste time looking at it again.
11416                                 --
11417                                 DELETE FROM t_fund_source_bal
11418                                 WHERE
11419                                         fund = curr_fund_source_bal.fund
11420                                         AND source = curr_fund_source_bal.source;
11421                         ELSE
11422                                 UPDATE t_fund_source_bal
11423                                 SET balance = balance - conv_attr_amount
11424                                 WHERE
11425                                         fund = curr_fund_source_bal.fund
11426                                         AND source = curr_fund_source_bal.source;
11427                         END IF;
11428                         --
11429                         IF curr_credit_bal.balance <= 0 THEN
11430                                 --
11431                                 -- This funding source credit is exhausted.  Delete it
11432                                 -- so that we don't waste time looking at it again.
11433                                 --
11434                                 --DELETE FROM t_credit
11435                                 --WHERE
11436                                 --      credit = curr_credit_bal.credit;
11437                                 --
11438                                 DELETE FROM t_fund_credit
11439                                 WHERE
11440                                         credit = curr_credit_bal.credit;
11441                         ELSE
11442                                 UPDATE t_credit
11443                                 SET balance = curr_credit_bal.balance
11444                                 WHERE
11445                                         credit = curr_credit_bal.credit;
11446                         END IF;
11447                         --
11448                         -- Are we done with this debit yet?
11449                         --
11450                         IF debit_balance <= 0 THEN
11451                                 EXIT;       -- We've fully attributed this debit; stop looking at credits.
11452                         END IF;
11453                 END LOOP;       -- End loop over credits
11454                 --
11455                 IF debit_balance <> 0 THEN
11456                         --
11457                         -- We weren't able to attribute this debit, or at least not
11458                         -- all of it.  Insert a row for the unattributed balance.
11459                         --
11460                         attrib_count := attrib_count + 1;
11461                         INSERT INTO acq.debit_attribution (
11462                                 id,
11463                                 fund_debit,
11464                                 debit_amount,
11465                                 funding_source_credit,
11466                                 credit_amount
11467                         ) VALUES (
11468                                 attrib_count,
11469                                 deb.id,
11470                                 debit_balance,
11471                                 NULL,
11472                                 NULL
11473                         );
11474                 END IF;
11475         END LOOP;   -- End of loop over debits
11476 END;
11477 $$ LANGUAGE 'plpgsql';
11478
11479 CREATE OR REPLACE FUNCTION extract_marc_field ( TEXT, BIGINT, TEXT, TEXT ) RETURNS TEXT AS $$
11480 DECLARE
11481     query TEXT;
11482     output TEXT;
11483 BEGIN
11484     query := $q$
11485         SELECT  regexp_replace(
11486                     oils_xpath_string(
11487                         $q$ || quote_literal($3) || $q$,
11488                         marc,
11489                         ' '
11490                     ),
11491                     $q$ || quote_literal($4) || $q$,
11492                     '',
11493                     'g')
11494           FROM  $q$ || $1 || $q$
11495           WHERE id = $q$ || $2;
11496
11497     EXECUTE query INTO output;
11498
11499     -- RAISE NOTICE 'query: %, output; %', query, output;
11500
11501     RETURN output;
11502 END;
11503 $$ LANGUAGE PLPGSQL IMMUTABLE;
11504
11505 CREATE OR REPLACE FUNCTION extract_marc_field ( TEXT, BIGINT, TEXT ) RETURNS TEXT AS $$
11506     SELECT extract_marc_field($1,$2,$3,'');
11507 $$ LANGUAGE SQL IMMUTABLE;
11508
11509 CREATE OR REPLACE FUNCTION asset.merge_record_assets( target_record BIGINT, source_record BIGINT ) RETURNS INT AS $func$
11510 DECLARE
11511     moved_objects INT := 0;
11512     source_cn     asset.call_number%ROWTYPE;
11513     target_cn     asset.call_number%ROWTYPE;
11514     metarec       metabib.metarecord%ROWTYPE;
11515     hold          action.hold_request%ROWTYPE;
11516     ser_rec       serial.record_entry%ROWTYPE;
11517     uri_count     INT := 0;
11518     counter       INT := 0;
11519     uri_datafield TEXT;
11520     uri_text      TEXT := '';
11521 BEGIN
11522
11523     -- move any 856 entries on records that have at least one MARC-mapped URI entry
11524     SELECT  INTO uri_count COUNT(*)
11525       FROM  asset.uri_call_number_map m
11526             JOIN asset.call_number cn ON (m.call_number = cn.id)
11527       WHERE cn.record = source_record;
11528
11529     IF uri_count > 0 THEN
11530
11531         SELECT  COUNT(*) INTO counter
11532           FROM  oils_xpath_table(
11533                     'id',
11534                     'marc',
11535                     'biblio.record_entry',
11536                     '//*[@tag="856"]',
11537                     'id=' || source_record
11538                 ) as t(i int,c text);
11539
11540         FOR i IN 1 .. counter LOOP
11541             SELECT  '<datafield xmlns="http://www.loc.gov/MARC21/slim"' ||
11542                         ' tag="856"' || 
11543                         ' ind1="' || FIRST(ind1) || '"'  || 
11544                         ' ind2="' || FIRST(ind2) || '">' || 
11545                         array_to_string(
11546                             array_accum(
11547                                 '<subfield code="' || subfield || '">' ||
11548                                 regexp_replace(
11549                                     regexp_replace(
11550                                         regexp_replace(data,'&','&amp;','g'),
11551                                         '>', '&gt;', 'g'
11552                                     ),
11553                                     '<', '&lt;', 'g'
11554                                 ) || '</subfield>'
11555                             ), ''
11556                         ) || '</datafield>' INTO uri_datafield
11557               FROM  oils_xpath_table(
11558                         'id',
11559                         'marc',
11560                         'biblio.record_entry',
11561                         '//*[@tag="856"][position()=' || i || ']/@ind1|' || 
11562                         '//*[@tag="856"][position()=' || i || ']/@ind2|' || 
11563                         '//*[@tag="856"][position()=' || i || ']/*/@code|' ||
11564                         '//*[@tag="856"][position()=' || i || ']/*[@code]',
11565                         'id=' || source_record
11566                     ) as t(id int,ind1 text, ind2 text,subfield text,data text);
11567
11568             uri_text := uri_text || uri_datafield;
11569         END LOOP;
11570
11571         IF uri_text <> '' THEN
11572             UPDATE  biblio.record_entry
11573               SET   marc = regexp_replace(marc,'(</[^>]*record>)', uri_text || E'\\1')
11574               WHERE id = target_record;
11575         END IF;
11576
11577     END IF;
11578
11579     -- Find and move metarecords to the target record
11580     SELECT  INTO metarec *
11581       FROM  metabib.metarecord
11582       WHERE master_record = source_record;
11583
11584     IF FOUND THEN
11585         UPDATE  metabib.metarecord
11586           SET   master_record = target_record,
11587             mods = NULL
11588           WHERE id = metarec.id;
11589
11590         moved_objects := moved_objects + 1;
11591     END IF;
11592
11593     -- Find call numbers attached to the source ...
11594     FOR source_cn IN SELECT * FROM asset.call_number WHERE record = source_record LOOP
11595
11596         SELECT  INTO target_cn *
11597           FROM  asset.call_number
11598           WHERE label = source_cn.label
11599             AND owning_lib = source_cn.owning_lib
11600             AND record = target_record;
11601
11602         -- ... and if there's a conflicting one on the target ...
11603         IF FOUND THEN
11604
11605             -- ... move the copies to that, and ...
11606             UPDATE  asset.copy
11607               SET   call_number = target_cn.id
11608               WHERE call_number = source_cn.id;
11609
11610             -- ... move V holds to the move-target call number
11611             FOR hold IN SELECT * FROM action.hold_request WHERE target = source_cn.id AND hold_type = 'V' LOOP
11612
11613                 UPDATE  action.hold_request
11614                   SET   target = target_cn.id
11615                   WHERE id = hold.id;
11616
11617                 moved_objects := moved_objects + 1;
11618             END LOOP;
11619
11620         -- ... if not ...
11621         ELSE
11622             -- ... just move the call number to the target record
11623             UPDATE  asset.call_number
11624               SET   record = target_record
11625               WHERE id = source_cn.id;
11626         END IF;
11627
11628         moved_objects := moved_objects + 1;
11629     END LOOP;
11630
11631     -- Find T holds targeting the source record ...
11632     FOR hold IN SELECT * FROM action.hold_request WHERE target = source_record AND hold_type = 'T' LOOP
11633
11634         -- ... and move them to the target record
11635         UPDATE  action.hold_request
11636           SET   target = target_record
11637           WHERE id = hold.id;
11638
11639         moved_objects := moved_objects + 1;
11640     END LOOP;
11641
11642     -- Find serial records targeting the source record ...
11643     FOR ser_rec IN SELECT * FROM serial.record_entry WHERE record = source_record LOOP
11644         -- ... and move them to the target record
11645         UPDATE  serial.record_entry
11646           SET   record = target_record
11647           WHERE id = ser_rec.id;
11648
11649         moved_objects := moved_objects + 1;
11650     END LOOP;
11651
11652     -- Finally, "delete" the source record
11653     DELETE FROM biblio.record_entry WHERE id = source_record;
11654
11655     -- That's all, folks!
11656     RETURN moved_objects;
11657 END;
11658 $func$ LANGUAGE plpgsql;
11659
11660 CREATE OR REPLACE FUNCTION acq.transfer_fund(
11661         old_fund   IN INT,
11662         old_amount IN NUMERIC,     -- in currency of old fund
11663         new_fund   IN INT,
11664         new_amount IN NUMERIC,     -- in currency of new fund
11665         user_id    IN INT,
11666         xfer_note  IN TEXT         -- to be recorded in acq.fund_transfer
11667         -- ,funding_source_in IN INT  -- if user wants to specify a funding source (see notes)
11668 ) RETURNS VOID AS $$
11669 /* -------------------------------------------------------------------------------
11670
11671 Function to transfer money from one fund to another.
11672
11673 A transfer is represented as a pair of entries in acq.fund_allocation, with a
11674 negative amount for the old (losing) fund and a positive amount for the new
11675 (gaining) fund.  In some cases there may be more than one such pair of entries
11676 in order to pull the money from different funding sources, or more specifically
11677 from different funding source credits.  For each such pair there is also an
11678 entry in acq.fund_transfer.
11679
11680 Since funding_source is a non-nullable column in acq.fund_allocation, we must
11681 choose a funding source for the transferred money to come from.  This choice
11682 must meet two constraints, so far as possible:
11683
11684 1. The amount transferred from a given funding source must not exceed the
11685 amount allocated to the old fund by the funding source.  To that end we
11686 compare the amount being transferred to the amount allocated.
11687
11688 2. We shouldn't transfer money that has already been spent or encumbered, as
11689 defined by the funding attribution process.  We attribute expenses to the
11690 oldest funding source credits first.  In order to avoid transferring that
11691 attributed money, we reverse the priority, transferring from the newest funding
11692 source credits first.  There can be no guarantee that this approach will
11693 avoid overcommitting a fund, but no other approach can do any better.
11694
11695 In this context the age of a funding source credit is defined by the
11696 deadline_date for credits with deadline_dates, and by the effective_date for
11697 credits without deadline_dates, with the proviso that credits with deadline_dates
11698 are all considered "older" than those without.
11699
11700 ----------
11701
11702 In the signature for this function, there is one last parameter commented out,
11703 named "funding_source_in".  Correspondingly, the WHERE clause for the query
11704 driving the main loop has an OR clause commented out, which references the
11705 funding_source_in parameter.
11706
11707 If these lines are uncommented, this function will allow the user optionally to
11708 restrict a fund transfer to a specified funding source.  If the source
11709 parameter is left NULL, then there will be no such restriction.
11710
11711 ------------------------------------------------------------------------------- */ 
11712 DECLARE
11713         same_currency      BOOLEAN;
11714         currency_ratio     NUMERIC;
11715         old_fund_currency  TEXT;
11716         old_remaining      NUMERIC;  -- in currency of old fund
11717         new_fund_currency  TEXT;
11718         new_fund_active    BOOLEAN;
11719         new_remaining      NUMERIC;  -- in currency of new fund
11720         curr_old_amt       NUMERIC;  -- in currency of old fund
11721         curr_new_amt       NUMERIC;  -- in currency of new fund
11722         source_addition    NUMERIC;  -- in currency of funding source
11723         source_deduction   NUMERIC;  -- in currency of funding source
11724         orig_allocated_amt NUMERIC;  -- in currency of funding source
11725         allocated_amt      NUMERIC;  -- in currency of fund
11726         source             RECORD;
11727 BEGIN
11728         --
11729         -- Sanity checks
11730         --
11731         IF old_fund IS NULL THEN
11732                 RAISE EXCEPTION 'acq.transfer_fund: old fund id is NULL';
11733         END IF;
11734         --
11735         IF old_amount IS NULL THEN
11736                 RAISE EXCEPTION 'acq.transfer_fund: amount to transfer is NULL';
11737         END IF;
11738         --
11739         -- The new fund and its amount must be both NULL or both not NULL.
11740         --
11741         IF new_fund IS NOT NULL AND new_amount IS NULL THEN
11742                 RAISE EXCEPTION 'acq.transfer_fund: amount to transfer to receiving fund is NULL';
11743         END IF;
11744         --
11745         IF new_fund IS NULL AND new_amount IS NOT NULL THEN
11746                 RAISE EXCEPTION 'acq.transfer_fund: receiving fund is NULL, its amount is not NULL';
11747         END IF;
11748         --
11749         IF user_id IS NULL THEN
11750                 RAISE EXCEPTION 'acq.transfer_fund: user id is NULL';
11751         END IF;
11752         --
11753         -- Initialize the amounts to be transferred, each denominated
11754         -- in the currency of its respective fund.  They will be
11755         -- reduced on each iteration of the loop.
11756         --
11757         old_remaining := old_amount;
11758         new_remaining := new_amount;
11759         --
11760         -- RAISE NOTICE 'Transferring % in fund % to % in fund %',
11761         --      old_amount, old_fund, new_amount, new_fund;
11762         --
11763         -- Get the currency types of the old and new funds.
11764         --
11765         SELECT
11766                 currency_type
11767         INTO
11768                 old_fund_currency
11769         FROM
11770                 acq.fund
11771         WHERE
11772                 id = old_fund;
11773         --
11774         IF old_fund_currency IS NULL THEN
11775                 RAISE EXCEPTION 'acq.transfer_fund: old fund id % is not defined', old_fund;
11776         END IF;
11777         --
11778         IF new_fund IS NOT NULL THEN
11779                 SELECT
11780                         currency_type,
11781                         active
11782                 INTO
11783                         new_fund_currency,
11784                         new_fund_active
11785                 FROM
11786                         acq.fund
11787                 WHERE
11788                         id = new_fund;
11789                 --
11790                 IF new_fund_currency IS NULL THEN
11791                         RAISE EXCEPTION 'acq.transfer_fund: new fund id % is not defined', new_fund;
11792                 ELSIF NOT new_fund_active THEN
11793                         --
11794                         -- No point in putting money into a fund from whence you can't spend it
11795                         --
11796                         RAISE EXCEPTION 'acq.transfer_fund: new fund id % is inactive', new_fund;
11797                 END IF;
11798                 --
11799                 IF new_amount = old_amount THEN
11800                         same_currency := true;
11801                         currency_ratio := 1;
11802                 ELSE
11803                         --
11804                         -- We'll have to translate currency between funds.  We presume that
11805                         -- the calling code has already applied an appropriate exchange rate,
11806                         -- so we'll apply the same conversion to each sub-transfer.
11807                         --
11808                         same_currency := false;
11809                         currency_ratio := new_amount / old_amount;
11810                 END IF;
11811         END IF;
11812         --
11813         -- Identify the funding source(s) from which we want to transfer the money.
11814         -- The principle is that we want to transfer the newest money first, because
11815         -- we spend the oldest money first.  The priority for spending is defined
11816         -- by a sort of the view acq.ordered_funding_source_credit.
11817         --
11818         FOR source in
11819                 SELECT
11820                         ofsc.id,
11821                         ofsc.funding_source,
11822                         ofsc.amount,
11823                         ofsc.amount * acq.exchange_ratio( fs.currency_type, old_fund_currency )
11824                                 AS converted_amt,
11825                         fs.currency_type
11826                 FROM
11827                         acq.ordered_funding_source_credit AS ofsc,
11828                         acq.funding_source fs
11829                 WHERE
11830                         ofsc.funding_source = fs.id
11831                         and ofsc.funding_source IN
11832                         (
11833                                 SELECT funding_source
11834                                 FROM acq.fund_allocation
11835                                 WHERE fund = old_fund
11836                         )
11837                         -- and
11838                         -- (
11839                         --      ofsc.funding_source = funding_source_in
11840                         --      OR funding_source_in IS NULL
11841                         -- )
11842                 ORDER BY
11843                         ofsc.sort_priority desc,
11844                         ofsc.sort_date desc,
11845                         ofsc.id desc
11846         LOOP
11847                 --
11848                 -- Determine how much money the old fund got from this funding source,
11849                 -- denominated in the currency types of the source and of the fund.
11850                 -- This result may reflect transfers from previous iterations.
11851                 --
11852                 SELECT
11853                         COALESCE( sum( amount ), 0 ),
11854                         COALESCE( sum( amount )
11855                                 * acq.exchange_ratio( source.currency_type, old_fund_currency ), 0 )
11856                 INTO
11857                         orig_allocated_amt,     -- in currency of the source
11858                         allocated_amt           -- in currency of the old fund
11859                 FROM
11860                         acq.fund_allocation
11861                 WHERE
11862                         fund = old_fund
11863                         and funding_source = source.funding_source;
11864                 --      
11865                 -- Determine how much to transfer from this credit, in the currency
11866                 -- of the fund.   Begin with the amount remaining to be attributed:
11867                 --
11868                 curr_old_amt := old_remaining;
11869                 --
11870                 -- Can't attribute more than was allocated from the fund:
11871                 --
11872                 IF curr_old_amt > allocated_amt THEN
11873                         curr_old_amt := allocated_amt;
11874                 END IF;
11875                 --
11876                 -- Can't attribute more than the amount of the current credit:
11877                 --
11878                 IF curr_old_amt > source.converted_amt THEN
11879                         curr_old_amt := source.converted_amt;
11880                 END IF;
11881                 --
11882                 curr_old_amt := trunc( curr_old_amt, 2 );
11883                 --
11884                 old_remaining := old_remaining - curr_old_amt;
11885                 --
11886                 -- Determine the amount to be deducted, if any,
11887                 -- from the old allocation.
11888                 --
11889                 IF old_remaining > 0 THEN
11890                         --
11891                         -- In this case we're using the whole allocation, so use that
11892                         -- amount directly instead of applying a currency translation
11893                         -- and thereby inviting round-off errors.
11894                         --
11895                         source_deduction := - orig_allocated_amt;
11896                 ELSE 
11897                         source_deduction := trunc(
11898                                 ( - curr_old_amt ) *
11899                                         acq.exchange_ratio( old_fund_currency, source.currency_type ),
11900                                 2 );
11901                 END IF;
11902                 --
11903                 IF source_deduction <> 0 THEN
11904                         --
11905                         -- Insert negative allocation for old fund in fund_allocation,
11906                         -- converted into the currency of the funding source
11907                         --
11908                         INSERT INTO acq.fund_allocation (
11909                                 funding_source,
11910                                 fund,
11911                                 amount,
11912                                 allocator,
11913                                 note
11914                         ) VALUES (
11915                                 source.funding_source,
11916                                 old_fund,
11917                                 source_deduction,
11918                                 user_id,
11919                                 'Transfer to fund ' || new_fund
11920                         );
11921                 END IF;
11922                 --
11923                 IF new_fund IS NOT NULL THEN
11924                         --
11925                         -- Determine how much to add to the new fund, in
11926                         -- its currency, and how much remains to be added:
11927                         --
11928                         IF same_currency THEN
11929                                 curr_new_amt := curr_old_amt;
11930                         ELSE
11931                                 IF old_remaining = 0 THEN
11932                                         --
11933                                         -- This is the last iteration, so nothing should be left
11934                                         --
11935                                         curr_new_amt := new_remaining;
11936                                         new_remaining := 0;
11937                                 ELSE
11938                                         curr_new_amt := trunc( curr_old_amt * currency_ratio, 2 );
11939                                         new_remaining := new_remaining - curr_new_amt;
11940                                 END IF;
11941                         END IF;
11942                         --
11943                         -- Determine how much to add, if any,
11944                         -- to the new fund's allocation.
11945                         --
11946                         IF old_remaining > 0 THEN
11947                                 --
11948                                 -- In this case we're using the whole allocation, so use that amount
11949                                 -- amount directly instead of applying a currency translation and
11950                                 -- thereby inviting round-off errors.
11951                                 --
11952                                 source_addition := orig_allocated_amt;
11953                         ELSIF source.currency_type = old_fund_currency THEN
11954                                 --
11955                                 -- In this case we don't need a round trip currency translation,
11956                                 -- thereby inviting round-off errors:
11957                                 --
11958                                 source_addition := curr_old_amt;
11959                         ELSE 
11960                                 source_addition := trunc(
11961                                         curr_new_amt *
11962                                                 acq.exchange_ratio( new_fund_currency, source.currency_type ),
11963                                         2 );
11964                         END IF;
11965                         --
11966                         IF source_addition <> 0 THEN
11967                                 --
11968                                 -- Insert positive allocation for new fund in fund_allocation,
11969                                 -- converted to the currency of the founding source
11970                                 --
11971                                 INSERT INTO acq.fund_allocation (
11972                                         funding_source,
11973                                         fund,
11974                                         amount,
11975                                         allocator,
11976                                         note
11977                                 ) VALUES (
11978                                         source.funding_source,
11979                                         new_fund,
11980                                         source_addition,
11981                                         user_id,
11982                                         'Transfer from fund ' || old_fund
11983                                 );
11984                         END IF;
11985                 END IF;
11986                 --
11987                 IF trunc( curr_old_amt, 2 ) <> 0
11988                 OR trunc( curr_new_amt, 2 ) <> 0 THEN
11989                         --
11990                         -- Insert row in fund_transfer, using amounts in the currency of the funds
11991                         --
11992                         INSERT INTO acq.fund_transfer (
11993                                 src_fund,
11994                                 src_amount,
11995                                 dest_fund,
11996                                 dest_amount,
11997                                 transfer_user,
11998                                 note,
11999                                 funding_source_credit
12000                         ) VALUES (
12001                                 old_fund,
12002                                 trunc( curr_old_amt, 2 ),
12003                                 new_fund,
12004                                 trunc( curr_new_amt, 2 ),
12005                                 user_id,
12006                                 xfer_note,
12007                                 source.id
12008                         );
12009                 END IF;
12010                 --
12011                 if old_remaining <= 0 THEN
12012                         EXIT;                   -- Nothing more to be transferred
12013                 END IF;
12014         END LOOP;
12015 END;
12016 $$ LANGUAGE plpgsql;
12017
12018 CREATE OR REPLACE FUNCTION acq.propagate_funds_by_org_unit(
12019         old_year INTEGER,
12020         user_id INTEGER,
12021         org_unit_id INTEGER
12022 ) RETURNS VOID AS $$
12023 DECLARE
12024 --
12025 new_id      INT;
12026 old_fund    RECORD;
12027 org_found   BOOLEAN;
12028 --
12029 BEGIN
12030         --
12031         -- Sanity checks
12032         --
12033         IF old_year IS NULL THEN
12034                 RAISE EXCEPTION 'Input year argument is NULL';
12035         ELSIF old_year NOT BETWEEN 2008 and 2200 THEN
12036                 RAISE EXCEPTION 'Input year is out of range';
12037         END IF;
12038         --
12039         IF user_id IS NULL THEN
12040                 RAISE EXCEPTION 'Input user id argument is NULL';
12041         END IF;
12042         --
12043         IF org_unit_id IS NULL THEN
12044                 RAISE EXCEPTION 'Org unit id argument is NULL';
12045         ELSE
12046                 SELECT TRUE INTO org_found
12047                 FROM actor.org_unit
12048                 WHERE id = org_unit_id;
12049                 --
12050                 IF org_found IS NULL THEN
12051                         RAISE EXCEPTION 'Org unit id is invalid';
12052                 END IF;
12053         END IF;
12054         --
12055         -- Loop over the applicable funds
12056         --
12057         FOR old_fund in SELECT * FROM acq.fund
12058         WHERE
12059                 year = old_year
12060                 AND propagate
12061                 AND org = org_unit_id
12062         LOOP
12063                 BEGIN
12064                         INSERT INTO acq.fund (
12065                                 org,
12066                                 name,
12067                                 year,
12068                                 currency_type,
12069                                 code,
12070                                 rollover,
12071                                 propagate,
12072                                 balance_warning_percent,
12073                                 balance_stop_percent
12074                         ) VALUES (
12075                                 old_fund.org,
12076                                 old_fund.name,
12077                                 old_year + 1,
12078                                 old_fund.currency_type,
12079                                 old_fund.code,
12080                                 old_fund.rollover,
12081                                 true,
12082                                 old_fund.balance_warning_percent,
12083                                 old_fund.balance_stop_percent
12084                         )
12085                         RETURNING id INTO new_id;
12086                 EXCEPTION
12087                         WHEN unique_violation THEN
12088                                 --RAISE NOTICE 'Fund % already propagated', old_fund.id;
12089                                 CONTINUE;
12090                 END;
12091                 --RAISE NOTICE 'Propagating fund % to fund %',
12092                 --      old_fund.code, new_id;
12093         END LOOP;
12094 END;
12095 $$ LANGUAGE plpgsql;
12096
12097 CREATE OR REPLACE FUNCTION acq.propagate_funds_by_org_tree(
12098         old_year INTEGER,
12099         user_id INTEGER,
12100         org_unit_id INTEGER
12101 ) RETURNS VOID AS $$
12102 DECLARE
12103 --
12104 new_id      INT;
12105 old_fund    RECORD;
12106 org_found   BOOLEAN;
12107 --
12108 BEGIN
12109         --
12110         -- Sanity checks
12111         --
12112         IF old_year IS NULL THEN
12113                 RAISE EXCEPTION 'Input year argument is NULL';
12114         ELSIF old_year NOT BETWEEN 2008 and 2200 THEN
12115                 RAISE EXCEPTION 'Input year is out of range';
12116         END IF;
12117         --
12118         IF user_id IS NULL THEN
12119                 RAISE EXCEPTION 'Input user id argument is NULL';
12120         END IF;
12121         --
12122         IF org_unit_id IS NULL THEN
12123                 RAISE EXCEPTION 'Org unit id argument is NULL';
12124         ELSE
12125                 SELECT TRUE INTO org_found
12126                 FROM actor.org_unit
12127                 WHERE id = org_unit_id;
12128                 --
12129                 IF org_found IS NULL THEN
12130                         RAISE EXCEPTION 'Org unit id is invalid';
12131                 END IF;
12132         END IF;
12133         --
12134         -- Loop over the applicable funds
12135         --
12136         FOR old_fund in SELECT * FROM acq.fund
12137         WHERE
12138                 year = old_year
12139                 AND propagate
12140                 AND org in (
12141                         SELECT id FROM actor.org_unit_descendants( org_unit_id )
12142                 )
12143         LOOP
12144                 BEGIN
12145                         INSERT INTO acq.fund (
12146                                 org,
12147                                 name,
12148                                 year,
12149                                 currency_type,
12150                                 code,
12151                                 rollover,
12152                                 propagate,
12153                                 balance_warning_percent,
12154                                 balance_stop_percent
12155                         ) VALUES (
12156                                 old_fund.org,
12157                                 old_fund.name,
12158                                 old_year + 1,
12159                                 old_fund.currency_type,
12160                                 old_fund.code,
12161                                 old_fund.rollover,
12162                                 true,
12163                                 old_fund.balance_warning_percent,
12164                                 old_fund.balance_stop_percent
12165                         )
12166                         RETURNING id INTO new_id;
12167                 EXCEPTION
12168                         WHEN unique_violation THEN
12169                                 --RAISE NOTICE 'Fund % already propagated', old_fund.id;
12170                                 CONTINUE;
12171                 END;
12172                 --RAISE NOTICE 'Propagating fund % to fund %',
12173                 --      old_fund.code, new_id;
12174         END LOOP;
12175 END;
12176 $$ LANGUAGE plpgsql;
12177
12178 CREATE OR REPLACE FUNCTION acq.rollover_funds_by_org_unit(
12179         old_year INTEGER,
12180         user_id INTEGER,
12181         org_unit_id INTEGER
12182 ) RETURNS VOID AS $$
12183 DECLARE
12184 --
12185 new_fund    INT;
12186 new_year    INT := old_year + 1;
12187 org_found   BOOL;
12188 xfer_amount NUMERIC;
12189 roll_fund   RECORD;
12190 deb         RECORD;
12191 detail      RECORD;
12192 --
12193 BEGIN
12194         --
12195         -- Sanity checks
12196         --
12197         IF old_year IS NULL THEN
12198                 RAISE EXCEPTION 'Input year argument is NULL';
12199     ELSIF old_year NOT BETWEEN 2008 and 2200 THEN
12200         RAISE EXCEPTION 'Input year is out of range';
12201         END IF;
12202         --
12203         IF user_id IS NULL THEN
12204                 RAISE EXCEPTION 'Input user id argument is NULL';
12205         END IF;
12206         --
12207         IF org_unit_id IS NULL THEN
12208                 RAISE EXCEPTION 'Org unit id argument is NULL';
12209         ELSE
12210                 --
12211                 -- Validate the org unit
12212                 --
12213                 SELECT TRUE
12214                 INTO org_found
12215                 FROM actor.org_unit
12216                 WHERE id = org_unit_id;
12217                 --
12218                 IF org_found IS NULL THEN
12219                         RAISE EXCEPTION 'Org unit id % is invalid', org_unit_id;
12220                 END IF;
12221         END IF;
12222         --
12223         -- Loop over the propagable funds to identify the details
12224         -- from the old fund plus the id of the new one, if it exists.
12225         --
12226         FOR roll_fund in
12227         SELECT
12228             oldf.id AS old_fund,
12229             oldf.org,
12230             oldf.name,
12231             oldf.currency_type,
12232             oldf.code,
12233                 oldf.rollover,
12234             newf.id AS new_fund_id
12235         FROM
12236         acq.fund AS oldf
12237         LEFT JOIN acq.fund AS newf
12238                 ON ( oldf.code = newf.code )
12239         WHERE
12240                     oldf.org = org_unit_id
12241                 and oldf.year = old_year
12242                 and oldf.propagate
12243         and newf.year = new_year
12244         LOOP
12245                 --RAISE NOTICE 'Processing fund %', roll_fund.old_fund;
12246                 --
12247                 IF roll_fund.new_fund_id IS NULL THEN
12248                         --
12249                         -- The old fund hasn't been propagated yet.  Propagate it now.
12250                         --
12251                         INSERT INTO acq.fund (
12252                                 org,
12253                                 name,
12254                                 year,
12255                                 currency_type,
12256                                 code,
12257                                 rollover,
12258                                 propagate,
12259                                 balance_warning_percent,
12260                                 balance_stop_percent
12261                         ) VALUES (
12262                                 roll_fund.org,
12263                                 roll_fund.name,
12264                                 new_year,
12265                                 roll_fund.currency_type,
12266                                 roll_fund.code,
12267                                 true,
12268                                 true,
12269                                 roll_fund.balance_warning_percent,
12270                                 roll_fund.balance_stop_percent
12271                         )
12272                         RETURNING id INTO new_fund;
12273                 ELSE
12274                         new_fund = roll_fund.new_fund_id;
12275                 END IF;
12276                 --
12277                 -- Determine the amount to transfer
12278                 --
12279                 SELECT amount
12280                 INTO xfer_amount
12281                 FROM acq.fund_spent_balance
12282                 WHERE fund = roll_fund.old_fund;
12283                 --
12284                 IF xfer_amount <> 0 THEN
12285                         IF roll_fund.rollover THEN
12286                                 --
12287                                 -- Transfer balance from old fund to new
12288                                 --
12289                                 --RAISE NOTICE 'Transferring % from fund % to %', xfer_amount, roll_fund.old_fund, new_fund;
12290                                 --
12291                                 PERFORM acq.transfer_fund(
12292                                         roll_fund.old_fund,
12293                                         xfer_amount,
12294                                         new_fund,
12295                                         xfer_amount,
12296                                         user_id,
12297                                         'Rollover'
12298                                 );
12299                         ELSE
12300                                 --
12301                                 -- Transfer balance from old fund to the void
12302                                 --
12303                                 -- RAISE NOTICE 'Transferring % from fund % to the void', xfer_amount, roll_fund.old_fund;
12304                                 --
12305                                 PERFORM acq.transfer_fund(
12306                                         roll_fund.old_fund,
12307                                         xfer_amount,
12308                                         NULL,
12309                                         NULL,
12310                                         user_id,
12311                                         'Rollover'
12312                                 );
12313                         END IF;
12314                 END IF;
12315                 --
12316                 IF roll_fund.rollover THEN
12317                         --
12318                         -- Move any lineitems from the old fund to the new one
12319                         -- where the associated debit is an encumbrance.
12320                         --
12321                         -- Any other tables tying expenditure details to funds should
12322                         -- receive similar treatment.  At this writing there are none.
12323                         --
12324                         UPDATE acq.lineitem_detail
12325                         SET fund = new_fund
12326                         WHERE
12327                         fund = roll_fund.old_fund -- this condition may be redundant
12328                         AND fund_debit in
12329                         (
12330                                 SELECT id
12331                                 FROM acq.fund_debit
12332                                 WHERE
12333                                 fund = roll_fund.old_fund
12334                                 AND encumbrance
12335                         );
12336                         --
12337                         -- Move encumbrance debits from the old fund to the new fund
12338                         --
12339                         UPDATE acq.fund_debit
12340                         SET fund = new_fund
12341                         wHERE
12342                                 fund = roll_fund.old_fund
12343                                 AND encumbrance;
12344                 END IF;
12345                 --
12346                 -- Mark old fund as inactive, now that we've closed it
12347                 --
12348                 UPDATE acq.fund
12349                 SET active = FALSE
12350                 WHERE id = roll_fund.old_fund;
12351         END LOOP;
12352 END;
12353 $$ LANGUAGE plpgsql;
12354
12355 CREATE OR REPLACE FUNCTION acq.rollover_funds_by_org_tree(
12356         old_year INTEGER,
12357         user_id INTEGER,
12358         org_unit_id INTEGER
12359 ) RETURNS VOID AS $$
12360 DECLARE
12361 --
12362 new_fund    INT;
12363 new_year    INT := old_year + 1;
12364 org_found   BOOL;
12365 xfer_amount NUMERIC;
12366 roll_fund   RECORD;
12367 deb         RECORD;
12368 detail      RECORD;
12369 --
12370 BEGIN
12371         --
12372         -- Sanity checks
12373         --
12374         IF old_year IS NULL THEN
12375                 RAISE EXCEPTION 'Input year argument is NULL';
12376     ELSIF old_year NOT BETWEEN 2008 and 2200 THEN
12377         RAISE EXCEPTION 'Input year is out of range';
12378         END IF;
12379         --
12380         IF user_id IS NULL THEN
12381                 RAISE EXCEPTION 'Input user id argument is NULL';
12382         END IF;
12383         --
12384         IF org_unit_id IS NULL THEN
12385                 RAISE EXCEPTION 'Org unit id argument is NULL';
12386         ELSE
12387                 --
12388                 -- Validate the org unit
12389                 --
12390                 SELECT TRUE
12391                 INTO org_found
12392                 FROM actor.org_unit
12393                 WHERE id = org_unit_id;
12394                 --
12395                 IF org_found IS NULL THEN
12396                         RAISE EXCEPTION 'Org unit id % is invalid', org_unit_id;
12397                 END IF;
12398         END IF;
12399         --
12400         -- Loop over the propagable funds to identify the details
12401         -- from the old fund plus the id of the new one, if it exists.
12402         --
12403         FOR roll_fund in
12404         SELECT
12405             oldf.id AS old_fund,
12406             oldf.org,
12407             oldf.name,
12408             oldf.currency_type,
12409             oldf.code,
12410                 oldf.rollover,
12411             newf.id AS new_fund_id
12412         FROM
12413         acq.fund AS oldf
12414         LEFT JOIN acq.fund AS newf
12415                 ON ( oldf.code = newf.code )
12416         WHERE
12417                     oldf.year = old_year
12418                 AND oldf.propagate
12419         AND newf.year = new_year
12420                 AND oldf.org in (
12421                         SELECT id FROM actor.org_unit_descendants( org_unit_id )
12422                 )
12423         LOOP
12424                 --RAISE NOTICE 'Processing fund %', roll_fund.old_fund;
12425                 --
12426                 IF roll_fund.new_fund_id IS NULL THEN
12427                         --
12428                         -- The old fund hasn't been propagated yet.  Propagate it now.
12429                         --
12430                         INSERT INTO acq.fund (
12431                                 org,
12432                                 name,
12433                                 year,
12434                                 currency_type,
12435                                 code,
12436                                 rollover,
12437                                 propagate,
12438                                 balance_warning_percent,
12439                                 balance_stop_percent
12440                         ) VALUES (
12441                                 roll_fund.org,
12442                                 roll_fund.name,
12443                                 new_year,
12444                                 roll_fund.currency_type,
12445                                 roll_fund.code,
12446                                 true,
12447                                 true,
12448                                 roll_fund.balance_warning_percent,
12449                                 roll_fund.balance_stop_percent
12450                         )
12451                         RETURNING id INTO new_fund;
12452                 ELSE
12453                         new_fund = roll_fund.new_fund_id;
12454                 END IF;
12455                 --
12456                 -- Determine the amount to transfer
12457                 --
12458                 SELECT amount
12459                 INTO xfer_amount
12460                 FROM acq.fund_spent_balance
12461                 WHERE fund = roll_fund.old_fund;
12462                 --
12463                 IF xfer_amount <> 0 THEN
12464                         IF roll_fund.rollover THEN
12465                                 --
12466                                 -- Transfer balance from old fund to new
12467                                 --
12468                                 --RAISE NOTICE 'Transferring % from fund % to %', xfer_amount, roll_fund.old_fund, new_fund;
12469                                 --
12470                                 PERFORM acq.transfer_fund(
12471                                         roll_fund.old_fund,
12472                                         xfer_amount,
12473                                         new_fund,
12474                                         xfer_amount,
12475                                         user_id,
12476                                         'Rollover'
12477                                 );
12478                         ELSE
12479                                 --
12480                                 -- Transfer balance from old fund to the void
12481                                 --
12482                                 -- RAISE NOTICE 'Transferring % from fund % to the void', xfer_amount, roll_fund.old_fund;
12483                                 --
12484                                 PERFORM acq.transfer_fund(
12485                                         roll_fund.old_fund,
12486                                         xfer_amount,
12487                                         NULL,
12488                                         NULL,
12489                                         user_id,
12490                                         'Rollover'
12491                                 );
12492                         END IF;
12493                 END IF;
12494                 --
12495                 IF roll_fund.rollover THEN
12496                         --
12497                         -- Move any lineitems from the old fund to the new one
12498                         -- where the associated debit is an encumbrance.
12499                         --
12500                         -- Any other tables tying expenditure details to funds should
12501                         -- receive similar treatment.  At this writing there are none.
12502                         --
12503                         UPDATE acq.lineitem_detail
12504                         SET fund = new_fund
12505                         WHERE
12506                         fund = roll_fund.old_fund -- this condition may be redundant
12507                         AND fund_debit in
12508                         (
12509                                 SELECT id
12510                                 FROM acq.fund_debit
12511                                 WHERE
12512                                 fund = roll_fund.old_fund
12513                                 AND encumbrance
12514                         );
12515                         --
12516                         -- Move encumbrance debits from the old fund to the new fund
12517                         --
12518                         UPDATE acq.fund_debit
12519                         SET fund = new_fund
12520                         wHERE
12521                                 fund = roll_fund.old_fund
12522                                 AND encumbrance;
12523                 END IF;
12524                 --
12525                 -- Mark old fund as inactive, now that we've closed it
12526                 --
12527                 UPDATE acq.fund
12528                 SET active = FALSE
12529                 WHERE id = roll_fund.old_fund;
12530         END LOOP;
12531 END;
12532 $$ LANGUAGE plpgsql;
12533
12534 CREATE OR REPLACE FUNCTION public.remove_commas( TEXT ) RETURNS TEXT AS $$
12535     SELECT regexp_replace($1, ',', '', 'g');
12536 $$ LANGUAGE SQL STRICT IMMUTABLE;
12537
12538 CREATE OR REPLACE FUNCTION public.remove_whitespace( TEXT ) RETURNS TEXT AS $$
12539     SELECT regexp_replace(normalize_space($1), E'\\s+', '', 'g');
12540 $$ LANGUAGE SQL STRICT IMMUTABLE;
12541
12542 CREATE TABLE acq.distribution_formula_application (
12543     id BIGSERIAL PRIMARY KEY,
12544     creator INT NOT NULL REFERENCES actor.usr(id) DEFERRABLE INITIALLY DEFERRED,
12545     create_time TIMESTAMP WITH TIME ZONE NOT NULL DEFAULT NOW(),
12546     formula INT NOT NULL
12547         REFERENCES acq.distribution_formula(id) DEFERRABLE INITIALLY DEFERRED,
12548     lineitem INT NOT NULL
12549         REFERENCES acq.lineitem( id )
12550                 ON DELETE CASCADE
12551                 DEFERRABLE INITIALLY DEFERRED
12552 );
12553
12554 CREATE INDEX acqdfa_df_idx
12555     ON acq.distribution_formula_application(formula);
12556 CREATE INDEX acqdfa_li_idx
12557     ON acq.distribution_formula_application(lineitem);
12558 CREATE INDEX acqdfa_creator_idx
12559     ON acq.distribution_formula_application(creator);
12560
12561 CREATE TABLE acq.user_request_type (
12562     id      SERIAL  PRIMARY KEY,
12563     label   TEXT    NOT NULL UNIQUE -- i18n-ize
12564 );
12565
12566 INSERT INTO acq.user_request_type (id,label) VALUES (1, oils_i18n_gettext('1', 'Books', 'aurt', 'label'));
12567 INSERT INTO acq.user_request_type (id,label) VALUES (2, oils_i18n_gettext('2', 'Journal/Magazine & Newspaper Articles', 'aurt', 'label'));
12568 INSERT INTO acq.user_request_type (id,label) VALUES (3, oils_i18n_gettext('3', 'Audiobooks', 'aurt', 'label'));
12569 INSERT INTO acq.user_request_type (id,label) VALUES (4, oils_i18n_gettext('4', 'Music', 'aurt', 'label'));
12570 INSERT INTO acq.user_request_type (id,label) VALUES (5, oils_i18n_gettext('5', 'DVDs', 'aurt', 'label'));
12571
12572 SELECT SETVAL('acq.user_request_type_id_seq'::TEXT, 6);
12573
12574 CREATE TABLE acq.cancel_reason (
12575         id            SERIAL            PRIMARY KEY,
12576         org_unit      INTEGER           NOT NULL REFERENCES actor.org_unit( id )
12577                                         DEFERRABLE INITIALLY DEFERRED,
12578         label         TEXT              NOT NULL,
12579         description   TEXT              NOT NULL,
12580         keep_debits   BOOL              NOT NULL DEFAULT FALSE,
12581         CONSTRAINT acq_cancel_reason_one_per_org_unit UNIQUE( org_unit, label )
12582 );
12583
12584 -- Reserve ids 1-999 for stock reasons
12585 -- Reserve ids 1000-1999 for EDI reasons
12586 -- 2000+ are available for staff to create
12587
12588 SELECT SETVAL('acq.cancel_reason_id_seq'::TEXT, 2000);
12589
12590 CREATE TABLE acq.user_request (
12591     id                  SERIAL  PRIMARY KEY,
12592     usr                 INT     NOT NULL REFERENCES actor.usr (id), -- requesting user
12593     hold                BOOL    NOT NULL DEFAULT TRUE,
12594
12595     pickup_lib          INT     NOT NULL REFERENCES actor.org_unit (id), -- pickup lib
12596     holdable_formats    TEXT,           -- nullable, for use in hold creation
12597     phone_notify        TEXT,
12598     email_notify        BOOL    NOT NULL DEFAULT TRUE,
12599     lineitem            INT     REFERENCES acq.lineitem (id) ON DELETE CASCADE,
12600     eg_bib              BIGINT  REFERENCES biblio.record_entry (id) ON DELETE CASCADE,
12601     request_date        TIMESTAMPTZ NOT NULL DEFAULT NOW(), -- when they requested it
12602     need_before         TIMESTAMPTZ,    -- don't create holds after this
12603     max_fee             TEXT,
12604
12605     request_type        INT     NOT NULL REFERENCES acq.user_request_type (id), 
12606     isxn                TEXT,
12607     title               TEXT,
12608     volume              TEXT,
12609     author              TEXT,
12610     article_title       TEXT,
12611     article_pages       TEXT,
12612     publisher           TEXT,
12613     location            TEXT,
12614     pubdate             TEXT,
12615     mentioned           TEXT,
12616     other_info          TEXT,
12617         cancel_reason       INT              REFERENCES acq.cancel_reason( id )
12618                                              DEFERRABLE INITIALLY DEFERRED
12619 );
12620
12621 CREATE TABLE acq.lineitem_alert_text (
12622         id               SERIAL         PRIMARY KEY,
12623         code             TEXT           UNIQUE NOT NULL,
12624         description      TEXT,
12625         owning_lib       INT            NOT NULL
12626                                         REFERENCES actor.org_unit(id)
12627                                         DEFERRABLE INITIALLY DEFERRED,
12628         CONSTRAINT alert_one_code_per_org UNIQUE (code, owning_lib)
12629 );
12630
12631 ALTER TABLE acq.lineitem_note
12632         ADD COLUMN alert_text    INT     REFERENCES acq.lineitem_alert_text(id)
12633                                          DEFERRABLE INITIALLY DEFERRED;
12634
12635 -- add ON DELETE CASCADE clause
12636
12637 ALTER TABLE acq.lineitem_note
12638         DROP CONSTRAINT lineitem_note_lineitem_fkey;
12639
12640 ALTER TABLE acq.lineitem_note
12641         ADD FOREIGN KEY (lineitem) REFERENCES acq.lineitem( id )
12642                 ON DELETE CASCADE
12643                 DEFERRABLE INITIALLY DEFERRED;
12644
12645 ALTER TABLE acq.lineitem_note
12646         ADD COLUMN vendor_public BOOLEAN NOT NULL DEFAULT FALSE;
12647
12648 CREATE TABLE acq.invoice_method (
12649     code    TEXT    PRIMARY KEY,
12650     name    TEXT    NOT NULL -- i18n-ize
12651 );
12652 INSERT INTO acq.invoice_method (code,name) VALUES ('EDI',oils_i18n_gettext('EDI', 'EDI', 'acqim', 'name'));
12653 INSERT INTO acq.invoice_method (code,name) VALUES ('PPR',oils_i18n_gettext('PPR', 'Paper', 'acqit', 'name'));
12654
12655 CREATE TABLE acq.invoice_payment_method (
12656         code      TEXT     PRIMARY KEY,
12657         name      TEXT     NOT NULL
12658 );
12659
12660 CREATE TABLE acq.invoice (
12661     id             SERIAL      PRIMARY KEY,
12662     receiver       INT         NOT NULL REFERENCES actor.org_unit (id),
12663     provider       INT         NOT NULL REFERENCES acq.provider (id),
12664     shipper        INT         NOT NULL REFERENCES acq.provider (id),
12665     recv_date      TIMESTAMPTZ NOT NULL DEFAULT NOW(),
12666     recv_method    TEXT        NOT NULL REFERENCES acq.invoice_method (code) DEFAULT 'EDI',
12667     inv_type       TEXT,       -- A "type" field is desired, but no idea what goes here
12668     inv_ident      TEXT        NOT NULL, -- vendor-supplied invoice id/number
12669         payment_auth   TEXT,
12670         payment_method TEXT        REFERENCES acq.invoice_payment_method (code)
12671                                    DEFERRABLE INITIALLY DEFERRED,
12672         note           TEXT,
12673     complete       BOOL        NOT NULL DEFAULT FALSE,
12674     CONSTRAINT inv_ident_once_per_provider UNIQUE(provider, inv_ident)
12675 );
12676
12677 CREATE TABLE acq.invoice_entry (
12678     id              SERIAL      PRIMARY KEY,
12679     invoice         INT         NOT NULL REFERENCES acq.invoice (id) ON DELETE CASCADE,
12680     purchase_order  INT         REFERENCES acq.purchase_order (id) ON UPDATE CASCADE ON DELETE SET NULL,
12681     lineitem        INT         REFERENCES acq.lineitem (id) ON UPDATE CASCADE ON DELETE SET NULL,
12682     inv_item_count  INT         NOT NULL, -- How many acqlids did they say they sent
12683     phys_item_count INT, -- and how many did staff count
12684     note            TEXT,
12685     billed_per_item BOOL,
12686     cost_billed     NUMERIC(8,2),
12687     actual_cost     NUMERIC(8,2),
12688         amount_paid     NUMERIC (8,2)
12689 );
12690
12691 CREATE TABLE acq.invoice_item_type (
12692     code    TEXT    PRIMARY KEY,
12693     name    TEXT    NOT NULL, -- i18n-ize
12694         prorate BOOL    NOT NULL DEFAULT FALSE
12695 );
12696
12697 INSERT INTO acq.invoice_item_type (code,name) VALUES ('TAX',oils_i18n_gettext('TAX', 'Tax', 'aiit', 'name'));
12698 INSERT INTO acq.invoice_item_type (code,name) VALUES ('PRO',oils_i18n_gettext('PRO', 'Processing Fee', 'aiit', 'name'));
12699 INSERT INTO acq.invoice_item_type (code,name) VALUES ('SHP',oils_i18n_gettext('SHP', 'Shipping Charge', 'aiit', 'name'));
12700 INSERT INTO acq.invoice_item_type (code,name) VALUES ('HND',oils_i18n_gettext('HND', 'Handling Charge', 'aiit', 'name'));
12701 INSERT INTO acq.invoice_item_type (code,name) VALUES ('ITM',oils_i18n_gettext('ITM', 'Non-library Item', 'aiit', 'name'));
12702 INSERT INTO acq.invoice_item_type (code,name) VALUES ('SUB',oils_i18n_gettext('SUB', 'Searial Subscription', 'aiit', 'name'));
12703
12704 CREATE TABLE acq.po_item (
12705         id              SERIAL      PRIMARY KEY,
12706         purchase_order  INT         REFERENCES acq.purchase_order (id)
12707                                     ON UPDATE CASCADE ON DELETE SET NULL
12708                                     DEFERRABLE INITIALLY DEFERRED,
12709         fund_debit      INT         REFERENCES acq.fund_debit (id)
12710                                     DEFERRABLE INITIALLY DEFERRED,
12711         inv_item_type   TEXT        NOT NULL
12712                                     REFERENCES acq.invoice_item_type (code)
12713                                     DEFERRABLE INITIALLY DEFERRED,
12714         title           TEXT,
12715         author          TEXT,
12716         note            TEXT,
12717         estimated_cost  NUMERIC(8,2),
12718         fund            INT         REFERENCES acq.fund (id)
12719                                     DEFERRABLE INITIALLY DEFERRED,
12720         target          BIGINT
12721 );
12722
12723 CREATE TABLE acq.invoice_item ( -- for invoice-only debits: taxes/fees/non-bib items/etc
12724     id              SERIAL      PRIMARY KEY,
12725     invoice         INT         NOT NULL REFERENCES acq.invoice (id) ON UPDATE CASCADE ON DELETE CASCADE,
12726     purchase_order  INT         REFERENCES acq.purchase_order (id) ON UPDATE CASCADE ON DELETE SET NULL,
12727     fund_debit      INT         REFERENCES acq.fund_debit (id),
12728     inv_item_type   TEXT        NOT NULL REFERENCES acq.invoice_item_type (code),
12729     title           TEXT,
12730     author          TEXT,
12731     note            TEXT,
12732     cost_billed     NUMERIC(8,2),
12733     actual_cost     NUMERIC(8,2),
12734     fund            INT         REFERENCES acq.fund (id)
12735                                 DEFERRABLE INITIALLY DEFERRED,
12736     amount_paid     NUMERIC (8,2),
12737     po_item         INT         REFERENCES acq.po_item (id)
12738                                 DEFERRABLE INITIALLY DEFERRED,
12739     target          BIGINT
12740 );
12741
12742 CREATE TABLE acq.edi_message (
12743     id               SERIAL          PRIMARY KEY,
12744     account          INTEGER         REFERENCES acq.edi_account(id)
12745                                      DEFERRABLE INITIALLY DEFERRED,
12746     remote_file      TEXT,
12747     create_time      TIMESTAMPTZ     NOT NULL DEFAULT now(),
12748     translate_time   TIMESTAMPTZ,
12749     process_time     TIMESTAMPTZ,
12750     error_time       TIMESTAMPTZ,
12751     status           TEXT            NOT NULL DEFAULT 'new'
12752                                      CONSTRAINT status_value CHECK
12753                                      ( status IN (
12754                                         'new',          -- needs to be translated
12755                                         'translated',   -- needs to be processed
12756                                         'trans_error',  -- error in translation step
12757                                         'processed',    -- needs to have remote_file deleted
12758                                         'proc_error',   -- error in processing step
12759                                         'delete_error', -- error in deletion
12760                                         'retry',        -- need to retry
12761                                         'complete'      -- done
12762                                      )),
12763     edi              TEXT,
12764     jedi             TEXT,
12765     error            TEXT,
12766     purchase_order   INT             REFERENCES acq.purchase_order
12767                                      DEFERRABLE INITIALLY DEFERRED,
12768     message_type     TEXT            NOT NULL CONSTRAINT valid_message_type
12769                                      CHECK ( message_type IN (
12770                                         'ORDERS',
12771                                         'ORDRSP',
12772                                         'INVOIC',
12773                                         'OSTENQ',
12774                                         'OSTRPT'
12775                                      ))
12776 );
12777
12778 ALTER TABLE actor.org_address ADD COLUMN san TEXT;
12779
12780 ALTER TABLE acq.provider_address
12781         ADD COLUMN fax_phone TEXT;
12782
12783 ALTER TABLE acq.provider_contact_address
12784         ADD COLUMN fax_phone TEXT;
12785
12786 CREATE TABLE acq.provider_note (
12787     id      SERIAL              PRIMARY KEY,
12788     provider    INT             NOT NULL REFERENCES acq.provider (id) DEFERRABLE INITIALLY DEFERRED,
12789     creator     INT             NOT NULL REFERENCES actor.usr (id) DEFERRABLE INITIALLY DEFERRED,
12790     editor      INT             NOT NULL REFERENCES actor.usr (id) DEFERRABLE INITIALLY DEFERRED,
12791     create_time TIMESTAMP WITH TIME ZONE    NOT NULL DEFAULT NOW(),
12792     edit_time   TIMESTAMP WITH TIME ZONE    NOT NULL DEFAULT NOW(),
12793     value       TEXT            NOT NULL
12794 );
12795 CREATE INDEX acq_pro_note_pro_idx      ON acq.provider_note ( provider );
12796 CREATE INDEX acq_pro_note_creator_idx  ON acq.provider_note ( creator );
12797 CREATE INDEX acq_pro_note_editor_idx   ON acq.provider_note ( editor );
12798
12799 -- For each fund: the total allocation from all sources, in the
12800 -- currency of the fund (or 0 if there are no allocations)
12801
12802 CREATE VIEW acq.all_fund_allocation_total AS
12803 SELECT
12804     f.id AS fund,
12805     COALESCE( SUM( a.amount * acq.exchange_ratio(
12806         s.currency_type, f.currency_type))::numeric(100,2), 0 )
12807     AS amount
12808 FROM
12809     acq.fund f
12810         LEFT JOIN acq.fund_allocation a
12811             ON a.fund = f.id
12812         LEFT JOIN acq.funding_source s
12813             ON a.funding_source = s.id
12814 GROUP BY
12815     f.id;
12816
12817 -- For every fund: the total encumbrances (or 0 if none),
12818 -- in the currency of the fund.
12819
12820 CREATE VIEW acq.all_fund_encumbrance_total AS
12821 SELECT
12822         f.id AS fund,
12823         COALESCE( encumb.amount, 0 ) AS amount
12824 FROM
12825         acq.fund AS f
12826                 LEFT JOIN (
12827                         SELECT
12828                                 fund,
12829                                 sum( amount ) AS amount
12830                         FROM
12831                                 acq.fund_debit
12832                         WHERE
12833                                 encumbrance
12834                         GROUP BY fund
12835                 ) AS encumb
12836                         ON f.id = encumb.fund;
12837
12838 -- For every fund: the total spent (or 0 if none),
12839 -- in the currency of the fund.
12840
12841 CREATE VIEW acq.all_fund_spent_total AS
12842 SELECT
12843     f.id AS fund,
12844     COALESCE( spent.amount, 0 ) AS amount
12845 FROM
12846     acq.fund AS f
12847         LEFT JOIN (
12848             SELECT
12849                 fund,
12850                 sum( amount ) AS amount
12851             FROM
12852                 acq.fund_debit
12853             WHERE
12854                 NOT encumbrance
12855             GROUP BY fund
12856         ) AS spent
12857             ON f.id = spent.fund;
12858
12859 -- For each fund: the amount not yet spent, in the currency
12860 -- of the fund.  May include encumbrances.
12861
12862 CREATE VIEW acq.all_fund_spent_balance AS
12863 SELECT
12864         c.fund,
12865         c.amount - d.amount AS amount
12866 FROM acq.all_fund_allocation_total c
12867     LEFT JOIN acq.all_fund_spent_total d USING (fund);
12868
12869 -- For each fund: the amount neither spent nor encumbered,
12870 -- in the currency of the fund
12871
12872 CREATE VIEW acq.all_fund_combined_balance AS
12873 SELECT
12874      a.fund,
12875      a.amount - COALESCE( c.amount, 0 ) AS amount
12876 FROM
12877      acq.all_fund_allocation_total a
12878         LEFT OUTER JOIN (
12879             SELECT
12880                 fund,
12881                 SUM( amount ) AS amount
12882             FROM
12883                 acq.fund_debit
12884             GROUP BY
12885                 fund
12886         ) AS c USING ( fund );
12887
12888 CREATE OR REPLACE FUNCTION actor.usr_merge(
12889         src_usr INT,
12890         dest_usr INT,
12891         del_addrs BOOLEAN,
12892         del_cards BOOLEAN,
12893         deactivate_cards BOOLEAN
12894 ) RETURNS VOID AS $$
12895 DECLARE
12896         suffix TEXT;
12897         bucket_row RECORD;
12898         picklist_row RECORD;
12899         queue_row RECORD;
12900         folder_row RECORD;
12901 BEGIN
12902
12903     -- do some initial cleanup 
12904     UPDATE actor.usr SET card = NULL WHERE id = src_usr;
12905     UPDATE actor.usr SET mailing_address = NULL WHERE id = src_usr;
12906     UPDATE actor.usr SET billing_address = NULL WHERE id = src_usr;
12907
12908     -- actor.*
12909     IF del_cards THEN
12910         DELETE FROM actor.card where usr = src_usr;
12911     ELSE
12912         IF deactivate_cards THEN
12913             UPDATE actor.card SET active = 'f' WHERE usr = src_usr;
12914         END IF;
12915         UPDATE actor.card SET usr = dest_usr WHERE usr = src_usr;
12916     END IF;
12917
12918
12919     IF del_addrs THEN
12920         DELETE FROM actor.usr_address WHERE usr = src_usr;
12921     ELSE
12922         UPDATE actor.usr_address SET usr = dest_usr WHERE usr = src_usr;
12923     END IF;
12924
12925     UPDATE actor.usr_note SET usr = dest_usr WHERE usr = src_usr;
12926     -- dupes are technically OK in actor.usr_standing_penalty, should manually delete them...
12927     UPDATE actor.usr_standing_penalty SET usr = dest_usr WHERE usr = src_usr;
12928     PERFORM actor.usr_merge_rows('actor.usr_org_unit_opt_in', 'usr', src_usr, dest_usr);
12929     PERFORM actor.usr_merge_rows('actor.usr_setting', 'usr', src_usr, dest_usr);
12930
12931     -- permission.*
12932     PERFORM actor.usr_merge_rows('permission.usr_perm_map', 'usr', src_usr, dest_usr);
12933     PERFORM actor.usr_merge_rows('permission.usr_object_perm_map', 'usr', src_usr, dest_usr);
12934     PERFORM actor.usr_merge_rows('permission.usr_grp_map', 'usr', src_usr, dest_usr);
12935     PERFORM actor.usr_merge_rows('permission.usr_work_ou_map', 'usr', src_usr, dest_usr);
12936
12937
12938     -- container.*
12939         
12940         -- For each *_bucket table: transfer every bucket belonging to src_usr
12941         -- into the custody of dest_usr.
12942         --
12943         -- In order to avoid colliding with an existing bucket owned by
12944         -- the destination user, append the source user's id (in parenthesese)
12945         -- to the name.  If you still get a collision, add successive
12946         -- spaces to the name and keep trying until you succeed.
12947         --
12948         FOR bucket_row in
12949                 SELECT id, name
12950                 FROM   container.biblio_record_entry_bucket
12951                 WHERE  owner = src_usr
12952         LOOP
12953                 suffix := ' (' || src_usr || ')';
12954                 LOOP
12955                         BEGIN
12956                                 UPDATE  container.biblio_record_entry_bucket
12957                                 SET     owner = dest_usr, name = name || suffix
12958                                 WHERE   id = bucket_row.id;
12959                         EXCEPTION WHEN unique_violation THEN
12960                                 suffix := suffix || ' ';
12961                                 CONTINUE;
12962                         END;
12963                         EXIT;
12964                 END LOOP;
12965         END LOOP;
12966
12967         FOR bucket_row in
12968                 SELECT id, name
12969                 FROM   container.call_number_bucket
12970                 WHERE  owner = src_usr
12971         LOOP
12972                 suffix := ' (' || src_usr || ')';
12973                 LOOP
12974                         BEGIN
12975                                 UPDATE  container.call_number_bucket
12976                                 SET     owner = dest_usr, name = name || suffix
12977                                 WHERE   id = bucket_row.id;
12978                         EXCEPTION WHEN unique_violation THEN
12979                                 suffix := suffix || ' ';
12980                                 CONTINUE;
12981                         END;
12982                         EXIT;
12983                 END LOOP;
12984         END LOOP;
12985
12986         FOR bucket_row in
12987                 SELECT id, name
12988                 FROM   container.copy_bucket
12989                 WHERE  owner = src_usr
12990         LOOP
12991                 suffix := ' (' || src_usr || ')';
12992                 LOOP
12993                         BEGIN
12994                                 UPDATE  container.copy_bucket
12995                                 SET     owner = dest_usr, name = name || suffix
12996                                 WHERE   id = bucket_row.id;
12997                         EXCEPTION WHEN unique_violation THEN
12998                                 suffix := suffix || ' ';
12999                                 CONTINUE;
13000                         END;
13001                         EXIT;
13002                 END LOOP;
13003         END LOOP;
13004
13005         FOR bucket_row in
13006                 SELECT id, name
13007                 FROM   container.user_bucket
13008                 WHERE  owner = src_usr
13009         LOOP
13010                 suffix := ' (' || src_usr || ')';
13011                 LOOP
13012                         BEGIN
13013                                 UPDATE  container.user_bucket
13014                                 SET     owner = dest_usr, name = name || suffix
13015                                 WHERE   id = bucket_row.id;
13016                         EXCEPTION WHEN unique_violation THEN
13017                                 suffix := suffix || ' ';
13018                                 CONTINUE;
13019                         END;
13020                         EXIT;
13021                 END LOOP;
13022         END LOOP;
13023
13024         UPDATE container.user_bucket_item SET target_user = dest_usr WHERE target_user = src_usr;
13025
13026     -- vandelay.*
13027         -- transfer queues the same way we transfer buckets (see above)
13028         FOR queue_row in
13029                 SELECT id, name
13030                 FROM   vandelay.queue
13031                 WHERE  owner = src_usr
13032         LOOP
13033                 suffix := ' (' || src_usr || ')';
13034                 LOOP
13035                         BEGIN
13036                                 UPDATE  vandelay.queue
13037                                 SET     owner = dest_usr, name = name || suffix
13038                                 WHERE   id = queue_row.id;
13039                         EXCEPTION WHEN unique_violation THEN
13040                                 suffix := suffix || ' ';
13041                                 CONTINUE;
13042                         END;
13043                         EXIT;
13044                 END LOOP;
13045         END LOOP;
13046
13047     -- money.*
13048     PERFORM actor.usr_merge_rows('money.collections_tracker', 'usr', src_usr, dest_usr);
13049     PERFORM actor.usr_merge_rows('money.collections_tracker', 'collector', src_usr, dest_usr);
13050     UPDATE money.billable_xact SET usr = dest_usr WHERE usr = src_usr;
13051     UPDATE money.billing SET voider = dest_usr WHERE voider = src_usr;
13052     UPDATE money.bnm_payment SET accepting_usr = dest_usr WHERE accepting_usr = src_usr;
13053
13054     -- action.*
13055     UPDATE action.circulation SET usr = dest_usr WHERE usr = src_usr;
13056     UPDATE action.circulation SET circ_staff = dest_usr WHERE circ_staff = src_usr;
13057     UPDATE action.circulation SET checkin_staff = dest_usr WHERE checkin_staff = src_usr;
13058
13059     UPDATE action.hold_request SET usr = dest_usr WHERE usr = src_usr;
13060     UPDATE action.hold_request SET fulfillment_staff = dest_usr WHERE fulfillment_staff = src_usr;
13061     UPDATE action.hold_request SET requestor = dest_usr WHERE requestor = src_usr;
13062     UPDATE action.hold_notification SET notify_staff = dest_usr WHERE notify_staff = src_usr;
13063
13064     UPDATE action.in_house_use SET staff = dest_usr WHERE staff = src_usr;
13065     UPDATE action.non_cataloged_circulation SET staff = dest_usr WHERE staff = src_usr;
13066     UPDATE action.non_cataloged_circulation SET patron = dest_usr WHERE patron = src_usr;
13067     UPDATE action.non_cat_in_house_use SET staff = dest_usr WHERE staff = src_usr;
13068     UPDATE action.survey_response SET usr = dest_usr WHERE usr = src_usr;
13069
13070     -- acq.*
13071     UPDATE acq.fund_allocation SET allocator = dest_usr WHERE allocator = src_usr;
13072     UPDATE acq.fund_transfer SET transfer_user = dest_usr WHERE transfer_user = src_usr;
13073
13074         -- transfer picklists the same way we transfer buckets (see above)
13075         FOR picklist_row in
13076                 SELECT id, name
13077                 FROM   acq.picklist
13078                 WHERE  owner = src_usr
13079         LOOP
13080                 suffix := ' (' || src_usr || ')';
13081                 LOOP
13082                         BEGIN
13083                                 UPDATE  acq.picklist
13084                                 SET     owner = dest_usr, name = name || suffix
13085                                 WHERE   id = picklist_row.id;
13086                         EXCEPTION WHEN unique_violation THEN
13087                                 suffix := suffix || ' ';
13088                                 CONTINUE;
13089                         END;
13090                         EXIT;
13091                 END LOOP;
13092         END LOOP;
13093
13094     UPDATE acq.purchase_order SET owner = dest_usr WHERE owner = src_usr;
13095     UPDATE acq.po_note SET creator = dest_usr WHERE creator = src_usr;
13096     UPDATE acq.po_note SET editor = dest_usr WHERE editor = src_usr;
13097         UPDATE acq.provider_note SET creator = dest_usr WHERE creator = src_usr;
13098         UPDATE acq.provider_note SET editor = dest_usr WHERE editor = src_usr;
13099     UPDATE acq.lineitem_note SET creator = dest_usr WHERE creator = src_usr;
13100     UPDATE acq.lineitem_note SET editor = dest_usr WHERE editor = src_usr;
13101     UPDATE acq.lineitem_usr_attr_definition SET usr = dest_usr WHERE usr = src_usr;
13102
13103     -- asset.*
13104     UPDATE asset.copy SET creator = dest_usr WHERE creator = src_usr;
13105     UPDATE asset.copy SET editor = dest_usr WHERE editor = src_usr;
13106     UPDATE asset.copy_note SET creator = dest_usr WHERE creator = src_usr;
13107     UPDATE asset.call_number SET creator = dest_usr WHERE creator = src_usr;
13108     UPDATE asset.call_number SET editor = dest_usr WHERE editor = src_usr;
13109     UPDATE asset.call_number_note SET creator = dest_usr WHERE creator = src_usr;
13110
13111     -- serial.*
13112     UPDATE serial.record_entry SET creator = dest_usr WHERE creator = src_usr;
13113     UPDATE serial.record_entry SET editor = dest_usr WHERE editor = src_usr;
13114
13115     -- reporter.*
13116     -- It's not uncommon to define the reporter schema in a replica 
13117     -- DB only, so don't assume these tables exist in the write DB.
13118     BEGIN
13119         UPDATE reporter.template SET owner = dest_usr WHERE owner = src_usr;
13120     EXCEPTION WHEN undefined_table THEN
13121         -- do nothing
13122     END;
13123     BEGIN
13124         UPDATE reporter.report SET owner = dest_usr WHERE owner = src_usr;
13125     EXCEPTION WHEN undefined_table THEN
13126         -- do nothing
13127     END;
13128     BEGIN
13129         UPDATE reporter.schedule SET runner = dest_usr WHERE runner = src_usr;
13130     EXCEPTION WHEN undefined_table THEN
13131         -- do nothing
13132     END;
13133     BEGIN
13134                 -- transfer folders the same way we transfer buckets (see above)
13135                 FOR folder_row in
13136                         SELECT id, name
13137                         FROM   reporter.template_folder
13138                         WHERE  owner = src_usr
13139                 LOOP
13140                         suffix := ' (' || src_usr || ')';
13141                         LOOP
13142                                 BEGIN
13143                                         UPDATE  reporter.template_folder
13144                                         SET     owner = dest_usr, name = name || suffix
13145                                         WHERE   id = folder_row.id;
13146                                 EXCEPTION WHEN unique_violation THEN
13147                                         suffix := suffix || ' ';
13148                                         CONTINUE;
13149                                 END;
13150                                 EXIT;
13151                         END LOOP;
13152                 END LOOP;
13153     EXCEPTION WHEN undefined_table THEN
13154         -- do nothing
13155     END;
13156     BEGIN
13157                 -- transfer folders the same way we transfer buckets (see above)
13158                 FOR folder_row in
13159                         SELECT id, name
13160                         FROM   reporter.report_folder
13161                         WHERE  owner = src_usr
13162                 LOOP
13163                         suffix := ' (' || src_usr || ')';
13164                         LOOP
13165                                 BEGIN
13166                                         UPDATE  reporter.report_folder
13167                                         SET     owner = dest_usr, name = name || suffix
13168                                         WHERE   id = folder_row.id;
13169                                 EXCEPTION WHEN unique_violation THEN
13170                                         suffix := suffix || ' ';
13171                                         CONTINUE;
13172                                 END;
13173                                 EXIT;
13174                         END LOOP;
13175                 END LOOP;
13176     EXCEPTION WHEN undefined_table THEN
13177         -- do nothing
13178     END;
13179     BEGIN
13180                 -- transfer folders the same way we transfer buckets (see above)
13181                 FOR folder_row in
13182                         SELECT id, name
13183                         FROM   reporter.output_folder
13184                         WHERE  owner = src_usr
13185                 LOOP
13186                         suffix := ' (' || src_usr || ')';
13187                         LOOP
13188                                 BEGIN
13189                                         UPDATE  reporter.output_folder
13190                                         SET     owner = dest_usr, name = name || suffix
13191                                         WHERE   id = folder_row.id;
13192                                 EXCEPTION WHEN unique_violation THEN
13193                                         suffix := suffix || ' ';
13194                                         CONTINUE;
13195                                 END;
13196                                 EXIT;
13197                         END LOOP;
13198                 END LOOP;
13199     EXCEPTION WHEN undefined_table THEN
13200         -- do nothing
13201     END;
13202
13203     -- Finally, delete the source user
13204     DELETE FROM actor.usr WHERE id = src_usr;
13205
13206 END;
13207 $$ LANGUAGE plpgsql;
13208
13209 -- The "add" trigger functions should protect against existing NULLed values, just in case
13210 CREATE OR REPLACE FUNCTION money.materialized_summary_billing_add () RETURNS TRIGGER AS $$
13211 BEGIN
13212     IF NOT NEW.voided THEN
13213         UPDATE  money.materialized_billable_xact_summary
13214           SET   total_owed = COALESCE(total_owed, 0.0::numeric) + NEW.amount,
13215             last_billing_ts = NEW.billing_ts,
13216             last_billing_note = NEW.note,
13217             last_billing_type = NEW.billing_type,
13218             balance_owed = balance_owed + NEW.amount
13219           WHERE id = NEW.xact;
13220     END IF;
13221
13222     RETURN NEW;
13223 END;
13224 $$ LANGUAGE PLPGSQL;
13225
13226 CREATE OR REPLACE FUNCTION money.materialized_summary_payment_add () RETURNS TRIGGER AS $$
13227 BEGIN
13228     IF NOT NEW.voided THEN
13229         UPDATE  money.materialized_billable_xact_summary
13230           SET   total_paid = COALESCE(total_paid, 0.0::numeric) + NEW.amount,
13231             last_payment_ts = NEW.payment_ts,
13232             last_payment_note = NEW.note,
13233             last_payment_type = TG_ARGV[0],
13234             balance_owed = balance_owed - NEW.amount
13235           WHERE id = NEW.xact;
13236     END IF;
13237
13238     RETURN NEW;
13239 END;
13240 $$ LANGUAGE PLPGSQL;
13241
13242 -- Refresh the mat view with the corrected underlying view
13243 TRUNCATE money.materialized_billable_xact_summary;
13244 INSERT INTO money.materialized_billable_xact_summary SELECT * FROM money.billable_xact_summary;
13245
13246 CREATE OR REPLACE FUNCTION permission.usr_has_perm_at_nd(
13247     user_id    IN INTEGER,
13248     perm_code  IN TEXT
13249 )
13250 RETURNS SETOF INTEGER AS $$
13251 --
13252 -- Return a set of all the org units for which a given user has a given
13253 -- permission, granted directly (not through inheritance from a parent
13254 -- org unit).
13255 --
13256 -- The permissions apply to a minimum depth of the org unit hierarchy,
13257 -- for the org unit(s) to which the user is assigned.  (They also apply
13258 -- to the subordinates of those org units, but we don't report the
13259 -- subordinates here.)
13260 --
13261 -- For purposes of this function, the permission.usr_work_ou_map table
13262 -- defines which users belong to which org units.  I.e. we ignore the
13263 -- home_ou column of actor.usr.
13264 --
13265 -- The result set may contain duplicates, which should be eliminated
13266 -- by a DISTINCT clause.
13267 --
13268 DECLARE
13269     b_super       BOOLEAN;
13270     n_perm        INTEGER;
13271     n_min_depth   INTEGER;
13272     n_work_ou     INTEGER;
13273     n_curr_ou     INTEGER;
13274     n_depth       INTEGER;
13275     n_curr_depth  INTEGER;
13276 BEGIN
13277     --
13278     -- Check for superuser
13279     --
13280     SELECT INTO b_super
13281         super_user
13282     FROM
13283         actor.usr
13284     WHERE
13285         id = user_id;
13286     --
13287     IF NOT FOUND THEN
13288         return;             -- No user?  No permissions.
13289     ELSIF b_super THEN
13290         --
13291         -- Super user has all permissions everywhere
13292         --
13293         FOR n_work_ou IN
13294             SELECT
13295                 id
13296             FROM
13297                 actor.org_unit
13298             WHERE
13299                 parent_ou IS NULL
13300         LOOP
13301             RETURN NEXT n_work_ou;
13302         END LOOP;
13303         RETURN;
13304     END IF;
13305     --
13306     -- Translate the permission name
13307     -- to a numeric permission id
13308     --
13309     SELECT INTO n_perm
13310         id
13311     FROM
13312         permission.perm_list
13313     WHERE
13314         code = perm_code;
13315     --
13316     IF NOT FOUND THEN
13317         RETURN;               -- No such permission
13318     END IF;
13319     --
13320     -- Find the highest-level org unit (i.e. the minimum depth)
13321     -- to which the permission is applied for this user
13322     --
13323     -- This query is modified from the one in permission.usr_perms().
13324     --
13325     SELECT INTO n_min_depth
13326         min( depth )
13327     FROM    (
13328         SELECT depth
13329           FROM permission.usr_perm_map upm
13330          WHERE upm.usr = user_id
13331            AND (upm.perm = n_perm OR upm.perm = -1)
13332                     UNION
13333         SELECT  gpm.depth
13334           FROM  permission.grp_perm_map gpm
13335           WHERE (gpm.perm = n_perm OR gpm.perm = -1)
13336             AND gpm.grp IN (
13337                SELECT   (permission.grp_ancestors(
13338                     (SELECT profile FROM actor.usr WHERE id = user_id)
13339                 )).id
13340             )
13341                     UNION
13342         SELECT  p.depth
13343           FROM  permission.grp_perm_map p
13344           WHERE (p.perm = n_perm OR p.perm = -1)
13345             AND p.grp IN (
13346                 SELECT (permission.grp_ancestors(m.grp)).id
13347                 FROM   permission.usr_grp_map m
13348                 WHERE  m.usr = user_id
13349             )
13350     ) AS x;
13351     --
13352     IF NOT FOUND THEN
13353         RETURN;                -- No such permission for this user
13354     END IF;
13355     --
13356     -- Identify the org units to which the user is assigned.  Note that
13357     -- we pay no attention to the home_ou column in actor.usr.
13358     --
13359     FOR n_work_ou IN
13360         SELECT
13361             work_ou
13362         FROM
13363             permission.usr_work_ou_map
13364         WHERE
13365             usr = user_id
13366     LOOP            -- For each org unit to which the user is assigned
13367         --
13368         -- Determine the level of the org unit by a lookup in actor.org_unit_type.
13369         -- We take it on faith that this depth agrees with the actual hierarchy
13370         -- defined in actor.org_unit.
13371         --
13372         SELECT INTO n_depth
13373             type.depth
13374         FROM
13375             actor.org_unit_type type
13376                 INNER JOIN actor.org_unit ou
13377                     ON ( ou.ou_type = type.id )
13378         WHERE
13379             ou.id = n_work_ou;
13380         --
13381         IF NOT FOUND THEN
13382             CONTINUE;        -- Maybe raise exception?
13383         END IF;
13384         --
13385         -- Compare the depth of the work org unit to the
13386         -- minimum depth, and branch accordingly
13387         --
13388         IF n_depth = n_min_depth THEN
13389             --
13390             -- The org unit is at the right depth, so return it.
13391             --
13392             RETURN NEXT n_work_ou;
13393         ELSIF n_depth > n_min_depth THEN
13394             --
13395             -- Traverse the org unit tree toward the root,
13396             -- until you reach the minimum depth determined above
13397             --
13398             n_curr_depth := n_depth;
13399             n_curr_ou := n_work_ou;
13400             WHILE n_curr_depth > n_min_depth LOOP
13401                 SELECT INTO n_curr_ou
13402                     parent_ou
13403                 FROM
13404                     actor.org_unit
13405                 WHERE
13406                     id = n_curr_ou;
13407                 --
13408                 IF FOUND THEN
13409                     n_curr_depth := n_curr_depth - 1;
13410                 ELSE
13411                     --
13412                     -- This can happen only if the hierarchy defined in
13413                     -- actor.org_unit is corrupted, or out of sync with
13414                     -- the depths defined in actor.org_unit_type.
13415                     -- Maybe we should raise an exception here, instead
13416                     -- of silently ignoring the problem.
13417                     --
13418                     n_curr_ou = NULL;
13419                     EXIT;
13420                 END IF;
13421             END LOOP;
13422             --
13423             IF n_curr_ou IS NOT NULL THEN
13424                 RETURN NEXT n_curr_ou;
13425             END IF;
13426         ELSE
13427             --
13428             -- The permission applies only at a depth greater than the work org unit.
13429             -- Use connectby() to find all dependent org units at the specified depth.
13430             --
13431             FOR n_curr_ou IN
13432                 SELECT ou::INTEGER
13433                 FROM connectby(
13434                         'actor.org_unit',         -- table name
13435                         'id',                     -- key column
13436                         'parent_ou',              -- recursive foreign key
13437                         n_work_ou::TEXT,          -- id of starting point
13438                         (n_min_depth - n_depth)   -- max depth to search, relative
13439                     )                             --   to starting point
13440                     AS t(
13441                         ou text,            -- dependent org unit
13442                         parent_ou text,     -- (ignore)
13443                         level int           -- depth relative to starting point
13444                     )
13445                 WHERE
13446                     level = n_min_depth - n_depth
13447             LOOP
13448                 RETURN NEXT n_curr_ou;
13449             END LOOP;
13450         END IF;
13451         --
13452     END LOOP;
13453     --
13454     RETURN;
13455     --
13456 END;
13457 $$ LANGUAGE 'plpgsql';
13458
13459 ALTER TABLE acq.purchase_order
13460         ADD COLUMN cancel_reason        INT REFERENCES acq.cancel_reason( id )
13461                                             DEFERRABLE INITIALLY DEFERRED;
13462
13463 ALTER TABLE acq.acq_purchase_order_history
13464         ADD COLUMN cancel_reason INTEGER;
13465
13466 ALTER TABLE acq.purchase_order
13467         ADD COLUMN prepayment_required BOOLEAN NOT NULL DEFAULT FALSE;
13468
13469 ALTER TABLE acq.acq_purchase_order_history
13470         ADD COLUMN prepayment_required BOOLEAN NOT NULL DEFAULT FALSE;
13471
13472 ALTER TABLE acq.lineitem
13473         ADD COLUMN cancel_reason        INT REFERENCES acq.cancel_reason( id )
13474                                             DEFERRABLE INITIALLY DEFERRED;
13475
13476 ALTER TABLE acq.acq_lineitem_history
13477         ADD COLUMN cancel_reason INTEGER;
13478
13479 ALTER TABLE acq.lineitem
13480         ADD COLUMN estimated_unit_price NUMERIC;
13481
13482 ALTER TABLE acq.acq_lineitem_history
13483         ADD COLUMN estimated_unit_price NUMERIC;
13484
13485 ALTER TABLE acq.lineitem
13486         ADD COLUMN claim_policy INT
13487                 REFERENCES acq.claim_policy
13488                 DEFERRABLE INITIALLY DEFERRED;
13489
13490 ALTER TABLE acq.acq_lineitem_history
13491         ADD COLUMN claim_policy INT
13492                 REFERENCES acq.claim_policy
13493                 DEFERRABLE INITIALLY DEFERRED;
13494
13495 ALTER TABLE acq.lineitem_detail
13496         ADD COLUMN cancel_reason        INT REFERENCES acq.cancel_reason( id )
13497                                             DEFERRABLE INITIALLY DEFERRED;
13498
13499 ALTER TABLE acq.lineitem_detail
13500         DROP CONSTRAINT lineitem_detail_lineitem_fkey;
13501
13502 ALTER TABLE acq.lineitem_detail
13503         ADD FOREIGN KEY (lineitem) REFERENCES acq.lineitem( id )
13504                 ON DELETE CASCADE
13505                 DEFERRABLE INITIALLY DEFERRED;
13506
13507 ALTER TABLE acq.lineitem_detail DROP CONSTRAINT lineitem_detail_eg_copy_id_fkey;
13508
13509 INSERT INTO acq.cancel_reason ( id, org_unit, label, description ) VALUES (
13510         1, 1, 'invalid_isbn', oils_i18n_gettext( 1, 'ISBN is unrecognizable', 'acqcr', 'label' ));
13511
13512 INSERT INTO acq.cancel_reason ( id, org_unit, label, description ) VALUES (
13513         2, 1, 'postpone', oils_i18n_gettext( 2, 'Title has been postponed', 'acqcr', 'label' ));
13514
13515 CREATE OR REPLACE FUNCTION vandelay.add_field ( target_xml TEXT, source_xml TEXT, field TEXT ) RETURNS TEXT AS $_$
13516
13517     use MARC::Record;
13518     use MARC::File::XML (BinaryEncoding => 'UTF-8');
13519     use strict;
13520
13521     my $target_xml = shift;
13522     my $source_xml = shift;
13523     my $field_spec = shift;
13524
13525     my $target_r = MARC::Record->new_from_xml( $target_xml );
13526     my $source_r = MARC::Record->new_from_xml( $source_xml );
13527
13528     return $target_xml unless ($target_r && $source_r);
13529
13530     my @field_list = split(',', $field_spec);
13531
13532     my %fields;
13533     for my $f (@field_list) {
13534         $f =~ s/^\s*//; $f =~ s/\s*$//;
13535         if ($f =~ /^(.{3})(\w*)(?:\[([^]]*)\])?$/) {
13536             my $field = $1;
13537             $field =~ s/\s+//;
13538             my $sf = $2;
13539             $sf =~ s/\s+//;
13540             my $match = $3;
13541             $match =~ s/^\s*//; $match =~ s/\s*$//;
13542             $fields{$field} = { sf => [ split('', $sf) ] };
13543             if ($match) {
13544                 my ($msf,$mre) = split('~', $match);
13545                 if (length($msf) > 0 and length($mre) > 0) {
13546                     $msf =~ s/^\s*//; $msf =~ s/\s*$//;
13547                     $mre =~ s/^\s*//; $mre =~ s/\s*$//;
13548                     $fields{$field}{match} = { sf => $msf, re => qr/$mre/ };
13549                 }
13550             }
13551         }
13552     }
13553
13554     for my $f ( keys %fields) {
13555         if ( @{$fields{$f}{sf}} ) {
13556             for my $from_field ($source_r->field( $f )) {
13557                 for my $to_field ($target_r->field( $f )) {
13558                     if (exists($fields{$f}{match})) {
13559                         next unless (grep { $_ =~ $fields{$f}{match}{re} } $to_field->subfield($fields{$f}{match}{sf}));
13560                     }
13561                     my @new_sf = map { ($_ => $from_field->subfield($_)) } @{$fields{$f}{sf}};
13562                     $to_field->add_subfields( @new_sf );
13563                 }
13564             }
13565         } else {
13566             my @new_fields = map { $_->clone } $source_r->field( $f );
13567             $target_r->insert_fields_ordered( @new_fields );
13568         }
13569     }
13570
13571     $target_xml = $target_r->as_xml_record;
13572     $target_xml =~ s/^<\?.+?\?>$//mo;
13573     $target_xml =~ s/\n//sgo;
13574     $target_xml =~ s/>\s+</></sgo;
13575
13576     return $target_xml;
13577
13578 $_$ LANGUAGE PLPERLU;
13579
13580 CREATE OR REPLACE FUNCTION vandelay.strip_field ( xml TEXT, field TEXT ) RETURNS TEXT AS $_$
13581
13582     use MARC::Record;
13583     use MARC::File::XML (BinaryEncoding => 'UTF-8');
13584     use strict;
13585
13586     my $xml = shift;
13587     my $r = MARC::Record->new_from_xml( $xml );
13588
13589     return $xml unless ($r);
13590
13591     my $field_spec = shift;
13592     my @field_list = split(',', $field_spec);
13593
13594     my %fields;
13595     for my $f (@field_list) {
13596         $f =~ s/^\s*//; $f =~ s/\s*$//;
13597         if ($f =~ /^(.{3})(\w*)(?:\[([^]]*)\])?$/) {
13598             my $field = $1;
13599             $field =~ s/\s+//;
13600             my $sf = $2;
13601             $sf =~ s/\s+//;
13602             my $match = $3;
13603             $match =~ s/^\s*//; $match =~ s/\s*$//;
13604             $fields{$field} = { sf => [ split('', $sf) ] };
13605             if ($match) {
13606                 my ($msf,$mre) = split('~', $match);
13607                 if (length($msf) > 0 and length($mre) > 0) {
13608                     $msf =~ s/^\s*//; $msf =~ s/\s*$//;
13609                     $mre =~ s/^\s*//; $mre =~ s/\s*$//;
13610                     $fields{$field}{match} = { sf => $msf, re => qr/$mre/ };
13611                 }
13612             }
13613         }
13614     }
13615
13616     for my $f ( keys %fields) {
13617         for my $to_field ($r->field( $f )) {
13618             if (exists($fields{$f}{match})) {
13619                 next unless (grep { $_ =~ $fields{$f}{match}{re} } $to_field->subfield($fields{$f}{match}{sf}));
13620             }
13621
13622             if ( @{$fields{$f}{sf}} ) {
13623                 $to_field->delete_subfield(code => $fields{$f}{sf});
13624             } else {
13625                 $r->delete_field( $to_field );
13626             }
13627         }
13628     }
13629
13630     $xml = $r->as_xml_record;
13631     $xml =~ s/^<\?.+?\?>$//mo;
13632     $xml =~ s/\n//sgo;
13633     $xml =~ s/>\s+</></sgo;
13634
13635     return $xml;
13636
13637 $_$ LANGUAGE PLPERLU;
13638
13639 CREATE OR REPLACE FUNCTION vandelay.replace_field ( target_xml TEXT, source_xml TEXT, field TEXT ) RETURNS TEXT AS $_$
13640     SELECT vandelay.add_field( vandelay.strip_field( $1, $3), $2, $3 );
13641 $_$ LANGUAGE SQL;
13642
13643 CREATE OR REPLACE FUNCTION vandelay.preserve_field ( incumbent_xml TEXT, incoming_xml TEXT, field TEXT ) RETURNS TEXT AS $_$
13644     SELECT vandelay.add_field( vandelay.strip_field( $2, $3), $1, $3 );
13645 $_$ LANGUAGE SQL;
13646
13647 CREATE VIEW action.unfulfilled_hold_max_loop AS
13648         SELECT  hold,
13649                 max(count) AS max
13650         FROM    action.unfulfilled_hold_loops
13651         GROUP BY 1;
13652
13653 ALTER TABLE acq.lineitem_attr
13654         DROP CONSTRAINT lineitem_attr_lineitem_fkey;
13655
13656 ALTER TABLE acq.lineitem_attr
13657         ADD FOREIGN KEY (lineitem) REFERENCES acq.lineitem( id )
13658                 ON DELETE CASCADE
13659                 DEFERRABLE INITIALLY DEFERRED;
13660
13661 ALTER TABLE acq.po_note
13662         ADD COLUMN vendor_public BOOLEAN NOT NULL DEFAULT FALSE;
13663
13664 CREATE TABLE vandelay.merge_profile (
13665     id              BIGSERIAL   PRIMARY KEY,
13666     owner           INT         NOT NULL REFERENCES actor.org_unit (id) ON UPDATE CASCADE ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED,
13667     name            TEXT        NOT NULL,
13668     add_spec        TEXT,
13669     replace_spec    TEXT,
13670     strip_spec      TEXT,
13671     preserve_spec   TEXT,
13672     CONSTRAINT vand_merge_prof_owner_name_idx UNIQUE (owner,name),
13673     CONSTRAINT add_replace_strip_or_preserve CHECK ((preserve_spec IS NOT NULL OR replace_spec IS NOT NULL) OR (preserve_spec IS NULL AND replace_spec IS NULL))
13674 );
13675
13676 CREATE OR REPLACE FUNCTION vandelay.match_bib_record ( ) RETURNS TRIGGER AS $func$
13677 DECLARE
13678     attr        RECORD;
13679     attr_def    RECORD;
13680     eg_rec      RECORD;
13681     id_value    TEXT;
13682     exact_id    BIGINT;
13683 BEGIN
13684
13685     DELETE FROM vandelay.bib_match WHERE queued_record = NEW.id;
13686
13687     SELECT * INTO attr_def FROM vandelay.bib_attr_definition WHERE xpath = '//*[@tag="901"]/*[@code="c"]' ORDER BY id LIMIT 1;
13688
13689     IF attr_def IS NOT NULL AND attr_def.id IS NOT NULL THEN
13690         id_value := extract_marc_field('vandelay.queued_bib_record', NEW.id, attr_def.xpath, attr_def.remove);
13691
13692         IF id_value IS NOT NULL AND id_value <> '' AND id_value ~ $r$^\d+$$r$ THEN
13693             SELECT id INTO exact_id FROM biblio.record_entry WHERE id = id_value::BIGINT AND NOT deleted;
13694             SELECT * INTO attr FROM vandelay.queued_bib_record_attr WHERE record = NEW.id and field = attr_def.id LIMIT 1;
13695             IF exact_id IS NOT NULL THEN
13696                 INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('id', attr.id, NEW.id, exact_id);
13697             END IF;
13698         END IF;
13699     END IF;
13700
13701     IF exact_id IS NULL THEN
13702         FOR attr IN SELECT a.* FROM vandelay.queued_bib_record_attr a JOIN vandelay.bib_attr_definition d ON (d.id = a.field) WHERE record = NEW.id AND d.ident IS TRUE LOOP
13703
13704             -- All numbers? check for an id match
13705             IF (attr.attr_value ~ $r$^\d+$$r$) THEN
13706                 FOR eg_rec IN SELECT * FROM biblio.record_entry WHERE id = attr.attr_value::BIGINT AND deleted IS FALSE LOOP
13707                     INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('id', attr.id, NEW.id, eg_rec.id);
13708                 END LOOP;
13709             END IF;
13710
13711             -- Looks like an ISBN? check for an isbn match
13712             IF (attr.attr_value ~* $r$^[0-9x]+$$r$ AND character_length(attr.attr_value) IN (10,13)) THEN
13713                 FOR eg_rec IN EXECUTE $$SELECT * FROM metabib.full_rec fr WHERE fr.value LIKE LOWER('$$ || attr.attr_value || $$%') AND fr.tag = '020' AND fr.subfield = 'a'$$ LOOP
13714                     PERFORM id FROM biblio.record_entry WHERE id = eg_rec.record AND deleted IS FALSE;
13715                     IF FOUND THEN
13716                         INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('isbn', attr.id, NEW.id, eg_rec.record);
13717                     END IF;
13718                 END LOOP;
13719
13720                 -- subcheck for isbn-as-tcn
13721                 FOR eg_rec IN SELECT * FROM biblio.record_entry WHERE tcn_value = 'i' || attr.attr_value AND deleted IS FALSE LOOP
13722                     INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('tcn_value', attr.id, NEW.id, eg_rec.id);
13723                 END LOOP;
13724             END IF;
13725
13726             -- check for an OCLC tcn_value match
13727             IF (attr.attr_value ~ $r$^o\d+$$r$) THEN
13728                 FOR eg_rec IN SELECT * FROM biblio.record_entry WHERE tcn_value = regexp_replace(attr.attr_value,'^o','ocm') AND deleted IS FALSE LOOP
13729                     INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('tcn_value', attr.id, NEW.id, eg_rec.id);
13730                 END LOOP;
13731             END IF;
13732
13733             -- check for a direct tcn_value match
13734             FOR eg_rec IN SELECT * FROM biblio.record_entry WHERE tcn_value = attr.attr_value AND deleted IS FALSE LOOP
13735                 INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('tcn_value', attr.id, NEW.id, eg_rec.id);
13736             END LOOP;
13737
13738             -- check for a direct item barcode match
13739             FOR eg_rec IN
13740                     SELECT  DISTINCT b.*
13741                       FROM  biblio.record_entry b
13742                             JOIN asset.call_number cn ON (cn.record = b.id)
13743                             JOIN asset.copy cp ON (cp.call_number = cn.id)
13744                       WHERE cp.barcode = attr.attr_value AND cp.deleted IS FALSE
13745             LOOP
13746                 INSERT INTO vandelay.bib_match (field_type, matched_attr, queued_record, eg_record) VALUES ('id', attr.id, NEW.id, eg_rec.id);
13747             END LOOP;
13748
13749         END LOOP;
13750     END IF;
13751
13752     RETURN NULL;
13753 END;
13754 $func$ LANGUAGE PLPGSQL;
13755
13756 CREATE OR REPLACE FUNCTION vandelay.merge_record_xml ( target_xml TEXT, source_xml TEXT, add_rule TEXT, replace_preserve_rule TEXT, strip_rule TEXT ) RETURNS TEXT AS $_$
13757     SELECT vandelay.replace_field( vandelay.add_field( vandelay.strip_field( $1, $5) , $2, $3 ), $2, $4);
13758 $_$ LANGUAGE SQL;
13759
13760 CREATE TYPE vandelay.compile_profile AS (add_rule TEXT, replace_rule TEXT, preserve_rule TEXT, strip_rule TEXT);
13761 CREATE OR REPLACE FUNCTION vandelay.compile_profile ( incoming_xml TEXT ) RETURNS vandelay.compile_profile AS $_$
13762 DECLARE
13763     output              vandelay.compile_profile%ROWTYPE;
13764     profile             vandelay.merge_profile%ROWTYPE;
13765     profile_tmpl        TEXT;
13766     profile_tmpl_owner  TEXT;
13767     add_rule            TEXT := '';
13768     strip_rule          TEXT := '';
13769     replace_rule        TEXT := '';
13770     preserve_rule       TEXT := '';
13771
13772 BEGIN
13773
13774     profile_tmpl := (oils_xpath('//*[@tag="905"]/*[@code="t"]/text()',incoming_xml))[1];
13775     profile_tmpl_owner := (oils_xpath('//*[@tag="905"]/*[@code="o"]/text()',incoming_xml))[1];
13776
13777     IF profile_tmpl IS NOT NULL AND profile_tmpl <> '' AND profile_tmpl_owner IS NOT NULL AND profile_tmpl_owner <> '' THEN
13778         SELECT  p.* INTO profile
13779           FROM  vandelay.merge_profile p
13780                 JOIN actor.org_unit u ON (u.id = p.owner)
13781           WHERE p.name = profile_tmpl
13782                 AND u.shortname = profile_tmpl_owner;
13783
13784         IF profile.id IS NOT NULL THEN
13785             add_rule := COALESCE(profile.add_spec,'');
13786             strip_rule := COALESCE(profile.strip_spec,'');
13787             replace_rule := COALESCE(profile.replace_spec,'');
13788             preserve_rule := COALESCE(profile.preserve_spec,'');
13789         END IF;
13790     END IF;
13791
13792     add_rule := add_rule || ',' || COALESCE(ARRAY_TO_STRING(oils_xpath('//*[@tag="905"]/*[@code="a"]/text()',incoming_xml),''),'');
13793     strip_rule := strip_rule || ',' || COALESCE(ARRAY_TO_STRING(oils_xpath('//*[@tag="905"]/*[@code="d"]/text()',incoming_xml),''),'');
13794     replace_rule := replace_rule || ',' || COALESCE(ARRAY_TO_STRING(oils_xpath('//*[@tag="905"]/*[@code="r"]/text()',incoming_xml),''),'');
13795     preserve_rule := preserve_rule || ',' || COALESCE(ARRAY_TO_STRING(oils_xpath('//*[@tag="905"]/*[@code="p"]/text()',incoming_xml),''),'');
13796
13797     output.add_rule := BTRIM(add_rule,',');
13798     output.replace_rule := BTRIM(replace_rule,',');
13799     output.strip_rule := BTRIM(strip_rule,',');
13800     output.preserve_rule := BTRIM(preserve_rule,',');
13801
13802     RETURN output;
13803 END;
13804 $_$ LANGUAGE PLPGSQL;
13805
13806 -- Template-based marc munging functions
13807 CREATE OR REPLACE FUNCTION vandelay.template_overlay_bib_record ( v_marc TEXT, eg_id BIGINT, merge_profile_id INT ) RETURNS BOOL AS $$
13808 DECLARE
13809     merge_profile   vandelay.merge_profile%ROWTYPE;
13810     dyn_profile     vandelay.compile_profile%ROWTYPE;
13811     editor_string   TEXT;
13812     editor_id       INT;
13813     source_marc     TEXT;
13814     target_marc     TEXT;
13815     eg_marc         TEXT;
13816     replace_rule    TEXT;
13817     match_count     INT;
13818 BEGIN
13819
13820     SELECT  b.marc INTO eg_marc
13821       FROM  biblio.record_entry b
13822       WHERE b.id = eg_id
13823       LIMIT 1;
13824
13825     IF eg_marc IS NULL OR v_marc IS NULL THEN
13826         -- RAISE NOTICE 'no marc for template or bib record';
13827         RETURN FALSE;
13828     END IF;
13829
13830     dyn_profile := vandelay.compile_profile( v_marc );
13831
13832     IF merge_profile_id IS NOT NULL THEN
13833         SELECT * INTO merge_profile FROM vandelay.merge_profile WHERE id = merge_profile_id;
13834         IF FOUND THEN
13835             dyn_profile.add_rule := BTRIM( dyn_profile.add_rule || ',' || COALESCE(merge_profile.add_spec,''), ',');
13836             dyn_profile.strip_rule := BTRIM( dyn_profile.strip_rule || ',' || COALESCE(merge_profile.strip_spec,''), ',');
13837             dyn_profile.replace_rule := BTRIM( dyn_profile.replace_rule || ',' || COALESCE(merge_profile.replace_spec,''), ',');
13838             dyn_profile.preserve_rule := BTRIM( dyn_profile.preserve_rule || ',' || COALESCE(merge_profile.preserve_spec,''), ',');
13839         END IF;
13840     END IF;
13841
13842     IF dyn_profile.replace_rule <> '' AND dyn_profile.preserve_rule <> '' THEN
13843         -- RAISE NOTICE 'both replace [%] and preserve [%] specified', dyn_profile.replace_rule, dyn_profile.preserve_rule;
13844         RETURN FALSE;
13845     END IF;
13846
13847     IF dyn_profile.replace_rule <> '' THEN
13848         source_marc = v_marc;
13849         target_marc = eg_marc;
13850         replace_rule = dyn_profile.replace_rule;
13851     ELSE
13852         source_marc = eg_marc;
13853         target_marc = v_marc;
13854         replace_rule = dyn_profile.preserve_rule;
13855     END IF;
13856
13857     UPDATE  biblio.record_entry
13858       SET   marc = vandelay.merge_record_xml( target_marc, source_marc, dyn_profile.add_rule, replace_rule, dyn_profile.strip_rule )
13859       WHERE id = eg_id;
13860
13861     IF NOT FOUND THEN
13862         -- RAISE NOTICE 'update of biblio.record_entry failed';
13863         RETURN FALSE;
13864     END IF;
13865
13866     RETURN TRUE;
13867
13868 END;
13869 $$ LANGUAGE PLPGSQL;
13870
13871 CREATE OR REPLACE FUNCTION vandelay.template_overlay_bib_record ( v_marc TEXT, eg_id BIGINT) RETURNS BOOL AS $$
13872     SELECT vandelay.template_overlay_bib_record( $1, $2, NULL);
13873 $$ LANGUAGE SQL;
13874
13875 CREATE OR REPLACE FUNCTION vandelay.overlay_bib_record ( import_id BIGINT, eg_id BIGINT, merge_profile_id INT ) RETURNS BOOL AS $$
13876 DECLARE
13877     merge_profile   vandelay.merge_profile%ROWTYPE;
13878     dyn_profile     vandelay.compile_profile%ROWTYPE;
13879     editor_string   TEXT;
13880     editor_id       INT;
13881     source_marc     TEXT;
13882     target_marc     TEXT;
13883     eg_marc         TEXT;
13884     v_marc          TEXT;
13885     replace_rule    TEXT;
13886     match_count     INT;
13887 BEGIN
13888
13889     SELECT  q.marc INTO v_marc
13890       FROM  vandelay.queued_record q
13891             JOIN vandelay.bib_match m ON (m.queued_record = q.id AND q.id = import_id)
13892       LIMIT 1;
13893
13894     IF v_marc IS NULL THEN
13895         -- RAISE NOTICE 'no marc for vandelay or bib record';
13896         RETURN FALSE;
13897     END IF;
13898
13899     IF vandelay.template_overlay_bib_record( v_marc, eg_id, merge_profile_id) THEN
13900         UPDATE  vandelay.queued_bib_record
13901           SET   imported_as = eg_id,
13902                 import_time = NOW()
13903           WHERE id = import_id;
13904
13905         editor_string := (oils_xpath('//*[@tag="905"]/*[@code="u"]/text()',v_marc))[1];
13906
13907         IF editor_string IS NOT NULL AND editor_string <> '' THEN
13908             SELECT usr INTO editor_id FROM actor.card WHERE barcode = editor_string;
13909
13910             IF editor_id IS NULL THEN
13911                 SELECT id INTO editor_id FROM actor.usr WHERE usrname = editor_string;
13912             END IF;
13913
13914             IF editor_id IS NOT NULL THEN
13915                 UPDATE biblio.record_entry SET editor = editor_id WHERE id = eg_id;
13916             END IF;
13917         END IF;
13918
13919         RETURN TRUE;
13920     END IF;
13921
13922     -- RAISE NOTICE 'update of biblio.record_entry failed';
13923
13924     RETURN FALSE;
13925
13926 END;
13927 $$ LANGUAGE PLPGSQL;
13928
13929 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_bib_record ( import_id BIGINT, merge_profile_id INT ) RETURNS BOOL AS $$
13930 DECLARE
13931     eg_id           BIGINT;
13932     match_count     INT;
13933     match_attr      vandelay.bib_attr_definition%ROWTYPE;
13934 BEGIN
13935
13936     PERFORM * FROM vandelay.queued_bib_record WHERE import_time IS NOT NULL AND id = import_id;
13937
13938     IF FOUND THEN
13939         -- RAISE NOTICE 'already imported, cannot auto-overlay'
13940         RETURN FALSE;
13941     END IF;
13942
13943     SELECT COUNT(*) INTO match_count FROM vandelay.bib_match WHERE queued_record = import_id;
13944
13945     IF match_count <> 1 THEN
13946         -- RAISE NOTICE 'not an exact match';
13947         RETURN FALSE;
13948     END IF;
13949
13950     SELECT  d.* INTO match_attr
13951       FROM  vandelay.bib_attr_definition d
13952             JOIN vandelay.queued_bib_record_attr a ON (a.field = d.id)
13953             JOIN vandelay.bib_match m ON (m.matched_attr = a.id)
13954       WHERE m.queued_record = import_id;
13955
13956     IF NOT (match_attr.xpath ~ '@tag="901"' AND match_attr.xpath ~ '@code="c"') THEN
13957         -- RAISE NOTICE 'not a 901c match: %', match_attr.xpath;
13958         RETURN FALSE;
13959     END IF;
13960
13961     SELECT  m.eg_record INTO eg_id
13962       FROM  vandelay.bib_match m
13963       WHERE m.queued_record = import_id
13964       LIMIT 1;
13965
13966     IF eg_id IS NULL THEN
13967         RETURN FALSE;
13968     END IF;
13969
13970     RETURN vandelay.overlay_bib_record( import_id, eg_id, merge_profile_id );
13971 END;
13972 $$ LANGUAGE PLPGSQL;
13973
13974 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_bib_queue ( queue_id BIGINT, merge_profile_id INT ) RETURNS SETOF BIGINT AS $$
13975 DECLARE
13976     queued_record   vandelay.queued_bib_record%ROWTYPE;
13977 BEGIN
13978
13979     FOR queued_record IN SELECT * FROM vandelay.queued_bib_record WHERE queue = queue_id AND import_time IS NULL LOOP
13980
13981         IF vandelay.auto_overlay_bib_record( queued_record.id, merge_profile_id ) THEN
13982             RETURN NEXT queued_record.id;
13983         END IF;
13984
13985     END LOOP;
13986
13987     RETURN;
13988
13989 END;
13990 $$ LANGUAGE PLPGSQL;
13991
13992 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_bib_queue ( queue_id BIGINT ) RETURNS SETOF BIGINT AS $$
13993     SELECT * FROM vandelay.auto_overlay_bib_queue( $1, NULL );
13994 $$ LANGUAGE SQL;
13995
13996 CREATE OR REPLACE FUNCTION vandelay.overlay_authority_record ( import_id BIGINT, eg_id BIGINT, merge_profile_id INT ) RETURNS BOOL AS $$
13997 DECLARE
13998     merge_profile   vandelay.merge_profile%ROWTYPE;
13999     dyn_profile     vandelay.compile_profile%ROWTYPE;
14000     source_marc     TEXT;
14001     target_marc     TEXT;
14002     eg_marc         TEXT;
14003     v_marc          TEXT;
14004     replace_rule    TEXT;
14005     match_count     INT;
14006 BEGIN
14007
14008     SELECT  b.marc INTO eg_marc
14009       FROM  authority.record_entry b
14010             JOIN vandelay.authority_match m ON (m.eg_record = b.id AND m.queued_record = import_id)
14011       LIMIT 1;
14012
14013     SELECT  q.marc INTO v_marc
14014       FROM  vandelay.queued_record q
14015             JOIN vandelay.authority_match m ON (m.queued_record = q.id AND q.id = import_id)
14016       LIMIT 1;
14017
14018     IF eg_marc IS NULL OR v_marc IS NULL THEN
14019         -- RAISE NOTICE 'no marc for vandelay or authority record';
14020         RETURN FALSE;
14021     END IF;
14022
14023     dyn_profile := vandelay.compile_profile( v_marc );
14024
14025     IF merge_profile_id IS NOT NULL THEN
14026         SELECT * INTO merge_profile FROM vandelay.merge_profile WHERE id = merge_profile_id;
14027         IF FOUND THEN
14028             dyn_profile.add_rule := BTRIM( dyn_profile.add_rule || ',' || COALESCE(merge_profile.add_spec,''), ',');
14029             dyn_profile.strip_rule := BTRIM( dyn_profile.strip_rule || ',' || COALESCE(merge_profile.strip_spec,''), ',');
14030             dyn_profile.replace_rule := BTRIM( dyn_profile.replace_rule || ',' || COALESCE(merge_profile.replace_spec,''), ',');
14031             dyn_profile.preserve_rule := BTRIM( dyn_profile.preserve_rule || ',' || COALESCE(merge_profile.preserve_spec,''), ',');
14032         END IF;
14033     END IF;
14034
14035     IF dyn_profile.replace_rule <> '' AND dyn_profile.preserve_rule <> '' THEN
14036         -- RAISE NOTICE 'both replace [%] and preserve [%] specified', dyn_profile.replace_rule, dyn_profile.preserve_rule;
14037         RETURN FALSE;
14038     END IF;
14039
14040     IF dyn_profile.replace_rule <> '' THEN
14041         source_marc = v_marc;
14042         target_marc = eg_marc;
14043         replace_rule = dyn_profile.replace_rule;
14044     ELSE
14045         source_marc = eg_marc;
14046         target_marc = v_marc;
14047         replace_rule = dyn_profile.preserve_rule;
14048     END IF;
14049
14050     UPDATE  authority.record_entry
14051       SET   marc = vandelay.merge_record_xml( target_marc, source_marc, dyn_profile.add_rule, replace_rule, dyn_profile.strip_rule )
14052       WHERE id = eg_id;
14053
14054     IF FOUND THEN
14055         UPDATE  vandelay.queued_authority_record
14056           SET   imported_as = eg_id,
14057                 import_time = NOW()
14058           WHERE id = import_id;
14059         RETURN TRUE;
14060     END IF;
14061
14062     -- RAISE NOTICE 'update of authority.record_entry failed';
14063
14064     RETURN FALSE;
14065
14066 END;
14067 $$ LANGUAGE PLPGSQL;
14068
14069 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_authority_record ( import_id BIGINT, merge_profile_id INT ) RETURNS BOOL AS $$
14070 DECLARE
14071     eg_id           BIGINT;
14072     match_count     INT;
14073 BEGIN
14074     SELECT COUNT(*) INTO match_count FROM vandelay.authority_match WHERE queued_record = import_id;
14075
14076     IF match_count <> 1 THEN
14077         -- RAISE NOTICE 'not an exact match';
14078         RETURN FALSE;
14079     END IF;
14080
14081     SELECT  m.eg_record INTO eg_id
14082       FROM  vandelay.authority_match m
14083       WHERE m.queued_record = import_id
14084       LIMIT 1;
14085
14086     IF eg_id IS NULL THEN
14087         RETURN FALSE;
14088     END IF;
14089
14090     RETURN vandelay.overlay_authority_record( import_id, eg_id, merge_profile_id );
14091 END;
14092 $$ LANGUAGE PLPGSQL;
14093
14094 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_authority_queue ( queue_id BIGINT, merge_profile_id INT ) RETURNS SETOF BIGINT AS $$
14095 DECLARE
14096     queued_record   vandelay.queued_authority_record%ROWTYPE;
14097 BEGIN
14098
14099     FOR queued_record IN SELECT * FROM vandelay.queued_authority_record WHERE queue = queue_id AND import_time IS NULL LOOP
14100
14101         IF vandelay.auto_overlay_authority_record( queued_record.id, merge_profile_id ) THEN
14102             RETURN NEXT queued_record.id;
14103         END IF;
14104
14105     END LOOP;
14106
14107     RETURN;
14108
14109 END;
14110 $$ LANGUAGE PLPGSQL;
14111
14112 CREATE OR REPLACE FUNCTION vandelay.auto_overlay_authority_queue ( queue_id BIGINT ) RETURNS SETOF BIGINT AS $$
14113     SELECT * FROM vandelay.auto_overlay_authority_queue( $1, NULL );
14114 $$ LANGUAGE SQL;
14115
14116 CREATE TYPE vandelay.tcn_data AS (tcn TEXT, tcn_source TEXT, used BOOL);
14117 CREATE OR REPLACE FUNCTION vandelay.find_bib_tcn_data ( xml TEXT ) RETURNS SETOF vandelay.tcn_data AS $_$
14118 DECLARE
14119     eg_tcn          TEXT;
14120     eg_tcn_source   TEXT;
14121     output          vandelay.tcn_data%ROWTYPE;
14122 BEGIN
14123
14124     -- 001/003
14125     eg_tcn := BTRIM((oils_xpath('//*[@tag="001"]/text()',xml))[1]);
14126     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14127
14128         eg_tcn_source := BTRIM((oils_xpath('//*[@tag="003"]/text()',xml))[1]);
14129         IF eg_tcn_source IS NULL OR eg_tcn_source = '' THEN
14130             eg_tcn_source := 'System Local';
14131         END IF;
14132
14133         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14134
14135         IF NOT FOUND THEN
14136             output.used := FALSE;
14137         ELSE
14138             output.used := TRUE;
14139         END IF;
14140
14141         output.tcn := eg_tcn;
14142         output.tcn_source := eg_tcn_source;
14143         RETURN NEXT output;
14144
14145     END IF;
14146
14147     -- 901 ab
14148     eg_tcn := BTRIM((oils_xpath('//*[@tag="901"]/*[@code="a"]/text()',xml))[1]);
14149     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14150
14151         eg_tcn_source := BTRIM((oils_xpath('//*[@tag="901"]/*[@code="b"]/text()',xml))[1]);
14152         IF eg_tcn_source IS NULL OR eg_tcn_source = '' THEN
14153             eg_tcn_source := 'System Local';
14154         END IF;
14155
14156         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14157
14158         IF NOT FOUND THEN
14159             output.used := FALSE;
14160         ELSE
14161             output.used := TRUE;
14162         END IF;
14163
14164         output.tcn := eg_tcn;
14165         output.tcn_source := eg_tcn_source;
14166         RETURN NEXT output;
14167
14168     END IF;
14169
14170     -- 039 ab
14171     eg_tcn := BTRIM((oils_xpath('//*[@tag="039"]/*[@code="a"]/text()',xml))[1]);
14172     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14173
14174         eg_tcn_source := BTRIM((oils_xpath('//*[@tag="039"]/*[@code="b"]/text()',xml))[1]);
14175         IF eg_tcn_source IS NULL OR eg_tcn_source = '' THEN
14176             eg_tcn_source := 'System Local';
14177         END IF;
14178
14179         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14180
14181         IF NOT FOUND THEN
14182             output.used := FALSE;
14183         ELSE
14184             output.used := TRUE;
14185         END IF;
14186
14187         output.tcn := eg_tcn;
14188         output.tcn_source := eg_tcn_source;
14189         RETURN NEXT output;
14190
14191     END IF;
14192
14193     -- 020 a
14194     eg_tcn := REGEXP_REPLACE((oils_xpath('//*[@tag="020"]/*[@code="a"]/text()',xml))[1], $re$^(\w+).*?$$re$, $re$\1$re$);
14195     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14196
14197         eg_tcn_source := 'ISBN';
14198
14199         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14200
14201         IF NOT FOUND THEN
14202             output.used := FALSE;
14203         ELSE
14204             output.used := TRUE;
14205         END IF;
14206
14207         output.tcn := eg_tcn;
14208         output.tcn_source := eg_tcn_source;
14209         RETURN NEXT output;
14210
14211     END IF;
14212
14213     -- 022 a
14214     eg_tcn := REGEXP_REPLACE((oils_xpath('//*[@tag="022"]/*[@code="a"]/text()',xml))[1], $re$^(\w+).*?$$re$, $re$\1$re$);
14215     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14216
14217         eg_tcn_source := 'ISSN';
14218
14219         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14220
14221         IF NOT FOUND THEN
14222             output.used := FALSE;
14223         ELSE
14224             output.used := TRUE;
14225         END IF;
14226
14227         output.tcn := eg_tcn;
14228         output.tcn_source := eg_tcn_source;
14229         RETURN NEXT output;
14230
14231     END IF;
14232
14233     -- 010 a
14234     eg_tcn := REGEXP_REPLACE((oils_xpath('//*[@tag="010"]/*[@code="a"]/text()',xml))[1], $re$^(\w+).*?$$re$, $re$\1$re$);
14235     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14236
14237         eg_tcn_source := 'LCCN';
14238
14239         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14240
14241         IF NOT FOUND THEN
14242             output.used := FALSE;
14243         ELSE
14244             output.used := TRUE;
14245         END IF;
14246
14247         output.tcn := eg_tcn;
14248         output.tcn_source := eg_tcn_source;
14249         RETURN NEXT output;
14250
14251     END IF;
14252
14253     -- 035 a
14254     eg_tcn := REGEXP_REPLACE((oils_xpath('//*[@tag="035"]/*[@code="a"]/text()',xml))[1], $re$^.*?(\w+)$$re$, $re$\1$re$);
14255     IF eg_tcn IS NOT NULL AND eg_tcn <> '' THEN
14256
14257         eg_tcn_source := 'System Legacy';
14258
14259         PERFORM id FROM biblio.record_entry WHERE tcn_value = eg_tcn  AND NOT deleted;
14260
14261         IF NOT FOUND THEN
14262             output.used := FALSE;
14263         ELSE
14264             output.used := TRUE;
14265         END IF;
14266
14267         output.tcn := eg_tcn;
14268         output.tcn_source := eg_tcn_source;
14269         RETURN NEXT output;
14270
14271     END IF;
14272
14273     RETURN;
14274 END;
14275 $_$ LANGUAGE PLPGSQL;
14276
14277 CREATE INDEX claim_lid_idx ON acq.claim( lineitem_detail );
14278
14279 CREATE OR REPLACE RULE protect_bib_rec_delete AS ON DELETE TO biblio.record_entry DO INSTEAD (UPDATE biblio.record_entry SET deleted = TRUE WHERE OLD.id = biblio.record_entry.id; DELETE FROM metabib.metarecord_source_map WHERE source = OLD.id);
14280
14281 UPDATE biblio.record_entry SET marc = '<record xmlns="http://www.loc.gov/MARC21/slim"/>' WHERE id = -1;
14282
14283 CREATE INDEX metabib_title_field_entry_value_idx ON metabib.title_field_entry (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14284 CREATE INDEX metabib_author_field_entry_value_idx ON metabib.author_field_entry (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14285 CREATE INDEX metabib_subject_field_entry_value_idx ON metabib.subject_field_entry (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14286 CREATE INDEX metabib_keyword_field_entry_value_idx ON metabib.keyword_field_entry (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14287 CREATE INDEX metabib_series_field_entry_value_idx ON metabib.series_field_entry (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14288
14289 CREATE INDEX metabib_author_field_entry_source_idx ON metabib.author_field_entry (source);
14290 CREATE INDEX metabib_keyword_field_entry_source_idx ON metabib.keyword_field_entry (source);
14291 CREATE INDEX metabib_title_field_entry_source_idx ON metabib.title_field_entry (source);
14292 CREATE INDEX metabib_series_field_entry_source_idx ON metabib.series_field_entry (source);
14293
14294 ALTER TABLE metabib.series_field_entry
14295         ADD CONSTRAINT metabib_series_field_entry_source_pkey FOREIGN KEY (source)
14296                 REFERENCES biblio.record_entry (id)
14297                 ON DELETE CASCADE
14298                 DEFERRABLE INITIALLY DEFERRED;
14299
14300 ALTER TABLE metabib.series_field_entry
14301         ADD CONSTRAINT metabib_series_field_entry_field_pkey FOREIGN KEY (field)
14302                 REFERENCES config.metabib_field (id)
14303                 ON DELETE CASCADE
14304                 DEFERRABLE INITIALLY DEFERRED;
14305
14306 CREATE TABLE acq.claim_policy_action (
14307         id              SERIAL       PRIMARY KEY,
14308         claim_policy    INT          NOT NULL REFERENCES acq.claim_policy
14309                                  ON DELETE CASCADE
14310                                      DEFERRABLE INITIALLY DEFERRED,
14311         action_interval INTERVAL     NOT NULL,
14312         action          INT          NOT NULL REFERENCES acq.claim_event_type
14313                                      DEFERRABLE INITIALLY DEFERRED,
14314         CONSTRAINT action_sequence UNIQUE (claim_policy, action_interval)
14315 );
14316
14317 CREATE OR REPLACE FUNCTION public.ingest_acq_marc ( ) RETURNS TRIGGER AS $function$
14318 DECLARE
14319     value       TEXT;
14320     atype       TEXT;
14321     prov        INT;
14322     pos         INT;
14323     adef        RECORD;
14324     xpath_string    TEXT;
14325 BEGIN
14326     FOR adef IN SELECT *,tableoid FROM acq.lineitem_attr_definition LOOP
14327  
14328         SELECT relname::TEXT INTO atype FROM pg_class WHERE oid = adef.tableoid;
14329  
14330         IF (atype NOT IN ('lineitem_usr_attr_definition','lineitem_local_attr_definition')) THEN
14331             IF (atype = 'lineitem_provider_attr_definition') THEN
14332                 SELECT provider INTO prov FROM acq.lineitem_provider_attr_definition WHERE id = adef.id;
14333                 CONTINUE WHEN NEW.provider IS NULL OR prov <> NEW.provider;
14334             END IF;
14335  
14336             IF (atype = 'lineitem_provider_attr_definition') THEN
14337                 SELECT xpath INTO xpath_string FROM acq.lineitem_provider_attr_definition WHERE id = adef.id;
14338             ELSIF (atype = 'lineitem_marc_attr_definition') THEN
14339                 SELECT xpath INTO xpath_string FROM acq.lineitem_marc_attr_definition WHERE id = adef.id;
14340             ELSIF (atype = 'lineitem_generated_attr_definition') THEN
14341                 SELECT xpath INTO xpath_string FROM acq.lineitem_generated_attr_definition WHERE id = adef.id;
14342             END IF;
14343  
14344             xpath_string := REGEXP_REPLACE(xpath_string,$re$//?text\(\)$$re$,'');
14345  
14346             pos := 1;
14347  
14348             LOOP
14349                 SELECT extract_acq_marc_field(id, xpath_string || '[' || pos || ']', adef.remove) INTO value FROM acq.lineitem WHERE id = NEW.id;
14350  
14351                 IF (value IS NOT NULL AND value <> '') THEN
14352                     INSERT INTO acq.lineitem_attr (lineitem, definition, attr_type, attr_name, attr_value)
14353                         VALUES (NEW.id, adef.id, atype, adef.code, value);
14354                 ELSE
14355                     EXIT;
14356                 END IF;
14357  
14358                 pos := pos + 1;
14359             END LOOP;
14360  
14361         END IF;
14362  
14363     END LOOP;
14364  
14365     RETURN NULL;
14366 END;
14367 $function$ LANGUAGE PLPGSQL;
14368
14369 UPDATE config.metabib_field SET label = name;
14370 ALTER TABLE config.metabib_field ALTER COLUMN label SET NOT NULL;
14371
14372 ALTER TABLE config.metabib_field ADD CONSTRAINT field_class_fkey FOREIGN KEY (field_class) REFERENCES config.metabib_class (name);
14373
14374 ALTER TABLE config.metabib_field DROP CONSTRAINT metabib_field_field_class_check;
14375
14376 ALTER TABLE config.metabib_field ADD CONSTRAINT metabib_field_format_fkey FOREIGN KEY (format) REFERENCES config.xml_transform (name);
14377
14378 CREATE TABLE config.metabib_search_alias (
14379     alias       TEXT    PRIMARY KEY,
14380     field_class TEXT    NOT NULL REFERENCES config.metabib_class (name),
14381     field       INT     REFERENCES config.metabib_field (id)
14382 );
14383
14384 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('kw','keyword');
14385 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.keyword','keyword');
14386 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.publisher','keyword');
14387 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.identifier','keyword');
14388 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('bib.subjecttitle','keyword');
14389 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('bib.genre','keyword');
14390 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('bib.edition','keyword');
14391 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('srw.serverchoice','keyword');
14392
14393 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('au','author');
14394 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('name','author');
14395 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('creator','author');
14396 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.author','author');
14397 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.name','author');
14398 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.creator','author');
14399 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.contributor','author');
14400 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('bib.name','author');
14401 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.namepersonal','author',8);
14402 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.namepersonalfamily','author',8);
14403 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.namepersonalgiven','author',8);
14404 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.namecorporate','author',7);
14405 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.nameconference','author',9);
14406
14407 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('ti','title');
14408 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.title','title');
14409 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.title','title');
14410 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.titleabbreviated','title',2);
14411 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.titleuniform','title',5);
14412 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.titletranslated','title',3);
14413 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.titlealternative','title',4);
14414 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.title','title',2);
14415
14416 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('su','subject');
14417 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.subject','subject');
14418 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.subject','subject');
14419 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.subjectplace','subject',11);
14420 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.subjectname','subject',12);
14421 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.subjectoccupation','subject',16);
14422
14423 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('se','series');
14424 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('eg.series','series');
14425 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('bib.titleseries','series',1);
14426
14427 UPDATE config.metabib_field SET facet_field=TRUE WHERE id = 1;
14428 UPDATE config.metabib_field SET xpath=$$//mods32:mods/mods32:name[@type='corporate' and mods32:role/mods32:roleTerm[text()='creator']]$$, facet_field=TRUE, facet_xpath=$$*[local-name()='namePart']$$ WHERE id = 7;
14429 UPDATE config.metabib_field SET xpath=$$//mods32:mods/mods32:name[@type='personal' and mods32:role/mods32:roleTerm[text()='creator']]$$, facet_field=TRUE, facet_xpath=$$*[local-name()='namePart']$$ WHERE id = 8;
14430 UPDATE config.metabib_field SET xpath=$$//mods32:mods/mods32:name[@type='conference' and mods32:role/mods32:roleTerm[text()='creator']]$$, facet_field=TRUE, facet_xpath=$$*[local-name()='namePart']$$ WHERE id = 9;
14431 UPDATE config.metabib_field SET xpath=$$//mods32:mods/mods32:name[@type='personal' and not(mods32:role)]$$, facet_field=TRUE, facet_xpath=$$*[local-name()='namePart']$$ WHERE id = 10;
14432
14433 UPDATE config.metabib_field SET facet_field=TRUE WHERE id = 11;
14434 UPDATE config.metabib_field SET facet_field=TRUE , facet_xpath=$$*[local-name()='namePart']$$ WHERE id = 12;
14435 UPDATE config.metabib_field SET facet_field=TRUE WHERE id = 13;
14436 UPDATE config.metabib_field SET facet_field=TRUE WHERE id = 14;
14437
14438 CREATE INDEX metabib_rec_descriptor_item_type_idx ON metabib.rec_descriptor (item_type);
14439 CREATE INDEX metabib_rec_descriptor_item_form_idx ON metabib.rec_descriptor (item_form);
14440 CREATE INDEX metabib_rec_descriptor_bib_level_idx ON metabib.rec_descriptor (bib_level);
14441 CREATE INDEX metabib_rec_descriptor_control_type_idx ON metabib.rec_descriptor (control_type);
14442 CREATE INDEX metabib_rec_descriptor_char_encoding_idx ON metabib.rec_descriptor (char_encoding);
14443 CREATE INDEX metabib_rec_descriptor_enc_level_idx ON metabib.rec_descriptor (enc_level);
14444 CREATE INDEX metabib_rec_descriptor_audience_idx ON metabib.rec_descriptor (audience);
14445 CREATE INDEX metabib_rec_descriptor_lit_form_idx ON metabib.rec_descriptor (lit_form);
14446 CREATE INDEX metabib_rec_descriptor_cat_form_idx ON metabib.rec_descriptor (cat_form);
14447 CREATE INDEX metabib_rec_descriptor_pub_status_idx ON metabib.rec_descriptor (pub_status);
14448 CREATE INDEX metabib_rec_descriptor_item_lang_idx ON metabib.rec_descriptor (item_lang);
14449 CREATE INDEX metabib_rec_descriptor_vr_format_idx ON metabib.rec_descriptor (vr_format);
14450 CREATE INDEX metabib_rec_descriptor_date1_idx ON metabib.rec_descriptor (date1);
14451 CREATE INDEX metabib_rec_descriptor_dates_idx ON metabib.rec_descriptor (date1,date2);
14452
14453 CREATE TABLE asset.opac_visible_copies (
14454   id        BIGINT primary key, -- copy id
14455   record    BIGINT,
14456   circ_lib  INTEGER
14457 );
14458 COMMENT ON TABLE asset.opac_visible_copies IS $$
14459 Materialized view of copies that are visible in the OPAC, used by
14460 search.query_parser_fts() to speed up OPAC visibility checks on large
14461 databases.  Contents are maintained by a set of triggers.
14462 $$;
14463 CREATE INDEX opac_visible_copies_idx1 on asset.opac_visible_copies (record, circ_lib);
14464
14465 CREATE OR REPLACE FUNCTION search.query_parser_fts (
14466
14467     param_search_ou INT,
14468     param_depth     INT,
14469     param_query     TEXT,
14470     param_statuses  INT[],
14471     param_locations INT[],
14472     param_offset    INT,
14473     param_check     INT,
14474     param_limit     INT,
14475     metarecord      BOOL,
14476     staff           BOOL
14477  
14478 ) RETURNS SETOF search.search_result AS $func$
14479 DECLARE
14480
14481     current_res         search.search_result%ROWTYPE;
14482     search_org_list     INT[];
14483
14484     check_limit         INT;
14485     core_limit          INT;
14486     core_offset         INT;
14487     tmp_int             INT;
14488
14489     core_result         RECORD;
14490     core_cursor         REFCURSOR;
14491     core_rel_query      TEXT;
14492
14493     total_count         INT := 0;
14494     check_count         INT := 0;
14495     deleted_count       INT := 0;
14496     visible_count       INT := 0;
14497     excluded_count      INT := 0;
14498
14499 BEGIN
14500
14501     check_limit := COALESCE( param_check, 1000 );
14502     core_limit  := COALESCE( param_limit, 25000 );
14503     core_offset := COALESCE( param_offset, 0 );
14504
14505     -- core_skip_chk := COALESCE( param_skip_chk, 1 );
14506
14507     IF param_search_ou > 0 THEN
14508         IF param_depth IS NOT NULL THEN
14509             SELECT array_accum(distinct id) INTO search_org_list FROM actor.org_unit_descendants( param_search_ou, param_depth );
14510         ELSE
14511             SELECT array_accum(distinct id) INTO search_org_list FROM actor.org_unit_descendants( param_search_ou );
14512         END IF;
14513     ELSIF param_search_ou < 0 THEN
14514         SELECT array_accum(distinct org_unit) INTO search_org_list FROM actor.org_lasso_map WHERE lasso = -param_search_ou;
14515     ELSIF param_search_ou = 0 THEN
14516         -- reserved for user lassos (ou_buckets/type='lasso') with ID passed in depth ... hack? sure.
14517     END IF;
14518
14519     OPEN core_cursor FOR EXECUTE param_query;
14520
14521     LOOP
14522
14523         FETCH core_cursor INTO core_result;
14524         EXIT WHEN NOT FOUND;
14525         EXIT WHEN total_count >= core_limit;
14526
14527         total_count := total_count + 1;
14528
14529         CONTINUE WHEN total_count NOT BETWEEN  core_offset + 1 AND check_limit + core_offset;
14530
14531         check_count := check_count + 1;
14532
14533         PERFORM 1 FROM biblio.record_entry b WHERE NOT b.deleted AND b.id IN ( SELECT * FROM search.explode_array( core_result.records ) );
14534         IF NOT FOUND THEN
14535             -- RAISE NOTICE ' % were all deleted ... ', core_result.records;
14536             deleted_count := deleted_count + 1;
14537             CONTINUE;
14538         END IF;
14539
14540         PERFORM 1
14541           FROM  biblio.record_entry b
14542                 JOIN config.bib_source s ON (b.source = s.id)
14543           WHERE s.transcendant
14544                 AND b.id IN ( SELECT * FROM search.explode_array( core_result.records ) );
14545
14546         IF FOUND THEN
14547             -- RAISE NOTICE ' % were all transcendant ... ', core_result.records;
14548             visible_count := visible_count + 1;
14549
14550             current_res.id = core_result.id;
14551             current_res.rel = core_result.rel;
14552
14553             tmp_int := 1;
14554             IF metarecord THEN
14555                 SELECT COUNT(DISTINCT s.source) INTO tmp_int FROM metabib.metarecord_source_map s WHERE s.metarecord = core_result.id;
14556             END IF;
14557
14558             IF tmp_int = 1 THEN
14559                 current_res.record = core_result.records[1];
14560             ELSE
14561                 current_res.record = NULL;
14562             END IF;
14563
14564             RETURN NEXT current_res;
14565
14566             CONTINUE;
14567         END IF;
14568
14569         PERFORM 1
14570           FROM  asset.call_number cn
14571                 JOIN asset.uri_call_number_map map ON (map.call_number = cn.id)
14572                 JOIN asset.uri uri ON (map.uri = uri.id)
14573           WHERE NOT cn.deleted
14574                 AND cn.label = '##URI##'
14575                 AND uri.active
14576                 AND ( param_locations IS NULL OR array_upper(param_locations, 1) IS NULL )
14577                 AND cn.record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14578                 AND cn.owning_lib IN ( SELECT * FROM search.explode_array( search_org_list ) )
14579           LIMIT 1;
14580
14581         IF FOUND THEN
14582             -- RAISE NOTICE ' % have at least one URI ... ', core_result.records;
14583             visible_count := visible_count + 1;
14584
14585             current_res.id = core_result.id;
14586             current_res.rel = core_result.rel;
14587
14588             tmp_int := 1;
14589             IF metarecord THEN
14590                 SELECT COUNT(DISTINCT s.source) INTO tmp_int FROM metabib.metarecord_source_map s WHERE s.metarecord = core_result.id;
14591             END IF;
14592
14593             IF tmp_int = 1 THEN
14594                 current_res.record = core_result.records[1];
14595             ELSE
14596                 current_res.record = NULL;
14597             END IF;
14598
14599             RETURN NEXT current_res;
14600
14601             CONTINUE;
14602         END IF;
14603
14604         IF param_statuses IS NOT NULL AND array_upper(param_statuses, 1) > 0 THEN
14605
14606             PERFORM 1
14607               FROM  asset.call_number cn
14608                     JOIN asset.copy cp ON (cp.call_number = cn.id)
14609               WHERE NOT cn.deleted
14610                     AND NOT cp.deleted
14611                     AND cp.status IN ( SELECT * FROM search.explode_array( param_statuses ) )
14612                     AND cn.record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14613                     AND cp.circ_lib IN ( SELECT * FROM search.explode_array( search_org_list ) )
14614               LIMIT 1;
14615
14616             IF NOT FOUND THEN
14617                 -- RAISE NOTICE ' % were all status-excluded ... ', core_result.records;
14618                 excluded_count := excluded_count + 1;
14619                 CONTINUE;
14620             END IF;
14621
14622         END IF;
14623
14624         IF param_locations IS NOT NULL AND array_upper(param_locations, 1) > 0 THEN
14625
14626             PERFORM 1
14627               FROM  asset.call_number cn
14628                     JOIN asset.copy cp ON (cp.call_number = cn.id)
14629               WHERE NOT cn.deleted
14630                     AND NOT cp.deleted
14631                     AND cp.location IN ( SELECT * FROM search.explode_array( param_locations ) )
14632                     AND cn.record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14633                     AND cp.circ_lib IN ( SELECT * FROM search.explode_array( search_org_list ) )
14634               LIMIT 1;
14635
14636             IF NOT FOUND THEN
14637                 -- RAISE NOTICE ' % were all copy_location-excluded ... ', core_result.records;
14638                 excluded_count := excluded_count + 1;
14639                 CONTINUE;
14640             END IF;
14641
14642         END IF;
14643
14644         IF staff IS NULL OR NOT staff THEN
14645
14646             PERFORM 1
14647               FROM  asset.opac_visible_copies
14648               WHERE circ_lib IN ( SELECT * FROM search.explode_array( search_org_list ) )
14649                     AND record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14650               LIMIT 1;
14651
14652             IF NOT FOUND THEN
14653                 -- RAISE NOTICE ' % were all visibility-excluded ... ', core_result.records;
14654                 excluded_count := excluded_count + 1;
14655                 CONTINUE;
14656             END IF;
14657
14658         ELSE
14659
14660             PERFORM 1
14661               FROM  asset.call_number cn
14662                     JOIN asset.copy cp ON (cp.call_number = cn.id)
14663                     JOIN actor.org_unit a ON (cp.circ_lib = a.id)
14664               WHERE NOT cn.deleted
14665                     AND NOT cp.deleted
14666                     AND cp.circ_lib IN ( SELECT * FROM search.explode_array( search_org_list ) )
14667                     AND cn.record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14668               LIMIT 1;
14669
14670             IF NOT FOUND THEN
14671
14672                 PERFORM 1
14673                   FROM  asset.call_number cn
14674                   WHERE cn.record IN ( SELECT * FROM search.explode_array( core_result.records ) )
14675                   LIMIT 1;
14676
14677                 IF FOUND THEN
14678                     -- RAISE NOTICE ' % were all visibility-excluded ... ', core_result.records;
14679                     excluded_count := excluded_count + 1;
14680                     CONTINUE;
14681                 END IF;
14682
14683             END IF;
14684
14685         END IF;
14686
14687         visible_count := visible_count + 1;
14688
14689         current_res.id = core_result.id;
14690         current_res.rel = core_result.rel;
14691
14692         tmp_int := 1;
14693         IF metarecord THEN
14694             SELECT COUNT(DISTINCT s.source) INTO tmp_int FROM metabib.metarecord_source_map s WHERE s.metarecord = core_result.id;
14695         END IF;
14696
14697         IF tmp_int = 1 THEN
14698             current_res.record = core_result.records[1];
14699         ELSE
14700             current_res.record = NULL;
14701         END IF;
14702
14703         RETURN NEXT current_res;
14704
14705         IF visible_count % 1000 = 0 THEN
14706             -- RAISE NOTICE ' % visible so far ... ', visible_count;
14707         END IF;
14708
14709     END LOOP;
14710
14711     current_res.id = NULL;
14712     current_res.rel = NULL;
14713     current_res.record = NULL;
14714     current_res.total = total_count;
14715     current_res.checked = check_count;
14716     current_res.deleted = deleted_count;
14717     current_res.visible = visible_count;
14718     current_res.excluded = excluded_count;
14719
14720     CLOSE core_cursor;
14721
14722     RETURN NEXT current_res;
14723
14724 END;
14725 $func$ LANGUAGE PLPGSQL;
14726
14727 ALTER TABLE biblio.record_entry ADD COLUMN owner INT REFERENCES actor.org_unit (id);
14728 ALTER TABLE biblio.record_entry ADD COLUMN share_depth INT;
14729
14730 ALTER TABLE auditor.biblio_record_entry_history ADD COLUMN owner INT;
14731 ALTER TABLE auditor.biblio_record_entry_history ADD COLUMN share_depth INT;
14732
14733 CREATE OR REPLACE FUNCTION public.first_word ( TEXT ) RETURNS TEXT AS $$
14734         SELECT COALESCE(SUBSTRING( $1 FROM $_$^\S+$_$), '');
14735 $$ LANGUAGE SQL STRICT IMMUTABLE;
14736
14737 CREATE OR REPLACE FUNCTION public.normalize_space( TEXT ) RETURNS TEXT AS $$
14738     SELECT regexp_replace(regexp_replace(regexp_replace($1, E'\\n', ' ', 'g'), E'(?:^\\s+)|(\\s+$)', '', 'g'), E'\\s+', ' ', 'g');
14739 $$ LANGUAGE SQL STRICT IMMUTABLE;
14740
14741 CREATE OR REPLACE FUNCTION public.lowercase( TEXT ) RETURNS TEXT AS $$
14742     return lc(shift);
14743 $$ LANGUAGE PLPERLU STRICT IMMUTABLE;
14744
14745 CREATE OR REPLACE FUNCTION public.uppercase( TEXT ) RETURNS TEXT AS $$
14746     return uc(shift);
14747 $$ LANGUAGE PLPERLU STRICT IMMUTABLE;
14748
14749 CREATE OR REPLACE FUNCTION public.remove_diacritics( TEXT ) RETURNS TEXT AS $$
14750     use Unicode::Normalize;
14751
14752     my $x = NFD(shift);
14753     $x =~ s/\pM+//go;
14754     return $x;
14755
14756 $$ LANGUAGE PLPERLU STRICT IMMUTABLE;
14757
14758 CREATE OR REPLACE FUNCTION public.entityize( TEXT ) RETURNS TEXT AS $$
14759     use Unicode::Normalize;
14760
14761     my $x = NFC(shift);
14762     $x =~ s/([\x{0080}-\x{fffd}])/sprintf('&#x%X;',ord($1))/sgoe;
14763     return $x;
14764
14765 $$ LANGUAGE PLPERLU STRICT IMMUTABLE;
14766
14767 CREATE OR REPLACE FUNCTION actor.org_unit_ancestor_setting( setting_name TEXT, org_id INT ) RETURNS SETOF actor.org_unit_setting AS $$
14768 DECLARE
14769     setting RECORD;
14770     cur_org INT;
14771 BEGIN
14772     cur_org := org_id;
14773     LOOP
14774         SELECT INTO setting * FROM actor.org_unit_setting WHERE org_unit = cur_org AND name = setting_name;
14775         IF FOUND THEN
14776             RETURN NEXT setting;
14777         END IF;
14778         SELECT INTO cur_org parent_ou FROM actor.org_unit WHERE id = cur_org;
14779         EXIT WHEN cur_org IS NULL;
14780     END LOOP;
14781     RETURN;
14782 END;
14783 $$ LANGUAGE plpgsql STABLE;
14784
14785 CREATE OR REPLACE FUNCTION acq.extract_holding_attr_table (lineitem int, tag text) RETURNS SETOF acq.flat_lineitem_holding_subfield AS $$
14786 DECLARE
14787     counter INT;
14788     lida    acq.flat_lineitem_holding_subfield%ROWTYPE;
14789 BEGIN
14790
14791     SELECT  COUNT(*) INTO counter
14792       FROM  oils_xpath_table(
14793                 'id',
14794                 'marc',
14795                 'acq.lineitem',
14796                 '//*[@tag="' || tag || '"]',
14797                 'id=' || lineitem
14798             ) as t(i int,c text);
14799
14800     FOR i IN 1 .. counter LOOP
14801         FOR lida IN
14802             SELECT  *
14803               FROM  (   SELECT  id,i,t,v
14804                           FROM  oils_xpath_table(
14805                                     'id',
14806                                     'marc',
14807                                     'acq.lineitem',
14808                                     '//*[@tag="' || tag || '"][position()=' || i || ']/*/@code|' ||
14809                                         '//*[@tag="' || tag || '"][position()=' || i || ']/*[@code]',
14810                                     'id=' || lineitem
14811                                 ) as t(id int,t text,v text)
14812                     )x
14813         LOOP
14814             RETURN NEXT lida;
14815         END LOOP;
14816     END LOOP;
14817
14818     RETURN;
14819 END;
14820 $$ LANGUAGE PLPGSQL;
14821
14822 CREATE OR REPLACE FUNCTION oils_i18n_xlate ( keytable TEXT, keyclass TEXT, keycol TEXT, identcol TEXT, keyvalue TEXT, raw_locale TEXT ) RETURNS TEXT AS $func$
14823 DECLARE
14824     locale      TEXT := REGEXP_REPLACE( REGEXP_REPLACE( raw_locale, E'[;, ].+$', '' ), E'_', '-', 'g' );
14825     language    TEXT := REGEXP_REPLACE( locale, E'-.+$', '' );
14826     result      config.i18n_core%ROWTYPE;
14827     fallback    TEXT;
14828     keyfield    TEXT := keyclass || '.' || keycol;
14829 BEGIN
14830
14831     -- Try the full locale
14832     SELECT  * INTO result
14833       FROM  config.i18n_core
14834       WHERE fq_field = keyfield
14835             AND identity_value = keyvalue
14836             AND translation = locale;
14837
14838     -- Try just the language
14839     IF NOT FOUND THEN
14840         SELECT  * INTO result
14841           FROM  config.i18n_core
14842           WHERE fq_field = keyfield
14843                 AND identity_value = keyvalue
14844                 AND translation = language;
14845     END IF;
14846
14847     -- Fall back to the string we passed in in the first place
14848     IF NOT FOUND THEN
14849     EXECUTE
14850             'SELECT ' ||
14851                 keycol ||
14852             ' FROM ' || keytable ||
14853             ' WHERE ' || identcol || ' = ' || quote_literal(keyvalue)
14854                 INTO fallback;
14855         RETURN fallback;
14856     END IF;
14857
14858     RETURN result.string;
14859 END;
14860 $func$ LANGUAGE PLPGSQL STABLE;
14861
14862 SELECT auditor.create_auditor ( 'acq', 'invoice' );
14863
14864 SELECT auditor.create_auditor ( 'acq', 'invoice_item' );
14865
14866 SELECT auditor.create_auditor ( 'acq', 'invoice_entry' );
14867
14868 INSERT INTO acq.cancel_reason ( id, org_unit, label, description, keep_debits ) VALUES (
14869     3, 1, 'delivered_but_lost',
14870     oils_i18n_gettext( 2, 'Delivered but not received; presumed lost', 'acqcr', 'label' ), TRUE );
14871
14872 CREATE TABLE config.global_flag (
14873     label   TEXT    NOT NULL
14874 ) INHERITS (config.internal_flag);
14875 ALTER TABLE config.global_flag ADD PRIMARY KEY (name);
14876
14877 INSERT INTO config.global_flag (name, label) -- defaults to enabled=FALSE
14878     VALUES (
14879         'cat.bib.use_id_for_tcn',
14880         oils_i18n_gettext(
14881             'cat.bib.use_id_for_tcn',
14882             'Cat: Use Internal ID for TCN Value',
14883             'cgf', 
14884             'label'
14885         )
14886     );
14887
14888 -- resolves performance issue noted by EG Indiana
14889
14890 CREATE INDEX scecm_owning_copy_idx ON asset.stat_cat_entry_copy_map(owning_copy);
14891
14892 INSERT INTO config.metabib_class ( name, label ) VALUES ( 'identifier', oils_i18n_gettext('identifier', 'Identifier', 'cmc', 'name') );
14893
14894 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14895     (17, 'identifier', 'accession', oils_i18n_gettext(17, 'Accession Number', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="001"]/text()$$, TRUE );
14896 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14897     (18, 'identifier', 'isbn', oils_i18n_gettext(18, 'ISBN', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="020"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14898 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14899     (19, 'identifier', 'issn', oils_i18n_gettext(19, 'ISSN', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="022"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14900 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14901     (20, 'identifier', 'upc', oils_i18n_gettext(20, 'UPC', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="024" and ind1="1"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14902 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14903     (21, 'identifier', 'ismn', oils_i18n_gettext(21, 'ISMN', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="024" and ind1="2"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14904 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14905     (22, 'identifier', 'ean', oils_i18n_gettext(22, 'EAN', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="024" and ind1="3"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14906 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14907     (23, 'identifier', 'isrc', oils_i18n_gettext(23, 'ISRC', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="024" and ind1="0"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14908 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14909     (24, 'identifier', 'sici', oils_i18n_gettext(24, 'SICI', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="024" and ind1="4"]/marcxml:subfield[code="a" or code="z"]/text()$$, TRUE );
14910 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field ) VALUES
14911     (25, 'identifier', 'bibcn', oils_i18n_gettext(25, 'Local Free-Text Call Number', 'cmf', 'label'), 'marcxml', $$//marcxml:datafield[tag="099"]//text()$$, TRUE );
14912
14913 SELECT SETVAL('config.metabib_field_id_seq'::TEXT, (SELECT MAX(id) FROM config.metabib_field), TRUE);
14914  
14915
14916 DELETE FROM config.metabib_search_alias WHERE alias = 'dc.identifier';
14917
14918 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('id','identifier');
14919 INSERT INTO config.metabib_search_alias (alias,field_class) VALUES ('dc.identifier','identifier');
14920 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.isbn','identifier', 18);
14921 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.issn','identifier', 19);
14922 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.upc','identifier', 20);
14923 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.callnumber','identifier', 25);
14924
14925 CREATE TABLE metabib.identifier_field_entry (
14926         id              BIGSERIAL       PRIMARY KEY,
14927         source          BIGINT          NOT NULL,
14928         field           INT             NOT NULL,
14929         value           TEXT            NOT NULL,
14930         index_vector    tsvector        NOT NULL
14931 );
14932 CREATE TRIGGER metabib_identifier_field_entry_fti_trigger
14933         BEFORE UPDATE OR INSERT ON metabib.identifier_field_entry
14934         FOR EACH ROW EXECUTE PROCEDURE oils_tsearch2('keyword');
14935
14936 CREATE INDEX metabib_identifier_field_entry_index_vector_idx ON metabib.identifier_field_entry USING GIST (index_vector);
14937 CREATE INDEX metabib_identifier_field_entry_value_idx ON metabib.identifier_field_entry
14938     (SUBSTRING(value,1,1024)) WHERE index_vector = ''::TSVECTOR;
14939 CREATE INDEX metabib_identifier_field_entry_source_idx ON metabib.identifier_field_entry (source);
14940
14941 ALTER TABLE metabib.identifier_field_entry ADD CONSTRAINT metabib_identifier_field_entry_source_pkey
14942     FOREIGN KEY (source) REFERENCES biblio.record_entry (id) ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED;
14943 ALTER TABLE metabib.identifier_field_entry ADD CONSTRAINT metabib_identifier_field_entry_field_pkey
14944     FOREIGN KEY (field) REFERENCES config.metabib_field (id) ON DELETE CASCADE DEFERRABLE INITIALLY DEFERRED;
14945
14946 CREATE OR REPLACE FUNCTION public.translate_isbn1013( TEXT ) RETURNS TEXT AS $func$
14947     use Business::ISBN;
14948     use strict;
14949     use warnings;
14950
14951     # For each ISBN found in a single string containing a set of ISBNs:
14952     #   * Normalize an incoming ISBN to have the correct checksum and no hyphens
14953     #   * Convert an incoming ISBN10 or ISBN13 to its counterpart and return
14954
14955     my $input = shift;
14956     my $output = '';
14957
14958     foreach my $word (split(/\s/, $input)) {
14959         my $isbn = Business::ISBN->new($word);
14960
14961         # First check the checksum; if it is not valid, fix it and add the original
14962         # bad-checksum ISBN to the output
14963         if ($isbn && $isbn->is_valid_checksum() == Business::ISBN::BAD_CHECKSUM) {
14964             $output .= $isbn->isbn() . " ";
14965             $isbn->fix_checksum();
14966         }
14967
14968         # If we now have a valid ISBN, convert it to its counterpart ISBN10/ISBN13
14969         # and add the normalized original ISBN to the output
14970         if ($isbn && $isbn->is_valid()) {
14971             my $isbn_xlated = ($isbn->type eq "ISBN13") ? $isbn->as_isbn10 : $isbn->as_isbn13;
14972             $output .= $isbn->isbn . " ";
14973
14974             # If we successfully converted the ISBN to its counterpart, add the
14975             # converted ISBN to the output as well
14976             $output .= ($isbn_xlated->isbn . " ") if ($isbn_xlated);
14977         }
14978     }
14979     return $output if $output;
14980
14981     # If there were no valid ISBNs, just return the raw input
14982     return $input;
14983 $func$ LANGUAGE PLPERLU;
14984
14985 COMMENT ON FUNCTION public.translate_isbn1013(TEXT) IS $$
14986 /*
14987  * Copyright (C) 2010 Merrimack Valley Library Consortium
14988  * Jason Stephenson <jstephenson@mvlc.org>
14989  * Copyright (C) 2010 Laurentian University
14990  * Dan Scott <dscott@laurentian.ca>
14991  *
14992  * The translate_isbn1013 function takes an input ISBN and returns the
14993  * following in a single space-delimited string if the input ISBN is valid:
14994  *   - The normalized input ISBN (hyphens stripped)
14995  *   - The normalized input ISBN with a fixed checksum if the checksum was bad
14996  *   - The ISBN converted to its ISBN10 or ISBN13 counterpart, if possible
14997  */
14998 $$;
14999
15000 UPDATE config.metabib_field SET facet_field = FALSE WHERE id BETWEEN 17 AND 25;
15001 UPDATE config.metabib_field SET xpath = REPLACE(xpath,'marcxml','marc') WHERE id BETWEEN 17 AND 25;
15002 UPDATE config.metabib_field SET xpath = REPLACE(xpath,'tag','@tag') WHERE id BETWEEN 17 AND 25;
15003 UPDATE config.metabib_field SET xpath = REPLACE(xpath,'code','@code') WHERE id BETWEEN 17 AND 25;
15004 UPDATE config.metabib_field SET xpath = REPLACE(xpath,'"',E'\'') WHERE id BETWEEN 17 AND 25;
15005 UPDATE config.metabib_field SET xpath = REPLACE(xpath,'/text()','') WHERE id BETWEEN 17 AND 24;
15006
15007 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
15008         'ISBN 10/13 conversion',
15009         'Translate ISBN10 to ISBN13, and vice versa, for indexing purposes.',
15010         'translate_isbn1013',
15011         0
15012 );
15013
15014 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
15015         'Replace',
15016         'Replace all occurances of first parameter in the string with the second parameter.',
15017         'replace',
15018         2
15019 );
15020
15021 INSERT INTO config.metabib_field_index_norm_map (field,norm,pos)
15022     SELECT  m.id, i.id, 1
15023       FROM  config.metabib_field m,
15024             config.index_normalizer i
15025       WHERE i.func IN ('first_word')
15026             AND m.id IN (18);
15027
15028 INSERT INTO config.metabib_field_index_norm_map (field,norm,pos)
15029     SELECT  m.id, i.id, 2
15030       FROM  config.metabib_field m,
15031             config.index_normalizer i
15032       WHERE i.func IN ('translate_isbn1013')
15033             AND m.id IN (18);
15034
15035 INSERT INTO config.metabib_field_index_norm_map (field,norm,params)
15036     SELECT  m.id, i.id, $$['-','']$$
15037       FROM  config.metabib_field m,
15038             config.index_normalizer i
15039       WHERE i.func IN ('replace')
15040             AND m.id IN (19);
15041
15042 INSERT INTO config.metabib_field_index_norm_map (field,norm,params)
15043     SELECT  m.id, i.id, $$[' ','']$$
15044       FROM  config.metabib_field m,
15045             config.index_normalizer i
15046       WHERE i.func IN ('replace')
15047             AND m.id IN (19);
15048
15049 DELETE FROM config.metabib_field_index_norm_map WHERE norm IN (1,2) and field > 16;
15050
15051 UPDATE  config.metabib_field_index_norm_map
15052   SET   params = REPLACE(params,E'\'','"')
15053   WHERE params IS NOT NULL AND params <> '';
15054
15055 DROP TRIGGER IF EXISTS metabib_identifier_field_entry_fti_trigger ON metabib.identifier_field_entry;
15056
15057 CREATE TEXT SEARCH CONFIGURATION identifier ( COPY = title );
15058
15059 ALTER TABLE config.circ_modifier
15060         ADD COLUMN avg_wait_time INTERVAL;
15061
15062 --CREATE TABLE actor.usr_password_reset (
15063 --  id SERIAL PRIMARY KEY,
15064 --  uuid TEXT NOT NULL, 
15065 --  usr BIGINT NOT NULL REFERENCES actor.usr(id) DEFERRABLE INITIALLY DEFERRED, 
15066 --  request_time TIMESTAMP NOT NULL DEFAULT NOW(), 
15067 --  has_been_reset BOOL NOT NULL DEFAULT false
15068 --);
15069 --COMMENT ON TABLE actor.usr_password_reset IS $$
15070 --/*
15071 -- * Copyright (C) 2010 Laurentian University
15072 -- * Dan Scott <dscott@laurentian.ca>
15073 -- *
15074 -- * Self-serve password reset requests
15075 -- *
15076 -- * ****
15077 -- *
15078 -- * This program is free software; you can redistribute it and/or
15079 -- * modify it under the terms of the GNU General Public License
15080 -- * as published by the Free Software Foundation; either version 2
15081 -- * of the License, or (at your option) any later version.
15082 -- *
15083 -- * This program is distributed in the hope that it will be useful,
15084 -- * but WITHOUT ANY WARRANTY; without even the implied warranty of
15085 -- * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15086 -- * GNU General Public License for more details.
15087 -- */
15088 --$$;
15089 --CREATE UNIQUE INDEX actor_usr_password_reset_uuid_idx ON actor.usr_password_reset (uuid);
15090 --CREATE INDEX actor_usr_password_reset_usr_idx ON actor.usr_password_reset (usr);
15091 --CREATE INDEX actor_usr_password_reset_request_time_idx ON actor.usr_password_reset (request_time);
15092 --CREATE INDEX actor_usr_password_reset_has_been_reset_idx ON actor.usr_password_reset (has_been_reset);
15093
15094 -- Use the identifier search class tsconfig
15095 DROP TRIGGER IF EXISTS metabib_identifier_field_entry_fti_trigger ON metabib.identifier_field_entry;
15096 CREATE TRIGGER metabib_identifier_field_entry_fti_trigger
15097     BEFORE INSERT OR UPDATE ON metabib.identifier_field_entry
15098     FOR EACH ROW
15099     EXECUTE PROCEDURE public.oils_tsearch2('identifier');
15100
15101 INSERT INTO config.global_flag (name,label,enabled)
15102     VALUES ('history.circ.retention_age',oils_i18n_gettext('history.circ.retention_age', 'Historical Circulation Retention Age', 'cgf', 'label'), TRUE);
15103 INSERT INTO config.global_flag (name,label,enabled)
15104     VALUES ('history.circ.retention_count',oils_i18n_gettext('history.circ.retention_count', 'Historical Circulations per Copy', 'cgf', 'label'), TRUE);
15105
15106 -- turn a JSON scalar into an SQL TEXT value
15107 CREATE OR REPLACE FUNCTION oils_json_to_text( TEXT ) RETURNS TEXT AS $f$
15108     use JSON::XS;                    
15109     my $json = shift();
15110     my $txt;
15111     eval { $txt = JSON::XS->new->allow_nonref->decode( $json ) };   
15112     return undef if ($@);
15113     return $txt
15114 $f$ LANGUAGE PLPERLU;
15115
15116 -- Return the list of circ chain heads in xact_start order that the user has chosen to "retain"
15117 CREATE OR REPLACE FUNCTION action.usr_visible_circs (usr_id INT) RETURNS SETOF action.circulation AS $func$
15118 DECLARE
15119     c               action.circulation%ROWTYPE;
15120     view_age        INTERVAL;
15121     usr_view_age    actor.usr_setting%ROWTYPE;
15122     usr_view_start  actor.usr_setting%ROWTYPE;
15123 BEGIN
15124     SELECT * INTO usr_view_age FROM actor.usr_setting WHERE usr = usr_id AND name = 'history.circ.retention_age';
15125     SELECT * INTO usr_view_start FROM actor.usr_setting WHERE usr = usr_id AND name = 'history.circ.retention_start';
15126
15127     IF usr_view_age.value IS NOT NULL AND usr_view_start.value IS NOT NULL THEN
15128         -- User opted in and supplied a retention age
15129         IF oils_json_to_text(usr_view_age.value)::INTERVAL > AGE(NOW(), oils_json_to_text(usr_view_start.value)::TIMESTAMPTZ) THEN
15130             view_age := AGE(NOW(), oils_json_to_text(usr_view_start.value)::TIMESTAMPTZ);
15131         ELSE
15132             view_age := oils_json_to_text(usr_view_age.value)::INTERVAL;
15133         END IF;
15134     ELSIF usr_view_start.value IS NOT NULL THEN
15135         -- User opted in
15136         view_age := AGE(NOW(), oils_json_to_text(usr_view_start.value)::TIMESTAMPTZ);
15137     ELSE
15138         -- User did not opt in
15139         RETURN;
15140     END IF;
15141
15142     FOR c IN
15143         SELECT  *
15144           FROM  action.circulation
15145           WHERE usr = usr_id
15146                 AND parent_circ IS NULL
15147                 AND xact_start > NOW() - view_age
15148           ORDER BY xact_start
15149     LOOP
15150         RETURN NEXT c;
15151     END LOOP;
15152
15153     RETURN;
15154 END;
15155 $func$ LANGUAGE PLPGSQL;
15156
15157 CREATE OR REPLACE FUNCTION action.purge_circulations () RETURNS INT AS $func$
15158 DECLARE
15159     usr_keep_age    actor.usr_setting%ROWTYPE;
15160     usr_keep_start  actor.usr_setting%ROWTYPE;
15161     org_keep_age    INTERVAL;
15162     org_keep_count  INT;
15163
15164     keep_age        INTERVAL;
15165
15166     target_acp      RECORD;
15167     circ_chain_head action.circulation%ROWTYPE;
15168     circ_chain_tail action.circulation%ROWTYPE;
15169
15170     purge_position  INT;
15171     count_purged    INT;
15172 BEGIN
15173
15174     count_purged := 0;
15175
15176     SELECT value::INTERVAL INTO org_keep_age FROM config.global_flag WHERE name = 'history.circ.retention_age' AND enabled;
15177
15178     SELECT value::INT INTO org_keep_count FROM config.global_flag WHERE name = 'history.circ.retention_count' AND enabled;
15179     IF org_keep_count IS NULL THEN
15180         RETURN count_purged; -- Gimme a count to keep, or I keep them all, forever
15181     END IF;
15182
15183     -- First, find copies with more than keep_count non-renewal circs
15184     FOR target_acp IN
15185         SELECT  target_copy,
15186                 COUNT(*) AS total_real_circs
15187           FROM  action.circulation
15188           WHERE parent_circ IS NULL
15189                 AND xact_finish IS NOT NULL
15190           GROUP BY target_copy
15191           HAVING COUNT(*) > org_keep_count
15192     LOOP
15193         purge_position := 0;
15194         -- And, for those, select circs that are finished and older than keep_age
15195         FOR circ_chain_head IN
15196             SELECT  *
15197               FROM  action.circulation
15198               WHERE target_copy = target_acp.target_copy
15199                     AND parent_circ IS NULL
15200               ORDER BY xact_start
15201         LOOP
15202
15203             -- Stop once we've purged enough circs to hit org_keep_count
15204             EXIT WHEN target_acp.total_real_circs - purge_position <= org_keep_count;
15205
15206             SELECT * INTO circ_chain_tail FROM action.circ_chain(circ_chain_head.id) ORDER BY xact_start DESC LIMIT 1;
15207             EXIT WHEN circ_chain_tail.xact_finish IS NULL;
15208
15209             -- Now get the user setings, if any, to block purging if the user wants to keep more circs
15210             usr_keep_age.value := NULL;
15211             SELECT * INTO usr_keep_age FROM actor.usr_setting WHERE usr = circ_chain_head.usr AND name = 'history.circ.retention_age';
15212
15213             usr_keep_start.value := NULL;
15214             SELECT * INTO usr_keep_start FROM actor.usr_setting WHERE usr = circ_chain_head.usr AND name = 'history.circ.retention_start_date';
15215
15216             IF usr_keep_age.value IS NOT NULL AND usr_keep_start.value IS NOT NULL THEN
15217                 IF oils_json_to_string(usr_keep_age.value)::INTERVAL > AGE(NOW(), oils_json_to_string(usr_keep_start.value)::TIMESTAMPTZ) THEN
15218                     keep_age := AGE(NOW(), oils_json_to_string(usr_keep_start.value)::TIMESTAMPTZ);
15219                 ELSE
15220                     keep_age := oils_json_to_string(usr_keep_age.value)::INTERVAL;
15221                 END IF;
15222             ELSIF usr_keep_start.value IS NOT NULL THEN
15223                 keep_age := AGE(NOW(), oils_json_to_string(usr_keep_start.value)::TIMESTAMPTZ);
15224             ELSE
15225                 keep_age := COALESCE( org_keep_age::INTERVAL, '2000 years'::INTEVAL );
15226             END IF;
15227
15228             EXIT WHEN AGE(NOW(), circ_chain_tail.xact_finish) < keep_age;
15229
15230             -- We've passed the purging tests, purge the circ chain starting at the end
15231             DELETE FROM action.circulation WHERE id = circ_chain_tail.id;
15232             WHILE circ_chain_tail.parent_circ IS NOT NULL LOOP
15233                 SELECT * INTO circ_chain_tail FROM action.circulation WHERE id = circ_chain_tail.parent_circ;
15234                 DELETE FROM action.circulation WHERE id = circ_chain_tail.id;
15235             END LOOP;
15236
15237             count_purged := count_purged + 1;
15238             purge_position := purge_position + 1;
15239
15240         END LOOP;
15241     END LOOP;
15242 END;
15243 $func$ LANGUAGE PLPGSQL;
15244
15245 CREATE OR REPLACE FUNCTION action.usr_visible_holds (usr_id INT) RETURNS SETOF action.hold_request AS $func$
15246 DECLARE
15247     h               action.hold_request%ROWTYPE;
15248     view_age        INTERVAL;
15249     view_count      INT;
15250     usr_view_count  actor.usr_setting%ROWTYPE;
15251     usr_view_age    actor.usr_setting%ROWTYPE;
15252     usr_view_start  actor.usr_setting%ROWTYPE;
15253 BEGIN
15254     SELECT * INTO usr_view_count FROM actor.usr_setting WHERE usr = usr_id AND name = 'history.hold.retention_count';
15255     SELECT * INTO usr_view_age FROM actor.usr_setting WHERE usr = usr_id AND name = 'history.hold.retention_age';
15256     SELECT * INTO usr_view_start FROM actor.usr_setting WHERE usr = usr_id AND name = 'history.hold.retention_start';
15257
15258     FOR h IN
15259         SELECT  *
15260           FROM  action.hold_request
15261           WHERE usr = usr_id
15262                 AND fulfillment_time IS NULL
15263                 AND cancel_time IS NULL
15264           ORDER BY request_time DESC
15265     LOOP
15266         RETURN NEXT h;
15267     END LOOP;
15268
15269     IF usr_view_start.value IS NULL THEN
15270         RETURN;
15271     END IF;
15272
15273     IF usr_view_age.value IS NOT NULL THEN
15274         -- User opted in and supplied a retention age
15275         IF oils_json_to_string(usr_view_age.value)::INTERVAL > AGE(NOW(), oils_json_to_string(usr_view_start.value)::TIMESTAMPTZ) THEN
15276             view_age := AGE(NOW(), oils_json_to_string(usr_view_start.value)::TIMESTAMPTZ);
15277         ELSE
15278             view_age := oils_json_to_string(usr_view_age.value)::INTERVAL;
15279         END IF;
15280     ELSE
15281         -- User opted in
15282         view_age := AGE(NOW(), oils_json_to_string(usr_view_start.value)::TIMESTAMPTZ);
15283     END IF;
15284
15285     IF usr_view_count.value IS NOT NULL THEN
15286         view_count := oils_json_to_text(usr_view_count.value)::INT;
15287     ELSE
15288         view_count := 1000;
15289     END IF;
15290
15291     -- show some fulfilled/canceled holds
15292     FOR h IN
15293         SELECT  *
15294           FROM  action.hold_request
15295           WHERE usr = usr_id
15296                 AND ( fulfillment_time IS NOT NULL OR cancel_time IS NOT NULL )
15297                 AND request_time > NOW() - view_age
15298           ORDER BY request_time DESC
15299           LIMIT view_count
15300     LOOP
15301         RETURN NEXT h;
15302     END LOOP;
15303
15304     RETURN;
15305 END;
15306 $func$ LANGUAGE PLPGSQL;
15307
15308 DROP TABLE IF EXISTS serial.bib_summary CASCADE;
15309
15310 DROP TABLE IF EXISTS serial.index_summary CASCADE;
15311
15312 DROP TABLE IF EXISTS serial.sup_summary CASCADE;
15313
15314 DROP TABLE IF EXISTS serial.issuance CASCADE;
15315
15316 DROP TABLE IF EXISTS serial.binding_unit CASCADE;
15317
15318 DROP TABLE IF EXISTS serial.subscription CASCADE;
15319
15320 CREATE TABLE asset.copy_template (
15321         id             SERIAL   PRIMARY KEY,
15322         owning_lib     INT      NOT NULL
15323                                 REFERENCES actor.org_unit (id)
15324                                 DEFERRABLE INITIALLY DEFERRED,
15325         creator        BIGINT   NOT NULL
15326                                 REFERENCES actor.usr (id)
15327                                 DEFERRABLE INITIALLY DEFERRED,
15328         editor         BIGINT   NOT NULL
15329                                 REFERENCES actor.usr (id)
15330                                 DEFERRABLE INITIALLY DEFERRED,
15331         create_date    TIMESTAMP WITH TIME ZONE    DEFAULT NOW(),
15332         edit_date      TIMESTAMP WITH TIME ZONE    DEFAULT NOW(),
15333         name           TEXT     NOT NULL,
15334         -- columns above this point are attributes of the template itself
15335         -- columns after this point are attributes of the copy this template modifies/creates
15336         circ_lib       INT      REFERENCES actor.org_unit (id)
15337                                 DEFERRABLE INITIALLY DEFERRED,
15338         status         INT      REFERENCES config.copy_status (id)
15339                                 DEFERRABLE INITIALLY DEFERRED,
15340         location       INT      REFERENCES asset.copy_location (id)
15341                                 DEFERRABLE INITIALLY DEFERRED,
15342         loan_duration  INT      CONSTRAINT valid_loan_duration CHECK (
15343                                     loan_duration IS NULL OR loan_duration IN (1,2,3)),
15344         fine_level     INT      CONSTRAINT valid_fine_level CHECK (
15345                                     fine_level IS NULL OR loan_duration IN (1,2,3)),
15346         age_protect    INT,
15347         circulate      BOOL,
15348         deposit        BOOL,
15349         ref            BOOL,
15350         holdable       BOOL,
15351         deposit_amount NUMERIC(6,2),
15352         price          NUMERIC(8,2),
15353         circ_modifier  TEXT,
15354         circ_as_type   TEXT,
15355         alert_message  TEXT,
15356         opac_visible   BOOL,
15357         floating       BOOL,
15358         mint_condition BOOL
15359 );
15360
15361 CREATE TABLE serial.subscription (
15362         id                     SERIAL       PRIMARY KEY,
15363         owning_lib             INT          NOT NULL DEFAULT 1
15364                                             REFERENCES actor.org_unit (id)
15365                                             ON DELETE SET NULL
15366                                             DEFERRABLE INITIALLY DEFERRED,
15367         start_date             TIMESTAMP WITH TIME ZONE     NOT NULL,
15368         end_date               TIMESTAMP WITH TIME ZONE,    -- interpret NULL as current subscription
15369         record_entry           BIGINT       REFERENCES biblio.record_entry (id)
15370                                             ON DELETE SET NULL
15371                                             DEFERRABLE INITIALLY DEFERRED,
15372         expected_date_offset   INTERVAL
15373         -- acquisitions/business-side tables link to here
15374 );
15375
15376 --at least one distribution per org_unit holding issues
15377 CREATE TABLE serial.distribution (
15378         id                    SERIAL  PRIMARY KEY,
15379         record_entry          BIGINT  REFERENCES serial.record_entry (id)
15380                                       ON DELETE SET NULL
15381                                       DEFERRABLE INITIALLY DEFERRED,
15382         summary_method        TEXT    CONSTRAINT sdist_summary_method_check CHECK (
15383                                           summary_method IS NULL
15384                                           OR summary_method IN ( 'add_to_sre',
15385                                           'merge_with_sre', 'use_sre_only',
15386                                           'use_sdist_only')),
15387         subscription          INT     NOT NULL
15388                                       REFERENCES serial.subscription (id)
15389                                                                   ON DELETE CASCADE
15390                                                                   DEFERRABLE INITIALLY DEFERRED,
15391         holding_lib           INT     NOT NULL
15392                                       REFERENCES actor.org_unit (id)
15393                                                                   DEFERRABLE INITIALLY DEFERRED,
15394         label                 TEXT    NOT NULL,
15395         receive_call_number   BIGINT  REFERENCES asset.call_number (id)
15396                                       DEFERRABLE INITIALLY DEFERRED,
15397         receive_unit_template INT     REFERENCES asset.copy_template (id)
15398                                       DEFERRABLE INITIALLY DEFERRED,
15399         bind_call_number      BIGINT  REFERENCES asset.call_number (id)
15400                                       DEFERRABLE INITIALLY DEFERRED,
15401         bind_unit_template    INT     REFERENCES asset.copy_template (id)
15402                                       DEFERRABLE INITIALLY DEFERRED,
15403         unit_label_prefix     TEXT,
15404         unit_label_suffix     TEXT
15405 );
15406
15407 CREATE UNIQUE INDEX one_dist_per_sre_idx ON serial.distribution (record_entry);
15408
15409 CREATE TABLE serial.stream (
15410         id              SERIAL  PRIMARY KEY,
15411         distribution    INT     NOT NULL
15412                                 REFERENCES serial.distribution (id)
15413                                 ON DELETE CASCADE
15414                                 DEFERRABLE INITIALLY DEFERRED,
15415         routing_label   TEXT
15416 );
15417
15418 CREATE UNIQUE INDEX label_once_per_dist
15419         ON serial.stream (distribution, routing_label)
15420         WHERE routing_label IS NOT NULL;
15421
15422 CREATE TABLE serial.routing_list_user (
15423         id             SERIAL       PRIMARY KEY,
15424         stream         INT          NOT NULL
15425                                     REFERENCES serial.stream
15426                                     ON DELETE CASCADE
15427                                     DEFERRABLE INITIALLY DEFERRED,
15428         pos            INT          NOT NULL DEFAULT 1,
15429         reader         INT          REFERENCES actor.usr
15430                                     ON DELETE CASCADE
15431                                     DEFERRABLE INITIALLY DEFERRED,
15432         department     TEXT,
15433         note           TEXT,
15434         CONSTRAINT one_pos_per_routing_list UNIQUE ( stream, pos ),
15435         CONSTRAINT reader_or_dept CHECK
15436         (
15437             -- Recipient is a person or a department, but not both
15438                 (reader IS NOT NULL AND department IS NULL) OR
15439                 (reader IS NULL AND department IS NOT NULL)
15440         )
15441 );
15442
15443 CREATE TABLE serial.caption_and_pattern (
15444         id           SERIAL       PRIMARY KEY,
15445         subscription INT          NOT NULL REFERENCES serial.subscription (id)
15446                                   ON DELETE CASCADE
15447                                   DEFERRABLE INITIALLY DEFERRED,
15448         type         TEXT         NOT NULL
15449                                   CONSTRAINT cap_type CHECK ( type in
15450                                   ( 'basic', 'supplement', 'index' )),
15451         create_date  TIMESTAMPTZ  NOT NULL DEFAULT now(),
15452         start_date   TIMESTAMP WITH TIME ZONE NOT NULL DEFAULT NOW(),
15453         end_date     TIMESTAMP WITH TIME ZONE,
15454         active       BOOL         NOT NULL DEFAULT FALSE,
15455         pattern_code TEXT         NOT NULL,       -- must contain JSON
15456         enum_1       TEXT,
15457         enum_2       TEXT,
15458         enum_3       TEXT,
15459         enum_4       TEXT,
15460         enum_5       TEXT,
15461         enum_6       TEXT,
15462         chron_1      TEXT,
15463         chron_2      TEXT,
15464         chron_3      TEXT,
15465         chron_4      TEXT,
15466         chron_5      TEXT
15467 );
15468
15469 CREATE TABLE serial.issuance (
15470         id              SERIAL    PRIMARY KEY,
15471         creator         INT       NOT NULL
15472                                   REFERENCES actor.usr (id)
15473                                                           DEFERRABLE INITIALLY DEFERRED,
15474         editor          INT       NOT NULL
15475                                   REFERENCES actor.usr (id)
15476                                   DEFERRABLE INITIALLY DEFERRED,
15477         create_date     TIMESTAMP WITH TIME ZONE        NOT NULL DEFAULT now(),
15478         edit_date       TIMESTAMP WITH TIME ZONE        NOT NULL DEFAULT now(),
15479         subscription    INT       NOT NULL
15480                                   REFERENCES serial.subscription (id)
15481                                   ON DELETE CASCADE
15482                                   DEFERRABLE INITIALLY DEFERRED,
15483         label           TEXT,
15484         date_published  TIMESTAMP WITH TIME ZONE,
15485         caption_and_pattern  INT  REFERENCES serial.caption_and_pattern (id)
15486                               DEFERRABLE INITIALLY DEFERRED,
15487         holding_code    TEXT,
15488         holding_type    TEXT      CONSTRAINT valid_holding_type CHECK
15489                                   (
15490                                       holding_type IS NULL
15491                                       OR holding_type IN ('basic','supplement','index')
15492                                   ),
15493         holding_link_id INT
15494         -- TODO: add columns for separate enumeration/chronology values
15495 );
15496
15497 CREATE TABLE serial.unit (
15498         label           TEXT,
15499         label_sort_key  TEXT,
15500         contents        TEXT    NOT NULL
15501 ) INHERITS (asset.copy);
15502
15503 ALTER TABLE serial.unit ADD PRIMARY KEY (id);
15504
15505 ALTER TABLE serial.unit ADD CONSTRAINT serial_unit_call_number_fkey FOREIGN KEY (call_number) REFERENCES asset.call_number (id) DEFERRABLE INITIALLY DEFERRED;
15506
15507 ALTER TABLE serial.unit ADD CONSTRAINT serial_unit_creator_fkey FOREIGN KEY (creator) REFERENCES actor.usr (id) ON DELETE SET NULL DEFERRABLE INITIALLY DEFERRED;
15508
15509 ALTER TABLE serial.unit ADD CONSTRAINT serial_unit_editor_fkey FOREIGN KEY (editor) REFERENCES actor.usr (id) ON DELETE SET NULL DEFERRABLE INITIALLY DEFERRED;
15510
15511 CREATE TABLE serial.item (
15512         id              SERIAL  PRIMARY KEY,
15513         creator         INT     NOT NULL
15514                                 REFERENCES actor.usr (id)
15515                                 DEFERRABLE INITIALLY DEFERRED,
15516         editor          INT     NOT NULL
15517                                 REFERENCES actor.usr (id)
15518                                 DEFERRABLE INITIALLY DEFERRED,
15519         create_date     TIMESTAMP WITH TIME ZONE        NOT NULL DEFAULT now(),
15520         edit_date       TIMESTAMP WITH TIME ZONE        NOT NULL DEFAULT now(),
15521         issuance        INT     NOT NULL
15522                                 REFERENCES serial.issuance (id)
15523                                 ON DELETE CASCADE
15524                                 DEFERRABLE INITIALLY DEFERRED,
15525         stream          INT     NOT NULL
15526                                 REFERENCES serial.stream (id)
15527                                 ON DELETE CASCADE
15528                                 DEFERRABLE INITIALLY DEFERRED,
15529         unit            INT     REFERENCES serial.unit (id)
15530                                 ON DELETE SET NULL
15531                                 DEFERRABLE INITIALLY DEFERRED,
15532         uri             INT     REFERENCES asset.uri (id)
15533                                 ON DELETE SET NULL
15534                                 DEFERRABLE INITIALLY DEFERRED,
15535         date_expected   TIMESTAMP WITH TIME ZONE,
15536         date_received   TIMESTAMP WITH TIME ZONE,
15537         status          TEXT    CONSTRAINT valid_status CHECK (
15538                                status IN ( 'Bindery', 'Bound', 'Claimed', 'Discarded',
15539                                'Expected', 'Not Held', 'Not Published', 'Received'))
15540                             DEFAULT 'Expected',
15541         shadowed        BOOL    NOT NULL DEFAULT FALSE
15542 );
15543
15544 CREATE TABLE serial.item_note (
15545         id          SERIAL  PRIMARY KEY,
15546         item        INT     NOT NULL
15547                             REFERENCES serial.item (id)
15548                             ON DELETE CASCADE
15549                             DEFERRABLE INITIALLY DEFERRED,
15550         creator     INT     NOT NULL
15551                             REFERENCES actor.usr (id)
15552                             DEFERRABLE INITIALLY DEFERRED,
15553         create_date TIMESTAMP WITH TIME ZONE    DEFAULT NOW(),
15554         pub         BOOL    NOT NULL    DEFAULT FALSE,
15555         title       TEXT    NOT NULL,
15556         value       TEXT    NOT NULL
15557 );
15558
15559 CREATE TABLE serial.basic_summary (
15560         id                  SERIAL  PRIMARY KEY,
15561         distribution        INT     NOT NULL
15562                                     REFERENCES serial.distribution (id)
15563                                     ON DELETE CASCADE
15564                                     DEFERRABLE INITIALLY DEFERRED,
15565         generated_coverage  TEXT    NOT NULL,
15566         textual_holdings    TEXT,
15567         show_generated      BOOL    NOT NULL DEFAULT TRUE
15568 );
15569
15570 CREATE TABLE serial.supplement_summary (
15571         id                  SERIAL  PRIMARY KEY,
15572         distribution        INT     NOT NULL
15573                                     REFERENCES serial.distribution (id)
15574                                     ON DELETE CASCADE
15575                                     DEFERRABLE INITIALLY DEFERRED,
15576         generated_coverage  TEXT    NOT NULL,
15577         textual_holdings    TEXT,
15578         show_generated      BOOL    NOT NULL DEFAULT TRUE
15579 );
15580
15581 CREATE TABLE serial.index_summary (
15582         id                  SERIAL  PRIMARY KEY,
15583         distribution        INT     NOT NULL
15584                                     REFERENCES serial.distribution (id)
15585                                     ON DELETE CASCADE
15586                                     DEFERRABLE INITIALLY DEFERRED,
15587         generated_coverage  TEXT    NOT NULL,
15588         textual_holdings    TEXT,
15589         show_generated      BOOL    NOT NULL DEFAULT TRUE
15590 );
15591
15592 -- DELETE FROM action_trigger.environment WHERE event_def IN (29,30); DELETE FROM action_trigger.event where event_def IN (29,30); DELETE FROM action_trigger.event_definition WHERE id IN (29,30); DELETE FROM action_trigger.hook WHERE key IN ('money.format.payment_receipt.email','money.format.payment_receipt.print'); DELETE FROM config.upgrade_log WHERE version = '0289'; -- from testing, this sql will remove these events, etc.
15593
15594 DROP INDEX IF EXISTS authority.authority_record_unique_tcn;
15595 CREATE UNIQUE INDEX authority_record_unique_tcn ON authority.record_entry (arn_source,arn_value) WHERE deleted = FALSE OR deleted IS FALSE;
15596
15597 DROP INDEX IF EXISTS asset.asset_call_number_label_once_per_lib;
15598 CREATE UNIQUE INDEX asset_call_number_label_once_per_lib ON asset.call_number (record, owning_lib, label) WHERE deleted = FALSE OR deleted IS FALSE;
15599
15600 DROP INDEX IF EXISTS biblio.biblio_record_unique_tcn;
15601 CREATE UNIQUE INDEX biblio_record_unique_tcn ON biblio.record_entry (tcn_value) WHERE deleted = FALSE OR deleted IS FALSE;
15602
15603 CREATE OR REPLACE FUNCTION config.interval_to_seconds( interval_val INTERVAL )
15604 RETURNS INTEGER AS $$
15605 BEGIN
15606         RETURN EXTRACT( EPOCH FROM interval_val );
15607 END;
15608 $$ LANGUAGE plpgsql;
15609
15610 CREATE OR REPLACE FUNCTION config.interval_to_seconds( interval_string TEXT )
15611 RETURNS INTEGER AS $$
15612 BEGIN
15613         RETURN config.interval_to_seconds( interval_string::INTERVAL );
15614 END;
15615 $$ LANGUAGE plpgsql;
15616
15617 INSERT INTO container.biblio_record_entry_bucket_type( code, label ) VALUES (
15618     'temp',
15619     oils_i18n_gettext(
15620         'temp',
15621         'Temporary bucket which gets deleted after use.',
15622         'cbrebt',
15623         'label'
15624     )
15625 );
15626
15627 -- DELETE FROM action_trigger.environment WHERE event_def IN (31,32); DELETE FROM action_trigger.event where event_def IN (31,32); DELETE FROM action_trigger.event_definition WHERE id IN (31,32); DELETE FROM action_trigger.hook WHERE key IN ('biblio.format.record_entry.email','biblio.format.record_entry.print'); DELETE FROM action_trigger.cleanup WHERE module = 'DeleteTempBiblioBucket'; DELETE FROM container.biblio_record_entry_bucket_item WHERE bucket IN (SELECT id FROM container.biblio_record_entry_bucket WHERE btype = 'temp'); DELETE FROM container.biblio_record_entry_bucket WHERE btype = 'temp'; DELETE FROM container.biblio_record_entry_bucket_type WHERE code = 'temp'; DELETE FROM config.upgrade_log WHERE version = '0294'; -- from testing, this sql will remove these events, etc.
15628
15629 CREATE OR REPLACE FUNCTION biblio.check_marcxml_well_formed () RETURNS TRIGGER AS $func$
15630 BEGIN
15631
15632     IF xml_is_well_formed(NEW.marc) THEN
15633         RETURN NEW;
15634     ELSE
15635         RAISE EXCEPTION 'Attempted to % MARCXML that is not well formed', TG_OP;
15636     END IF;
15637     
15638 END;
15639 $func$ LANGUAGE PLPGSQL;
15640
15641 CREATE TRIGGER a_marcxml_is_well_formed BEFORE INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.check_marcxml_well_formed();
15642
15643 CREATE TRIGGER a_marcxml_is_well_formed BEFORE INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.check_marcxml_well_formed();
15644
15645 ALTER TABLE serial.record_entry
15646         ALTER COLUMN marc DROP NOT NULL;
15647
15648 insert INTO CONFIG.xml_transform(name, namespace_uri, prefix, xslt)
15649 VALUES ('marc21expand880', 'http://www.loc.gov/MARC21/slim', 'marc', $$<?xml version="1.0" encoding="UTF-8"?>
15650 <xsl:stylesheet
15651     xmlns:xsl="http://www.w3.org/1999/XSL/Transform" 
15652     xmlns:marc="http://www.loc.gov/MARC21/slim"
15653     version="1.0">
15654 <!--
15655 Copyright (C) 2010  Equinox Software, Inc.
15656 Galen Charlton <gmc@esilibrary.cOM.
15657
15658 This program is free software; you can redistribute it and/or
15659 modify it under the terms of the GNU General Public License
15660 as published by the Free Software Foundation; either version 2
15661 of the License, or (at your option) any later version.
15662
15663 This program is distributed in the hope that it will be useful,
15664 but WITHOUT ANY WARRANTY; without even the implied warranty of
15665 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15666 GNU General Public License for more details.
15667
15668 marc21_expand_880.xsl - stylesheet used during indexing to
15669                         map alternative graphical representations
15670                         of MARC fields stored in 880 fields
15671                         to the corresponding tag name and value.
15672
15673 For example, if a MARC record for a Chinese book has
15674
15675 245.00 $6 880-01 $a Ba shi san nian duan pian xiao shuo xuan
15676 880.00 $6 245-01/$1 $a八十三年短篇小說選
15677
15678 this stylesheet will transform it to the equivalent of
15679
15680 245.00 $6 880-01 $a Ba shi san nian duan pian xiao shuo xuan
15681 245.00 $6 245-01/$1 $a八十三年短篇小說選
15682
15683 -->
15684     <xsl:output encoding="UTF-8" indent="yes" method="xml"/>
15685
15686     <xsl:template match="@*|node()">
15687         <xsl:copy>
15688             <xsl:apply-templates select="@*|node()"/>
15689         </xsl:copy>
15690     </xsl:template>
15691
15692     <xsl:template match="//marc:datafield[@tag='880']">
15693         <xsl:if test="./marc:subfield[@code='6'] and string-length(./marc:subfield[@code='6']) &gt;= 6">
15694             <marc:datafield>
15695                 <xsl:attribute name="tag">
15696                     <xsl:value-of select="substring(./marc:subfield[@code='6'], 1, 3)" />
15697                 </xsl:attribute>
15698                 <xsl:attribute name="ind1">
15699                     <xsl:value-of select="@ind1" />
15700                 </xsl:attribute>
15701                 <xsl:attribute name="ind2">
15702                     <xsl:value-of select="@ind2" />
15703                 </xsl:attribute>
15704                 <xsl:apply-templates />
15705             </marc:datafield>
15706         </xsl:if>
15707     </xsl:template>
15708     
15709 </xsl:stylesheet>$$);
15710
15711 -- Splitting the ingest trigger up into little bits
15712
15713 CREATE TEMPORARY TABLE eg_0301_check_if_has_contents (
15714     flag INTEGER PRIMARY KEY
15715 ) ON COMMIT DROP;
15716 INSERT INTO eg_0301_check_if_has_contents VALUES (1);
15717
15718 -- cause failure if either of the tables we want to drop have rows
15719 INSERT INTO eg_0301_check_if_has_contents SELECT 1 FROM asset.copy_transparency LIMIT 1;
15720 INSERT INTO eg_0301_check_if_has_contents SELECT 1 FROM asset.copy_transparency_map LIMIT 1;
15721
15722 DROP TABLE IF EXISTS asset.copy_transparency_map;
15723 DROP TABLE IF EXISTS asset.copy_transparency;
15724
15725 UPDATE config.metabib_field SET facet_xpath = '//' || facet_xpath WHERE facet_xpath IS NOT NULL;
15726
15727 -- We won't necessarily use all of these, but they are here for completeness.
15728 -- Source is the EDI spec 1229 codelist, eg: http://www.stylusstudio.com/edifact/D04B/1229.htm
15729 -- Values are the EDI code value + 1000
15730
15731 INSERT INTO acq.cancel_reason (keep_debits, id, org_unit, label, description) VALUES 
15732 ('t',(  1+1000), 1, 'Added',     'The information is to be or has been added.'),
15733 ('f',(  2+1000), 1, 'Deleted',   'The information is to be or has been deleted.'),
15734 ('t',(  3+1000), 1, 'Changed',   'The information is to be or has been changed.'),
15735 ('t',(  4+1000), 1, 'No action',                  'This line item is not affected by the actual message.'),
15736 ('t',(  5+1000), 1, 'Accepted without amendment', 'This line item is entirely accepted by the seller.'),
15737 ('t',(  6+1000), 1, 'Accepted with amendment',    'This line item is accepted but amended by the seller.'),
15738 ('f',(  7+1000), 1, 'Not accepted',               'This line item is not accepted by the seller.'),
15739 ('t',(  8+1000), 1, 'Schedule only', 'Code specifying that the message is a schedule only.'),
15740 ('t',(  9+1000), 1, 'Amendments',    'Code specifying that amendments are requested/notified.'),
15741 ('f',( 10+1000), 1, 'Not found',   'This line item is not found in the referenced message.'),
15742 ('t',( 11+1000), 1, 'Not amended', 'This line is not amended by the buyer.'),
15743 ('t',( 12+1000), 1, 'Line item numbers changed', 'Code specifying that the line item numbers have changed.'),
15744 ('t',( 13+1000), 1, 'Buyer has deducted amount', 'Buyer has deducted amount from payment.'),
15745 ('t',( 14+1000), 1, 'Buyer claims against invoice', 'Buyer has a claim against an outstanding invoice.'),
15746 ('t',( 15+1000), 1, 'Charge back by seller', 'Factor has been requested to charge back the outstanding item.'),
15747 ('t',( 16+1000), 1, 'Seller will issue credit note', 'Seller agrees to issue a credit note.'),
15748 ('t',( 17+1000), 1, 'Terms changed for new terms', 'New settlement terms have been agreed.'),
15749 ('t',( 18+1000), 1, 'Abide outcome of negotiations', 'Factor agrees to abide by the outcome of negotiations between seller and buyer.'),
15750 ('t',( 19+1000), 1, 'Seller rejects dispute', 'Seller does not accept validity of dispute.'),
15751 ('t',( 20+1000), 1, 'Settlement', 'The reported situation is settled.'),
15752 ('t',( 21+1000), 1, 'No delivery', 'Code indicating that no delivery will be required.'),
15753 ('t',( 22+1000), 1, 'Call-off delivery', 'A request for delivery of a particular quantity of goods to be delivered on a particular date (or within a particular period).'),
15754 ('t',( 23+1000), 1, 'Proposed amendment', 'A code used to indicate an amendment suggested by the sender.'),
15755 ('t',( 24+1000), 1, 'Accepted with amendment, no confirmation required', 'Accepted with changes which require no confirmation.'),
15756 ('t',( 25+1000), 1, 'Equipment provisionally repaired', 'The equipment or component has been provisionally repaired.'),
15757 ('t',( 26+1000), 1, 'Included', 'Code indicating that the entity is included.'),
15758 ('t',( 27+1000), 1, 'Verified documents for coverage', 'Upon receipt and verification of documents we shall cover you when due as per your instructions.'),
15759 ('t',( 28+1000), 1, 'Verified documents for debit',    'Upon receipt and verification of documents we shall authorize you to debit our account with you when due.'),
15760 ('t',( 29+1000), 1, 'Authenticated advice for coverage',      'On receipt of your authenticated advice we shall cover you when due as per your instructions.'),
15761 ('t',( 30+1000), 1, 'Authenticated advice for authorization', 'On receipt of your authenticated advice we shall authorize you to debit our account with you when due.'),
15762 ('t',( 31+1000), 1, 'Authenticated advice for credit',        'On receipt of your authenticated advice we shall credit your account with us when due.'),
15763 ('t',( 32+1000), 1, 'Credit advice requested for direct debit',           'A credit advice is requested for the direct debit.'),
15764 ('t',( 33+1000), 1, 'Credit advice and acknowledgement for direct debit', 'A credit advice and acknowledgement are requested for the direct debit.'),
15765 ('t',( 34+1000), 1, 'Inquiry',     'Request for information.'),
15766 ('t',( 35+1000), 1, 'Checked',     'Checked.'),
15767 ('t',( 36+1000), 1, 'Not checked', 'Not checked.'),
15768 ('f',( 37+1000), 1, 'Cancelled',   'Discontinued.'),
15769 ('t',( 38+1000), 1, 'Replaced',    'Provide a replacement.'),
15770 ('t',( 39+1000), 1, 'New',         'Not existing before.'),
15771 ('t',( 40+1000), 1, 'Agreed',      'Consent.'),
15772 ('t',( 41+1000), 1, 'Proposed',    'Put forward for consideration.'),
15773 ('t',( 42+1000), 1, 'Already delivered', 'Delivery has taken place.'),
15774 ('t',( 43+1000), 1, 'Additional subordinate structures will follow', 'Additional subordinate structures will follow the current hierarchy level.'),
15775 ('t',( 44+1000), 1, 'Additional subordinate structures will not follow', 'No additional subordinate structures will follow the current hierarchy level.'),
15776 ('t',( 45+1000), 1, 'Result opposed',         'A notification that the result is opposed.'),
15777 ('t',( 46+1000), 1, 'Auction held',           'A notification that an auction was held.'),
15778 ('t',( 47+1000), 1, 'Legal action pursued',   'A notification that legal action has been pursued.'),
15779 ('t',( 48+1000), 1, 'Meeting held',           'A notification that a meeting was held.'),
15780 ('t',( 49+1000), 1, 'Result set aside',       'A notification that the result has been set aside.'),
15781 ('t',( 50+1000), 1, 'Result disputed',        'A notification that the result has been disputed.'),
15782 ('t',( 51+1000), 1, 'Countersued',            'A notification that a countersuit has been filed.'),
15783 ('t',( 52+1000), 1, 'Pending',                'A notification that an action is awaiting settlement.'),
15784 ('f',( 53+1000), 1, 'Court action dismissed', 'A notification that a court action will no longer be heard.'),
15785 ('t',( 54+1000), 1, 'Referred item, accepted', 'The item being referred to has been accepted.'),
15786 ('f',( 55+1000), 1, 'Referred item, rejected', 'The item being referred to has been rejected.'),
15787 ('t',( 56+1000), 1, 'Debit advice statement line',  'Notification that the statement line is a debit advice.'),
15788 ('t',( 57+1000), 1, 'Credit advice statement line', 'Notification that the statement line is a credit advice.'),
15789 ('t',( 58+1000), 1, 'Grouped credit advices',       'Notification that the credit advices are grouped.'),
15790 ('t',( 59+1000), 1, 'Grouped debit advices',        'Notification that the debit advices are grouped.'),
15791 ('t',( 60+1000), 1, 'Registered', 'The name is registered.'),
15792 ('f',( 61+1000), 1, 'Payment denied', 'The payment has been denied.'),
15793 ('t',( 62+1000), 1, 'Approved as amended', 'Approved with modifications.'),
15794 ('t',( 63+1000), 1, 'Approved as submitted', 'The request has been approved as submitted.'),
15795 ('f',( 64+1000), 1, 'Cancelled, no activity', 'Cancelled due to the lack of activity.'),
15796 ('t',( 65+1000), 1, 'Under investigation', 'Investigation is being done.'),
15797 ('t',( 66+1000), 1, 'Initial claim received', 'Notification that the initial claim was received.'),
15798 ('f',( 67+1000), 1, 'Not in process', 'Not in process.'),
15799 ('f',( 68+1000), 1, 'Rejected, duplicate', 'Rejected because it is a duplicate.'),
15800 ('f',( 69+1000), 1, 'Rejected, resubmit with corrections', 'Rejected but may be resubmitted when corrected.'),
15801 ('t',( 70+1000), 1, 'Pending, incomplete', 'Pending because of incomplete information.'),
15802 ('t',( 71+1000), 1, 'Under field office investigation', 'Investigation by the field is being done.'),
15803 ('t',( 72+1000), 1, 'Pending, awaiting additional material', 'Pending awaiting receipt of additional material.'),
15804 ('t',( 73+1000), 1, 'Pending, awaiting review', 'Pending while awaiting review.'),
15805 ('t',( 74+1000), 1, 'Reopened', 'Opened again.'),
15806 ('t',( 75+1000), 1, 'Processed by primary, forwarded to additional payer(s)',   'This request has been processed by the primary payer and sent to additional payer(s).'),
15807 ('t',( 76+1000), 1, 'Processed by secondary, forwarded to additional payer(s)', 'This request has been processed by the secondary payer and sent to additional payer(s).'),
15808 ('t',( 77+1000), 1, 'Processed by tertiary, forwarded to additional payer(s)',  'This request has been processed by the tertiary payer and sent to additional payer(s).'),
15809 ('t',( 78+1000), 1, 'Previous payment decision reversed', 'A previous payment decision has been reversed.'),
15810 ('t',( 79+1000), 1, 'Not our claim, forwarded to another payer(s)', 'A request does not belong to this payer but has been forwarded to another payer(s).'),
15811 ('t',( 80+1000), 1, 'Transferred to correct insurance carrier', 'The request has been transferred to the correct insurance carrier for processing.'),
15812 ('t',( 81+1000), 1, 'Not paid, predetermination pricing only', 'Payment has not been made and the enclosed response is predetermination pricing only.'),
15813 ('t',( 82+1000), 1, 'Documentation claim', 'The claim is for documentation purposes only, no payment required.'),
15814 ('t',( 83+1000), 1, 'Reviewed', 'Assessed.'),
15815 ('f',( 84+1000), 1, 'Repriced', 'This price was changed.'),
15816 ('t',( 85+1000), 1, 'Audited', 'An official examination has occurred.'),
15817 ('t',( 86+1000), 1, 'Conditionally paid', 'Payment has been conditionally made.'),
15818 ('t',( 87+1000), 1, 'On appeal', 'Reconsideration of the decision has been applied for.'),
15819 ('t',( 88+1000), 1, 'Closed', 'Shut.'),
15820 ('t',( 89+1000), 1, 'Reaudited', 'A subsequent official examination has occurred.'),
15821 ('t',( 90+1000), 1, 'Reissued', 'Issued again.'),
15822 ('t',( 91+1000), 1, 'Closed after reopening', 'Reopened and then closed.'),
15823 ('t',( 92+1000), 1, 'Redetermined', 'Determined again or differently.'),
15824 ('t',( 93+1000), 1, 'Processed as primary',   'Processed as the first.'),
15825 ('t',( 94+1000), 1, 'Processed as secondary', 'Processed as the second.'),
15826 ('t',( 95+1000), 1, 'Processed as tertiary',  'Processed as the third.'),
15827 ('t',( 96+1000), 1, 'Correction of error', 'A correction to information previously communicated which contained an error.'),
15828 ('t',( 97+1000), 1, 'Single credit item of a group', 'Notification that the credit item is a single credit item of a group of credit items.'),
15829 ('t',( 98+1000), 1, 'Single debit item of a group',  'Notification that the debit item is a single debit item of a group of debit items.'),
15830 ('t',( 99+1000), 1, 'Interim response', 'The response is an interim one.'),
15831 ('t',(100+1000), 1, 'Final response',   'The response is an final one.'),
15832 ('t',(101+1000), 1, 'Debit advice requested', 'A debit advice is requested for the transaction.'),
15833 ('t',(102+1000), 1, 'Transaction not impacted', 'Advice that the transaction is not impacted.'),
15834 ('t',(103+1000), 1, 'Patient to be notified',                    'The action to take is to notify the patient.'),
15835 ('t',(104+1000), 1, 'Healthcare provider to be notified',        'The action to take is to notify the healthcare provider.'),
15836 ('t',(105+1000), 1, 'Usual general practitioner to be notified', 'The action to take is to notify the usual general practitioner.'),
15837 ('t',(106+1000), 1, 'Advice without details', 'An advice without details is requested or notified.'),
15838 ('t',(107+1000), 1, 'Advice with details', 'An advice with details is requested or notified.'),
15839 ('t',(108+1000), 1, 'Amendment requested', 'An amendment is requested.'),
15840 ('t',(109+1000), 1, 'For information', 'Included for information only.'),
15841 ('f',(110+1000), 1, 'Withdraw', 'A code indicating discontinuance or retraction.'),
15842 ('t',(111+1000), 1, 'Delivery date change', 'The action / notiification is a change of the delivery date.'),
15843 ('f',(112+1000), 1, 'Quantity change',      'The action / notification is a change of quantity.'),
15844 ('t',(113+1000), 1, 'Resale and claim', 'The identified items have been sold by the distributor to the end customer, and compensation for the loss of inventory value is claimed.'),
15845 ('t',(114+1000), 1, 'Resale',           'The identified items have been sold by the distributor to the end customer.'),
15846 ('t',(115+1000), 1, 'Prior addition', 'This existing line item becomes available at an earlier date.');
15847
15848 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath, facet_field, search_field ) VALUES
15849     (26, 'identifier', 'arcn', oils_i18n_gettext(26, 'Authority record control number', 'cmf', 'label'), 'marcxml', $$//marc:subfield[@code='0']$$, TRUE, FALSE );
15850  
15851 SELECT SETVAL('config.metabib_field_id_seq'::TEXT, (SELECT MAX(id) FROM config.metabib_field), TRUE);
15852  
15853 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
15854         'Remove Parenthesized Substring',
15855         'Remove any parenthesized substrings from the extracted text, such as the agency code preceding authority record control numbers in subfield 0.',
15856         'remove_paren_substring',
15857         0
15858 );
15859
15860 INSERT INTO config.index_normalizer (name, description, func, param_count) VALUES (
15861         'Trim Surrounding Space',
15862         'Trim leading and trailing spaces from extracted text.',
15863         'btrim',
15864         0
15865 );
15866
15867 INSERT INTO config.metabib_field_index_norm_map (field,norm,pos)
15868     SELECT  m.id,
15869             i.id,
15870             -2
15871       FROM  config.metabib_field m,
15872             config.index_normalizer i
15873       WHERE i.func IN ('remove_paren_substring')
15874             AND m.id IN (26);
15875
15876 INSERT INTO config.metabib_field_index_norm_map (field,norm,pos)
15877     SELECT  m.id,
15878             i.id,
15879             -1
15880       FROM  config.metabib_field m,
15881             config.index_normalizer i
15882       WHERE i.func IN ('btrim')
15883             AND m.id IN (26);
15884
15885 -- Function that takes, and returns, marcxml and compiles an embedded ruleset for you, and they applys it
15886 CREATE OR REPLACE FUNCTION vandelay.merge_record_xml ( target_marc TEXT, template_marc TEXT ) RETURNS TEXT AS $$
15887 DECLARE
15888     dyn_profile     vandelay.compile_profile%ROWTYPE;
15889     replace_rule    TEXT;
15890     tmp_marc        TEXT;
15891     trgt_marc        TEXT;
15892     tmpl_marc        TEXT;
15893     match_count     INT;
15894 BEGIN
15895
15896     IF target_marc IS NULL OR template_marc IS NULL THEN
15897         -- RAISE NOTICE 'no marc for target or template record';
15898         RETURN NULL;
15899     END IF;
15900
15901     dyn_profile := vandelay.compile_profile( template_marc );
15902
15903     IF dyn_profile.replace_rule <> '' AND dyn_profile.preserve_rule <> '' THEN
15904         -- RAISE NOTICE 'both replace [%] and preserve [%] specified', dyn_profile.replace_rule, dyn_profile.preserve_rule;
15905         RETURN NULL;
15906     END IF;
15907
15908     IF dyn_profile.replace_rule <> '' THEN
15909         trgt_marc = target_marc;
15910         tmpl_marc = template_marc;
15911         replace_rule = dyn_profile.replace_rule;
15912     ELSE
15913         tmp_marc = target_marc;
15914         trgt_marc = template_marc;
15915         tmpl_marc = tmp_marc;
15916         replace_rule = dyn_profile.preserve_rule;
15917     END IF;
15918
15919     RETURN vandelay.merge_record_xml( trgt_marc, tmpl_marc, dyn_profile.add_rule, replace_rule, dyn_profile.strip_rule );
15920
15921 END;
15922 $$ LANGUAGE PLPGSQL;
15923
15924 -- Function to generate an ephemeral overlay template from an authority record
15925 CREATE OR REPLACE FUNCTION authority.generate_overlay_template ( TEXT, BIGINT ) RETURNS TEXT AS $func$
15926
15927     use MARC::Record;
15928     use MARC::File::XML (BinaryEncoding => 'UTF-8');
15929
15930     my $xml = shift;
15931     my $r = MARC::Record->new_from_xml( $xml );
15932
15933     return undef unless ($r);
15934
15935     my $id = shift() || $r->subfield( '901' => 'c' );
15936     $id =~ s/^\s*(?:\([^)]+\))?\s*(.+)\s*?$/$1/;
15937     return undef unless ($id); # We need an ID!
15938
15939     my $tmpl = MARC::Record->new();
15940
15941     my @rule_fields;
15942     for my $field ( $r->field( '1..' ) ) { # Get main entry fields from the authority record
15943
15944         my $tag = $field->tag;
15945         my $i1 = $field->indicator(1);
15946         my $i2 = $field->indicator(2);
15947         my $sf = join '', map { $_->[0] } $field->subfields;
15948         my @data = map { @$_ } $field->subfields;
15949
15950         my @replace_them;
15951
15952         # Map the authority field to bib fields it can control.
15953         if ($tag >= 100 and $tag <= 111) {       # names
15954             @replace_them = map { $tag + $_ } (0, 300, 500, 600, 700);
15955         } elsif ($tag eq '130') {                # uniform title
15956             @replace_them = qw/130 240 440 730 830/;
15957         } elsif ($tag >= 150 and $tag <= 155) {  # subjects
15958             @replace_them = ($tag + 500);
15959         } elsif ($tag >= 180 and $tag <= 185) {  # floating subdivisions
15960             @replace_them = qw/100 400 600 700 800 110 410 610 710 810 111 411 611 711 811 130 240 440 730 830 650 651 655/;
15961         } else {
15962             next;
15963         }
15964
15965         # Dummy up the bib-side data
15966         $tmpl->append_fields(
15967             map {
15968                 MARC::Field->new( $_, $i1, $i2, @data )
15969             } @replace_them
15970         );
15971
15972         # Construct some 'replace' rules
15973         push @rule_fields, map { $_ . $sf . '[0~\)' .$id . '$]' } @replace_them;
15974     }
15975
15976     # Insert the replace rules into the template
15977     $tmpl->append_fields(
15978         MARC::Field->new( '905' => ' ' => ' ' => 'r' => join(',', @rule_fields ) )
15979     );
15980
15981     $xml = $tmpl->as_xml_record;
15982     $xml =~ s/^<\?.+?\?>$//mo;
15983     $xml =~ s/\n//sgo;
15984     $xml =~ s/>\s+</></sgo;
15985
15986     return $xml;
15987
15988 $func$ LANGUAGE PLPERLU;
15989
15990 CREATE OR REPLACE FUNCTION authority.generate_overlay_template ( BIGINT ) RETURNS TEXT AS $func$
15991     SELECT authority.generate_overlay_template( marc, id ) FROM authority.record_entry WHERE id = $1;
15992 $func$ LANGUAGE SQL;
15993
15994 CREATE OR REPLACE FUNCTION authority.generate_overlay_template ( TEXT ) RETURNS TEXT AS $func$
15995     SELECT authority.generate_overlay_template( $1, NULL );
15996 $func$ LANGUAGE SQL;
15997
15998 DELETE FROM config.metabib_field_index_norm_map WHERE field = 26;
15999 DELETE FROM config.metabib_field WHERE id = 26;
16000
16001 -- Making this a global_flag (UI accessible) instead of an internal_flag
16002 INSERT INTO config.global_flag (name, label) -- defaults to enabled=FALSE
16003     VALUES (
16004         'ingest.disable_authority_linking',
16005         oils_i18n_gettext(
16006             'ingest.disable_authority_linking',
16007             'Authority Automation: Disable bib-authority link tracking',
16008             'cgf', 
16009             'label'
16010         )
16011     );
16012 UPDATE config.global_flag SET enabled = (SELECT enabled FROM ONLY config.internal_flag WHERE name = 'ingest.disable_authority_linking');
16013 DELETE FROM config.internal_flag WHERE name = 'ingest.disable_authority_linking';
16014
16015 INSERT INTO config.global_flag (name, label) -- defaults to enabled=FALSE
16016     VALUES (
16017         'ingest.disable_authority_auto_update',
16018         oils_i18n_gettext(
16019             'ingest.disable_authority_auto_update',
16020             'Authority Automation: Disable automatic authority updating (requires link tracking)',
16021             'cgf', 
16022             'label'
16023         )
16024     );
16025
16026 -- Enable automated ingest of authority records; just insert the row into
16027 -- authority.record_entry and authority.full_rec will automatically be populated
16028
16029 CREATE OR REPLACE FUNCTION authority.propagate_changes (aid BIGINT, bid BIGINT) RETURNS BIGINT AS $func$
16030     UPDATE  biblio.record_entry
16031       SET   marc = vandelay.merge_record_xml( marc, authority.generate_overlay_template( $1 ) )
16032       WHERE id = $2;
16033     SELECT $1;
16034 $func$ LANGUAGE SQL;
16035
16036 CREATE OR REPLACE FUNCTION authority.propagate_changes (aid BIGINT) RETURNS SETOF BIGINT AS $func$
16037     SELECT authority.propagate_changes( authority, bib ) FROM authority.bib_linking WHERE authority = $1;
16038 $func$ LANGUAGE SQL;
16039
16040 -- authority.rec_descriptor appears to be unused currently
16041 CREATE OR REPLACE FUNCTION authority.reingest_authority_rec_descriptor( auth_id BIGINT ) RETURNS VOID AS $func$
16042 BEGIN
16043     DELETE FROM authority.rec_descriptor WHERE record = auth_id;
16044 --    INSERT INTO authority.rec_descriptor (record, record_status, char_encoding)
16045 --        SELECT  auth_id, ;
16046
16047     RETURN;
16048 END;
16049 $func$ LANGUAGE PLPGSQL;
16050
16051 CREATE OR REPLACE FUNCTION authority.reingest_authority_full_rec( auth_id BIGINT ) RETURNS VOID AS $func$
16052 BEGIN
16053     DELETE FROM authority.full_rec WHERE record = auth_id;
16054     INSERT INTO authority.full_rec (record, tag, ind1, ind2, subfield, value)
16055         SELECT record, tag, ind1, ind2, subfield, value FROM authority.flatten_marc( auth_id );
16056
16057     RETURN;
16058 END;
16059 $func$ LANGUAGE PLPGSQL;
16060
16061 -- AFTER UPDATE OR INSERT trigger for authority.record_entry
16062 CREATE OR REPLACE FUNCTION authority.indexing_ingest_or_delete () RETURNS TRIGGER AS $func$
16063 BEGIN
16064
16065     IF NEW.deleted IS TRUE THEN -- If this authority is deleted
16066         DELETE FROM authority.bib_linking WHERE authority = NEW.id; -- Avoid updating fields in bibs that are no longer visible
16067           -- Should remove matching $0 from controlled fields at the same time?
16068         RETURN NEW; -- and we're done
16069     END IF;
16070
16071     IF TG_OP = 'UPDATE' THEN -- re-ingest?
16072         PERFORM * FROM config.internal_flag WHERE name = 'ingest.reingest.force_on_same_marc' AND enabled;
16073
16074         IF NOT FOUND AND OLD.marc = NEW.marc THEN -- don't do anything if the MARC didn't change
16075             RETURN NEW;
16076         END IF;
16077     END IF;
16078
16079     -- Flatten and insert the afr data
16080     PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_full_rec' AND enabled;
16081     IF NOT FOUND THEN
16082         PERFORM authority.reingest_authority_full_rec(NEW.id);
16083 -- authority.rec_descriptor is not currently used
16084 --        PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_rec_descriptor' AND enabled;
16085 --        IF NOT FOUND THEN
16086 --            PERFORM authority.reingest_authority_rec_descriptor(NEW.id);
16087 --        END IF;
16088     END IF;
16089
16090     RETURN NEW;
16091 END;
16092 $func$ LANGUAGE PLPGSQL;
16093
16094 CREATE TRIGGER aaa_auth_ingest_or_delete AFTER INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE authority.indexing_ingest_or_delete ();
16095
16096 -- Some records manage to get XML namespace declarations into each element,
16097 -- like <datafield xmlns:marc="http://www.loc.gov/MARC21/slim"
16098 -- This broke the old maintain_901(), so we'll make the regex more robust
16099
16100 CREATE OR REPLACE FUNCTION maintain_901 () RETURNS TRIGGER AS $func$
16101 BEGIN
16102     -- Remove any existing 901 fields before we insert the authoritative one
16103     NEW.marc := REGEXP_REPLACE(NEW.marc, E'<datafield\s*[^<>]*?\s*tag="901".+?</datafield>', '', 'g');
16104     IF TG_TABLE_SCHEMA = 'biblio' THEN
16105         NEW.marc := REGEXP_REPLACE(
16106             NEW.marc,
16107             E'(</(?:[^:]*?:)?record>)',
16108             E'<datafield tag="901" ind1=" " ind2=" ">' ||
16109                 '<subfield code="a">' || NEW.tcn_value || E'</subfield>' ||
16110                 '<subfield code="b">' || NEW.tcn_source || E'</subfield>' ||
16111                 '<subfield code="c">' || NEW.id || E'</subfield>' ||
16112                 '<subfield code="t">' || TG_TABLE_SCHEMA || E'</subfield>' ||
16113                 CASE WHEN NEW.owner IS NOT NULL THEN '<subfield code="o">' || NEW.owner || E'</subfield>' ELSE '' END ||
16114                 CASE WHEN NEW.share_depth IS NOT NULL THEN '<subfield code="d">' || NEW.share_depth || E'</subfield>' ELSE '' END ||
16115              E'</datafield>\\1'
16116         );
16117     ELSIF TG_TABLE_SCHEMA = 'authority' THEN
16118         NEW.marc := REGEXP_REPLACE(
16119             NEW.marc,
16120             E'(</(?:[^:]*?:)?record>)',
16121             E'<datafield tag="901" ind1=" " ind2=" ">' ||
16122                 '<subfield code="a">' || NEW.arn_value || E'</subfield>' ||
16123                 '<subfield code="b">' || NEW.arn_source || E'</subfield>' ||
16124                 '<subfield code="c">' || NEW.id || E'</subfield>' ||
16125                 '<subfield code="t">' || TG_TABLE_SCHEMA || E'</subfield>' ||
16126              E'</datafield>\\1'
16127         );
16128     ELSIF TG_TABLE_SCHEMA = 'serial' THEN
16129         NEW.marc := REGEXP_REPLACE(
16130             NEW.marc,
16131             E'(</(?:[^:]*?:)?record>)',
16132             E'<datafield tag="901" ind1=" " ind2=" ">' ||
16133                 '<subfield code="c">' || NEW.id || E'</subfield>' ||
16134                 '<subfield code="t">' || TG_TABLE_SCHEMA || E'</subfield>' ||
16135                 '<subfield code="o">' || NEW.owning_lib || E'</subfield>' ||
16136                 CASE WHEN NEW.record IS NOT NULL THEN '<subfield code="r">' || NEW.record || E'</subfield>' ELSE '' END ||
16137              E'</datafield>\\1'
16138         );
16139     ELSE
16140         NEW.marc := REGEXP_REPLACE(
16141             NEW.marc,
16142             E'(</(?:[^:]*?:)?record>)',
16143             E'<datafield tag="901" ind1=" " ind2=" ">' ||
16144                 '<subfield code="c">' || NEW.id || E'</subfield>' ||
16145                 '<subfield code="t">' || TG_TABLE_SCHEMA || E'</subfield>' ||
16146              E'</datafield>\\1'
16147         );
16148     END IF;
16149
16150     RETURN NEW;
16151 END;
16152 $func$ LANGUAGE PLPGSQL;
16153
16154 CREATE TRIGGER b_maintain_901 BEFORE INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_901();
16155 CREATE TRIGGER b_maintain_901 BEFORE INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_901();
16156 CREATE TRIGGER b_maintain_901 BEFORE INSERT OR UPDATE ON serial.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_901();
16157  
16158 -- In booking, elbow room defines:
16159 --  a) how far in the future you must make a reservation on a given item if
16160 --      that item will have to transit somewhere to fulfill the reservation.
16161 --  b) how soon a reservation must be starting for the reserved item to
16162 --      be op-captured by the checkin interface.
16163
16164 -- We don't want to clobber any default_elbow room at any level:
16165
16166 CREATE OR REPLACE FUNCTION pg_temp.default_elbow() RETURNS INTEGER AS $$
16167 DECLARE
16168     existing    actor.org_unit_setting%ROWTYPE;
16169 BEGIN
16170     SELECT INTO existing id FROM actor.org_unit_setting WHERE name = 'circ.booking_reservation.default_elbow_room';
16171     IF NOT FOUND THEN
16172         INSERT INTO actor.org_unit_setting (org_unit, name, value) VALUES (
16173             (SELECT id FROM actor.org_unit WHERE parent_ou IS NULL),
16174             'circ.booking_reservation.default_elbow_room',
16175             '"1 day"'
16176         );
16177         RETURN 1;
16178     END IF;
16179     RETURN 0;
16180 END;
16181 $$ LANGUAGE plpgsql;
16182
16183 SELECT pg_temp.default_elbow();
16184
16185 DROP FUNCTION IF EXISTS action.usr_visible_circ_copies( INTEGER );
16186
16187 -- returns the distinct set of target copy IDs from a user's visible circulation history
16188 CREATE OR REPLACE FUNCTION action.usr_visible_circ_copies( INTEGER ) RETURNS SETOF BIGINT AS $$
16189     SELECT DISTINCT(target_copy) FROM action.usr_visible_circs($1)
16190 $$ LANGUAGE SQL;
16191
16192 ALTER TABLE action.in_house_use DROP CONSTRAINT in_house_use_item_fkey;
16193 ALTER TABLE action.transit_copy DROP CONSTRAINT transit_copy_target_copy_fkey;
16194 ALTER TABLE action.hold_transit_copy DROP CONSTRAINT ahtc_tc_fkey;
16195 ALTER TABLE action.hold_copy_map DROP CONSTRAINT hold_copy_map_target_copy_fkey;
16196
16197 ALTER TABLE asset.stat_cat_entry_copy_map DROP CONSTRAINT a_sc_oc_fkey;
16198
16199 ALTER TABLE authority.record_entry ADD COLUMN owner INT;
16200 ALTER TABLE serial.record_entry ADD COLUMN owner INT;
16201
16202 INSERT INTO config.global_flag (name, label) -- defaults to enabled=FALSE
16203     VALUES (
16204         'cat.maintain_control_numbers',
16205         oils_i18n_gettext(
16206             'cat.maintain_control_numbers',
16207             'Cat: Maintain 001/003/035 according to the MARC21 specification',
16208             'cgf', 
16209             'label'
16210         )
16211     );
16212
16213 INSERT INTO config.global_flag (name, label, enabled)
16214     VALUES (
16215         'circ.holds.empty_issuance_ok',
16216         oils_i18n_gettext(
16217             'circ.holds.empty_issuance_ok',
16218             'Holds: Allow holds on empty issuances',
16219             'cgf',
16220             'label'
16221         ),
16222         TRUE
16223     );
16224
16225 CREATE OR REPLACE FUNCTION maintain_control_numbers() RETURNS TRIGGER AS $func$
16226 use strict;
16227 use MARC::Record;
16228 use MARC::File::XML (BinaryEncoding => 'UTF-8');
16229 use Encode;
16230 use Unicode::Normalize;
16231
16232 my $record = MARC::Record->new_from_xml($_TD->{new}{marc});
16233 my $schema = $_TD->{table_schema};
16234 my $rec_id = $_TD->{new}{id};
16235
16236 # Short-circuit if maintaining control numbers per MARC21 spec is not enabled
16237 my $enable = spi_exec_query("SELECT enabled FROM config.global_flag WHERE name = 'cat.maintain_control_numbers'");
16238 if (!($enable->{processed}) or $enable->{rows}[0]->{enabled} eq 'f') {
16239     return;
16240 }
16241
16242 # Get the control number identifier from an OU setting based on $_TD->{new}{owner}
16243 my $ou_cni = 'EVRGRN';
16244
16245 my $owner;
16246 if ($schema eq 'serial') {
16247     $owner = $_TD->{new}{owning_lib};
16248 } else {
16249     # are.owner and bre.owner can be null, so fall back to the consortial setting
16250     $owner = $_TD->{new}{owner} || 1;
16251 }
16252
16253 my $ous_rv = spi_exec_query("SELECT value FROM actor.org_unit_ancestor_setting('cat.marc_control_number_identifier', $owner)");
16254 if ($ous_rv->{processed}) {
16255     $ou_cni = $ous_rv->{rows}[0]->{value};
16256     $ou_cni =~ s/"//g; # Stupid VIM syntax highlighting"
16257 } else {
16258     # Fall back to the shortname of the OU if there was no OU setting
16259     $ous_rv = spi_exec_query("SELECT shortname FROM actor.org_unit WHERE id = $owner");
16260     if ($ous_rv->{processed}) {
16261         $ou_cni = $ous_rv->{rows}[0]->{shortname};
16262     }
16263 }
16264
16265 my ($create, $munge) = (0, 0);
16266 my ($orig_001, $orig_003) = ('', '');
16267
16268 # Incoming MARC records may have multiple 001s or 003s, despite the spec
16269 my @control_ids = $record->field('003');
16270 my @scns = $record->field('035');
16271
16272 foreach my $id_field ('001', '003') {
16273     my $spec_value;
16274     my @controls = $record->field($id_field);
16275
16276     if ($id_field eq '001') {
16277         $spec_value = $rec_id;
16278     } else {
16279         $spec_value = $ou_cni;
16280     }
16281
16282     # Create the 001/003 if none exist
16283     if (scalar(@controls) == 0) {
16284         $record->insert_fields_ordered(MARC::Field->new($id_field, $spec_value));
16285         $create = 1;
16286     } elsif (scalar(@controls) > 1) {
16287         # Do we already have the right 001/003 value in the existing set?
16288         unless (grep $_->data() eq $spec_value, @controls) {
16289             $munge = 1;
16290         }
16291
16292         # Delete the other fields, as with more than 1 001/003 we do not know which 003/001 to match
16293         foreach my $control (@controls) {
16294             unless ($control->data() eq $spec_value) {
16295                 $record->delete_field($control);
16296             }
16297         }
16298     } else {
16299         # Only one field; check to see if we need to munge it
16300         unless (grep $_->data() eq $spec_value, @controls) {
16301             $munge = 1;
16302         }
16303     }
16304 }
16305
16306 # Now, if we need to munge the 001, we will first push the existing 001/003 into the 035
16307 if ($munge) {
16308     my $scn = "(" . $record->field('003')->data() . ")" . $record->field('001')->data();
16309
16310     # Do not create duplicate 035 fields
16311     unless (grep $_->subfield('a') eq $scn, @scns) {
16312         $record->insert_fields_ordered(MARC::Field->new('035', '', '', 'a' => $scn));
16313     }
16314 }
16315
16316 # Set the 001/003 and update the MARC
16317 if ($create or $munge) {
16318     $record->field('001')->data($rec_id);
16319     $record->field('003')->data($ou_cni);
16320
16321     my $xml = $record->as_xml_record();
16322     $xml =~ s/\n//sgo;
16323     $xml =~ s/^<\?xml.+\?\s*>//go;
16324     $xml =~ s/>\s+</></go;
16325     $xml =~ s/\p{Cc}//go;
16326
16327     # Embed a version of OpenILS::Application::AppUtils->entityize()
16328     # to avoid having to set PERL5LIB for PostgreSQL as well
16329
16330     # If we are going to convert non-ASCII characters to XML entities,
16331     # we had better be dealing with a UTF8 string to begin with
16332     $xml = decode_utf8($xml);
16333
16334     $xml = NFC($xml);
16335
16336     # Convert raw ampersands to entities
16337     $xml =~ s/&(?!\S+;)/&amp;/gso;
16338
16339     # Convert Unicode characters to entities
16340     $xml =~ s/([\x{0080}-\x{fffd}])/sprintf('&#x%X;',ord($1))/sgoe;
16341
16342     $xml =~ s/[\x00-\x1f]//go;
16343     $_TD->{new}{marc} = $xml;
16344
16345     return "MODIFY";
16346 }
16347
16348 return;
16349 $func$ LANGUAGE PLPERLU;
16350
16351 CREATE TRIGGER c_maintain_control_numbers BEFORE INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_control_numbers();
16352 CREATE TRIGGER c_maintain_control_numbers BEFORE INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_control_numbers();
16353 CREATE TRIGGER c_maintain_control_numbers BEFORE INSERT OR UPDATE ON serial.record_entry FOR EACH ROW EXECUTE PROCEDURE maintain_control_numbers();
16354
16355 INSERT INTO metabib.facet_entry (source, field, value)
16356     SELECT source, field, value FROM (
16357         SELECT * FROM metabib.author_field_entry
16358             UNION ALL
16359         SELECT * FROM metabib.keyword_field_entry
16360             UNION ALL
16361         SELECT * FROM metabib.identifier_field_entry
16362             UNION ALL
16363         SELECT * FROM metabib.title_field_entry
16364             UNION ALL
16365         SELECT * FROM metabib.subject_field_entry
16366             UNION ALL
16367         SELECT * FROM metabib.series_field_entry
16368         )x
16369     WHERE x.index_vector = '';
16370         
16371 DELETE FROM metabib.author_field_entry WHERE index_vector = '';
16372 DELETE FROM metabib.keyword_field_entry WHERE index_vector = '';
16373 DELETE FROM metabib.identifier_field_entry WHERE index_vector = '';
16374 DELETE FROM metabib.title_field_entry WHERE index_vector = '';
16375 DELETE FROM metabib.subject_field_entry WHERE index_vector = '';
16376 DELETE FROM metabib.series_field_entry WHERE index_vector = '';
16377
16378 CREATE INDEX metabib_facet_entry_field_idx ON metabib.facet_entry (field);
16379 CREATE INDEX metabib_facet_entry_value_idx ON metabib.facet_entry (SUBSTRING(value,1,1024));
16380 CREATE INDEX metabib_facet_entry_source_idx ON metabib.facet_entry (source);
16381
16382 -- copy OPAC visibility materialized view
16383 CREATE OR REPLACE FUNCTION asset.refresh_opac_visible_copies_mat_view () RETURNS VOID AS $$
16384
16385     TRUNCATE TABLE asset.opac_visible_copies;
16386
16387     INSERT INTO asset.opac_visible_copies (id, circ_lib, record)
16388     SELECT  cp.id, cp.circ_lib, cn.record
16389     FROM  asset.copy cp
16390         JOIN asset.call_number cn ON (cn.id = cp.call_number)
16391         JOIN actor.org_unit a ON (cp.circ_lib = a.id)
16392         JOIN asset.copy_location cl ON (cp.location = cl.id)
16393         JOIN config.copy_status cs ON (cp.status = cs.id)
16394         JOIN biblio.record_entry b ON (cn.record = b.id)
16395     WHERE NOT cp.deleted
16396         AND NOT cn.deleted
16397         AND NOT b.deleted
16398         AND cs.opac_visible
16399         AND cl.opac_visible
16400         AND cp.opac_visible
16401         AND a.opac_visible;
16402
16403 $$ LANGUAGE SQL;
16404 COMMENT ON FUNCTION asset.refresh_opac_visible_copies_mat_view() IS $$
16405 Rebuild the copy OPAC visibility cache.  Useful during migrations.
16406 $$;
16407
16408 -- and actually populate the table
16409 SELECT asset.refresh_opac_visible_copies_mat_view();
16410
16411 CREATE OR REPLACE FUNCTION asset.cache_copy_visibility () RETURNS TRIGGER as $func$
16412 DECLARE
16413     add_query       TEXT;
16414     remove_query    TEXT;
16415     do_add          BOOLEAN := false;
16416     do_remove       BOOLEAN := false;
16417 BEGIN
16418     add_query := $$
16419             INSERT INTO asset.opac_visible_copies (id, circ_lib, record)
16420                 SELECT  cp.id, cp.circ_lib, cn.record
16421                   FROM  asset.copy cp
16422                         JOIN asset.call_number cn ON (cn.id = cp.call_number)
16423                         JOIN actor.org_unit a ON (cp.circ_lib = a.id)
16424                         JOIN asset.copy_location cl ON (cp.location = cl.id)
16425                         JOIN config.copy_status cs ON (cp.status = cs.id)
16426                         JOIN biblio.record_entry b ON (cn.record = b.id)
16427                   WHERE NOT cp.deleted
16428                         AND NOT cn.deleted
16429                         AND NOT b.deleted
16430                         AND cs.opac_visible
16431                         AND cl.opac_visible
16432                         AND cp.opac_visible
16433                         AND a.opac_visible
16434     $$;
16435  
16436     remove_query := $$ DELETE FROM asset.opac_visible_copies WHERE id IN ( SELECT id FROM asset.copy WHERE $$;
16437
16438     IF TG_OP = 'INSERT' THEN
16439
16440         IF TG_TABLE_NAME IN ('copy', 'unit') THEN
16441             add_query := add_query || 'AND cp.id = ' || NEW.id || ';';
16442             EXECUTE add_query;
16443         END IF;
16444
16445         RETURN NEW;
16446
16447     END IF;
16448
16449     -- handle items first, since with circulation activity
16450     -- their statuses change frequently
16451     IF TG_TABLE_NAME IN ('copy', 'unit') THEN
16452
16453         IF OLD.location    <> NEW.location OR
16454            OLD.call_number <> NEW.call_number OR
16455            OLD.status      <> NEW.status OR
16456            OLD.circ_lib    <> NEW.circ_lib THEN
16457             -- any of these could change visibility, but
16458             -- we'll save some queries and not try to calculate
16459             -- the change directly
16460             do_remove := true;
16461             do_add := true;
16462         ELSE
16463
16464             IF OLD.deleted <> NEW.deleted THEN
16465                 IF NEW.deleted THEN
16466                     do_remove := true;
16467                 ELSE
16468                     do_add := true;
16469                 END IF;
16470             END IF;
16471
16472             IF OLD.opac_visible <> NEW.opac_visible THEN
16473                 IF OLD.opac_visible THEN
16474                     do_remove := true;
16475                 ELSIF NOT do_remove THEN -- handle edge case where deleted item
16476                                         -- is also marked opac_visible
16477                     do_add := true;
16478                 END IF;
16479             END IF;
16480
16481         END IF;
16482
16483         IF do_remove THEN
16484             DELETE FROM asset.opac_visible_copies WHERE id = NEW.id;
16485         END IF;
16486         IF do_add THEN
16487             add_query := add_query || 'AND cp.id = ' || NEW.id || ';';
16488             EXECUTE add_query;
16489         END IF;
16490
16491         RETURN NEW;
16492
16493     END IF;
16494
16495     IF TG_TABLE_NAME IN ('call_number', 'record_entry') THEN -- these have a 'deleted' column
16496  
16497         IF OLD.deleted AND NEW.deleted THEN -- do nothing
16498
16499             RETURN NEW;
16500  
16501         ELSIF NEW.deleted THEN -- remove rows
16502  
16503             IF TG_TABLE_NAME = 'call_number' THEN
16504                 DELETE FROM asset.opac_visible_copies WHERE id IN (SELECT id FROM asset.copy WHERE call_number = NEW.id);
16505             ELSIF TG_TABLE_NAME = 'record_entry' THEN
16506                 DELETE FROM asset.opac_visible_copies WHERE record = NEW.id;
16507             END IF;
16508  
16509             RETURN NEW;
16510  
16511         ELSIF OLD.deleted THEN -- add rows
16512  
16513             IF TG_TABLE_NAME IN ('copy','unit') THEN
16514                 add_query := add_query || 'AND cp.id = ' || NEW.id || ';';
16515             ELSIF TG_TABLE_NAME = 'call_number' THEN
16516                 add_query := add_query || 'AND cp.call_number = ' || NEW.id || ';';
16517             ELSIF TG_TABLE_NAME = 'record_entry' THEN
16518                 add_query := add_query || 'AND cn.record = ' || NEW.id || ';';
16519             END IF;
16520  
16521             EXECUTE add_query;
16522             RETURN NEW;
16523  
16524         END IF;
16525  
16526     END IF;
16527
16528     IF TG_TABLE_NAME = 'call_number' THEN
16529
16530         IF OLD.record <> NEW.record THEN
16531             -- call number is linked to different bib
16532             remove_query := remove_query || 'call_number = ' || NEW.id || ');';
16533             EXECUTE remove_query;
16534             add_query := add_query || 'AND cp.call_number = ' || NEW.id || ';';
16535             EXECUTE add_query;
16536         END IF;
16537
16538         RETURN NEW;
16539
16540     END IF;
16541
16542     IF TG_TABLE_NAME IN ('record_entry') THEN
16543         RETURN NEW; -- don't have 'opac_visible'
16544     END IF;
16545
16546     -- actor.org_unit, asset.copy_location, asset.copy_status
16547     IF NEW.opac_visible = OLD.opac_visible THEN -- do nothing
16548
16549         RETURN NEW;
16550
16551     ELSIF NEW.opac_visible THEN -- add rows
16552
16553         IF TG_TABLE_NAME = 'org_unit' THEN
16554             add_query := add_query || 'AND cp.circ_lib = ' || NEW.id || ';';
16555         ELSIF TG_TABLE_NAME = 'copy_location' THEN
16556             add_query := add_query || 'AND cp.location = ' || NEW.id || ';';
16557         ELSIF TG_TABLE_NAME = 'copy_status' THEN
16558             add_query := add_query || 'AND cp.status = ' || NEW.id || ';';
16559         END IF;
16560  
16561         EXECUTE add_query;
16562  
16563     ELSE -- delete rows
16564
16565         IF TG_TABLE_NAME = 'org_unit' THEN
16566             remove_query := 'DELETE FROM asset.opac_visible_copies WHERE circ_lib = ' || NEW.id || ';';
16567         ELSIF TG_TABLE_NAME = 'copy_location' THEN
16568             remove_query := remove_query || 'location = ' || NEW.id || ');';
16569         ELSIF TG_TABLE_NAME = 'copy_status' THEN
16570             remove_query := remove_query || 'status = ' || NEW.id || ');';
16571         END IF;
16572  
16573         EXECUTE remove_query;
16574  
16575     END IF;
16576  
16577     RETURN NEW;
16578 END;
16579 $func$ LANGUAGE PLPGSQL;
16580 COMMENT ON FUNCTION asset.cache_copy_visibility() IS $$
16581 Trigger function to update the copy OPAC visiblity cache.
16582 $$;
16583 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16584 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON asset.copy FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16585 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON asset.call_number FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16586 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON asset.copy_location FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16587 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON serial.unit FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16588 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON config.copy_status FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16589 CREATE TRIGGER a_opac_vis_mat_view_tgr AFTER INSERT OR UPDATE ON actor.org_unit FOR EACH ROW EXECUTE PROCEDURE asset.cache_copy_visibility();
16590
16591 -- must create this rule explicitly; it is not inherited from asset.copy
16592 CREATE RULE protect_serial_unit_delete AS ON DELETE TO serial.unit DO INSTEAD UPDATE serial.unit SET deleted = TRUE WHERE OLD.id = serial.unit.id;
16593
16594 CREATE RULE protect_authority_rec_delete AS ON DELETE TO authority.record_entry DO INSTEAD (UPDATE authority.record_entry SET deleted = TRUE WHERE OLD.id = authority.record_entry.id);
16595
16596 CREATE OR REPLACE FUNCTION authority.merge_records ( target_record BIGINT, source_record BIGINT ) RETURNS INT AS $func$
16597 DECLARE
16598     moved_objects INT := 0;
16599     bib_id        INT := 0;
16600     bib_rec       biblio.record_entry%ROWTYPE;
16601     auth_link     authority.bib_linking%ROWTYPE;
16602 BEGIN
16603
16604     -- 1. Make source_record MARC a copy of the target_record to get auto-sync in linked bib records
16605     UPDATE authority.record_entry
16606       SET marc = (
16607         SELECT marc
16608           FROM authority.record_entry
16609           WHERE id = target_record
16610       )
16611       WHERE id = source_record;
16612
16613     -- 2. Update all bib records with the ID from target_record in their $0
16614     FOR bib_rec IN SELECT bre.* FROM biblio.record_entry bre 
16615       INNER JOIN authority.bib_linking abl ON abl.bib = bre.id
16616       WHERE abl.authority = target_record LOOP
16617
16618         UPDATE biblio.record_entry
16619           SET marc = REGEXP_REPLACE(marc, 
16620             E'(<subfield\\s+code="0"\\s*>[^<]*?\\))' || source_record || '<',
16621             E'\\1' || target_record || '<', 'g')
16622           WHERE id = bib_rec.id;
16623
16624           moved_objects := moved_objects + 1;
16625     END LOOP;
16626
16627     -- 3. "Delete" source_record
16628     DELETE FROM authority.record_entry
16629       WHERE id = source_record;
16630
16631     RETURN moved_objects;
16632 END;
16633 $func$ LANGUAGE plpgsql;
16634
16635 -- serial.record_entry already had an owner column spelled "owning_lib"
16636 -- Adjust the table and affected functions accordingly
16637
16638 ALTER TABLE serial.record_entry DROP COLUMN owner;
16639
16640 CREATE TABLE actor.usr_saved_search (
16641     id              SERIAL          PRIMARY KEY,
16642         owner           INT             NOT NULL REFERENCES actor.usr (id)
16643                                         ON DELETE CASCADE
16644                                         DEFERRABLE INITIALLY DEFERRED,
16645         name            TEXT            NOT NULL,
16646         create_date     TIMESTAMPTZ     NOT NULL DEFAULT now(),
16647         query_text      TEXT            NOT NULL,
16648         query_type      TEXT            NOT NULL
16649                                         CONSTRAINT valid_query_text CHECK (
16650                                         query_type IN ( 'URL' )) DEFAULT 'URL',
16651                                         -- we may add other types someday
16652         target          TEXT            NOT NULL
16653                                         CONSTRAINT valid_target CHECK (
16654                                         target IN ( 'record', 'metarecord', 'callnumber' )),
16655         CONSTRAINT name_once_per_user UNIQUE (owner, name)
16656 );
16657
16658 -- Apply Dan Wells' changes to the serial schema, from the
16659 -- seials-integration branch
16660
16661 CREATE TABLE serial.subscription_note (
16662         id           SERIAL PRIMARY KEY,
16663         subscription INT    NOT NULL
16664                             REFERENCES serial.subscription (id)
16665                             ON DELETE CASCADE
16666                             DEFERRABLE INITIALLY DEFERRED,
16667         creator      INT    NOT NULL
16668                             REFERENCES actor.usr (id)
16669                             DEFERRABLE INITIALLY DEFERRED,
16670         create_date  TIMESTAMP WITH TIME ZONE DEFAULT NOW(),
16671         pub          BOOL   NOT NULL DEFAULT FALSE,
16672         title        TEXT   NOT NULL,
16673         value        TEXT   NOT NULL
16674 );
16675 CREATE INDEX serial_subscription_note_sub_idx ON serial.subscription_note (subscription);
16676
16677 CREATE TABLE serial.distribution_note (
16678         id           SERIAL PRIMARY KEY,
16679         distribution INT    NOT NULL
16680                             REFERENCES serial.distribution (id)
16681                             ON DELETE CASCADE
16682                             DEFERRABLE INITIALLY DEFERRED,
16683         creator      INT    NOT NULL
16684                             REFERENCES actor.usr (id)
16685                             DEFERRABLE INITIALLY DEFERRED,
16686         create_date  TIMESTAMP WITH TIME ZONE DEFAULT NOW(),
16687         pub          BOOL   NOT NULL DEFAULT FALSE,
16688         title        TEXT   NOT NULL,
16689         value        TEXT   NOT NULL
16690 );
16691
16692 ------- Begin surgery on serial.unit
16693
16694 ALTER TABLE serial.unit
16695         DROP COLUMN label;
16696
16697 ALTER TABLE serial.unit
16698         RENAME COLUMN label_sort_key TO sort_key;
16699
16700 ALTER TABLE serial.unit
16701         RENAME COLUMN contents TO detailed_contents;
16702
16703 ALTER TABLE serial.unit
16704         ADD COLUMN summary_contents TEXT;
16705
16706 UPDATE serial.unit
16707 SET summary_contents = detailed_contents;
16708
16709 ALTER TABLE serial.unit
16710         ALTER column summary_contents SET NOT NULL;
16711
16712 ------- End surgery on serial.unit
16713
16714 -- DELETE FROM config.upgrade_log WHERE version = 'temp'; DELETE FROM action_trigger.event WHERE event_def IN (33,34); DELETE FROM action_trigger.environment WHERE event_def IN (33,34); DELETE FROM action_trigger.event_definition WHERE id IN (33,34); DELETE FROM action_trigger.hook WHERE key IN ( 'circ.format.missing_pieces.slip.print', 'circ.format.missing_pieces.letter.print' );
16715
16716 -- Now rebuild the constraints dropped via cascade.
16717 -- ALTER TABLE acq.provider    ADD CONSTRAINT provider_edi_default_fkey FOREIGN KEY (edi_default) REFERENCES acq.edi_account (id) DEFERRABLE INITIALLY DEFERRED;
16718 DROP INDEX IF EXISTS money.money_mat_summary_id_idx;
16719 ALTER TABLE money.materialized_billable_xact_summary ADD PRIMARY KEY (id);
16720
16721 -- ALTER TABLE staging.billing_address_stage ADD PRIMARY KEY (row_id);
16722
16723 DELETE FROM config.metabib_field_index_norm_map
16724     WHERE norm IN (
16725         SELECT id 
16726             FROM config.index_normalizer
16727             WHERE func IN ('first_word', 'naco_normalize', 'split_date_range')
16728     )
16729     AND field = 18
16730 ;
16731
16732 -- We won't necessarily use all of these, but they are here for completeness.
16733 -- Source is the EDI spec 6063 codelist, eg: http://www.stylusstudio.com/edifact/D04B/6063.htm
16734 -- Values are the EDI code value + 1200
16735
16736 INSERT INTO acq.cancel_reason (org_unit, keep_debits, id, label, description) VALUES 
16737 (1, 't', 1201, 'Discrete quantity', 'Individually separated and distinct quantity.'),
16738 (1, 't', 1202, 'Charge', 'Quantity relevant for charge.'),
16739 (1, 't', 1203, 'Cumulative quantity', 'Quantity accumulated.'),
16740 (1, 't', 1204, 'Interest for overdrawn account', 'Interest for overdrawing the account.'),
16741 (1, 't', 1205, 'Active ingredient dose per unit', 'The dosage of active ingredient per unit.'),
16742 (1, 't', 1206, 'Auditor', 'The number of entities that audit accounts.'),
16743 (1, 't', 1207, 'Branch locations, leased', 'The number of branch locations being leased by an entity.'),
16744 (1, 't', 1208, 'Inventory quantity at supplier''s subject to inspection by', 'customer Quantity of goods which the customer requires the supplier to have in inventory and which may be inspected by the customer if desired.'),
16745 (1, 't', 1209, 'Branch locations, owned', 'The number of branch locations owned by an entity.'),
16746 (1, 't', 1210, 'Judgements registered', 'The number of judgements registered against an entity.'),
16747 (1, 't', 1211, 'Split quantity', 'Part of the whole quantity.'),
16748 (1, 't', 1212, 'Despatch quantity', 'Quantity despatched by the seller.'),
16749 (1, 't', 1213, 'Liens registered', 'The number of liens registered against an entity.'),
16750 (1, 't', 1214, 'Livestock', 'The number of animals kept for use or profit.'),
16751 (1, 't', 1215, 'Insufficient funds returned cheques', 'The number of cheques returned due to insufficient funds.'),
16752 (1, 't', 1216, 'Stolen cheques', 'The number of stolen cheques.'),
16753 (1, 't', 1217, 'Quantity on hand', 'The total quantity of a product on hand at a location. This includes as well units awaiting return to manufacturer, units unavailable due to inspection procedures and undamaged stock available for despatch, resale or use.'),
16754 (1, 't', 1218, 'Previous quantity', 'Quantity previously referenced.'),
16755 (1, 't', 1219, 'Paid-in security shares', 'The number of security shares issued and for which full payment has been made.'),
16756 (1, 't', 1220, 'Unusable quantity', 'Quantity not usable.'),
16757 (1, 't', 1221, 'Ordered quantity', '[6024] The quantity which has been ordered.'),
16758 (1, 't', 1222, 'Quantity at 100%', 'Equivalent quantity at 100% purity.'),
16759 (1, 't', 1223, 'Active ingredient', 'Quantity at 100% active agent content.'),
16760 (1, 't', 1224, 'Inventory quantity at supplier''s not subject to inspection', 'by customer Quantity of goods which the customer requires the supplier to have in inventory but which will not be checked by the customer.'),
16761 (1, 't', 1225, 'Retail sales', 'Quantity of retail point of sale activity.'),
16762 (1, 't', 1226, 'Promotion quantity', 'A quantity associated with a promotional event.'),
16763 (1, 't', 1227, 'On hold for shipment', 'Article received which cannot be shipped in its present form.'),
16764 (1, 't', 1228, 'Military sales quantity', 'Quantity of goods or services sold to a military organization.'),
16765 (1, 't', 1229, 'On premises sales',  'Sale of product in restaurants or bars.'),
16766 (1, 't', 1230, 'Off premises sales', 'Sale of product directly to a store.'),
16767 (1, 't', 1231, 'Estimated annual volume', 'Volume estimated for a year.'),
16768 (1, 't', 1232, 'Minimum delivery batch', 'Minimum quantity of goods delivered at one time.'),
16769 (1, 't', 1233, 'Maximum delivery batch', 'Maximum quantity of goods delivered at one time.'),
16770 (1, 't', 1234, 'Pipes', 'The number of tubes used to convey a substance.'),
16771 (1, 't', 1235, 'Price break from', 'The minimum quantity of a quantity range for a specified (unit) price.'),
16772 (1, 't', 1236, 'Price break to', 'Maximum quantity to which the price break applies.'),
16773 (1, 't', 1237, 'Poultry', 'The number of domestic fowl.'),
16774 (1, 't', 1238, 'Secured charges registered', 'The number of secured charges registered against an entity.'),
16775 (1, 't', 1239, 'Total properties owned', 'The total number of properties owned by an entity.'),
16776 (1, 't', 1240, 'Normal delivery', 'Quantity normally delivered by the seller.'),
16777 (1, 't', 1241, 'Sales quantity not included in the replenishment', 'calculation Sales which will not be included in the calculation of replenishment requirements.'),
16778 (1, 't', 1242, 'Maximum supply quantity, supplier endorsed', 'Maximum supply quantity endorsed by a supplier.'),
16779 (1, 't', 1243, 'Buyer', 'The number of buyers.'),
16780 (1, 't', 1244, 'Debenture bond', 'The number of fixed-interest bonds of an entity backed by general credit rather than specified assets.'),
16781 (1, 't', 1245, 'Debentures filed against directors', 'The number of notices of indebtedness filed against an entity''s directors.'),
16782 (1, 't', 1246, 'Pieces delivered', 'Number of pieces actually received at the final destination.'),
16783 (1, 't', 1247, 'Invoiced quantity', 'The quantity as per invoice.'),
16784 (1, 't', 1248, 'Received quantity', 'The quantity which has been received.'),
16785 (1, 't', 1249, 'Chargeable distance', '[6110] The distance between two points for which a specific tariff applies.'),
16786 (1, 't', 1250, 'Disposition undetermined quantity', 'Product quantity that has not yet had its disposition determined.'),
16787 (1, 't', 1251, 'Inventory category transfer', 'Inventory that has been moved from one inventory category to another.'),
16788 (1, 't', 1252, 'Quantity per pack', 'Quantity for each pack.'),
16789 (1, 't', 1253, 'Minimum order quantity', 'Minimum quantity of goods for an order.'),
16790 (1, 't', 1254, 'Maximum order quantity', 'Maximum quantity of goods for an order.'),
16791 (1, 't', 1255, 'Total sales', 'The summation of total quantity sales.'),
16792 (1, 't', 1256, 'Wholesaler to wholesaler sales', 'Sale of product to other wholesalers by a wholesaler.'),
16793 (1, 't', 1257, 'In transit quantity', 'A quantity that is en route.'),
16794 (1, 't', 1258, 'Quantity withdrawn', 'Quantity withdrawn from a location.'),
16795 (1, 't', 1259, 'Numbers of consumer units in the traded unit', 'Number of units for consumer sales in a unit for trading.'),
16796 (1, 't', 1260, 'Current inventory quantity available for shipment', 'Current inventory quantity available for shipment.'),
16797 (1, 't', 1261, 'Return quantity', 'Quantity of goods returned.'),
16798 (1, 't', 1262, 'Sorted quantity', 'The quantity that is sorted.'),
16799 (1, 'f', 1263, 'Sorted quantity rejected', 'The sorted quantity that is rejected.'),
16800 (1, 't', 1264, 'Scrap quantity', 'Remainder of the total quantity after split deliveries.'),
16801 (1, 'f', 1265, 'Destroyed quantity', 'Quantity of goods destroyed.'),
16802 (1, 't', 1266, 'Committed quantity', 'Quantity a party is committed to.'),
16803 (1, 't', 1267, 'Estimated reading quantity', 'The value that is estimated to be the reading of a measuring device (e.g. meter).'),
16804 (1, 't', 1268, 'End quantity', 'The quantity recorded at the end of an agreement or period.'),
16805 (1, 't', 1269, 'Start quantity', 'The quantity recorded at the start of an agreement or period.'),
16806 (1, 't', 1270, 'Cumulative quantity received', 'Cumulative quantity of all deliveries of this article received by the buyer.'),
16807 (1, 't', 1271, 'Cumulative quantity ordered', 'Cumulative quantity of all deliveries, outstanding and scheduled orders.'),
16808 (1, 't', 1272, 'Cumulative quantity received end of prior year', 'Cumulative quantity of all deliveries of the product received by the buyer till end of prior year.'),
16809 (1, 't', 1273, 'Outstanding quantity', 'Difference between quantity ordered and quantity received.'),
16810 (1, 't', 1274, 'Latest cumulative quantity', 'Cumulative quantity after complete delivery of all scheduled quantities of the product.'),
16811 (1, 't', 1275, 'Previous highest cumulative quantity', 'Cumulative quantity after complete delivery of all scheduled quantities of the product from a prior schedule period.'),
16812 (1, 't', 1276, 'Adjusted corrector reading', 'A corrector reading after it has been adjusted.'),
16813 (1, 't', 1277, 'Work days', 'Number of work days, e.g. per respective period.'),
16814 (1, 't', 1278, 'Cumulative quantity scheduled', 'Adding the quantity actually scheduled to previous cumulative quantity.'),
16815 (1, 't', 1279, 'Previous cumulative quantity', 'Cumulative quantity prior the actual order.'),
16816 (1, 't', 1280, 'Unadjusted corrector reading', 'A corrector reading before it has been adjusted.'),
16817 (1, 't', 1281, 'Extra unplanned delivery', 'Non scheduled additional quantity.'),
16818 (1, 't', 1282, 'Quantity requirement for sample inspection', 'Required quantity for sample inspection.'),
16819 (1, 't', 1283, 'Backorder quantity', 'The quantity of goods that is on back-order.'),
16820 (1, 't', 1284, 'Urgent delivery quantity', 'Quantity for urgent delivery.'),
16821 (1, 'f', 1285, 'Previous order quantity to be cancelled', 'Quantity ordered previously to be cancelled.'),
16822 (1, 't', 1286, 'Normal reading quantity', 'The value recorded or read from a measuring device (e.g. meter) in the normal conditions.'),
16823 (1, 't', 1287, 'Customer reading quantity', 'The value recorded or read from a measuring device (e.g. meter) by the customer.'),
16824 (1, 't', 1288, 'Information reading quantity', 'The value recorded or read from a measuring device (e.g. meter) for information purposes.'),
16825 (1, 't', 1289, 'Quality control held', 'Quantity of goods held pending completion of a quality control assessment.'),
16826 (1, 't', 1290, 'As is quantity', 'Quantity as it is in the existing circumstances.'),
16827 (1, 't', 1291, 'Open quantity', 'Quantity remaining after partial delivery.'),
16828 (1, 't', 1292, 'Final delivery quantity', 'Quantity of final delivery to a respective order.'),
16829 (1, 't', 1293, 'Subsequent delivery quantity', 'Quantity delivered to a respective order after it''s final delivery.'),
16830 (1, 't', 1294, 'Substitutional quantity', 'Quantity delivered replacing previous deliveries.'),
16831 (1, 't', 1295, 'Redelivery after post processing', 'Quantity redelivered after post processing.'),
16832 (1, 'f', 1296, 'Quality control failed', 'Quantity of goods which have failed quality control.'),
16833 (1, 't', 1297, 'Minimum inventory', 'Minimum stock quantity on which replenishment is based.'),
16834 (1, 't', 1298, 'Maximum inventory', 'Maximum stock quantity on which replenishment is based.'),
16835 (1, 't', 1299, 'Estimated quantity', 'Quantity estimated.'),
16836 (1, 't', 1300, 'Chargeable weight', 'The weight on which charges are based.'),
16837 (1, 't', 1301, 'Chargeable gross weight', 'The gross weight on which charges are based.'),
16838 (1, 't', 1302, 'Chargeable tare weight', 'The tare weight on which charges are based.'),
16839 (1, 't', 1303, 'Chargeable number of axles', 'The number of axles on which charges are based.'),
16840 (1, 't', 1304, 'Chargeable number of containers', 'The number of containers on which charges are based.'),
16841 (1, 't', 1305, 'Chargeable number of rail wagons', 'The number of rail wagons on which charges are based.'),
16842 (1, 't', 1306, 'Chargeable number of packages', 'The number of packages on which charges are based.'),
16843 (1, 't', 1307, 'Chargeable number of units', 'The number of units on which charges are based.'),
16844 (1, 't', 1308, 'Chargeable period', 'The period of time on which charges are based.'),
16845 (1, 't', 1309, 'Chargeable volume', 'The volume on which charges are based.'),
16846 (1, 't', 1310, 'Chargeable cubic measurements', 'The cubic measurements on which charges are based.'),
16847 (1, 't', 1311, 'Chargeable surface', 'The surface area on which charges are based.'),
16848 (1, 't', 1312, 'Chargeable length', 'The length on which charges are based.'),
16849 (1, 't', 1313, 'Quantity to be delivered', 'The quantity to be delivered.'),
16850 (1, 't', 1314, 'Number of passengers', 'Total number of passengers on the conveyance.'),
16851 (1, 't', 1315, 'Number of crew', 'Total number of crew members on the conveyance.'),
16852 (1, 't', 1316, 'Number of transport documents', 'Total number of air waybills, bills of lading, etc. being reported for a specific conveyance.'),
16853 (1, 't', 1317, 'Quantity landed', 'Quantity of goods actually arrived.'),
16854 (1, 't', 1318, 'Quantity manifested', 'Quantity of goods contracted for delivery by the carrier.'),
16855 (1, 't', 1319, 'Short shipped', 'Indication that part of the consignment was not shipped.'),
16856 (1, 't', 1320, 'Split shipment', 'Indication that the consignment has been split into two or more shipments.'),
16857 (1, 't', 1321, 'Over shipped', 'The quantity of goods shipped that exceeds the quantity contracted.'),
16858 (1, 't', 1322, 'Short-landed goods', 'If quantity of goods actually landed is less than the quantity which appears in the documentation. This quantity is the difference between these quantities.'),
16859 (1, 't', 1323, 'Surplus goods', 'If quantity of goods actually landed is more than the quantity which appears in the documentation. This quantity is the difference between these quantities.'),
16860 (1, 'f', 1324, 'Damaged goods', 'Quantity of goods which have deteriorated in transport such that they cannot be used for the purpose for which they were originally intended.'),
16861 (1, 'f', 1325, 'Pilferage goods', 'Quantity of goods stolen during transport.'),
16862 (1, 'f', 1326, 'Lost goods', 'Quantity of goods that disappeared in transport.'),
16863 (1, 't', 1327, 'Report difference', 'The quantity concerning the same transaction differs between two documents/messages and the source of this difference is a typing error.'),
16864 (1, 't', 1328, 'Quantity loaded', 'Quantity of goods loaded onto a means of transport.'),
16865 (1, 't', 1329, 'Units per unit price', 'Number of units per unit price.'),
16866 (1, 't', 1330, 'Allowance', 'Quantity relevant for allowance.'),
16867 (1, 't', 1331, 'Delivery quantity', 'Quantity required by buyer to be delivered.'),
16868 (1, 't', 1332, 'Cumulative quantity, preceding period, planned', 'Cumulative quantity originally planned for the preceding period.'),
16869 (1, 't', 1333, 'Cumulative quantity, preceding period, reached', 'Cumulative quantity reached in the preceding period.'),
16870 (1, 't', 1334, 'Cumulative quantity, actual planned',            'Cumulative quantity planned for now.'),
16871 (1, 't', 1335, 'Period quantity, planned', 'Quantity planned for this period.'),
16872 (1, 't', 1336, 'Period quantity, reached', 'Quantity reached during this period.'),
16873 (1, 't', 1337, 'Cumulative quantity, preceding period, estimated', 'Estimated cumulative quantity reached in the preceding period.'),
16874 (1, 't', 1338, 'Cumulative quantity, actual estimated',            'Estimated cumulative quantity reached now.'),
16875 (1, 't', 1339, 'Cumulative quantity, preceding period, measured', 'Surveyed cumulative quantity reached in the preceding period.'),
16876 (1, 't', 1340, 'Cumulative quantity, actual measured', 'Surveyed cumulative quantity reached now.'),
16877 (1, 't', 1341, 'Period quantity, measured',            'Surveyed quantity reached during this period.'),
16878 (1, 't', 1342, 'Total quantity, planned', 'Total quantity planned.'),
16879 (1, 't', 1343, 'Quantity, remaining', 'Quantity remaining.'),
16880 (1, 't', 1344, 'Tolerance', 'Plus or minus tolerance expressed as a monetary amount.'),
16881 (1, 't', 1345, 'Actual stock',          'The stock on hand, undamaged, and available for despatch, sale or use.'),
16882 (1, 't', 1346, 'Model or target stock', 'The stock quantity required or planned to have on hand, undamaged and available for use.'),
16883 (1, 't', 1347, 'Direct shipment quantity', 'Quantity to be shipped directly to a customer from a manufacturing site.'),
16884 (1, 't', 1348, 'Amortization total quantity',     'Indication of final quantity for amortization.'),
16885 (1, 't', 1349, 'Amortization order quantity',     'Indication of actual share of the order quantity for amortization.'),
16886 (1, 't', 1350, 'Amortization cumulated quantity', 'Indication of actual cumulated quantity of previous and actual amortization order quantity.'),
16887 (1, 't', 1351, 'Quantity advised',  'Quantity advised by supplier or shipper, in contrast to quantity actually received.'),
16888 (1, 't', 1352, 'Consignment stock', 'Quantity of goods with an external customer which is still the property of the supplier. Payment for these goods is only made to the supplier when the ownership has been transferred between the trading partners.'),
16889 (1, 't', 1353, 'Statistical sales quantity', 'Quantity of goods sold in a specified period.'),
16890 (1, 't', 1354, 'Sales quantity planned',     'Quantity of goods required to meet future demands. - Market intelligence quantity.'),
16891 (1, 't', 1355, 'Replenishment quantity',     'Quantity required to maintain the requisite on-hand stock of goods.'),
16892 (1, 't', 1356, 'Inventory movement quantity', 'To specify the quantity of an inventory movement.'),
16893 (1, 't', 1357, 'Opening stock balance quantity', 'To specify the quantity of an opening stock balance.'),
16894 (1, 't', 1358, 'Closing stock balance quantity', 'To specify the quantity of a closing stock balance.'),
16895 (1, 't', 1359, 'Number of stops', 'Number of times a means of transport stops before arriving at destination.'),
16896 (1, 't', 1360, 'Minimum production batch', 'The quantity specified is the minimum output from a single production run.'),
16897 (1, 't', 1361, 'Dimensional sample quantity', 'The quantity defined is a sample for the purpose of validating dimensions.'),
16898 (1, 't', 1362, 'Functional sample quantity', 'The quantity defined is a sample for the purpose of validating function and performance.'),
16899 (1, 't', 1363, 'Pre-production quantity', 'Quantity of the referenced item required prior to full production.'),
16900 (1, 't', 1364, 'Delivery batch', 'Quantity of the referenced item which constitutes a standard batch for deliver purposes.'),
16901 (1, 't', 1365, 'Delivery batch multiple', 'The multiples in which delivery batches can be supplied.'),
16902 (1, 't', 1366, 'All time buy',             'The total quantity of the referenced covering all future needs. Further orders of the referenced item are not expected.'),
16903 (1, 't', 1367, 'Total delivery quantity',  'The total quantity required by the buyer to be delivered.'),
16904 (1, 't', 1368, 'Single delivery quantity', 'The quantity required by the buyer to be delivered in a single shipment.'),
16905 (1, 't', 1369, 'Supplied quantity',  'Quantity of the referenced item actually shipped.'),
16906 (1, 't', 1370, 'Allocated quantity', 'Quantity of the referenced item allocated from available stock for delivery.'),
16907 (1, 't', 1371, 'Maximum stackability', 'The number of pallets/handling units which can be safely stacked one on top of another.'),
16908 (1, 't', 1372, 'Amortisation quantity', 'The quantity of the referenced item which has a cost for tooling amortisation included in the item price.'),
16909 (1, 't', 1373, 'Previously amortised quantity', 'The cumulative quantity of the referenced item which had a cost for tooling amortisation included in the item price.'),
16910 (1, 't', 1374, 'Total amortisation quantity', 'The total quantity of the referenced item which has a cost for tooling amortisation included in the item price.'),
16911 (1, 't', 1375, 'Number of moulds', 'The number of pressing moulds contained within a single piece of the referenced tooling.'),
16912 (1, 't', 1376, 'Concurrent item output of tooling', 'The number of related items which can be produced simultaneously with a single piece of the referenced tooling.'),
16913 (1, 't', 1377, 'Periodic capacity of tooling', 'Maximum production output of the referenced tool over a period of time.'),
16914 (1, 't', 1378, 'Lifetime capacity of tooling', 'Maximum production output of the referenced tool over its productive lifetime.'),
16915 (1, 't', 1379, 'Number of deliveries per despatch period', 'The number of deliveries normally expected to be despatched within each despatch period.'),
16916 (1, 't', 1380, 'Provided quantity', 'The quantity of a referenced component supplied by the buyer for manufacturing of an ordered item.'),
16917 (1, 't', 1381, 'Maximum production batch', 'The quantity specified is the maximum output from a single production run.'),
16918 (1, 'f', 1382, 'Cancelled quantity', 'Quantity of the referenced item which has previously been ordered and is now cancelled.'),
16919 (1, 't', 1383, 'No delivery requirement in this instruction', 'This delivery instruction does not contain any delivery requirements.'),
16920 (1, 't', 1384, 'Quantity of material in ordered time', 'Quantity of the referenced material within the ordered time.'),
16921 (1, 'f', 1385, 'Rejected quantity', 'The quantity of received goods rejected for quantity reasons.'),
16922 (1, 't', 1386, 'Cumulative quantity scheduled up to accumulation start date', 'The cumulative quantity scheduled up to the accumulation start date.'),
16923 (1, 't', 1387, 'Quantity scheduled', 'The quantity scheduled for delivery.'),
16924 (1, 't', 1388, 'Number of identical handling units', 'Number of identical handling units in terms of type and contents.'),
16925 (1, 't', 1389, 'Number of packages in handling unit', 'The number of packages contained in one handling unit.'),
16926 (1, 't', 1390, 'Despatch note quantity', 'The item quantity specified on the despatch note.'),
16927 (1, 't', 1391, 'Adjustment to inventory quantity', 'An adjustment to inventory quantity.'),
16928 (1, 't', 1392, 'Free goods quantity',    'Quantity of goods which are free of charge.'),
16929 (1, 't', 1393, 'Free quantity included', 'Quantity included to which no charge is applicable.'),
16930 (1, 't', 1394, 'Received and accepted',  'Quantity which has been received and accepted at a given location.'),
16931 (1, 'f', 1395, 'Received, not accepted, to be returned',  'Quantity which has been received but not accepted at a given location and which will consequently be returned to the relevant party.'),
16932 (1, 'f', 1396, 'Received, not accepted, to be destroyed', 'Quantity which has been received but not accepted at a given location and which will consequently be destroyed.'),
16933 (1, 't', 1397, 'Reordering level', 'Quantity at which an order may be triggered to replenish.'),
16934 (1, 't', 1399, 'Inventory withdrawal quantity', 'Quantity which has been withdrawn from inventory since the last inventory report.'),
16935 (1, 't', 1400, 'Free quantity not included', 'Free quantity not included in ordered quantity.'),
16936 (1, 't', 1401, 'Recommended overhaul and repair quantity', 'To indicate the recommended quantity of an article required to support overhaul and repair activities.'),
16937 (1, 't', 1402, 'Quantity per next higher assembly', 'To indicate the quantity required for the next higher assembly.'),
16938 (1, 't', 1403, 'Quantity per unit of issue', 'Provides the standard quantity of an article in which one unit can be issued.'),
16939 (1, 't', 1404, 'Cumulative scrap quantity',  'Provides the cumulative quantity of an item which has been identified as scrapped.'),
16940 (1, 't', 1405, 'Publication turn size', 'The quantity of magazines or newspapers grouped together with the spine facing alternate directions in a bundle.'),
16941 (1, 't', 1406, 'Recommended maintenance quantity', 'Recommended quantity of an article which is required to meet an agreed level of maintenance.'),
16942 (1, 't', 1407, 'Labour hours', 'Number of labour hours.'),
16943 (1, 't', 1408, 'Quantity requirement for maintenance and repair of', 'equipment Quantity of the material needed to maintain and repair equipment.'),
16944 (1, 't', 1409, 'Additional replenishment demand quantity', 'Incremental needs over and above normal replenishment calculations, but not intended to permanently change the model parameters.'),
16945 (1, 't', 1410, 'Returned by consumer quantity', 'Quantity returned by a consumer.'),
16946 (1, 't', 1411, 'Replenishment override quantity', 'Quantity to override the normal replenishment model calculations, but not intended to permanently change the model parameters.'),
16947 (1, 't', 1412, 'Quantity sold, net', 'Net quantity sold which includes returns of saleable inventory and other adjustments.'),
16948 (1, 't', 1413, 'Transferred out quantity',   'Quantity which was transferred out of this location.'),
16949 (1, 't', 1414, 'Transferred in quantity',    'Quantity which was transferred into this location.'),
16950 (1, 't', 1415, 'Unsaleable quantity',        'Quantity of inventory received which cannot be sold in its present condition.'),
16951 (1, 't', 1416, 'Consumer reserved quantity', 'Quantity reserved for consumer delivery or pickup and not yet withdrawn from inventory.'),
16952 (1, 't', 1417, 'Out of inventory quantity',  'Quantity of inventory which was requested but was not available.'),
16953 (1, 't', 1418, 'Quantity returned, defective or damaged', 'Quantity returned in a damaged or defective condition.'),
16954 (1, 't', 1419, 'Taxable quantity',           'Quantity subject to taxation.'),
16955 (1, 't', 1420, 'Meter reading', 'The numeric value of measure units counted by a meter.'),
16956 (1, 't', 1421, 'Maximum requestable quantity', 'The maximum quantity which may be requested.'),
16957 (1, 't', 1422, 'Minimum requestable quantity', 'The minimum quantity which may be requested.'),
16958 (1, 't', 1423, 'Daily average quantity', 'The quantity for a defined period divided by the number of days of the period.'),
16959 (1, 't', 1424, 'Budgeted hours',     'The number of budgeted hours.'),
16960 (1, 't', 1425, 'Actual hours',       'The number of actual hours.'),
16961 (1, 't', 1426, 'Earned value hours', 'The number of earned value hours.'),
16962 (1, 't', 1427, 'Estimated hours',    'The number of estimated hours.'),
16963 (1, 't', 1428, 'Level resource task quantity', 'Quantity of a resource that is level for the duration of the task.'),
16964 (1, 't', 1429, 'Available resource task quantity', 'Quantity of a resource available to complete a task.'),
16965 (1, 't', 1430, 'Work time units',   'Quantity of work units of time.'),
16966 (1, 't', 1431, 'Daily work shifts', 'Quantity of work shifts per day.'),
16967 (1, 't', 1432, 'Work time units per shift', 'Work units of time per work shift.'),
16968 (1, 't', 1433, 'Work calendar units',       'Work calendar units of time.'),
16969 (1, 't', 1434, 'Elapsed duration',   'Quantity representing the elapsed duration.'),
16970 (1, 't', 1435, 'Remaining duration', 'Quantity representing the remaining duration.'),
16971 (1, 't', 1436, 'Original duration',  'Quantity representing the original duration.'),
16972 (1, 't', 1437, 'Current duration',   'Quantity representing the current duration.'),
16973 (1, 't', 1438, 'Total float time',   'Quantity representing the total float time.'),
16974 (1, 't', 1439, 'Free float time',    'Quantity representing the free float time.'),
16975 (1, 't', 1440, 'Lag time',           'Quantity representing lag time.'),
16976 (1, 't', 1441, 'Lead time',          'Quantity representing lead time.'),
16977 (1, 't', 1442, 'Number of months', 'The number of months.'),
16978 (1, 't', 1443, 'Reserved quantity customer direct delivery sales', 'Quantity of products reserved for sales delivered direct to the customer.'),
16979 (1, 't', 1444, 'Reserved quantity retail sales', 'Quantity of products reserved for retail sales.'),
16980 (1, 't', 1445, 'Consolidated discount inventory', 'A quantity of inventory supplied at consolidated discount terms.'),
16981 (1, 't', 1446, 'Returns replacement quantity',    'A quantity of goods issued as a replacement for a returned quantity.'),
16982 (1, 't', 1447, 'Additional promotion sales forecast quantity', 'A forecast of additional quantity which will be sold during a period of promotional activity.'),
16983 (1, 't', 1448, 'Reserved quantity', 'Quantity reserved for specific purposes.'),
16984 (1, 't', 1449, 'Quantity displayed not available for sale', 'Quantity displayed within a retail outlet but not available for sale.'),
16985 (1, 't', 1450, 'Inventory discrepancy', 'The difference recorded between theoretical and physical inventory.'),
16986 (1, 't', 1451, 'Incremental order quantity', 'The incremental quantity by which ordering is carried out.'),
16987 (1, 't', 1452, 'Quantity requiring manipulation before despatch', 'A quantity of goods which needs manipulation before despatch.'),
16988 (1, 't', 1453, 'Quantity in quarantine',              'A quantity of goods which are held in a restricted area for quarantine purposes.'),
16989 (1, 't', 1454, 'Quantity withheld by owner of goods', 'A quantity of goods which has been withheld by the owner of the goods.'),
16990 (1, 't', 1455, 'Quantity not available for despatch', 'A quantity of goods not available for despatch.'),
16991 (1, 't', 1456, 'Quantity awaiting delivery', 'Quantity of goods which are awaiting delivery.'),
16992 (1, 't', 1457, 'Quantity in physical inventory',      'A quantity of goods held in physical inventory.'),
16993 (1, 't', 1458, 'Quantity held by logistic service provider', 'Quantity of goods under the control of a logistic service provider.'),
16994 (1, 't', 1459, 'Optimal quantity', 'The optimal quantity for a given purpose.'),
16995 (1, 't', 1460, 'Delivery quantity balance', 'The difference between the scheduled quantity and the quantity delivered to the consignee at a given date.'),
16996 (1, 't', 1461, 'Cumulative quantity shipped', 'Cumulative quantity of all shipments.'),
16997 (1, 't', 1462, 'Quantity suspended', 'The quantity of something which is suspended.'),
16998 (1, 't', 1463, 'Control quantity', 'The quantity designated for control purposes.'),
16999 (1, 't', 1464, 'Equipment quantity', 'A count of a quantity of equipment.'),
17000 (1, 't', 1465, 'Factor', 'Number by which the measured unit has to be multiplied to calculate the units used.'),
17001 (1, 't', 1466, 'Unsold quantity held by wholesaler', 'Unsold quantity held by the wholesaler.'),
17002 (1, 't', 1467, 'Quantity held by delivery vehicle', 'Quantity of goods held by the delivery vehicle.'),
17003 (1, 't', 1468, 'Quantity held by retail outlet', 'Quantity held by the retail outlet.'),
17004 (1, 'f', 1469, 'Rejected return quantity', 'A quantity for return which has been rejected.'),
17005 (1, 't', 1470, 'Accounts', 'The number of accounts.'),
17006 (1, 't', 1471, 'Accounts placed for collection', 'The number of accounts placed for collection.'),
17007 (1, 't', 1472, 'Activity codes', 'The number of activity codes.'),
17008 (1, 't', 1473, 'Agents', 'The number of agents.'),
17009 (1, 't', 1474, 'Airline attendants', 'The number of airline attendants.'),
17010 (1, 't', 1475, 'Authorised shares',  'The number of shares authorised for issue.'),
17011 (1, 't', 1476, 'Employee average',   'The average number of employees.'),
17012 (1, 't', 1477, 'Branch locations',   'The number of branch locations.'),
17013 (1, 't', 1478, 'Capital changes',    'The number of capital changes made.'),
17014 (1, 't', 1479, 'Clerks', 'The number of clerks.'),
17015 (1, 't', 1480, 'Companies in same activity', 'The number of companies doing business in the same activity category.'),
17016 (1, 't', 1481, 'Companies included in consolidated financial statement', 'The number of companies included in a consolidated financial statement.'),
17017 (1, 't', 1482, 'Cooperative shares', 'The number of cooperative shares.'),
17018 (1, 't', 1483, 'Creditors',   'The number of creditors.'),
17019 (1, 't', 1484, 'Departments', 'The number of departments.'),
17020 (1, 't', 1485, 'Design employees', 'The number of employees involved in the design process.'),
17021 (1, 't', 1486, 'Physicians', 'The number of medical doctors.'),
17022 (1, 't', 1487, 'Domestic affiliated companies', 'The number of affiliated companies located within the country.'),
17023 (1, 't', 1488, 'Drivers', 'The number of drivers.'),
17024 (1, 't', 1489, 'Employed at location',     'The number of employees at the specified location.'),
17025 (1, 't', 1490, 'Employed by this company', 'The number of employees at the specified company.'),
17026 (1, 't', 1491, 'Total employees',    'The total number of employees.'),
17027 (1, 't', 1492, 'Employees shared',   'The number of employees shared among entities.'),
17028 (1, 't', 1493, 'Engineers',          'The number of engineers.'),
17029 (1, 't', 1494, 'Estimated accounts', 'The estimated number of accounts.'),
17030 (1, 't', 1495, 'Estimated employees at location', 'The estimated number of employees at the specified location.'),
17031 (1, 't', 1496, 'Estimated total employees',       'The total estimated number of employees.'),
17032 (1, 't', 1497, 'Executives', 'The number of executives.'),
17033 (1, 't', 1498, 'Agricultural workers',   'The number of agricultural workers.'),
17034 (1, 't', 1499, 'Financial institutions', 'The number of financial institutions.'),
17035 (1, 't', 1500, 'Floors occupied', 'The number of floors occupied.'),
17036 (1, 't', 1501, 'Foreign related entities', 'The number of related entities located outside the country.'),
17037 (1, 't', 1502, 'Group employees',    'The number of employees within the group.'),
17038 (1, 't', 1503, 'Indirect employees', 'The number of employees not associated with direct production.'),
17039 (1, 't', 1504, 'Installers',    'The number of employees involved with the installation process.'),
17040 (1, 't', 1505, 'Invoices',      'The number of invoices.'),
17041 (1, 't', 1506, 'Issued shares', 'The number of shares actually issued.'),
17042 (1, 't', 1507, 'Labourers',     'The number of labourers.'),
17043 (1, 't', 1508, 'Manufactured units', 'The number of units manufactured.'),
17044 (1, 't', 1509, 'Maximum number of employees', 'The maximum number of people employed.'),
17045 (1, 't', 1510, 'Maximum number of employees at location', 'The maximum number of people employed at a location.'),
17046 (1, 't', 1511, 'Members in group', 'The number of members within a group.'),
17047 (1, 't', 1512, 'Minimum number of employees at location', 'The minimum number of people employed at a location.'),
17048 (1, 't', 1513, 'Minimum number of employees', 'The minimum number of people employed.'),
17049 (1, 't', 1514, 'Non-union employees', 'The number of employees not belonging to a labour union.'),
17050 (1, 't', 1515, 'Floors', 'The number of floors in a building.'),
17051 (1, 't', 1516, 'Nurses', 'The number of nurses.'),
17052 (1, 't', 1517, 'Office workers', 'The number of workers in an office.'),
17053 (1, 't', 1518, 'Other employees', 'The number of employees otherwise categorised.'),
17054 (1, 't', 1519, 'Part time employees', 'The number of employees working on a part time basis.'),
17055 (1, 't', 1520, 'Accounts payable average overdue days', 'The average number of days accounts payable are overdue.'),
17056 (1, 't', 1521, 'Pilots', 'The number of pilots.'),
17057 (1, 't', 1522, 'Plant workers', 'The number of workers within a plant.'),
17058 (1, 't', 1523, 'Previous number of accounts', 'The number of accounts which preceded the current count.'),
17059 (1, 't', 1524, 'Previous number of branch locations', 'The number of branch locations which preceded the current count.'),
17060 (1, 't', 1525, 'Principals included as employees', 'The number of principals which are included in the count of employees.'),
17061 (1, 't', 1526, 'Protested bills', 'The number of bills which are protested.'),
17062 (1, 't', 1527, 'Registered brands distributed', 'The number of registered brands which are being distributed.'),
17063 (1, 't', 1528, 'Registered brands manufactured', 'The number of registered brands which are being manufactured.'),
17064 (1, 't', 1529, 'Related business entities', 'The number of related business entities.'),
17065 (1, 't', 1530, 'Relatives employed', 'The number of relatives which are counted as employees.'),
17066 (1, 't', 1531, 'Rooms',        'The number of rooms.'),
17067 (1, 't', 1532, 'Salespersons', 'The number of salespersons.'),
17068 (1, 't', 1533, 'Seats',        'The number of seats.'),
17069 (1, 't', 1534, 'Shareholders', 'The number of shareholders.'),
17070 (1, 't', 1535, 'Shares of common stock', 'The number of shares of common stock.'),
17071 (1, 't', 1536, 'Shares of preferred stock', 'The number of shares of preferred stock.'),
17072 (1, 't', 1537, 'Silent partners', 'The number of silent partners.'),
17073 (1, 't', 1538, 'Subcontractors',  'The number of subcontractors.'),
17074 (1, 't', 1539, 'Subsidiaries',    'The number of subsidiaries.'),
17075 (1, 't', 1540, 'Law suits',       'The number of law suits.'),
17076 (1, 't', 1541, 'Suppliers',       'The number of suppliers.'),
17077 (1, 't', 1542, 'Teachers',        'The number of teachers.'),
17078 (1, 't', 1543, 'Technicians',     'The number of technicians.'),
17079 (1, 't', 1544, 'Trainees',        'The number of trainees.'),
17080 (1, 't', 1545, 'Union employees', 'The number of employees who are members of a labour union.'),
17081 (1, 't', 1546, 'Number of units', 'The quantity of units.'),
17082 (1, 't', 1547, 'Warehouse employees', 'The number of employees who work in a warehouse setting.'),
17083 (1, 't', 1548, 'Shareholders holding remainder of shares', 'Number of shareholders owning the remainder of shares.'),
17084 (1, 't', 1549, 'Payment orders filed', 'Number of payment orders filed.'),
17085 (1, 't', 1550, 'Uncovered cheques', 'Number of uncovered cheques.'),
17086 (1, 't', 1551, 'Auctions', 'Number of auctions.'),
17087 (1, 't', 1552, 'Units produced', 'The number of units produced.'),
17088 (1, 't', 1553, 'Added employees', 'Number of employees that were added to the workforce.'),
17089 (1, 't', 1554, 'Number of added locations', 'Number of locations that were added.'),
17090 (1, 't', 1555, 'Total number of foreign subsidiaries not included in', 'financial statement The total number of foreign subsidiaries not included in the financial statement.'),
17091 (1, 't', 1556, 'Number of closed locations', 'Number of locations that were closed.'),
17092 (1, 't', 1557, 'Counter clerks', 'The number of clerks that work behind a flat-topped fitment.'),
17093 (1, 't', 1558, 'Payment experiences in the last 3 months', 'The number of payment experiences received for an entity over the last 3 months.'),
17094 (1, 't', 1559, 'Payment experiences in the last 12 months', 'The number of payment experiences received for an entity over the last 12 months.'),
17095 (1, 't', 1560, 'Total number of subsidiaries not included in the financial', 'statement The total number of subsidiaries not included in the financial statement.'),
17096 (1, 't', 1561, 'Paid-in common shares', 'The number of paid-in common shares.'),
17097 (1, 't', 1562, 'Total number of domestic subsidiaries not included in', 'financial statement The total number of domestic subsidiaries not included in the financial statement.'),
17098 (1, 't', 1563, 'Total number of foreign subsidiaries included in financial statement', 'The total number of foreign subsidiaries included in the financial statement.'),
17099 (1, 't', 1564, 'Total number of domestic subsidiaries included in financial statement', 'The total number of domestic subsidiaries included in the financial statement.'),
17100 (1, 't', 1565, 'Total transactions', 'The total number of transactions.'),
17101 (1, 't', 1566, 'Paid-in preferred shares', 'The number of paid-in preferred shares.'),
17102 (1, 't', 1567, 'Employees', 'Code specifying the quantity of persons working for a company, whose services are used for pay.'),
17103 (1, 't', 1568, 'Active ingredient dose per unit, dispensed', 'The dosage of active ingredient per dispensed unit.'),
17104 (1, 't', 1569, 'Budget', 'Budget quantity.'),
17105 (1, 't', 1570, 'Budget, cumulative to date', 'Budget quantity, cumulative to date.'),
17106 (1, 't', 1571, 'Actual units', 'The number of actual units.'),
17107 (1, 't', 1572, 'Actual units, cumulative to date', 'The number of cumulative to date actual units.'),
17108 (1, 't', 1573, 'Earned value', 'Earned value quantity.'),
17109 (1, 't', 1574, 'Earned value, cumulative to date', 'Earned value quantity accumulated to date.'),
17110 (1, 't', 1575, 'At completion quantity, estimated', 'The estimated quantity when a project is complete.'),
17111 (1, 't', 1576, 'To complete quantity, estimated', 'The estimated quantity required to complete a project.'),
17112 (1, 't', 1577, 'Adjusted units', 'The number of adjusted units.'),
17113 (1, 't', 1578, 'Number of limited partnership shares', 'Number of shares held in a limited partnership.'),
17114 (1, 't', 1579, 'National business failure incidences', 'Number of firms in a country that discontinued with a loss to creditors.'),
17115 (1, 't', 1580, 'Industry business failure incidences', 'Number of firms in a specific industry that discontinued with a loss to creditors.'),
17116 (1, 't', 1581, 'Business class failure incidences', 'Number of firms in a specific class that discontinued with a loss to creditors.'),
17117 (1, 't', 1582, 'Mechanics', 'Number of mechanics.'),
17118 (1, 't', 1583, 'Messengers', 'Number of messengers.'),
17119 (1, 't', 1584, 'Primary managers', 'Number of primary managers.'),
17120 (1, 't', 1585, 'Secretaries', 'Number of secretaries.'),
17121 (1, 't', 1586, 'Detrimental legal filings', 'Number of detrimental legal filings.'),
17122 (1, 't', 1587, 'Branch office locations, estimated', 'Estimated number of branch office locations.'),
17123 (1, 't', 1588, 'Previous number of employees', 'The number of employees for a previous period.'),
17124 (1, 't', 1589, 'Asset seizers', 'Number of entities that seize assets of another entity.'),
17125 (1, 't', 1590, 'Out-turned quantity', 'The quantity discharged.'),
17126 (1, 't', 1591, 'Material on-board quantity, prior to loading', 'The material in vessel tanks, void spaces, and pipelines prior to loading.'),
17127 (1, 't', 1592, 'Supplier estimated previous meter reading', 'Previous meter reading estimated by the supplier.'),
17128 (1, 't', 1593, 'Supplier estimated latest meter reading',   'Latest meter reading estimated by the supplier.'),
17129 (1, 't', 1594, 'Customer estimated previous meter reading', 'Previous meter reading estimated by the customer.'),
17130 (1, 't', 1595, 'Customer estimated latest meter reading',   'Latest meter reading estimated by the customer.'),
17131 (1, 't', 1596, 'Supplier previous meter reading',           'Previous meter reading done by the supplier.'),
17132 (1, 't', 1597, 'Supplier latest meter reading',             'Latest meter reading recorded by the supplier.'),
17133 (1, 't', 1598, 'Maximum number of purchase orders allowed', 'Maximum number of purchase orders that are allowed.'),
17134 (1, 't', 1599, 'File size before compression', 'The size of a file before compression.'),
17135 (1, 't', 1600, 'File size after compression', 'The size of a file after compression.'),
17136 (1, 't', 1601, 'Securities shares', 'Number of shares of securities.'),
17137 (1, 't', 1602, 'Patients',         'Number of patients.'),
17138 (1, 't', 1603, 'Completed projects', 'Number of completed projects.'),
17139 (1, 't', 1604, 'Promoters',        'Number of entities who finance or organize an event or a production.'),
17140 (1, 't', 1605, 'Administrators',   'Number of administrators.'),
17141 (1, 't', 1606, 'Supervisors',      'Number of supervisors.'),
17142 (1, 't', 1607, 'Professionals',    'Number of professionals.'),
17143 (1, 't', 1608, 'Debt collectors',  'Number of debt collectors.'),
17144 (1, 't', 1609, 'Inspectors',       'Number of individuals who perform inspections.'),
17145 (1, 't', 1610, 'Operators',        'Number of operators.'),
17146 (1, 't', 1611, 'Trainers',         'Number of trainers.'),
17147 (1, 't', 1612, 'Active accounts',  'Number of accounts in a current or active status.'),
17148 (1, 't', 1613, 'Trademarks used',  'Number of trademarks used.'),
17149 (1, 't', 1614, 'Machines',         'Number of machines.'),
17150 (1, 't', 1615, 'Fuel pumps',       'Number of fuel pumps.'),
17151 (1, 't', 1616, 'Tables available', 'Number of tables available for use.'),
17152 (1, 't', 1617, 'Directors',        'Number of directors.'),
17153 (1, 't', 1618, 'Freelance debt collectors', 'Number of debt collectors who work on a freelance basis.'),
17154 (1, 't', 1619, 'Freelance salespersons',    'Number of salespersons who work on a freelance basis.'),
17155 (1, 't', 1620, 'Travelling employees',      'Number of travelling employees.'),
17156 (1, 't', 1621, 'Foremen', 'Number of workers with limited supervisory responsibilities.'),
17157 (1, 't', 1622, 'Production workers', 'Number of employees engaged in production.'),
17158 (1, 't', 1623, 'Employees not including owners', 'Number of employees excluding business owners.'),
17159 (1, 't', 1624, 'Beds', 'Number of beds.'),
17160 (1, 't', 1625, 'Resting quantity', 'A quantity of product that is at rest before it can be used.'),
17161 (1, 't', 1626, 'Production requirements', 'Quantity needed to meet production requirements.'),
17162 (1, 't', 1627, 'Corrected quantity', 'The quantity has been corrected.'),
17163 (1, 't', 1628, 'Operating divisions', 'Number of divisions operating.'),
17164 (1, 't', 1629, 'Quantitative incentive scheme base', 'Quantity constituting the base for the quantitative incentive scheme.'),
17165 (1, 't', 1630, 'Petitions filed', 'Number of petitions that have been filed.'),
17166 (1, 't', 1631, 'Bankruptcy petitions filed', 'Number of bankruptcy petitions that have been filed.'),
17167 (1, 't', 1632, 'Projects in process', 'Number of projects in process.'),
17168 (1, 't', 1633, 'Changes in capital structure', 'Number of modifications made to the capital structure of an entity.'),
17169 (1, 't', 1634, 'Detrimental legal filings against directors', 'The number of legal filings that are of a detrimental nature that have been filed against the directors.'),
17170 (1, 't', 1635, 'Number of failed businesses of directors', 'The number of failed businesses with which the directors have been associated.'),
17171 (1, 't', 1636, 'Professor', 'The number of professors.'),
17172 (1, 't', 1637, 'Seller',    'The number of sellers.'),
17173 (1, 't', 1638, 'Skilled worker', 'The number of skilled workers.'),
17174 (1, 't', 1639, 'Trademark represented', 'The number of trademarks represented.'),
17175 (1, 't', 1640, 'Number of quantitative incentive scheme units', 'Number of units allocated to a quantitative incentive scheme.'),
17176 (1, 't', 1641, 'Quantity in manufacturing process', 'Quantity currently in the manufacturing process.'),
17177 (1, 't', 1642, 'Number of units in the width of a layer', 'Number of units which make up the width of a layer.'),
17178 (1, 't', 1643, 'Number of units in the depth of a layer', 'Number of units which make up the depth of a layer.'),
17179 (1, 't', 1644, 'Return to warehouse', 'A quantity of products sent back to the warehouse.'),
17180 (1, 't', 1645, 'Return to the manufacturer', 'A quantity of products sent back from the manufacturer.'),
17181 (1, 't', 1646, 'Delta quantity', 'An increment or decrement to a quantity.'),
17182 (1, 't', 1647, 'Quantity moved between outlets', 'A quantity of products moved between outlets.'),
17183 (1, 't', 1648, 'Pre-paid invoice annual consumption, estimated', 'The estimated annual consumption used for a prepayment invoice.'),
17184 (1, 't', 1649, 'Total quoted quantity', 'The sum of quoted quantities.'),
17185 (1, 't', 1650, 'Requests pertaining to entity in last 12 months', 'Number of requests received in last 12 months pertaining to the entity.'),
17186 (1, 't', 1651, 'Total inquiry matches', 'Number of instances which correspond with the inquiry.'),
17187 (1, 't', 1652, 'En route to warehouse quantity',   'A quantity of products that is en route to a warehouse.'),
17188 (1, 't', 1653, 'En route from warehouse quantity', 'A quantity of products that is en route from a warehouse.'),
17189 (1, 't', 1654, 'Quantity ordered but not yet allocated from stock', 'A quantity of products which has been ordered but which has not yet been allocated from stock.'),
17190 (1, 't', 1655, 'Not yet ordered quantity', 'The quantity which has not yet been ordered.'),
17191 (1, 't', 1656, 'Net reserve power', 'The reserve power available for the net.'),
17192 (1, 't', 1657, 'Maximum number of units per shelf', 'Maximum number of units of a product that can be placed on a shelf.'),
17193 (1, 't', 1658, 'Stowaway', 'Number of stowaway(s) on a conveyance.'),
17194 (1, 't', 1659, 'Tug', 'The number of tugboat(s).'),
17195 (1, 't', 1660, 'Maximum quantity capability of the package', 'Maximum quantity of a product that can be contained in a package.'),
17196 (1, 't', 1661, 'Calculated', 'The calculated quantity.'),
17197 (1, 't', 1662, 'Monthly volume, estimated', 'Volume estimated for a month.'),
17198 (1, 't', 1663, 'Total number of persons', 'Quantity representing the total number of persons.'),
17199 (1, 't', 1664, 'Tariff Quantity', 'Quantity of the goods in the unit as required by Customs for duty/tax/fee assessment. These quantities may also be used for other fiscal or statistical purposes.'),
17200 (1, 't', 1665, 'Deducted tariff quantity',   'Quantity deducted from tariff quantity to reckon duty/tax/fee assessment bases.'),
17201 (1, 't', 1666, 'Advised but not arrived',    'Goods are advised by the consignor or supplier, but have not yet arrived at the destination.'),
17202 (1, 't', 1667, 'Received but not available', 'Goods have been received in the arrival area but are not yet available.'),
17203 (1, 't', 1668, 'Goods blocked for transshipment process', 'Goods are physically present, but can not be ordered because they are scheduled for a transshipment process.'),
17204 (1, 't', 1669, 'Goods blocked for cross docking process', 'Goods are physically present, but can not be ordered because they are scheduled for a cross docking process.'),
17205 (1, 't', 1670, 'Chargeable number of trailers', 'The number of trailers on which charges are based.'),
17206 (1, 't', 1671, 'Number of packages for a set', 'Number of packages used to pack the individual items in a grouping of merchandise that is sold together as a single trade item.'),
17207 (1, 't', 1672, 'Number of items in a set', 'The number of individual items in a grouping of merchandise that is sold together as a single trade item.'),
17208 (1, 't', 1673, 'Order sizing factor', 'A trade item specification other than gross, net weight, or volume for a trade item or a transaction, used for order sizing and pricing purposes.'),
17209 (1, 't', 1674, 'Number of different next lower level trade items', 'Value indicates the number of differrent next lower level trade items contained in a complex trade item.'),
17210 (1, 't', 1675, 'Agreed maximum buying quantity', 'The agreed maximum quantity of the trade item that may be purchased.'),
17211 (1, 't', 1676, 'Agreed minimum buying quantity', 'The agreed minimum quantity of the trade item that may be purchased.'),
17212 (1, 't', 1677, 'Free quantity of next lower level trade item', 'The numeric quantity of free items in a combination pack. The unit of measure used for the free quantity of the next lower level must be the same as the unit of measure of the Net Content of the Child Trade Item.'),
17213 (1, 't', 1678, 'Marine Diesel Oil bunkers on board, on arrival',     'Number of Marine Diesel Oil (MDO) bunkers on board when the vessel arrives in the port.'),
17214 (1, 't', 1679, 'Marine Diesel Oil bunkers, loaded',                  'Number of Marine Diesel Oil (MDO) bunkers taken on in the port.'),
17215 (1, 't', 1680, 'Intermediate Fuel Oil bunkers on board, on arrival', 'Number of Intermediate Fuel Oil (IFO) bunkers on board when the vessel arrives in the port.'),
17216 (1, 't', 1681, 'Intermediate Fuel Oil bunkers, loaded',              'Number of Intermediate Fuel Oil (IFO) bunkers taken on in the port.'),
17217 (1, 't', 1682, 'Bunker C bunkers on board, on arrival',              'Number of Bunker C, or Number 6 fuel oil bunkers on board when the vessel arrives in the port.'),
17218 (1, 't', 1683, 'Bunker C bunkers, loaded', 'Number of Bunker C, or Number 6 fuel oil bunkers, taken on in the port.'),
17219 (1, 't', 1684, 'Number of individual units within the smallest packaging', 'unit Total number of individual units contained within the smallest unit of packaging.'),
17220 (1, 't', 1685, 'Percentage of constituent element', 'The part of a product or material that is composed of the constituent element, as a percentage.'),
17221 (1, 't', 1686, 'Quantity to be decremented (LPCO)', 'Quantity to be decremented from the allowable quantity on a License, Permit, Certificate, or Other document (LPCO).'),
17222 (1, 't', 1687, 'Regulated commodity count', 'The number of regulated items.'),
17223 (1, 't', 1688, 'Number of passengers, embarking', 'The number of passengers going aboard a conveyance.'),
17224 (1, 't', 1689, 'Number of passengers, disembarking', 'The number of passengers disembarking the conveyance.'),
17225 (1, 't', 1690, 'Constituent element or component quantity', 'The specific quantity of the identified constituent element.')
17226 ;
17227 -- ZZZ, 'Mutually defined', 'As agreed by the trading partners.'),
17228
17229 CREATE TABLE acq.serial_claim (
17230     id     SERIAL           PRIMARY KEY,
17231     type   INT              NOT NULL REFERENCES acq.claim_type
17232                                      DEFERRABLE INITIALLY DEFERRED,
17233     item    BIGINT          NOT NULL REFERENCES serial.item
17234                                      DEFERRABLE INITIALLY DEFERRED
17235 );
17236
17237 CREATE INDEX serial_claim_lid_idx ON acq.serial_claim( item );
17238
17239 CREATE TABLE acq.serial_claim_event (
17240     id             BIGSERIAL        PRIMARY KEY,
17241     type           INT              NOT NULL REFERENCES acq.claim_event_type
17242                                              DEFERRABLE INITIALLY DEFERRED,
17243     claim          SERIAL           NOT NULL REFERENCES acq.serial_claim
17244                                              DEFERRABLE INITIALLY DEFERRED,
17245     event_date     TIMESTAMPTZ      NOT NULL DEFAULT now(),
17246     creator        INT              NOT NULL REFERENCES actor.usr
17247                                              DEFERRABLE INITIALLY DEFERRED,
17248     note           TEXT
17249 );
17250
17251 CREATE INDEX serial_claim_event_claim_date_idx ON acq.serial_claim_event( claim, event_date );
17252
17253 ALTER TABLE asset.stat_cat ADD COLUMN required BOOL NOT NULL DEFAULT FALSE;
17254
17255 -- now what about the auditor.*_lifecycle views??
17256
17257 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath ) VALUES
17258     (26, 'identifier', 'tcn', oils_i18n_gettext(26, 'Title Control Number', 'cmf', 'label'), 'marcxml', $$//marc:datafield[@tag='901']/marc:subfield[@code='a']$$ );
17259 INSERT INTO config.metabib_field ( id, field_class, name, label, format, xpath ) VALUES
17260     (27, 'identifier', 'bibid', oils_i18n_gettext(27, 'Internal ID', 'cmf', 'label'), 'marcxml', $$//marc:datafield[@tag='901']/marc:subfield[@code='c']$$ );
17261 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.tcn','identifier', 26);
17262 INSERT INTO config.metabib_search_alias (alias,field_class,field) VALUES ('eg.bibid','identifier', 27);
17263
17264 CREATE TABLE asset.call_number_class (
17265     id             bigserial     PRIMARY KEY,
17266     name           TEXT          NOT NULL,
17267     normalizer     TEXT          NOT NULL DEFAULT 'asset.normalize_generic',
17268     field          TEXT          NOT NULL DEFAULT '050ab,055ab,060ab,070ab,080ab,082ab,086ab,088ab,090,092,096,098,099'
17269 );
17270
17271 COMMENT ON TABLE asset.call_number_class IS $$
17272 Defines the call number normalization database functions in the "normalizer"
17273 column and the tag/subfield combinations to use to lookup the call number in
17274 the "field" column for a given classification scheme. Tag/subfield combinations
17275 are delimited by commas.
17276 $$;
17277
17278 INSERT INTO asset.call_number_class (name, normalizer) VALUES 
17279     ('Generic', 'asset.label_normalizer_generic'),
17280     ('Dewey (DDC)', 'asset.label_normalizer_dewey'),
17281     ('Library of Congress (LC)', 'asset.label_normalizer_lc')
17282 ;
17283
17284 -- Generic fields
17285 UPDATE asset.call_number_class
17286     SET field = '050ab,055ab,060ab,070ab,080ab,082ab,086ab,088ab,090,092,096,098,099'
17287     WHERE id = 1
17288 ;
17289
17290 -- Dewey fields
17291 UPDATE asset.call_number_class
17292     SET field = '080ab,082ab'
17293     WHERE id = 2
17294 ;
17295
17296 -- LC fields
17297 UPDATE asset.call_number_class
17298     SET field = '050ab,055ab'
17299     WHERE id = 3
17300 ;
17301  
17302 ALTER TABLE auditor.asset_call_number_history ADD COLUMN label_class BIGINT;
17303 ALTER TABLE auditor.asset_call_number_history ADD COLUMN label_sortkey TEXT;
17304 ALTER TABLE asset.call_number ADD COLUMN label_class BIGINT DEFAULT 1 NOT NULL REFERENCES asset.call_number_class(id) DEFERRABLE INITIALLY DEFERRED;
17305 ALTER TABLE asset.call_number ADD COLUMN label_sortkey TEXT;
17306 CREATE INDEX asset_call_number_label_sortkey ON asset.call_number(label_sortkey);
17307
17308 -- Pick up the new columns in a dependent view
17309
17310 DROP VIEW IF EXISTS stats.fleshed_call_number;
17311
17312 CREATE VIEW stats.fleshed_call_number AS
17313         SELECT  cn.*,
17314             CAST(cn.create_date AS DATE) AS create_date_day,
17315         CAST(cn.edit_date AS DATE) AS edit_date_day,
17316         DATE_TRUNC('hour', cn.create_date) AS create_date_hour,
17317         DATE_TRUNC('hour', cn.edit_date) AS edit_date_hour,
17318             rd.item_lang,
17319                 rd.item_type,
17320                 rd.item_form
17321         FROM    asset.call_number cn
17322                 JOIN metabib.rec_descriptor rd ON (rd.record = cn.record);
17323
17324 CREATE OR REPLACE FUNCTION asset.label_normalizer() RETURNS TRIGGER AS $func$
17325 DECLARE
17326     sortkey        TEXT := '';
17327 BEGIN
17328     sortkey := NEW.label_sortkey;
17329
17330     EXECUTE 'SELECT ' || acnc.normalizer || '(' || 
17331        quote_literal( NEW.label ) || ')'
17332        FROM asset.call_number_class acnc
17333        WHERE acnc.id = NEW.label_class
17334        INTO sortkey;
17335
17336     NEW.label_sortkey = sortkey;
17337
17338     RETURN NEW;
17339 END;
17340 $func$ LANGUAGE PLPGSQL;
17341
17342 CREATE OR REPLACE FUNCTION asset.label_normalizer_generic(TEXT) RETURNS TEXT AS $func$
17343     # Created after looking at the Koha C4::ClassSortRoutine::Generic module,
17344     # thus could probably be considered a derived work, although nothing was
17345     # directly copied - but to err on the safe side of providing attribution:
17346     # Copyright (C) 2007 LibLime
17347     # Licensed under the GPL v2 or later
17348
17349     use strict;
17350     use warnings;
17351
17352     # Converts the callnumber to uppercase
17353     # Strips spaces from start and end of the call number
17354     # Converts anything other than letters, digits, and periods into underscores
17355     # Collapses multiple underscores into a single underscore
17356     my $callnum = uc(shift);
17357     $callnum =~ s/^\s//g;
17358     $callnum =~ s/\s$//g;
17359     $callnum =~ s/[^A-Z0-9_.]/_/g;
17360     $callnum =~ s/_{2,}/_/g;
17361
17362     return $callnum;
17363 $func$ LANGUAGE PLPERLU;
17364
17365 CREATE OR REPLACE FUNCTION asset.label_normalizer_dewey(TEXT) RETURNS TEXT AS $func$
17366     # Derived from the Koha C4::ClassSortRoutine::Dewey module
17367     # Copyright (C) 2007 LibLime
17368     # Licensed under the GPL v2 or later
17369
17370     use strict;
17371     use warnings;
17372
17373     my $init = uc(shift);
17374     $init =~ s/^\s+//;
17375     $init =~ s/\s+$//;
17376     $init =~ s!/!!g;
17377     $init =~ s/^([\p{IsAlpha}]+)/$1 /;
17378     my @tokens = split /\.|\s+/, $init;
17379     my $digit_group_count = 0;
17380     for (my $i = 0; $i <= $#tokens; $i++) {
17381         if ($tokens[$i] =~ /^\d+$/) {
17382             $digit_group_count++;
17383             if (2 == $digit_group_count) {
17384                 $tokens[$i] = sprintf("%-15.15s", $tokens[$i]);
17385                 $tokens[$i] =~ tr/ /0/;
17386             }
17387         }
17388     }
17389     my $key = join("_", @tokens);
17390     $key =~ s/[^\p{IsAlnum}_]//g;
17391
17392     return $key;
17393
17394 $func$ LANGUAGE PLPERLU;
17395
17396 CREATE OR REPLACE FUNCTION asset.label_normalizer_lc(TEXT) RETURNS TEXT AS $func$
17397     use strict;
17398     use warnings;
17399
17400     # Library::CallNumber::LC is currently hosted at http://code.google.com/p/library-callnumber-lc/
17401     # The author hopes to upload it to CPAN some day, which would make our lives easier
17402     use Library::CallNumber::LC;
17403
17404     my $callnum = Library::CallNumber::LC->new(shift);
17405     return $callnum->normalize();
17406
17407 $func$ LANGUAGE PLPERLU;
17408
17409 CREATE OR REPLACE FUNCTION asset.opac_ou_record_copy_count (org INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17410 DECLARE
17411     ans RECORD;
17412     trans INT;
17413 BEGIN
17414     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17415
17416     FOR ans IN SELECT u.id, t.depth FROM actor.org_unit_ancestors(org) AS u JOIN actor.org_unit_type t ON (u.ou_type = t.id) LOOP
17417         RETURN QUERY
17418         SELECT  ans.depth,
17419                 ans.id,
17420                 COUNT( av.id ),
17421                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17422                 COUNT( av.id ),
17423                 trans
17424           FROM
17425                 actor.org_unit_descendants(ans.id) d
17426                 JOIN asset.opac_visible_copies av ON (av.record = record AND av.circ_lib = d.id)
17427                 JOIN asset.copy cp ON (cp.id = av.id)
17428           GROUP BY 1,2,6;
17429
17430         IF NOT FOUND THEN
17431             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17432         END IF;
17433
17434     END LOOP;
17435
17436     RETURN;
17437 END;
17438 $f$ LANGUAGE PLPGSQL;
17439
17440 CREATE OR REPLACE FUNCTION asset.opac_lasso_record_copy_count (i_lasso INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17441 DECLARE
17442     ans RECORD;
17443     trans INT;
17444 BEGIN
17445     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17446
17447     FOR ans IN SELECT u.org_unit AS id FROM actor.org_lasso_map AS u WHERE lasso = i_lasso LOOP
17448         RETURN QUERY
17449         SELECT  -1,
17450                 ans.id,
17451                 COUNT( av.id ),
17452                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17453                 COUNT( av.id ),
17454                 trans
17455           FROM
17456                 actor.org_unit_descendants(ans.id) d
17457                 JOIN asset.opac_visible_copies av ON (av.record = record AND av.circ_lib = d.id)
17458                 JOIN asset.copy cp ON (cp.id = av.id)
17459           GROUP BY 1,2,6;
17460
17461         IF NOT FOUND THEN
17462             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17463         END IF;
17464
17465     END LOOP;
17466
17467     RETURN;
17468 END;
17469 $f$ LANGUAGE PLPGSQL;
17470
17471 CREATE OR REPLACE FUNCTION asset.staff_ou_record_copy_count (org INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17472 DECLARE
17473     ans RECORD;
17474     trans INT;
17475 BEGIN
17476     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17477
17478     FOR ans IN SELECT u.id, t.depth FROM actor.org_unit_ancestors(org) AS u JOIN actor.org_unit_type t ON (u.ou_type = t.id) LOOP
17479         RETURN QUERY
17480         SELECT  ans.depth,
17481                 ans.id,
17482                 COUNT( cp.id ),
17483                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17484                 COUNT( cp.id ),
17485                 trans
17486           FROM
17487                 actor.org_unit_descendants(ans.id) d
17488                 JOIN asset.copy cp ON (cp.circ_lib = d.id)
17489                 JOIN asset.call_number cn ON (cn.record = record AND cn.id = cp.call_number)
17490           GROUP BY 1,2,6;
17491
17492         IF NOT FOUND THEN
17493             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17494         END IF;
17495
17496     END LOOP;
17497
17498     RETURN;
17499 END;
17500 $f$ LANGUAGE PLPGSQL;
17501
17502 CREATE OR REPLACE FUNCTION asset.staff_lasso_record_copy_count (i_lasso INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17503 DECLARE
17504     ans RECORD;
17505     trans INT;
17506 BEGIN
17507     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17508
17509     FOR ans IN SELECT u.org_unit AS id FROM actor.org_lasso_map AS u WHERE lasso = i_lasso LOOP
17510         RETURN QUERY
17511         SELECT  -1,
17512                 ans.id,
17513                 COUNT( cp.id ),
17514                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17515                 COUNT( cp.id ),
17516                 trans
17517           FROM
17518                 actor.org_unit_descendants(ans.id) d
17519                 JOIN asset.copy cp ON (cp.circ_lib = d.id)
17520                 JOIN asset.call_number cn ON (cn.record = record AND cn.id = cp.call_number)
17521           GROUP BY 1,2,6;
17522
17523         IF NOT FOUND THEN
17524             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17525         END IF;
17526
17527     END LOOP;
17528
17529     RETURN;
17530 END;
17531 $f$ LANGUAGE PLPGSQL;
17532
17533 CREATE OR REPLACE FUNCTION asset.record_copy_count ( place INT, record BIGINT, staff BOOL) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17534 BEGIN
17535     IF staff IS TRUE THEN
17536         IF place > 0 THEN
17537             RETURN QUERY SELECT * FROM asset.staff_ou_record_copy_count( place, record );
17538         ELSE
17539             RETURN QUERY SELECT * FROM asset.staff_lasso_record_copy_count( -place, record );
17540         END IF;
17541     ELSE
17542         IF place > 0 THEN
17543             RETURN QUERY SELECT * FROM asset.opac_ou_record_copy_count( place, record );
17544         ELSE
17545             RETURN QUERY SELECT * FROM asset.opac_lasso_record_copy_count( -place, record );
17546         END IF;
17547     END IF;
17548
17549     RETURN;
17550 END;
17551 $f$ LANGUAGE PLPGSQL;
17552
17553 CREATE OR REPLACE FUNCTION asset.opac_ou_metarecord_copy_count (org INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17554 DECLARE
17555     ans RECORD;
17556     trans INT;
17557 BEGIN
17558     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17559
17560     FOR ans IN SELECT u.id, t.depth FROM actor.org_unit_ancestors(org) AS u JOIN actor.org_unit_type t ON (u.ou_type = t.id) LOOP
17561         RETURN QUERY
17562         SELECT  ans.depth,
17563                 ans.id,
17564                 COUNT( av.id ),
17565                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17566                 COUNT( av.id ),
17567                 trans
17568           FROM
17569                 actor.org_unit_descendants(ans.id) d
17570                 JOIN asset.opac_visible_copies av ON (av.record = record AND av.circ_lib = d.id)
17571                 JOIN asset.copy cp ON (cp.id = av.id)
17572                 JOIN metabib.metarecord_source_map m ON (m.source = av.record)
17573           GROUP BY 1,2,6;
17574
17575         IF NOT FOUND THEN
17576             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17577         END IF;
17578
17579     END LOOP;
17580
17581     RETURN;
17582 END;
17583 $f$ LANGUAGE PLPGSQL;
17584
17585 CREATE OR REPLACE FUNCTION asset.opac_lasso_metarecord_copy_count (i_lasso INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17586 DECLARE
17587     ans RECORD;
17588     trans INT;
17589 BEGIN
17590     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17591
17592     FOR ans IN SELECT u.org_unit AS id FROM actor.org_lasso_map AS u WHERE lasso = i_lasso LOOP
17593         RETURN QUERY
17594         SELECT  -1,
17595                 ans.id,
17596                 COUNT( av.id ),
17597                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17598                 COUNT( av.id ),
17599                 trans
17600           FROM
17601                 actor.org_unit_descendants(ans.id) d
17602                 JOIN asset.opac_visible_copies av ON (av.record = record AND av.circ_lib = d.id)
17603                 JOIN asset.copy cp ON (cp.id = av.id)
17604                 JOIN metabib.metarecord_source_map m ON (m.source = av.record)
17605           GROUP BY 1,2,6;
17606
17607         IF NOT FOUND THEN
17608             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17609         END IF;
17610
17611     END LOOP;
17612
17613     RETURN;
17614 END;
17615 $f$ LANGUAGE PLPGSQL;
17616
17617 CREATE OR REPLACE FUNCTION asset.staff_ou_metarecord_copy_count (org INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17618 DECLARE
17619     ans RECORD;
17620     trans INT;
17621 BEGIN
17622     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17623
17624     FOR ans IN SELECT u.id, t.depth FROM actor.org_unit_ancestors(org) AS u JOIN actor.org_unit_type t ON (u.ou_type = t.id) LOOP
17625         RETURN QUERY
17626         SELECT  ans.depth,
17627                 ans.id,
17628                 COUNT( cp.id ),
17629                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17630                 COUNT( cp.id ),
17631                 trans
17632           FROM
17633                 actor.org_unit_descendants(ans.id) d
17634                 JOIN asset.copy cp ON (cp.circ_lib = d.id)
17635                 JOIN asset.call_number cn ON (cn.record = record AND cn.id = cp.call_number)
17636                 JOIN metabib.metarecord_source_map m ON (m.source = cn.record)
17637           GROUP BY 1,2,6;
17638
17639         IF NOT FOUND THEN
17640             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17641         END IF;
17642
17643     END LOOP;
17644
17645     RETURN;
17646 END;
17647 $f$ LANGUAGE PLPGSQL;
17648
17649 CREATE OR REPLACE FUNCTION asset.staff_lasso_metarecord_copy_count (i_lasso INT, record BIGINT) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17650 DECLARE
17651     ans RECORD;
17652     trans INT;
17653 BEGIN
17654     SELECT 1 INTO trans FROM biblio.record_entry b JOIN config.bib_source src ON (b.source = src.id) WHERE src.transcendant AND b.id = record;
17655
17656     FOR ans IN SELECT u.org_unit AS id FROM actor.org_lasso_map AS u WHERE lasso = i_lasso LOOP
17657         RETURN QUERY
17658         SELECT  -1,
17659                 ans.id,
17660                 COUNT( cp.id ),
17661                 SUM( CASE WHEN cp.status IN (0,7,12) THEN 1 ELSE 0 END ),
17662                 COUNT( cp.id ),
17663                 trans
17664           FROM
17665                 actor.org_unit_descendants(ans.id) d
17666                 JOIN asset.copy cp ON (cp.circ_lib = d.id)
17667                 JOIN asset.call_number cn ON (cn.record = record AND cn.id = cp.call_number)
17668                 JOIN metabib.metarecord_source_map m ON (m.source = cn.record)
17669           GROUP BY 1,2,6;
17670
17671         IF NOT FOUND THEN
17672             RETURN QUERY SELECT ans.depth, ans.id, 0::BIGINT, 0::BIGINT, 0::BIGINT, trans;
17673         END IF;
17674
17675     END LOOP;
17676
17677     RETURN;
17678 END;
17679 $f$ LANGUAGE PLPGSQL;
17680
17681 CREATE OR REPLACE FUNCTION asset.metarecord_copy_count ( place INT, record BIGINT, staff BOOL) RETURNS TABLE (depth INT, org_unit INT, visible BIGINT, available BIGINT, unshadow BIGINT, transcendant INT) AS $f$
17682 BEGIN
17683     IF staff IS TRUE THEN
17684         IF place > 0 THEN
17685             RETURN QUERY SELECT * FROM asset.staff_ou_metarecord_copy_count( place, record );
17686         ELSE
17687             RETURN QUERY SELECT * FROM asset.staff_lasso_metarecord_copy_count( -place, record );
17688         END IF;
17689     ELSE
17690         IF place > 0 THEN
17691             RETURN QUERY SELECT * FROM asset.opac_ou_metarecord_copy_count( place, record );
17692         ELSE
17693             RETURN QUERY SELECT * FROM asset.opac_lasso_metarecord_copy_count( -place, record );
17694         END IF;
17695     END IF;
17696
17697     RETURN;
17698 END;
17699 $f$ LANGUAGE PLPGSQL;
17700
17701 -- No transaction is required
17702
17703 -- Triggers on the vandelay.queued_*_record tables delete entries from
17704 -- the associated vandelay.queued_*_record_attr tables based on the record's
17705 -- ID; create an index on that column to avoid sequential scans for each
17706 -- queued record that is deleted
17707 CREATE INDEX queued_bib_record_attr_record_idx ON vandelay.queued_bib_record_attr (record);
17708 CREATE INDEX queued_authority_record_attr_record_idx ON vandelay.queued_authority_record_attr (record);
17709
17710 -- Avoid sequential scans for queue retrieval operations by providing an
17711 -- index on the queue column
17712 CREATE INDEX queued_bib_record_queue_idx ON vandelay.queued_bib_record (queue);
17713 CREATE INDEX queued_authority_record_queue_idx ON vandelay.queued_authority_record (queue);
17714
17715 -- Start picking up call number label prefixes and suffixes
17716 -- from asset.copy_location
17717 ALTER TABLE asset.copy_location ADD COLUMN label_prefix TEXT;
17718 ALTER TABLE asset.copy_location ADD COLUMN label_suffix TEXT;
17719
17720 ALTER TABLE reporter.report RENAME COLUMN recurance TO recurrence;
17721
17722 -- Let's not break existing reports
17723 UPDATE reporter.template SET data = REGEXP_REPLACE(data, E'^(.*)recuring(.*)$', E'\\1recurring\\2') WHERE data LIKE '%recuring%';
17724 UPDATE reporter.template SET data = REGEXP_REPLACE(data, E'^(.*)recurance(.*)$', E'\\1recurrence\\2') WHERE data LIKE '%recurance%';
17725
17726 -- Need to recreate this view with DISTINCT calls to ARRAY_ACCUM, thus avoiding duplicated ISBN and ISSN values
17727 CREATE OR REPLACE VIEW reporter.old_super_simple_record AS
17728 SELECT  r.id,
17729     r.fingerprint,
17730     r.quality,
17731     r.tcn_source,
17732     r.tcn_value,
17733     FIRST(title.value) AS title,
17734     FIRST(author.value) AS author,
17735     ARRAY_TO_STRING(ARRAY_ACCUM( DISTINCT publisher.value), ', ') AS publisher,
17736     ARRAY_TO_STRING(ARRAY_ACCUM( DISTINCT SUBSTRING(pubdate.value FROM $$\d+$$) ), ', ') AS pubdate,
17737     ARRAY_ACCUM( DISTINCT SUBSTRING(isbn.value FROM $$^\S+$$) ) AS isbn,
17738     ARRAY_ACCUM( DISTINCT SUBSTRING(issn.value FROM $$^\S+$$) ) AS issn
17739   FROM  biblio.record_entry r
17740     LEFT JOIN metabib.full_rec title ON (r.id = title.record AND title.tag = '245' AND title.subfield = 'a')
17741     LEFT JOIN metabib.full_rec author ON (r.id = author.record AND author.tag IN ('100','110','111') AND author.subfield = 'a')
17742     LEFT JOIN metabib.full_rec publisher ON (r.id = publisher.record AND publisher.tag = '260' AND publisher.subfield = 'b')
17743     LEFT JOIN metabib.full_rec pubdate ON (r.id = pubdate.record AND pubdate.tag = '260' AND pubdate.subfield = 'c')
17744     LEFT JOIN metabib.full_rec isbn ON (r.id = isbn.record AND isbn.tag IN ('024', '020') AND isbn.subfield IN ('a','z'))
17745     LEFT JOIN metabib.full_rec issn ON (r.id = issn.record AND issn.tag = '022' AND issn.subfield = 'a')
17746   GROUP BY 1,2,3,4,5;
17747
17748 -- Correct the ISSN array definition for reporter.simple_record
17749
17750 CREATE OR REPLACE VIEW reporter.simple_record AS
17751 SELECT  r.id,
17752         s.metarecord,
17753         r.fingerprint,
17754         r.quality,
17755         r.tcn_source,
17756         r.tcn_value,
17757         title.value AS title,
17758         uniform_title.value AS uniform_title,
17759         author.value AS author,
17760         publisher.value AS publisher,
17761         SUBSTRING(pubdate.value FROM $$\d+$$) AS pubdate,
17762         series_title.value AS series_title,
17763         series_statement.value AS series_statement,
17764         summary.value AS summary,
17765         ARRAY_ACCUM( SUBSTRING(isbn.value FROM $$^\S+$$) ) AS isbn,
17766         ARRAY_ACCUM( REGEXP_REPLACE(issn.value, E'^\\S*(\\d{4})[-\\s](\\d{3,4}x?)', E'\\1 \\2') ) AS issn,
17767         ARRAY((SELECT DISTINCT value FROM metabib.full_rec WHERE tag = '650' AND subfield = 'a' AND record = r.id)) AS topic_subject,
17768         ARRAY((SELECT DISTINCT value FROM metabib.full_rec WHERE tag = '651' AND subfield = 'a' AND record = r.id)) AS geographic_subject,
17769         ARRAY((SELECT DISTINCT value FROM metabib.full_rec WHERE tag = '655' AND subfield = 'a' AND record = r.id)) AS genre,
17770         ARRAY((SELECT DISTINCT value FROM metabib.full_rec WHERE tag = '600' AND subfield = 'a' AND record = r.id)) AS name_subject,
17771         ARRAY((SELECT DISTINCT value FROM metabib.full_rec WHERE tag = '610' AND subfield = 'a' AND record = r.id)) AS corporate_subject,
17772         ARRAY((SELECT value FROM metabib.full_rec WHERE tag = '856' AND subfield IN ('3','y','u') AND record = r.id ORDER BY CASE WHEN subfield IN ('3','y') THEN 0 ELSE 1 END)) AS external_uri
17773   FROM  biblio.record_entry r
17774         JOIN metabib.metarecord_source_map s ON (s.source = r.id)
17775         LEFT JOIN metabib.full_rec uniform_title ON (r.id = uniform_title.record AND uniform_title.tag = '240' AND uniform_title.subfield = 'a')
17776         LEFT JOIN metabib.full_rec title ON (r.id = title.record AND title.tag = '245' AND title.subfield = 'a')
17777         LEFT JOIN metabib.full_rec author ON (r.id = author.record AND author.tag = '100' AND author.subfield = 'a')
17778         LEFT JOIN metabib.full_rec publisher ON (r.id = publisher.record AND publisher.tag = '260' AND publisher.subfield = 'b')
17779         LEFT JOIN metabib.full_rec pubdate ON (r.id = pubdate.record AND pubdate.tag = '260' AND pubdate.subfield = 'c')
17780         LEFT JOIN metabib.full_rec isbn ON (r.id = isbn.record AND isbn.tag IN ('024', '020') AND isbn.subfield IN ('a','z'))
17781         LEFT JOIN metabib.full_rec issn ON (r.id = issn.record AND issn.tag = '022' AND issn.subfield = 'a')
17782         LEFT JOIN metabib.full_rec series_title ON (r.id = series_title.record AND series_title.tag IN ('830','440') AND series_title.subfield = 'a')
17783         LEFT JOIN metabib.full_rec series_statement ON (r.id = series_statement.record AND series_statement.tag = '490' AND series_statement.subfield = 'a')
17784         LEFT JOIN metabib.full_rec summary ON (r.id = summary.record AND summary.tag = '520' AND summary.subfield = 'a')
17785   GROUP BY 1,2,3,4,5,6,7,8,9,10,11,12,13,14;
17786
17787 CREATE OR REPLACE FUNCTION reporter.disable_materialized_simple_record_trigger () RETURNS VOID AS $$
17788     DROP TRIGGER IF EXISTS zzz_update_materialized_simple_record_tgr ON metabib.real_full_rec;
17789 $$ LANGUAGE SQL;
17790
17791 CREATE OR REPLACE FUNCTION reporter.simple_rec_trigger () RETURNS TRIGGER AS $func$
17792 BEGIN
17793     IF TG_OP = 'DELETE' THEN
17794         PERFORM reporter.simple_rec_delete(NEW.id);
17795     ELSE
17796         PERFORM reporter.simple_rec_update(NEW.id);
17797     END IF;
17798
17799     RETURN NEW;
17800 END;
17801 $func$ LANGUAGE PLPGSQL;
17802
17803 CREATE TRIGGER bbb_simple_rec_trigger AFTER INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE reporter.simple_rec_trigger ();
17804
17805 ALTER TABLE extend_reporter.legacy_circ_count DROP CONSTRAINT legacy_circ_count_id_fkey;
17806
17807 CREATE INDEX asset_copy_note_owning_copy_idx ON asset.copy_note ( owning_copy );
17808
17809 UPDATE config.org_unit_setting_type
17810     SET view_perm = (SELECT id FROM permission.perm_list
17811         WHERE code = 'VIEW_CREDIT_CARD_PROCESSING' LIMIT 1)
17812     WHERE name LIKE 'credit.processor%' AND view_perm IS NULL;
17813
17814 UPDATE config.org_unit_setting_type
17815     SET update_perm = (SELECT id FROM permission.perm_list
17816         WHERE code = 'ADMIN_CREDIT_CARD_PROCESSING' LIMIT 1)
17817     WHERE name LIKE 'credit.processor%' AND update_perm IS NULL;
17818
17819 INSERT INTO config.org_unit_setting_type (name, label, description, datatype)
17820     VALUES (
17821         'opac.fully_compressed_serial_holdings',
17822         'OPAC: Use fully compressed serial holdings',
17823         'Show fully compressed serial holdings for all libraries at and below
17824         the current context unit',
17825         'bool'
17826     );
17827
17828 CREATE OR REPLACE FUNCTION authority.normalize_heading( TEXT ) RETURNS TEXT AS $func$
17829     use strict;
17830     use warnings;
17831
17832     use utf8;
17833     use MARC::Record;
17834     use MARC::File::XML (BinaryEncoding => 'UTF8');
17835     use UUID::Tiny ':std';
17836
17837     my $xml = shift() or return undef;
17838
17839     my $r;
17840
17841     # Prevent errors in XML parsing from blowing out ungracefully
17842     eval {
17843         $r = MARC::Record->new_from_xml( $xml );
17844         1;
17845     } or do {
17846        return 'BAD_MARCXML_' . create_uuid_as_string(UUID_MD5, $xml);
17847     };
17848
17849     if (!$r) {
17850        return 'BAD_MARCXML_' . create_uuid_as_string(UUID_MD5, $xml);
17851     }
17852
17853     # From http://www.loc.gov/standards/sourcelist/subject.html
17854     my $thes_code_map = {
17855         a => 'lcsh',
17856         b => 'lcshac',
17857         c => 'mesh',
17858         d => 'nal',
17859         k => 'cash',
17860         n => 'notapplicable',
17861         r => 'aat',
17862         s => 'sears',
17863         v => 'rvm',
17864     };
17865
17866     # Default to "No attempt to code" if the leader is horribly broken
17867     my $fixed_field = $r->field('008');
17868     my $thes_char = '|';
17869     if ($fixed_field) {
17870         $thes_char = substr($fixed_field->data(), 11, 1) || '|';
17871     }
17872
17873     my $thes_code = 'UNDEFINED';
17874
17875     if ($thes_char eq 'z') {
17876         # Grab the 040 $f per http://www.loc.gov/marc/authority/ad040.html
17877         $thes_code = $r->subfield('040', 'f') || 'UNDEFINED';
17878     } elsif ($thes_code_map->{$thes_char}) {
17879         $thes_code = $thes_code_map->{$thes_char};
17880     }
17881
17882     my $auth_txt = '';
17883     my $head = $r->field('1..');
17884     if ($head) {
17885         # Concatenate all of these subfields together, prefixed by their code
17886         # to prevent collisions along the lines of "Fiction, North Carolina"
17887         foreach my $sf ($head->subfields()) {
17888             $auth_txt .= '‡' . $sf->[0] . ' ' . $sf->[1];
17889         }
17890     }
17891
17892     # Perhaps better to parameterize the spi and pass as a parameter
17893     $auth_txt =~ s/'//go;
17894
17895     if ($auth_txt) {
17896         my $result = spi_exec_query("SELECT public.naco_normalize('$auth_txt') AS norm_text");
17897         my $norm_txt = $result->{rows}[0]->{norm_text};
17898         return $head->tag() . "_" . $thes_code . " " . $norm_txt;
17899     }
17900
17901     return 'NOHEADING_' . $thes_code . ' ' . create_uuid_as_string(UUID_MD5, $xml);
17902 $func$ LANGUAGE 'plperlu' IMMUTABLE;
17903
17904 COMMENT ON FUNCTION authority.normalize_heading( TEXT ) IS $$
17905 /**
17906 * Extract the authority heading, thesaurus, and NACO-normalized values
17907 * from an authority record. The primary purpose is to build a unique
17908 * index to defend against duplicated authority records from the same
17909 * thesaurus.
17910 */
17911 $$;
17912
17913 DROP INDEX authority.authority_record_unique_tcn;
17914 ALTER TABLE authority.record_entry DROP COLUMN arn_value;
17915 ALTER TABLE authority.record_entry DROP COLUMN arn_source;
17916
17917 DROP INDEX IF EXISTS authority.unique_by_heading_and_thesaurus;
17918
17919 CREATE INDEX by_heading_and_thesaurus
17920     ON authority.record_entry (authority.normalize_heading(marc))
17921     WHERE deleted IS FALSE or deleted = FALSE
17922 ;
17923
17924 ALTER TABLE acq.provider_contact
17925         ALTER COLUMN name SET NOT NULL;
17926
17927 ALTER TABLE actor.stat_cat
17928         ADD COLUMN usr_summary BOOL NOT NULL DEFAULT FALSE;
17929
17930 -- Recreate some foreign keys that were somehow dropped, probably
17931 -- by some kind of cascade from an inherited table:
17932
17933 ALTER TABLE action.reservation_transit_copy
17934         ADD CONSTRAINT artc_tc_fkey FOREIGN KEY (target_copy)
17935                 REFERENCES booking.resource(id)
17936                 ON DELETE CASCADE
17937                 DEFERRABLE INITIALLY DEFERRED,
17938         ADD CONSTRAINT reservation_transit_copy_reservation_fkey FOREIGN KEY (reservation)
17939                 REFERENCES booking.reservation(id)
17940                 ON DELETE SET NULL
17941                 DEFERRABLE INITIALLY DEFERRED;
17942
17943 CREATE INDEX user_bucket_item_target_user_idx ON container.user_bucket_item ( target_user );
17944
17945 CREATE INDEX m_c_t_collector_idx ON money.collections_tracker ( collector );
17946
17947 COMMIT;
17948
17949 -- Some operations go outside of the transaction, because they may
17950 -- legitimately fail.
17951
17952 \qecho ALTERs of auditor.action_hold_request_history will fail if the table
17953 \qecho doesn't exist; ignore those errors if they occur.
17954
17955 ALTER TABLE auditor.action_hold_request_history ADD COLUMN cut_in_line BOOL;
17956
17957 ALTER TABLE auditor.action_hold_request_history
17958 ADD COLUMN mint_condition boolean NOT NULL DEFAULT TRUE;
17959
17960 ALTER TABLE auditor.action_hold_request_history
17961 ADD COLUMN shelf_expire_time TIMESTAMPTZ;
17962
17963 \qecho Outside of the transaction: adding indexes that may or may not exist.
17964 \qecho If any of these CREATE INDEX statements fails because the index already
17965 \qecho exists, ignore the failure.
17966
17967 CREATE INDEX serial_subscription_record_idx ON serial.subscription (record_entry);
17968 CREATE INDEX serial_subscription_owner_idx ON serial.subscription (owning_lib);
17969 CREATE INDEX serial_caption_and_pattern_sub_idx ON serial.caption_and_pattern (subscription);
17970 CREATE INDEX serial_distribution_sub_idx ON serial.distribution (subscription);
17971 CREATE INDEX serial_distribution_holding_lib_idx ON serial.distribution (holding_lib);
17972 CREATE INDEX serial_distribution_note_dist_idx ON serial.distribution_note (distribution);
17973 CREATE INDEX serial_stream_dist_idx ON serial.stream (distribution);
17974 CREATE INDEX serial_routing_list_user_stream_idx ON serial.routing_list_user (stream);
17975 CREATE INDEX serial_routing_list_user_reader_idx ON serial.routing_list_user (reader);
17976 CREATE INDEX serial_issuance_sub_idx ON serial.issuance (subscription);
17977 CREATE INDEX serial_issuance_caption_and_pattern_idx ON serial.issuance (caption_and_pattern);
17978 CREATE INDEX serial_issuance_date_published_idx ON serial.issuance (date_published);
17979 CREATE UNIQUE INDEX unit_barcode_key ON serial.unit (barcode) WHERE deleted = FALSE OR deleted IS FALSE;
17980 CREATE INDEX unit_cn_idx ON serial.unit (call_number);
17981 CREATE INDEX unit_avail_cn_idx ON serial.unit (call_number);
17982 CREATE INDEX unit_creator_idx  ON serial.unit ( creator );
17983 CREATE INDEX unit_editor_idx   ON serial.unit ( editor );
17984 CREATE INDEX serial_item_stream_idx ON serial.item (stream);
17985 CREATE INDEX serial_item_issuance_idx ON serial.item (issuance);
17986 CREATE INDEX serial_item_unit_idx ON serial.item (unit);
17987 CREATE INDEX serial_item_uri_idx ON serial.item (uri);
17988 CREATE INDEX serial_item_date_received_idx ON serial.item (date_received);
17989 CREATE INDEX serial_item_status_idx ON serial.item (status);
17990 CREATE INDEX serial_item_note_item_idx ON serial.item_note (item);
17991 CREATE INDEX serial_basic_summary_dist_idx ON serial.basic_summary (distribution);
17992 CREATE INDEX serial_supplement_summary_dist_idx ON serial.supplement_summary (distribution);
17993 CREATE INDEX serial_index_summary_dist_idx ON serial.index_summary (distribution);
17994
17995 CREATE INDEX actor_card_barcode_lower_idx ON actor.card (lower(barcode));
17996
17997 \qecho if the following CREATE INDEX fails, It will be necessary to do some
17998 \qecho data cleanup as described in the comments.
17999
18000 -- Do this outside of a transaction to avoid failure if duplicate
18001 -- authority heading / thesaurus / heading text entries already
18002 -- exist in the database:
18003 CREATE UNIQUE INDEX unique_by_heading_and_thesaurus
18004     ON authority.record_entry (authority.normalize_heading(marc))
18005     WHERE deleted IS FALSE or deleted = FALSE
18006 ;
18007
18008 -- If the unique index fails, uncomment the following to create
18009 -- a regular index that will help find the duplicates in a hurry:
18010 --CREATE INDEX by_heading_and_thesaurus
18011 --    ON authority.record_entry (authority.normalize_heading(marc))
18012 --    WHERE deleted IS FALSE or deleted = FALSE
18013 --;
18014
18015 -- Then find the duplicates like so to get an idea of how much
18016 -- pain you're looking at to clean things up:
18017 --SELECT id, authority.normalize_heading(marc)
18018 --    FROM authority.record_entry
18019 --    WHERE authority.normalize_heading(marc) IN (
18020 --        SELECT authority.normalize_heading(marc)
18021 --        FROM authority.record_entry
18022 --        GROUP BY authority.normalize_heading(marc)
18023 --        HAVING COUNT(*) > 1
18024 --    )
18025 --;
18026
18027 -- Once you have removed the duplicates and the CREATE UNIQUE INDEX
18028 -- statement succeeds, drop the temporary index to avoid unnecessary
18029 -- duplication:
18030 -- DROP INDEX authority.by_heading_and_thesaurus;
18031
18032 \qecho Upgrade script completed.