LP#1715767: remove privacy waiver entries when purging user data
[Evergreen.git] / Open-ILS / src / sql / Pg / 999.functions.global.sql
1 /*
2  * Copyright (C) 2008 Equinox Software, Inc.
3  * Bill Erickson <erickson@esilibrary.com>
4  *
5  * This program is free software; you can redistribute it and/or
6  * modify it under the terms of the GNU General Public License
7  * as published by the Free Software Foundation; either version 2
8  * of the License, or (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  */
16
17 CREATE OR REPLACE FUNCTION actor.usr_merge_rows( table_name TEXT, col_name TEXT, src_usr INT, dest_usr INT ) RETURNS VOID AS $$
18 DECLARE
19     sel TEXT;
20     upd TEXT;
21     del TEXT;
22     cur_row RECORD;
23 BEGIN
24     sel := 'SELECT id::BIGINT FROM ' || table_name || ' WHERE ' || quote_ident(col_name) || ' = ' || quote_literal(src_usr);
25     upd := 'UPDATE ' || table_name || ' SET ' || quote_ident(col_name) || ' = ' || quote_literal(dest_usr) || ' WHERE id = ';
26     del := 'DELETE FROM ' || table_name || ' WHERE id = ';
27     FOR cur_row IN EXECUTE sel LOOP
28         BEGIN
29             --RAISE NOTICE 'Attempting to merge % %', table_name, cur_row.id;
30             EXECUTE upd || cur_row.id;
31         EXCEPTION WHEN unique_violation THEN
32             --RAISE NOTICE 'Deleting conflicting % %', table_name, cur_row.id;
33             EXECUTE del || cur_row.id;
34         END;
35     END LOOP;
36 END;
37 $$ LANGUAGE plpgsql;
38
39 COMMENT ON FUNCTION actor.usr_merge_rows(TEXT, TEXT, INT, INT) IS $$
40 Attempts to move each row of the specified table from src_user to dest_user.  
41 Where conflicts exist, the conflicting "source" row is deleted.
42 $$;
43
44
45 CREATE OR REPLACE FUNCTION actor.usr_merge( src_usr INT, dest_usr INT, del_addrs BOOLEAN, del_cards BOOLEAN, deactivate_cards BOOLEAN ) RETURNS VOID AS $$
46 DECLARE
47         suffix TEXT;
48         bucket_row RECORD;
49         picklist_row RECORD;
50         queue_row RECORD;
51         folder_row RECORD;
52 BEGIN
53
54     -- Bail if src_usr equals dest_usr because the result of merging a
55     -- user with itself is not what you want.
56     IF src_usr = dest_usr THEN
57         RETURN;
58     END IF;
59
60     -- do some initial cleanup 
61     UPDATE actor.usr SET card = NULL WHERE id = src_usr;
62     UPDATE actor.usr SET mailing_address = NULL WHERE id = src_usr;
63     UPDATE actor.usr SET billing_address = NULL WHERE id = src_usr;
64
65     -- actor.*
66     IF del_cards THEN
67         DELETE FROM actor.card where usr = src_usr;
68     ELSE
69         IF deactivate_cards THEN
70             UPDATE actor.card SET active = 'f' WHERE usr = src_usr;
71         END IF;
72         UPDATE actor.card SET usr = dest_usr WHERE usr = src_usr;
73     END IF;
74
75
76     IF del_addrs THEN
77         DELETE FROM actor.usr_address WHERE usr = src_usr;
78     ELSE
79         UPDATE actor.usr_address SET usr = dest_usr WHERE usr = src_usr;
80     END IF;
81
82     UPDATE actor.usr_note SET usr = dest_usr WHERE usr = src_usr;
83     -- dupes are technically OK in actor.usr_standing_penalty, should manually delete them...
84     UPDATE actor.usr_standing_penalty SET usr = dest_usr WHERE usr = src_usr;
85     PERFORM actor.usr_merge_rows('actor.usr_org_unit_opt_in', 'usr', src_usr, dest_usr);
86     PERFORM actor.usr_merge_rows('actor.usr_setting', 'usr', src_usr, dest_usr);
87
88     -- permission.*
89     PERFORM actor.usr_merge_rows('permission.usr_perm_map', 'usr', src_usr, dest_usr);
90     PERFORM actor.usr_merge_rows('permission.usr_object_perm_map', 'usr', src_usr, dest_usr);
91     PERFORM actor.usr_merge_rows('permission.usr_grp_map', 'usr', src_usr, dest_usr);
92     PERFORM actor.usr_merge_rows('permission.usr_work_ou_map', 'usr', src_usr, dest_usr);
93
94
95     -- container.*
96         
97         -- For each *_bucket table: transfer every bucket belonging to src_usr
98         -- into the custody of dest_usr.
99         --
100         -- In order to avoid colliding with an existing bucket owned by
101         -- the destination user, append the source user's id (in parenthesese)
102         -- to the name.  If you still get a collision, add successive
103         -- spaces to the name and keep trying until you succeed.
104         --
105         FOR bucket_row in
106                 SELECT id, name
107                 FROM   container.biblio_record_entry_bucket
108                 WHERE  owner = src_usr
109         LOOP
110                 suffix := ' (' || src_usr || ')';
111                 LOOP
112                         BEGIN
113                                 UPDATE  container.biblio_record_entry_bucket
114                                 SET     owner = dest_usr, name = name || suffix
115                                 WHERE   id = bucket_row.id;
116                         EXCEPTION WHEN unique_violation THEN
117                                 suffix := suffix || ' ';
118                                 CONTINUE;
119                         END;
120                         EXIT;
121                 END LOOP;
122         END LOOP;
123
124         FOR bucket_row in
125                 SELECT id, name
126                 FROM   container.call_number_bucket
127                 WHERE  owner = src_usr
128         LOOP
129                 suffix := ' (' || src_usr || ')';
130                 LOOP
131                         BEGIN
132                                 UPDATE  container.call_number_bucket
133                                 SET     owner = dest_usr, name = name || suffix
134                                 WHERE   id = bucket_row.id;
135                         EXCEPTION WHEN unique_violation THEN
136                                 suffix := suffix || ' ';
137                                 CONTINUE;
138                         END;
139                         EXIT;
140                 END LOOP;
141         END LOOP;
142
143         FOR bucket_row in
144                 SELECT id, name
145                 FROM   container.copy_bucket
146                 WHERE  owner = src_usr
147         LOOP
148                 suffix := ' (' || src_usr || ')';
149                 LOOP
150                         BEGIN
151                                 UPDATE  container.copy_bucket
152                                 SET     owner = dest_usr, name = name || suffix
153                                 WHERE   id = bucket_row.id;
154                         EXCEPTION WHEN unique_violation THEN
155                                 suffix := suffix || ' ';
156                                 CONTINUE;
157                         END;
158                         EXIT;
159                 END LOOP;
160         END LOOP;
161
162         FOR bucket_row in
163                 SELECT id, name
164                 FROM   container.user_bucket
165                 WHERE  owner = src_usr
166         LOOP
167                 suffix := ' (' || src_usr || ')';
168                 LOOP
169                         BEGIN
170                                 UPDATE  container.user_bucket
171                                 SET     owner = dest_usr, name = name || suffix
172                                 WHERE   id = bucket_row.id;
173                         EXCEPTION WHEN unique_violation THEN
174                                 suffix := suffix || ' ';
175                                 CONTINUE;
176                         END;
177                         EXIT;
178                 END LOOP;
179         END LOOP;
180
181         UPDATE container.user_bucket_item SET target_user = dest_usr WHERE target_user = src_usr;
182
183     -- vandelay.*
184         -- transfer queues the same way we transfer buckets (see above)
185         FOR queue_row in
186                 SELECT id, name
187                 FROM   vandelay.queue
188                 WHERE  owner = src_usr
189         LOOP
190                 suffix := ' (' || src_usr || ')';
191                 LOOP
192                         BEGIN
193                                 UPDATE  vandelay.queue
194                                 SET     owner = dest_usr, name = name || suffix
195                                 WHERE   id = queue_row.id;
196                         EXCEPTION WHEN unique_violation THEN
197                                 suffix := suffix || ' ';
198                                 CONTINUE;
199                         END;
200                         EXIT;
201                 END LOOP;
202         END LOOP;
203
204     UPDATE vandelay.session_tracker SET usr = dest_usr WHERE usr = src_usr;
205
206     -- money.*
207     PERFORM actor.usr_merge_rows('money.collections_tracker', 'usr', src_usr, dest_usr);
208     PERFORM actor.usr_merge_rows('money.collections_tracker', 'collector', src_usr, dest_usr);
209     UPDATE money.billable_xact SET usr = dest_usr WHERE usr = src_usr;
210     UPDATE money.billing SET voider = dest_usr WHERE voider = src_usr;
211     UPDATE money.bnm_payment SET accepting_usr = dest_usr WHERE accepting_usr = src_usr;
212
213     -- action.*
214     UPDATE action.circulation SET usr = dest_usr WHERE usr = src_usr;
215     UPDATE action.circulation SET circ_staff = dest_usr WHERE circ_staff = src_usr;
216     UPDATE action.circulation SET checkin_staff = dest_usr WHERE checkin_staff = src_usr;
217     UPDATE action.usr_circ_history SET usr = dest_usr WHERE usr = src_usr;
218
219     UPDATE action.hold_request SET usr = dest_usr WHERE usr = src_usr;
220     UPDATE action.hold_request SET fulfillment_staff = dest_usr WHERE fulfillment_staff = src_usr;
221     UPDATE action.hold_request SET requestor = dest_usr WHERE requestor = src_usr;
222     UPDATE action.hold_notification SET notify_staff = dest_usr WHERE notify_staff = src_usr;
223
224     UPDATE action.in_house_use SET staff = dest_usr WHERE staff = src_usr;
225     UPDATE action.non_cataloged_circulation SET staff = dest_usr WHERE staff = src_usr;
226     UPDATE action.non_cataloged_circulation SET patron = dest_usr WHERE patron = src_usr;
227     UPDATE action.non_cat_in_house_use SET staff = dest_usr WHERE staff = src_usr;
228     UPDATE action.survey_response SET usr = dest_usr WHERE usr = src_usr;
229
230     -- acq.*
231     UPDATE acq.fund_allocation SET allocator = dest_usr WHERE allocator = src_usr;
232         UPDATE acq.fund_transfer SET transfer_user = dest_usr WHERE transfer_user = src_usr;
233     UPDATE acq.invoice SET closed_by = dest_usr WHERE closed_by = src_usr;
234
235         -- transfer picklists the same way we transfer buckets (see above)
236         FOR picklist_row in
237                 SELECT id, name
238                 FROM   acq.picklist
239                 WHERE  owner = src_usr
240         LOOP
241                 suffix := ' (' || src_usr || ')';
242                 LOOP
243                         BEGIN
244                                 UPDATE  acq.picklist
245                                 SET     owner = dest_usr, name = name || suffix
246                                 WHERE   id = picklist_row.id;
247                         EXCEPTION WHEN unique_violation THEN
248                                 suffix := suffix || ' ';
249                                 CONTINUE;
250                         END;
251                         EXIT;
252                 END LOOP;
253         END LOOP;
254
255     UPDATE acq.purchase_order SET owner = dest_usr WHERE owner = src_usr;
256     UPDATE acq.po_note SET creator = dest_usr WHERE creator = src_usr;
257     UPDATE acq.po_note SET editor = dest_usr WHERE editor = src_usr;
258     UPDATE acq.provider_note SET creator = dest_usr WHERE creator = src_usr;
259     UPDATE acq.provider_note SET editor = dest_usr WHERE editor = src_usr;
260     UPDATE acq.lineitem_note SET creator = dest_usr WHERE creator = src_usr;
261     UPDATE acq.lineitem_note SET editor = dest_usr WHERE editor = src_usr;
262     UPDATE acq.lineitem_usr_attr_definition SET usr = dest_usr WHERE usr = src_usr;
263
264     -- asset.*
265     UPDATE asset.copy SET creator = dest_usr WHERE creator = src_usr;
266     UPDATE asset.copy SET editor = dest_usr WHERE editor = src_usr;
267     UPDATE asset.copy_note SET creator = dest_usr WHERE creator = src_usr;
268     UPDATE asset.call_number SET creator = dest_usr WHERE creator = src_usr;
269     UPDATE asset.call_number SET editor = dest_usr WHERE editor = src_usr;
270     UPDATE asset.call_number_note SET creator = dest_usr WHERE creator = src_usr;
271
272     -- serial.*
273     UPDATE serial.record_entry SET creator = dest_usr WHERE creator = src_usr;
274     UPDATE serial.record_entry SET editor = dest_usr WHERE editor = src_usr;
275
276     -- reporter.*
277     -- It's not uncommon to define the reporter schema in a replica 
278     -- DB only, so don't assume these tables exist in the write DB.
279     BEGIN
280         UPDATE reporter.template SET owner = dest_usr WHERE owner = src_usr;
281     EXCEPTION WHEN undefined_table THEN
282         -- do nothing
283     END;
284     BEGIN
285         UPDATE reporter.report SET owner = dest_usr WHERE owner = src_usr;
286     EXCEPTION WHEN undefined_table THEN
287         -- do nothing
288     END;
289     BEGIN
290         UPDATE reporter.schedule SET runner = dest_usr WHERE runner = src_usr;
291     EXCEPTION WHEN undefined_table THEN
292         -- do nothing
293     END;
294     BEGIN
295                 -- transfer folders the same way we transfer buckets (see above)
296                 FOR folder_row in
297                         SELECT id, name
298                         FROM   reporter.template_folder
299                         WHERE  owner = src_usr
300                 LOOP
301                         suffix := ' (' || src_usr || ')';
302                         LOOP
303                                 BEGIN
304                                         UPDATE  reporter.template_folder
305                                         SET     owner = dest_usr, name = name || suffix
306                                         WHERE   id = folder_row.id;
307                                 EXCEPTION WHEN unique_violation THEN
308                                         suffix := suffix || ' ';
309                                         CONTINUE;
310                                 END;
311                                 EXIT;
312                         END LOOP;
313                 END LOOP;
314     EXCEPTION WHEN undefined_table THEN
315         -- do nothing
316     END;
317     BEGIN
318                 -- transfer folders the same way we transfer buckets (see above)
319                 FOR folder_row in
320                         SELECT id, name
321                         FROM   reporter.report_folder
322                         WHERE  owner = src_usr
323                 LOOP
324                         suffix := ' (' || src_usr || ')';
325                         LOOP
326                                 BEGIN
327                                         UPDATE  reporter.report_folder
328                                         SET     owner = dest_usr, name = name || suffix
329                                         WHERE   id = folder_row.id;
330                                 EXCEPTION WHEN unique_violation THEN
331                                         suffix := suffix || ' ';
332                                         CONTINUE;
333                                 END;
334                                 EXIT;
335                         END LOOP;
336                 END LOOP;
337     EXCEPTION WHEN undefined_table THEN
338         -- do nothing
339     END;
340     BEGIN
341                 -- transfer folders the same way we transfer buckets (see above)
342                 FOR folder_row in
343                         SELECT id, name
344                         FROM   reporter.output_folder
345                         WHERE  owner = src_usr
346                 LOOP
347                         suffix := ' (' || src_usr || ')';
348                         LOOP
349                                 BEGIN
350                                         UPDATE  reporter.output_folder
351                                         SET     owner = dest_usr, name = name || suffix
352                                         WHERE   id = folder_row.id;
353                                 EXCEPTION WHEN unique_violation THEN
354                                         suffix := suffix || ' ';
355                                         CONTINUE;
356                                 END;
357                                 EXIT;
358                         END LOOP;
359                 END LOOP;
360     EXCEPTION WHEN undefined_table THEN
361         -- do nothing
362     END;
363
364     -- propagate preferred name values from the source user to the
365     -- destination user, but only when values are not being replaced.
366     WITH susr AS (SELECT * FROM actor.usr WHERE id = src_usr)
367     UPDATE actor.usr SET 
368         pref_prefix = 
369             COALESCE(pref_prefix, (SELECT pref_prefix FROM susr)),
370         pref_first_given_name = 
371             COALESCE(pref_first_given_name, (SELECT pref_first_given_name FROM susr)),
372         pref_second_given_name = 
373             COALESCE(pref_second_given_name, (SELECT pref_second_given_name FROM susr)),
374         pref_family_name = 
375             COALESCE(pref_family_name, (SELECT pref_family_name FROM susr)),
376         pref_suffix = 
377             COALESCE(pref_suffix, (SELECT pref_suffix FROM susr))
378     WHERE id = dest_usr;
379
380     -- Copy and deduplicate name keywords
381     -- String -> array -> rows -> DISTINCT -> array -> string
382     WITH susr AS (SELECT * FROM actor.usr WHERE id = src_usr),
383          dusr AS (SELECT * FROM actor.usr WHERE id = dest_usr)
384     UPDATE actor.usr SET name_keywords = (
385         WITH keywords AS (
386             SELECT DISTINCT UNNEST(
387                 REGEXP_SPLIT_TO_ARRAY(
388                     COALESCE((SELECT name_keywords FROM susr), '') || ' ' ||
389                     COALESCE((SELECT name_keywords FROM dusr), ''),  E'\\s+'
390                 )
391             ) AS parts
392         ) SELECT ARRAY_TO_STRING(ARRAY_AGG(kw.parts), ' ') FROM keywords kw
393     ) WHERE id = dest_usr;
394
395     -- Finally, delete the source user
396     PERFORM actor.usr_delete(src_usr,dest_usr);
397
398 END;
399 $$ LANGUAGE plpgsql;
400
401
402
403 COMMENT ON FUNCTION actor.usr_merge(INT, INT, BOOLEAN, BOOLEAN, BOOLEAN) IS $$
404 Merges all user date from src_usr to dest_usr.  When collisions occur, 
405 keep dest_usr's data and delete src_usr's data.
406 $$;
407
408
409 CREATE OR REPLACE FUNCTION actor.usr_purge_data(
410         src_usr  IN INTEGER,
411         specified_dest_usr IN INTEGER
412 ) RETURNS VOID AS $$
413 DECLARE
414         suffix TEXT;
415         renamable_row RECORD;
416         dest_usr INTEGER;
417 BEGIN
418
419         IF specified_dest_usr IS NULL THEN
420                 dest_usr := 1; -- Admin user on stock installs
421         ELSE
422                 dest_usr := specified_dest_usr;
423         END IF;
424
425         -- acq.*
426         UPDATE acq.fund_allocation SET allocator = dest_usr WHERE allocator = src_usr;
427         UPDATE acq.lineitem SET creator = dest_usr WHERE creator = src_usr;
428         UPDATE acq.lineitem SET editor = dest_usr WHERE editor = src_usr;
429         UPDATE acq.lineitem SET selector = dest_usr WHERE selector = src_usr;
430         UPDATE acq.lineitem_note SET creator = dest_usr WHERE creator = src_usr;
431         UPDATE acq.lineitem_note SET editor = dest_usr WHERE editor = src_usr;
432     UPDATE acq.invoice SET closed_by = dest_usr WHERE closed_by = src_usr;
433         DELETE FROM acq.lineitem_usr_attr_definition WHERE usr = src_usr;
434
435         -- Update with a rename to avoid collisions
436         FOR renamable_row in
437                 SELECT id, name
438                 FROM   acq.picklist
439                 WHERE  owner = src_usr
440         LOOP
441                 suffix := ' (' || src_usr || ')';
442                 LOOP
443                         BEGIN
444                                 UPDATE  acq.picklist
445                                 SET     owner = dest_usr, name = name || suffix
446                                 WHERE   id = renamable_row.id;
447                         EXCEPTION WHEN unique_violation THEN
448                                 suffix := suffix || ' ';
449                                 CONTINUE;
450                         END;
451                         EXIT;
452                 END LOOP;
453         END LOOP;
454
455         UPDATE acq.picklist SET creator = dest_usr WHERE creator = src_usr;
456         UPDATE acq.picklist SET editor = dest_usr WHERE editor = src_usr;
457         UPDATE acq.po_note SET creator = dest_usr WHERE creator = src_usr;
458         UPDATE acq.po_note SET editor = dest_usr WHERE editor = src_usr;
459         UPDATE acq.purchase_order SET owner = dest_usr WHERE owner = src_usr;
460         UPDATE acq.purchase_order SET creator = dest_usr WHERE creator = src_usr;
461         UPDATE acq.purchase_order SET editor = dest_usr WHERE editor = src_usr;
462         UPDATE acq.claim_event SET creator = dest_usr WHERE creator = src_usr;
463
464         -- action.*
465         DELETE FROM action.circulation WHERE usr = src_usr;
466         UPDATE action.circulation SET circ_staff = dest_usr WHERE circ_staff = src_usr;
467         UPDATE action.circulation SET checkin_staff = dest_usr WHERE checkin_staff = src_usr;
468         UPDATE action.hold_notification SET notify_staff = dest_usr WHERE notify_staff = src_usr;
469         UPDATE action.hold_request SET fulfillment_staff = dest_usr WHERE fulfillment_staff = src_usr;
470         UPDATE action.hold_request SET requestor = dest_usr WHERE requestor = src_usr;
471         DELETE FROM action.hold_request WHERE usr = src_usr;
472         UPDATE action.in_house_use SET staff = dest_usr WHERE staff = src_usr;
473         UPDATE action.non_cat_in_house_use SET staff = dest_usr WHERE staff = src_usr;
474         DELETE FROM action.non_cataloged_circulation WHERE patron = src_usr;
475         UPDATE action.non_cataloged_circulation SET staff = dest_usr WHERE staff = src_usr;
476         DELETE FROM action.survey_response WHERE usr = src_usr;
477         UPDATE action.fieldset SET owner = dest_usr WHERE owner = src_usr;
478         DELETE FROM action.usr_circ_history WHERE usr = src_usr;
479
480         -- actor.*
481         DELETE FROM actor.card WHERE usr = src_usr;
482         DELETE FROM actor.stat_cat_entry_usr_map WHERE target_usr = src_usr;
483         DELETE FROM actor.usr_privacy_waiver WHERE usr = src_usr;
484
485         -- The following update is intended to avoid transient violations of a foreign
486         -- key constraint, whereby actor.usr_address references itself.  It may not be
487         -- necessary, but it does no harm.
488         UPDATE actor.usr_address SET replaces = NULL
489                 WHERE usr = src_usr AND replaces IS NOT NULL;
490         DELETE FROM actor.usr_address WHERE usr = src_usr;
491         DELETE FROM actor.usr_note WHERE usr = src_usr;
492         UPDATE actor.usr_note SET creator = dest_usr WHERE creator = src_usr;
493         DELETE FROM actor.usr_org_unit_opt_in WHERE usr = src_usr;
494         UPDATE actor.usr_org_unit_opt_in SET staff = dest_usr WHERE staff = src_usr;
495         DELETE FROM actor.usr_setting WHERE usr = src_usr;
496         DELETE FROM actor.usr_standing_penalty WHERE usr = src_usr;
497         UPDATE actor.usr_standing_penalty SET staff = dest_usr WHERE staff = src_usr;
498
499         -- asset.*
500         UPDATE asset.call_number SET creator = dest_usr WHERE creator = src_usr;
501         UPDATE asset.call_number SET editor = dest_usr WHERE editor = src_usr;
502         UPDATE asset.call_number_note SET creator = dest_usr WHERE creator = src_usr;
503         UPDATE asset.copy SET creator = dest_usr WHERE creator = src_usr;
504         UPDATE asset.copy SET editor = dest_usr WHERE editor = src_usr;
505         UPDATE asset.copy_note SET creator = dest_usr WHERE creator = src_usr;
506
507         -- auditor.*
508         DELETE FROM auditor.actor_usr_address_history WHERE id = src_usr;
509         DELETE FROM auditor.actor_usr_history WHERE id = src_usr;
510         UPDATE auditor.asset_call_number_history SET creator = dest_usr WHERE creator = src_usr;
511         UPDATE auditor.asset_call_number_history SET editor  = dest_usr WHERE editor  = src_usr;
512         UPDATE auditor.asset_copy_history SET creator = dest_usr WHERE creator = src_usr;
513         UPDATE auditor.asset_copy_history SET editor  = dest_usr WHERE editor  = src_usr;
514         UPDATE auditor.biblio_record_entry_history SET creator = dest_usr WHERE creator = src_usr;
515         UPDATE auditor.biblio_record_entry_history SET editor  = dest_usr WHERE editor  = src_usr;
516
517         -- biblio.*
518         UPDATE biblio.record_entry SET creator = dest_usr WHERE creator = src_usr;
519         UPDATE biblio.record_entry SET editor = dest_usr WHERE editor = src_usr;
520         UPDATE biblio.record_note SET creator = dest_usr WHERE creator = src_usr;
521         UPDATE biblio.record_note SET editor = dest_usr WHERE editor = src_usr;
522
523         -- container.*
524         -- Update buckets with a rename to avoid collisions
525         FOR renamable_row in
526                 SELECT id, name
527                 FROM   container.biblio_record_entry_bucket
528                 WHERE  owner = src_usr
529         LOOP
530                 suffix := ' (' || src_usr || ')';
531                 LOOP
532                         BEGIN
533                                 UPDATE  container.biblio_record_entry_bucket
534                                 SET     owner = dest_usr, name = name || suffix
535                                 WHERE   id = renamable_row.id;
536                         EXCEPTION WHEN unique_violation THEN
537                                 suffix := suffix || ' ';
538                                 CONTINUE;
539                         END;
540                         EXIT;
541                 END LOOP;
542         END LOOP;
543
544         FOR renamable_row in
545                 SELECT id, name
546                 FROM   container.call_number_bucket
547                 WHERE  owner = src_usr
548         LOOP
549                 suffix := ' (' || src_usr || ')';
550                 LOOP
551                         BEGIN
552                                 UPDATE  container.call_number_bucket
553                                 SET     owner = dest_usr, name = name || suffix
554                                 WHERE   id = renamable_row.id;
555                         EXCEPTION WHEN unique_violation THEN
556                                 suffix := suffix || ' ';
557                                 CONTINUE;
558                         END;
559                         EXIT;
560                 END LOOP;
561         END LOOP;
562
563         FOR renamable_row in
564                 SELECT id, name
565                 FROM   container.copy_bucket
566                 WHERE  owner = src_usr
567         LOOP
568                 suffix := ' (' || src_usr || ')';
569                 LOOP
570                         BEGIN
571                                 UPDATE  container.copy_bucket
572                                 SET     owner = dest_usr, name = name || suffix
573                                 WHERE   id = renamable_row.id;
574                         EXCEPTION WHEN unique_violation THEN
575                                 suffix := suffix || ' ';
576                                 CONTINUE;
577                         END;
578                         EXIT;
579                 END LOOP;
580         END LOOP;
581
582         FOR renamable_row in
583                 SELECT id, name
584                 FROM   container.user_bucket
585                 WHERE  owner = src_usr
586         LOOP
587                 suffix := ' (' || src_usr || ')';
588                 LOOP
589                         BEGIN
590                                 UPDATE  container.user_bucket
591                                 SET     owner = dest_usr, name = name || suffix
592                                 WHERE   id = renamable_row.id;
593                         EXCEPTION WHEN unique_violation THEN
594                                 suffix := suffix || ' ';
595                                 CONTINUE;
596                         END;
597                         EXIT;
598                 END LOOP;
599         END LOOP;
600
601         DELETE FROM container.user_bucket_item WHERE target_user = src_usr;
602
603         -- money.*
604         DELETE FROM money.billable_xact WHERE usr = src_usr;
605         DELETE FROM money.collections_tracker WHERE usr = src_usr;
606         UPDATE money.collections_tracker SET collector = dest_usr WHERE collector = src_usr;
607
608         -- permission.*
609         DELETE FROM permission.usr_grp_map WHERE usr = src_usr;
610         DELETE FROM permission.usr_object_perm_map WHERE usr = src_usr;
611         DELETE FROM permission.usr_perm_map WHERE usr = src_usr;
612         DELETE FROM permission.usr_work_ou_map WHERE usr = src_usr;
613
614         -- reporter.*
615         -- Update with a rename to avoid collisions
616         BEGIN
617                 FOR renamable_row in
618                         SELECT id, name
619                         FROM   reporter.output_folder
620                         WHERE  owner = src_usr
621                 LOOP
622                         suffix := ' (' || src_usr || ')';
623                         LOOP
624                                 BEGIN
625                                         UPDATE  reporter.output_folder
626                                         SET     owner = dest_usr, name = name || suffix
627                                         WHERE   id = renamable_row.id;
628                                 EXCEPTION WHEN unique_violation THEN
629                                         suffix := suffix || ' ';
630                                         CONTINUE;
631                                 END;
632                                 EXIT;
633                         END LOOP;
634                 END LOOP;
635         EXCEPTION WHEN undefined_table THEN
636                 -- do nothing
637         END;
638
639         BEGIN
640                 UPDATE reporter.report SET owner = dest_usr WHERE owner = src_usr;
641         EXCEPTION WHEN undefined_table THEN
642                 -- do nothing
643         END;
644
645         -- Update with a rename to avoid collisions
646         BEGIN
647                 FOR renamable_row in
648                         SELECT id, name
649                         FROM   reporter.report_folder
650                         WHERE  owner = src_usr
651                 LOOP
652                         suffix := ' (' || src_usr || ')';
653                         LOOP
654                                 BEGIN
655                                         UPDATE  reporter.report_folder
656                                         SET     owner = dest_usr, name = name || suffix
657                                         WHERE   id = renamable_row.id;
658                                 EXCEPTION WHEN unique_violation THEN
659                                         suffix := suffix || ' ';
660                                         CONTINUE;
661                                 END;
662                                 EXIT;
663                         END LOOP;
664                 END LOOP;
665         EXCEPTION WHEN undefined_table THEN
666                 -- do nothing
667         END;
668
669         BEGIN
670                 UPDATE reporter.schedule SET runner = dest_usr WHERE runner = src_usr;
671         EXCEPTION WHEN undefined_table THEN
672                 -- do nothing
673         END;
674
675         BEGIN
676                 UPDATE reporter.template SET owner = dest_usr WHERE owner = src_usr;
677         EXCEPTION WHEN undefined_table THEN
678                 -- do nothing
679         END;
680
681         -- Update with a rename to avoid collisions
682         BEGIN
683                 FOR renamable_row in
684                         SELECT id, name
685                         FROM   reporter.template_folder
686                         WHERE  owner = src_usr
687                 LOOP
688                         suffix := ' (' || src_usr || ')';
689                         LOOP
690                                 BEGIN
691                                         UPDATE  reporter.template_folder
692                                         SET     owner = dest_usr, name = name || suffix
693                                         WHERE   id = renamable_row.id;
694                                 EXCEPTION WHEN unique_violation THEN
695                                         suffix := suffix || ' ';
696                                         CONTINUE;
697                                 END;
698                                 EXIT;
699                         END LOOP;
700                 END LOOP;
701         EXCEPTION WHEN undefined_table THEN
702         -- do nothing
703         END;
704
705         -- vandelay.*
706         -- Update with a rename to avoid collisions
707         FOR renamable_row in
708                 SELECT id, name
709                 FROM   vandelay.queue
710                 WHERE  owner = src_usr
711         LOOP
712                 suffix := ' (' || src_usr || ')';
713                 LOOP
714                         BEGIN
715                                 UPDATE  vandelay.queue
716                                 SET     owner = dest_usr, name = name || suffix
717                                 WHERE   id = renamable_row.id;
718                         EXCEPTION WHEN unique_violation THEN
719                                 suffix := suffix || ' ';
720                                 CONTINUE;
721                         END;
722                         EXIT;
723                 END LOOP;
724         END LOOP;
725
726     UPDATE vandelay.session_tracker SET usr = dest_usr WHERE usr = src_usr;
727
728     -- NULL-ify addresses last so other cleanup (e.g. circ anonymization)
729     -- can access the information before deletion.
730         UPDATE actor.usr SET
731                 active = FALSE,
732                 card = NULL,
733                 mailing_address = NULL,
734                 billing_address = NULL
735         WHERE id = src_usr;
736
737 END;
738 $$ LANGUAGE plpgsql;
739
740 COMMENT ON FUNCTION actor.usr_purge_data(INT, INT) IS $$
741 Finds rows dependent on a given row in actor.usr and either deletes them
742 or reassigns them to a different user.
743 $$;
744
745
746
747 CREATE OR REPLACE FUNCTION actor.usr_delete(
748         src_usr  IN INTEGER,
749         dest_usr IN INTEGER
750 ) RETURNS VOID AS $$
751 DECLARE
752         old_profile actor.usr.profile%type;
753         old_home_ou actor.usr.home_ou%type;
754         new_profile actor.usr.profile%type;
755         new_home_ou actor.usr.home_ou%type;
756         new_name    text;
757         new_dob     actor.usr.dob%type;
758 BEGIN
759         SELECT
760                 id || '-PURGED-' || now(),
761                 profile,
762                 home_ou,
763                 dob
764         INTO
765                 new_name,
766                 old_profile,
767                 old_home_ou,
768                 new_dob
769         FROM
770                 actor.usr
771         WHERE
772                 id = src_usr;
773         --
774         -- Quit if no such user
775         --
776         IF old_profile IS NULL THEN
777                 RETURN;
778         END IF;
779         --
780         perform actor.usr_purge_data( src_usr, dest_usr );
781         --
782         -- Find the root grp_tree and the root org_unit.  This would be simpler if we 
783         -- could assume that there is only one root.  Theoretically, someday, maybe,
784         -- there could be multiple roots, so we take extra trouble to get the right ones.
785         --
786         SELECT
787                 id
788         INTO
789                 new_profile
790         FROM
791                 permission.grp_ancestors( old_profile )
792         WHERE
793                 parent is null;
794         --
795         SELECT
796                 id
797         INTO
798                 new_home_ou
799         FROM
800                 actor.org_unit_ancestors( old_home_ou )
801         WHERE
802                 parent_ou is null;
803         --
804         -- Truncate date of birth
805         --
806         IF new_dob IS NOT NULL THEN
807                 new_dob := date_trunc( 'year', new_dob );
808         END IF;
809         --
810         UPDATE
811                 actor.usr
812                 SET
813                         card = NULL,
814                         profile = new_profile,
815                         usrname = new_name,
816                         email = NULL,
817                         passwd = random()::text,
818                         standing = DEFAULT,
819                         ident_type = 
820                         (
821                                 SELECT MIN( id )
822                                 FROM config.identification_type
823                         ),
824                         ident_value = NULL,
825                         ident_type2 = NULL,
826                         ident_value2 = NULL,
827                         net_access_level = DEFAULT,
828                         photo_url = NULL,
829                         prefix = NULL,
830                         first_given_name = new_name,
831                         second_given_name = NULL,
832                         family_name = new_name,
833                         suffix = NULL,
834                         alias = NULL,
835             guardian = NULL,
836                         day_phone = NULL,
837                         evening_phone = NULL,
838                         other_phone = NULL,
839                         mailing_address = NULL,
840                         billing_address = NULL,
841                         home_ou = new_home_ou,
842                         dob = new_dob,
843                         active = FALSE,
844                         master_account = DEFAULT, 
845                         super_user = DEFAULT,
846                         barred = FALSE,
847                         deleted = TRUE,
848                         juvenile = DEFAULT,
849                         usrgroup = 0,
850                         claims_returned_count = DEFAULT,
851                         credit_forward_balance = DEFAULT,
852                         last_xact_id = DEFAULT,
853                         alert_message = NULL,
854                         create_date = now(),
855                         expire_date = now()
856         WHERE
857                 id = src_usr;
858 END;
859 $$ LANGUAGE plpgsql;
860
861 COMMENT ON FUNCTION actor.usr_delete(INT, INT) IS $$
862 Logically deletes a user.  Removes personally identifiable information,
863 and purges associated data in other tables.
864 $$;
865
866
867
868 CREATE OR REPLACE FUNCTION actor.approve_pending_address(pending_id INT) RETURNS BIGINT AS $$
869 DECLARE
870     old_id INT;
871 BEGIN
872     SELECT INTO old_id replaces FROM actor.usr_address where id = pending_id;
873     IF old_id IS NULL THEN
874         UPDATE actor.usr_address SET pending = 'f' WHERE id = pending_id;
875         RETURN pending_id;
876     END IF;
877     -- address replaces an existing address
878     DELETE FROM actor.usr_address WHERE id = -old_id;
879     UPDATE actor.usr_address SET id = -id WHERE id = old_id;
880     UPDATE actor.usr_address SET replaces = NULL, id = old_id, pending = 'f' WHERE id = pending_id;
881     RETURN old_id;
882 END
883 $$ LANGUAGE plpgsql;
884
885 COMMENT ON FUNCTION actor.approve_pending_address(INT) IS $$
886 Replaces an address with a pending address.  This is done by giving the pending 
887 address the ID of the old address.  The replaced address is retained with -id.
888 $$;
889
890 CREATE OR REPLACE FUNCTION container.clear_expired_circ_history_items( 
891          ac_usr IN INTEGER
892 ) RETURNS VOID AS $$
893 --
894 -- Delete old circulation bucket items for a specified user.
895 -- "Old" means older than the interval specified by a
896 -- user-level setting, if it is so specified.
897 --
898 DECLARE
899     threshold TIMESTAMP WITH TIME ZONE;
900 BEGIN
901         -- Sanity check
902         IF ac_usr IS NULL THEN
903                 RETURN;
904         END IF;
905         -- Determine the threshold date that defines "old".  Subtract the
906         -- interval from the system date, then truncate to midnight.
907         SELECT
908                 date_trunc( 
909                         'day',
910                         now() - CAST( translate( value, '"', '' ) AS INTERVAL )
911                 )
912         INTO
913                 threshold
914         FROM
915                 actor.usr_setting
916         WHERE
917                 usr = ac_usr
918                 AND name = 'patron.max_reading_list_interval';
919         --
920         IF threshold is null THEN
921                 -- No interval defined; don't delete anything
922                 -- RAISE NOTICE 'No interval defined for user %', ac_usr;
923                 return;
924         END IF;
925         --
926         -- RAISE NOTICE 'Date threshold: %', threshold;
927         --
928         -- Threshold found; do the delete
929         delete from container.copy_bucket_item
930         where
931                 bucket in
932                 (
933                         select
934                                 id
935                         from
936                                 container.copy_bucket
937                         where
938                                 owner = ac_usr
939                                 and btype = 'circ_history'
940                 )
941                 and create_time < threshold;
942         --
943         RETURN;
944 END;
945 $$ LANGUAGE plpgsql;
946
947 COMMENT ON FUNCTION container.clear_expired_circ_history_items( INTEGER ) IS $$
948 Delete old circulation bucket items for a specified user.
949 "Old" means older than the interval specified by a
950 user-level setting, if it is so specified.
951 $$;
952
953 CREATE OR REPLACE FUNCTION container.clear_all_expired_circ_history_items( )
954 RETURNS VOID AS $$
955 --
956 -- Delete expired circulation bucket items for all users that have
957 -- a setting for patron.max_reading_list_interval.
958 --
959 DECLARE
960     today        TIMESTAMP WITH TIME ZONE;
961     threshold    TIMESTAMP WITH TIME ZONE;
962         usr_setting  RECORD;
963 BEGIN
964         SELECT date_trunc( 'day', now() ) INTO today;
965         --
966         FOR usr_setting in
967                 SELECT
968                         usr,
969                         value
970                 FROM
971                         actor.usr_setting
972                 WHERE
973                         name = 'patron.max_reading_list_interval'
974         LOOP
975                 --
976                 -- Make sure the setting is a valid interval
977                 --
978                 BEGIN
979                         threshold := today - CAST( translate( usr_setting.value, '"', '' ) AS INTERVAL );
980                 EXCEPTION
981                         WHEN OTHERS THEN
982                                 RAISE NOTICE 'Invalid setting patron.max_reading_list_interval for user %: ''%''',
983                                         usr_setting.usr, usr_setting.value;
984                                 CONTINUE;
985                 END;
986                 --
987                 --RAISE NOTICE 'User % threshold %', usr_setting.usr, threshold;
988                 --
989         DELETE FROM container.copy_bucket_item
990         WHERE
991                 bucket IN
992                 (
993                     SELECT
994                         id
995                     FROM
996                         container.copy_bucket
997                     WHERE
998                         owner = usr_setting.usr
999                         AND btype = 'circ_history'
1000                 )
1001                 AND create_time < threshold;
1002         END LOOP;
1003         --
1004 END;
1005 $$ LANGUAGE plpgsql;
1006
1007 COMMENT ON FUNCTION container.clear_all_expired_circ_history_items( ) IS $$
1008 Delete expired circulation bucket items for all users that have
1009 a setting for patron.max_reading_list_interval.
1010 $$;
1011
1012 CREATE OR REPLACE FUNCTION asset.merge_record_assets( target_record BIGINT, source_record BIGINT ) RETURNS INT AS $func$
1013 DECLARE
1014     moved_objects INT := 0;
1015     source_cn     asset.call_number%ROWTYPE;
1016     target_cn     asset.call_number%ROWTYPE;
1017     metarec       metabib.metarecord%ROWTYPE;
1018     hold          action.hold_request%ROWTYPE;
1019     ser_rec       serial.record_entry%ROWTYPE;
1020     ser_sub       serial.subscription%ROWTYPE;
1021     acq_lineitem  acq.lineitem%ROWTYPE;
1022     acq_request   acq.user_request%ROWTYPE;
1023     booking       booking.resource_type%ROWTYPE;
1024     source_part   biblio.monograph_part%ROWTYPE;
1025     target_part   biblio.monograph_part%ROWTYPE;
1026     multi_home    biblio.peer_bib_copy_map%ROWTYPE;
1027     uri_count     INT := 0;
1028     counter       INT := 0;
1029     uri_datafield TEXT;
1030     uri_text      TEXT := '';
1031 BEGIN
1032
1033     -- move any 856 entries on records that have at least one MARC-mapped URI entry
1034     SELECT  INTO uri_count COUNT(*)
1035       FROM  asset.uri_call_number_map m
1036             JOIN asset.call_number cn ON (m.call_number = cn.id)
1037       WHERE cn.record = source_record;
1038
1039     IF uri_count > 0 THEN
1040         
1041         -- This returns more nodes than you might expect:
1042         -- 7 instead of 1 for an 856 with $u $y $9
1043         SELECT  COUNT(*) INTO counter
1044           FROM  oils_xpath_table(
1045                     'id',
1046                     'marc',
1047                     'biblio.record_entry',
1048                     '//*[@tag="856"]',
1049                     'id=' || source_record
1050                 ) as t(i int,c text);
1051     
1052         FOR i IN 1 .. counter LOOP
1053             SELECT  '<datafield xmlns="http://www.loc.gov/MARC21/slim"' || 
1054                         ' tag="856"' ||
1055                         ' ind1="' || FIRST(ind1) || '"'  ||
1056                         ' ind2="' || FIRST(ind2) || '">' ||
1057                         STRING_AGG(
1058                             '<subfield code="' || subfield || '">' ||
1059                             regexp_replace(
1060                                 regexp_replace(
1061                                     regexp_replace(data,'&','&amp;','g'),
1062                                     '>', '&gt;', 'g'
1063                                 ),
1064                                 '<', '&lt;', 'g'
1065                             ) || '</subfield>', ''
1066                         ) || '</datafield>' INTO uri_datafield
1067               FROM  oils_xpath_table(
1068                         'id',
1069                         'marc',
1070                         'biblio.record_entry',
1071                         '//*[@tag="856"][position()=' || i || ']/@ind1|' ||
1072                         '//*[@tag="856"][position()=' || i || ']/@ind2|' ||
1073                         '//*[@tag="856"][position()=' || i || ']/*/@code|' ||
1074                         '//*[@tag="856"][position()=' || i || ']/*[@code]',
1075                         'id=' || source_record
1076                     ) as t(id int,ind1 text, ind2 text,subfield text,data text);
1077
1078             -- As most of the results will be NULL, protect against NULLifying
1079             -- the valid content that we do generate
1080             uri_text := uri_text || COALESCE(uri_datafield, '');
1081         END LOOP;
1082
1083         IF uri_text <> '' THEN
1084             UPDATE  biblio.record_entry
1085               SET   marc = regexp_replace(marc,'(</[^>]*record>)', uri_text || E'\\1')
1086               WHERE id = target_record;
1087         END IF;
1088
1089     END IF;
1090
1091         -- Find and move metarecords to the target record
1092         SELECT  INTO metarec *
1093           FROM  metabib.metarecord
1094           WHERE master_record = source_record;
1095
1096         IF FOUND THEN
1097                 UPDATE  metabib.metarecord
1098                   SET   master_record = target_record,
1099                         mods = NULL
1100                   WHERE id = metarec.id;
1101
1102                 moved_objects := moved_objects + 1;
1103         END IF;
1104
1105         -- Find call numbers attached to the source ...
1106         FOR source_cn IN SELECT * FROM asset.call_number WHERE record = source_record LOOP
1107
1108                 SELECT  INTO target_cn *
1109                   FROM  asset.call_number
1110                   WHERE label = source_cn.label
1111             AND prefix = source_cn.prefix
1112             AND suffix = source_cn.suffix
1113                         AND owning_lib = source_cn.owning_lib
1114                         AND record = target_record
1115                         AND NOT deleted;
1116
1117                 -- ... and if there's a conflicting one on the target ...
1118                 IF FOUND THEN
1119
1120                         -- ... move the copies to that, and ...
1121                         UPDATE  asset.copy
1122                           SET   call_number = target_cn.id
1123                           WHERE call_number = source_cn.id;
1124
1125                         -- ... move V holds to the move-target call number
1126                         FOR hold IN SELECT * FROM action.hold_request WHERE target = source_cn.id AND hold_type = 'V' LOOP
1127                 
1128                                 UPDATE  action.hold_request
1129                                   SET   target = target_cn.id
1130                                   WHERE id = hold.id;
1131                 
1132                                 moved_objects := moved_objects + 1;
1133                         END LOOP;
1134         
1135             UPDATE asset.call_number SET deleted = TRUE WHERE id = source_cn.id;
1136
1137                 -- ... if not ...
1138                 ELSE
1139                         -- ... just move the call number to the target record
1140                         UPDATE  asset.call_number
1141                           SET   record = target_record
1142                           WHERE id = source_cn.id;
1143                 END IF;
1144
1145                 moved_objects := moved_objects + 1;
1146         END LOOP;
1147
1148         -- Find T holds targeting the source record ...
1149         FOR hold IN SELECT * FROM action.hold_request WHERE target = source_record AND hold_type = 'T' LOOP
1150
1151                 -- ... and move them to the target record
1152                 UPDATE  action.hold_request
1153                   SET   target = target_record
1154                   WHERE id = hold.id;
1155
1156                 moved_objects := moved_objects + 1;
1157         END LOOP;
1158
1159         -- Find serial records targeting the source record ...
1160         FOR ser_rec IN SELECT * FROM serial.record_entry WHERE record = source_record LOOP
1161                 -- ... and move them to the target record
1162                 UPDATE  serial.record_entry
1163                   SET   record = target_record
1164                   WHERE id = ser_rec.id;
1165
1166                 moved_objects := moved_objects + 1;
1167         END LOOP;
1168
1169         -- Find serial subscriptions targeting the source record ...
1170         FOR ser_sub IN SELECT * FROM serial.subscription WHERE record_entry = source_record LOOP
1171                 -- ... and move them to the target record
1172                 UPDATE  serial.subscription
1173                   SET   record_entry = target_record
1174                   WHERE id = ser_sub.id;
1175
1176                 moved_objects := moved_objects + 1;
1177         END LOOP;
1178
1179         -- Find booking resource types targeting the source record ...
1180         FOR booking IN SELECT * FROM booking.resource_type WHERE record = source_record LOOP
1181                 -- ... and move them to the target record
1182                 UPDATE  booking.resource_type
1183                   SET   record = target_record
1184                   WHERE id = booking.id;
1185
1186                 moved_objects := moved_objects + 1;
1187         END LOOP;
1188
1189         -- Find acq lineitems targeting the source record ...
1190         FOR acq_lineitem IN SELECT * FROM acq.lineitem WHERE eg_bib_id = source_record LOOP
1191                 -- ... and move them to the target record
1192                 UPDATE  acq.lineitem
1193                   SET   eg_bib_id = target_record
1194                   WHERE id = acq_lineitem.id;
1195
1196                 moved_objects := moved_objects + 1;
1197         END LOOP;
1198
1199         -- Find acq user purchase requests targeting the source record ...
1200         FOR acq_request IN SELECT * FROM acq.user_request WHERE eg_bib = source_record LOOP
1201                 -- ... and move them to the target record
1202                 UPDATE  acq.user_request
1203                   SET   eg_bib = target_record
1204                   WHERE id = acq_request.id;
1205
1206                 moved_objects := moved_objects + 1;
1207         END LOOP;
1208
1209         -- Find parts attached to the source ...
1210         FOR source_part IN SELECT * FROM biblio.monograph_part WHERE record = source_record LOOP
1211
1212                 SELECT  INTO target_part *
1213                   FROM  biblio.monograph_part
1214                   WHERE label = source_part.label
1215                         AND record = target_record;
1216
1217                 -- ... and if there's a conflicting one on the target ...
1218                 IF FOUND THEN
1219
1220                         -- ... move the copy-part maps to that, and ...
1221                         UPDATE  asset.copy_part_map
1222                           SET   part = target_part.id
1223                           WHERE part = source_part.id;
1224
1225                         -- ... move P holds to the move-target part
1226                         FOR hold IN SELECT * FROM action.hold_request WHERE target = source_part.id AND hold_type = 'P' LOOP
1227                 
1228                                 UPDATE  action.hold_request
1229                                   SET   target = target_part.id
1230                                   WHERE id = hold.id;
1231                 
1232                                 moved_objects := moved_objects + 1;
1233                         END LOOP;
1234
1235                 -- ... if not ...
1236                 ELSE
1237                         -- ... just move the part to the target record
1238                         UPDATE  biblio.monograph_part
1239                           SET   record = target_record
1240                           WHERE id = source_part.id;
1241                 END IF;
1242
1243                 moved_objects := moved_objects + 1;
1244         END LOOP;
1245
1246         -- Find multi_home items attached to the source ...
1247         FOR multi_home IN SELECT * FROM biblio.peer_bib_copy_map WHERE peer_record = source_record LOOP
1248                 -- ... and move them to the target record
1249                 UPDATE  biblio.peer_bib_copy_map
1250                   SET   peer_record = target_record
1251                   WHERE id = multi_home.id;
1252
1253                 moved_objects := moved_objects + 1;
1254         END LOOP;
1255
1256         -- And delete mappings where the item's home bib was merged with the peer bib
1257         DELETE FROM biblio.peer_bib_copy_map WHERE peer_record = (
1258                 SELECT (SELECT record FROM asset.call_number WHERE id = call_number)
1259                 FROM asset.copy WHERE id = target_copy
1260         );
1261
1262     -- Apply merge tracking
1263     UPDATE biblio.record_entry 
1264         SET merge_date = NOW() WHERE id = target_record;
1265
1266     UPDATE biblio.record_entry
1267         SET merge_date = NOW(), merged_to = target_record
1268         WHERE id = source_record;
1269
1270     -- replace book bag entries of source_record with target_record
1271     UPDATE container.biblio_record_entry_bucket_item
1272         SET target_biblio_record_entry = target_record
1273         WHERE bucket IN (SELECT id FROM container.biblio_record_entry_bucket WHERE btype = 'bookbag')
1274         AND target_biblio_record_entry = source_record;
1275
1276     -- Finally, "delete" the source record
1277     DELETE FROM biblio.record_entry WHERE id = source_record;
1278
1279         -- That's all, folks!
1280         RETURN moved_objects;
1281 END;
1282 $func$ LANGUAGE plpgsql;
1283
1284 -- Authority ingest routines
1285 CREATE OR REPLACE FUNCTION authority.propagate_changes 
1286     (aid BIGINT, bid BIGINT) RETURNS BIGINT AS $func$
1287 DECLARE
1288     bib_rec biblio.record_entry%ROWTYPE;
1289     new_marc TEXT;
1290 BEGIN
1291
1292     SELECT INTO bib_rec * FROM biblio.record_entry WHERE id = bid;
1293
1294     new_marc := vandelay.merge_record_xml(
1295         bib_rec.marc, authority.generate_overlay_template(aid));
1296
1297     IF new_marc = bib_rec.marc THEN
1298         -- Authority record change had no impact on this bib record.
1299         -- Nothing left to do.
1300         RETURN aid;
1301     END IF;
1302
1303     PERFORM 1 FROM config.global_flag 
1304         WHERE name = 'ingest.disable_authority_auto_update_bib_meta' 
1305             AND enabled;
1306
1307     IF NOT FOUND THEN 
1308         -- update the bib record editor and edit_date
1309         bib_rec.editor := (
1310             SELECT editor FROM authority.record_entry WHERE id = aid);
1311         bib_rec.edit_date = NOW();
1312     END IF;
1313
1314     UPDATE biblio.record_entry SET
1315         marc = new_marc,
1316         editor = bib_rec.editor,
1317         edit_date = bib_rec.edit_date
1318     WHERE id = bid;
1319
1320     RETURN aid;
1321
1322 END;
1323 $func$ LANGUAGE PLPGSQL;
1324
1325 CREATE OR REPLACE FUNCTION authority.propagate_changes (aid BIGINT) RETURNS SETOF BIGINT AS $func$
1326     SELECT authority.propagate_changes( authority, bib ) FROM authority.bib_linking WHERE authority = $1;
1327 $func$ LANGUAGE SQL;
1328
1329 CREATE OR REPLACE FUNCTION authority.map_thesaurus_to_control_set () RETURNS TRIGGER AS $func$
1330 BEGIN
1331     IF NEW.control_set IS NULL THEN
1332         SELECT  control_set INTO NEW.control_set
1333           FROM  authority.thesaurus
1334           WHERE authority.extract_thesaurus(NEW.marc) = code;
1335     END IF;
1336
1337     RETURN NEW;
1338 END;
1339 $func$ LANGUAGE PLPGSQL;
1340
1341 CREATE OR REPLACE FUNCTION authority.reingest_authority_rec_descriptor( auth_id BIGINT ) RETURNS VOID AS $func$
1342 BEGIN
1343     DELETE FROM authority.rec_descriptor WHERE record = auth_id;
1344     INSERT INTO authority.rec_descriptor (record, record_status, encoding_level, thesaurus)
1345         SELECT  auth_id,
1346                 vandelay.marc21_extract_fixed_field(marc,'RecStat'),
1347                 vandelay.marc21_extract_fixed_field(marc,'ELvl'),
1348                 authority.extract_thesaurus(marc)
1349           FROM  authority.record_entry
1350           WHERE id = auth_id;
1351     RETURN;
1352 END;
1353 $func$ LANGUAGE PLPGSQL;
1354
1355 CREATE OR REPLACE FUNCTION authority.reingest_authority_full_rec( auth_id BIGINT ) RETURNS VOID AS $func$
1356 BEGIN
1357     DELETE FROM authority.full_rec WHERE record = auth_id;
1358     INSERT INTO authority.full_rec (record, tag, ind1, ind2, subfield, value)
1359         SELECT record, tag, ind1, ind2, subfield, value FROM authority.flatten_marc( auth_id );
1360
1361     RETURN;
1362 END;
1363 $func$ LANGUAGE PLPGSQL;
1364
1365 -- Given an authority record's ID, control set ID (if known), and marc::XML,
1366 -- return all links to other authority records in the form of rows that
1367 -- can be inserted into authority.authority_linking.
1368 CREATE OR REPLACE FUNCTION authority.calculate_authority_linking(
1369     rec_id BIGINT, rec_control_set INT, rec_marc_xml XML
1370 ) RETURNS SETOF authority.authority_linking AS $func$
1371 DECLARE
1372     acsaf       authority.control_set_authority_field%ROWTYPE;
1373     link        TEXT;
1374     aal         authority.authority_linking%ROWTYPE;
1375 BEGIN
1376     IF rec_control_set IS NULL THEN
1377         -- No control_set on record?  Guess at one
1378         SELECT control_set INTO rec_control_set
1379             FROM authority.control_set_authority_field
1380             WHERE tag IN (
1381                 SELECT UNNEST(
1382                     XPATH('//*[starts-with(@tag,"1")]/@tag',rec_marc_xml)::TEXT[]
1383                 )
1384             ) LIMIT 1;
1385
1386         IF NOT FOUND THEN
1387             RAISE WARNING 'Could not even guess at control set for authority record %', rec_id;
1388             RETURN;
1389         END IF;
1390     END IF;
1391
1392     aal.source := rec_id;
1393
1394     FOR acsaf IN
1395         SELECT * FROM authority.control_set_authority_field
1396         WHERE control_set = rec_control_set
1397             AND linking_subfield IS NOT NULL
1398             AND main_entry IS NOT NULL
1399     LOOP
1400         -- Loop over the trailing-number contents of all linking subfields
1401         FOR link IN
1402             SELECT  SUBSTRING( x::TEXT, '\d+$' )
1403               FROM  UNNEST(
1404                         XPATH(
1405                             '//*[@tag="'
1406                                 || acsaf.tag
1407                                 || '"]/*[@code="'
1408                                 || acsaf.linking_subfield
1409                                 || '"]/text()',
1410                             rec_marc_xml
1411                         )
1412                     ) x
1413         LOOP
1414
1415             -- Ignore links that are null, malformed, circular, or point to
1416             -- non-existent authority records.
1417             IF link IS NOT NULL AND link::BIGINT <> rec_id THEN
1418                 PERFORM * FROM authority.record_entry WHERE id = link::BIGINT;
1419                 IF FOUND THEN
1420                     aal.target := link::BIGINT;
1421                     aal.field := acsaf.id;
1422                     RETURN NEXT aal;
1423                 END IF;
1424             END IF;
1425         END LOOP;
1426     END LOOP;
1427 END;
1428 $func$ LANGUAGE PLPGSQL;
1429
1430 -- AFTER UPDATE OR INSERT trigger for authority.record_entry
1431 CREATE OR REPLACE FUNCTION authority.indexing_ingest_or_delete () RETURNS TRIGGER AS $func$
1432 DECLARE
1433     ashs    authority.simple_heading%ROWTYPE;
1434     mbe_row metabib.browse_entry%ROWTYPE;
1435     mbe_id  BIGINT;
1436     ash_id  BIGINT;
1437 BEGIN
1438
1439     IF NEW.deleted IS TRUE THEN -- If this authority is deleted
1440         DELETE FROM authority.bib_linking WHERE authority = NEW.id; -- Avoid updating fields in bibs that are no longer visible
1441         DELETE FROM authority.full_rec WHERE record = NEW.id; -- Avoid validating fields against deleted authority records
1442         DELETE FROM authority.simple_heading WHERE record = NEW.id;
1443           -- Should remove matching $0 from controlled fields at the same time?
1444
1445         -- XXX What do we about the actual linking subfields present in
1446         -- authority records that target this one when this happens?
1447         DELETE FROM authority.authority_linking
1448             WHERE source = NEW.id OR target = NEW.id;
1449
1450         RETURN NEW; -- and we're done
1451     END IF;
1452
1453     IF TG_OP = 'UPDATE' THEN -- re-ingest?
1454         PERFORM * FROM config.internal_flag WHERE name = 'ingest.reingest.force_on_same_marc' AND enabled;
1455
1456         IF NOT FOUND AND OLD.marc = NEW.marc THEN -- don't do anything if the MARC didn't change
1457             RETURN NEW;
1458         END IF;
1459
1460         -- Unless there's a setting stopping us, propagate these updates to any linked bib records when the heading changes
1461         PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_auto_update' AND enabled;
1462
1463         IF NOT FOUND AND NEW.heading <> OLD.heading THEN
1464             PERFORM authority.propagate_changes(NEW.id);
1465         END IF;
1466         
1467         DELETE FROM authority.simple_heading WHERE record = NEW.id;
1468         DELETE FROM authority.authority_linking WHERE source = NEW.id;
1469     END IF;
1470
1471     INSERT INTO authority.authority_linking (source, target, field)
1472         SELECT source, target, field FROM authority.calculate_authority_linking(
1473             NEW.id, NEW.control_set, NEW.marc::XML
1474         );
1475
1476     FOR ashs IN SELECT * FROM authority.simple_heading_set(NEW.marc) LOOP
1477
1478         INSERT INTO authority.simple_heading (record,atag,value,sort_value,thesaurus)
1479             VALUES (ashs.record, ashs.atag, ashs.value, ashs.sort_value, ashs.thesaurus);
1480             ash_id := CURRVAL('authority.simple_heading_id_seq'::REGCLASS);
1481
1482         SELECT INTO mbe_row * FROM metabib.browse_entry
1483             WHERE value = ashs.value AND sort_value = ashs.sort_value;
1484
1485         IF FOUND THEN
1486             mbe_id := mbe_row.id;
1487         ELSE
1488             INSERT INTO metabib.browse_entry
1489                 ( value, sort_value ) VALUES
1490                 ( ashs.value, ashs.sort_value );
1491
1492             mbe_id := CURRVAL('metabib.browse_entry_id_seq'::REGCLASS);
1493         END IF;
1494
1495         INSERT INTO metabib.browse_entry_simple_heading_map (entry,simple_heading) VALUES (mbe_id,ash_id);
1496
1497     END LOOP;
1498
1499     -- Flatten and insert the afr data
1500     PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_full_rec' AND enabled;
1501     IF NOT FOUND THEN
1502         PERFORM authority.reingest_authority_full_rec(NEW.id);
1503         PERFORM * FROM config.internal_flag WHERE name = 'ingest.disable_authority_rec_descriptor' AND enabled;
1504         IF NOT FOUND THEN
1505             PERFORM authority.reingest_authority_rec_descriptor(NEW.id);
1506         END IF;
1507     END IF;
1508
1509     RETURN NEW;
1510 END;
1511 $func$ LANGUAGE PLPGSQL;
1512
1513 -- Ingest triggers
1514 CREATE TRIGGER fingerprint_tgr BEFORE INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.fingerprint_trigger ('eng','BKS');
1515 CREATE TRIGGER aaa_indexing_ingest_or_delete AFTER INSERT OR UPDATE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE biblio.indexing_ingest_or_delete ();
1516 CREATE TRIGGER bbb_simple_rec_trigger AFTER INSERT OR UPDATE OR DELETE ON biblio.record_entry FOR EACH ROW EXECUTE PROCEDURE reporter.simple_rec_trigger ();
1517
1518 CREATE TRIGGER map_thesaurus_to_control_set BEFORE INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE authority.map_thesaurus_to_control_set ();
1519 CREATE TRIGGER aaa_auth_ingest_or_delete AFTER INSERT OR UPDATE ON authority.record_entry FOR EACH ROW EXECUTE PROCEDURE authority.indexing_ingest_or_delete ();
1520
1521 -- Utility routines, callable via cstore
1522
1523 CREATE OR REPLACE FUNCTION config.interval_to_seconds( interval_val INTERVAL )
1524 RETURNS INTEGER AS $$
1525 BEGIN
1526         RETURN EXTRACT( EPOCH FROM interval_val );
1527 END;
1528 $$ LANGUAGE plpgsql;
1529
1530 CREATE OR REPLACE FUNCTION config.interval_to_seconds( interval_string TEXT )
1531 RETURNS INTEGER AS $$
1532 BEGIN
1533         RETURN config.interval_to_seconds( interval_string::INTERVAL );
1534 END;
1535 $$ LANGUAGE plpgsql;
1536
1537 CREATE OR REPLACE FUNCTION vandelay.ingest_items ( import_id BIGINT, attr_def_id BIGINT ) RETURNS SETOF vandelay.import_item AS $$
1538 DECLARE
1539
1540     owning_lib      TEXT;
1541     circ_lib        TEXT;
1542     call_number     TEXT;
1543     copy_number     TEXT;
1544     status          TEXT;
1545     location        TEXT;
1546     circulate       TEXT;
1547     deposit         TEXT;
1548     deposit_amount  TEXT;
1549     ref             TEXT;
1550     holdable        TEXT;
1551     price           TEXT;
1552     barcode         TEXT;
1553     circ_modifier   TEXT;
1554     circ_as_type    TEXT;
1555     alert_message   TEXT;
1556     opac_visible    TEXT;
1557     pub_note        TEXT;
1558     priv_note       TEXT;
1559     internal_id     TEXT;
1560     stat_cat_data   TEXT;
1561     parts_data      TEXT;
1562
1563     attr_def        RECORD;
1564     tmp_attr_set    RECORD;
1565     attr_set        vandelay.import_item%ROWTYPE;
1566
1567     xpaths          TEXT[];
1568     tmp_str         TEXT;
1569
1570 BEGIN
1571
1572     SELECT * INTO attr_def FROM vandelay.import_item_attr_definition WHERE id = attr_def_id;
1573
1574     IF FOUND THEN
1575
1576         attr_set.definition := attr_def.id;
1577
1578         -- Build the combined XPath
1579
1580         owning_lib :=
1581             CASE
1582                 WHEN attr_def.owning_lib IS NULL THEN 'null()'
1583                 WHEN LENGTH( attr_def.owning_lib ) = 1 THEN '*[@code="' || attr_def.owning_lib || '"]'
1584                 ELSE '*' || attr_def.owning_lib
1585             END;
1586
1587         circ_lib :=
1588             CASE
1589                 WHEN attr_def.circ_lib IS NULL THEN 'null()'
1590                 WHEN LENGTH( attr_def.circ_lib ) = 1 THEN '*[@code="' || attr_def.circ_lib || '"]'
1591                 ELSE '*' || attr_def.circ_lib
1592             END;
1593
1594         call_number :=
1595             CASE
1596                 WHEN attr_def.call_number IS NULL THEN 'null()'
1597                 WHEN LENGTH( attr_def.call_number ) = 1 THEN '*[@code="' || attr_def.call_number || '"]'
1598                 ELSE '*' || attr_def.call_number
1599             END;
1600
1601         copy_number :=
1602             CASE
1603                 WHEN attr_def.copy_number IS NULL THEN 'null()'
1604                 WHEN LENGTH( attr_def.copy_number ) = 1 THEN '*[@code="' || attr_def.copy_number || '"]'
1605                 ELSE '*' || attr_def.copy_number
1606             END;
1607
1608         status :=
1609             CASE
1610                 WHEN attr_def.status IS NULL THEN 'null()'
1611                 WHEN LENGTH( attr_def.status ) = 1 THEN '*[@code="' || attr_def.status || '"]'
1612                 ELSE '*' || attr_def.status
1613             END;
1614
1615         location :=
1616             CASE
1617                 WHEN attr_def.location IS NULL THEN 'null()'
1618                 WHEN LENGTH( attr_def.location ) = 1 THEN '*[@code="' || attr_def.location || '"]'
1619                 ELSE '*' || attr_def.location
1620             END;
1621
1622         circulate :=
1623             CASE
1624                 WHEN attr_def.circulate IS NULL THEN 'null()'
1625                 WHEN LENGTH( attr_def.circulate ) = 1 THEN '*[@code="' || attr_def.circulate || '"]'
1626                 ELSE '*' || attr_def.circulate
1627             END;
1628
1629         deposit :=
1630             CASE
1631                 WHEN attr_def.deposit IS NULL THEN 'null()'
1632                 WHEN LENGTH( attr_def.deposit ) = 1 THEN '*[@code="' || attr_def.deposit || '"]'
1633                 ELSE '*' || attr_def.deposit
1634             END;
1635
1636         deposit_amount :=
1637             CASE
1638                 WHEN attr_def.deposit_amount IS NULL THEN 'null()'
1639                 WHEN LENGTH( attr_def.deposit_amount ) = 1 THEN '*[@code="' || attr_def.deposit_amount || '"]'
1640                 ELSE '*' || attr_def.deposit_amount
1641             END;
1642
1643         ref :=
1644             CASE
1645                 WHEN attr_def.ref IS NULL THEN 'null()'
1646                 WHEN LENGTH( attr_def.ref ) = 1 THEN '*[@code="' || attr_def.ref || '"]'
1647                 ELSE '*' || attr_def.ref
1648             END;
1649
1650         holdable :=
1651             CASE
1652                 WHEN attr_def.holdable IS NULL THEN 'null()'
1653                 WHEN LENGTH( attr_def.holdable ) = 1 THEN '*[@code="' || attr_def.holdable || '"]'
1654                 ELSE '*' || attr_def.holdable
1655             END;
1656
1657         price :=
1658             CASE
1659                 WHEN attr_def.price IS NULL THEN 'null()'
1660                 WHEN LENGTH( attr_def.price ) = 1 THEN '*[@code="' || attr_def.price || '"]'
1661                 ELSE '*' || attr_def.price
1662             END;
1663
1664         barcode :=
1665             CASE
1666                 WHEN attr_def.barcode IS NULL THEN 'null()'
1667                 WHEN LENGTH( attr_def.barcode ) = 1 THEN '*[@code="' || attr_def.barcode || '"]'
1668                 ELSE '*' || attr_def.barcode
1669             END;
1670
1671         circ_modifier :=
1672             CASE
1673                 WHEN attr_def.circ_modifier IS NULL THEN 'null()'
1674                 WHEN LENGTH( attr_def.circ_modifier ) = 1 THEN '*[@code="' || attr_def.circ_modifier || '"]'
1675                 ELSE '*' || attr_def.circ_modifier
1676             END;
1677
1678         circ_as_type :=
1679             CASE
1680                 WHEN attr_def.circ_as_type IS NULL THEN 'null()'
1681                 WHEN LENGTH( attr_def.circ_as_type ) = 1 THEN '*[@code="' || attr_def.circ_as_type || '"]'
1682                 ELSE '*' || attr_def.circ_as_type
1683             END;
1684
1685         alert_message :=
1686             CASE
1687                 WHEN attr_def.alert_message IS NULL THEN 'null()'
1688                 WHEN LENGTH( attr_def.alert_message ) = 1 THEN '*[@code="' || attr_def.alert_message || '"]'
1689                 ELSE '*' || attr_def.alert_message
1690             END;
1691
1692         opac_visible :=
1693             CASE
1694                 WHEN attr_def.opac_visible IS NULL THEN 'null()'
1695                 WHEN LENGTH( attr_def.opac_visible ) = 1 THEN '*[@code="' || attr_def.opac_visible || '"]'
1696                 ELSE '*' || attr_def.opac_visible
1697             END;
1698
1699         pub_note :=
1700             CASE
1701                 WHEN attr_def.pub_note IS NULL THEN 'null()'
1702                 WHEN LENGTH( attr_def.pub_note ) = 1 THEN '*[@code="' || attr_def.pub_note || '"]'
1703                 ELSE '*' || attr_def.pub_note
1704             END;
1705         priv_note :=
1706             CASE
1707                 WHEN attr_def.priv_note IS NULL THEN 'null()'
1708                 WHEN LENGTH( attr_def.priv_note ) = 1 THEN '*[@code="' || attr_def.priv_note || '"]'
1709                 ELSE '*' || attr_def.priv_note
1710             END;
1711
1712         internal_id :=
1713             CASE
1714                 WHEN attr_def.internal_id IS NULL THEN 'null()'
1715                 WHEN LENGTH( attr_def.internal_id ) = 1 THEN '*[@code="' || attr_def.internal_id || '"]'
1716                 ELSE '*' || attr_def.internal_id
1717             END;
1718
1719         stat_cat_data :=
1720             CASE
1721                 WHEN attr_def.stat_cat_data IS NULL THEN 'null()'
1722                 WHEN LENGTH( attr_def.stat_cat_data ) = 1 THEN '*[@code="' || attr_def.stat_cat_data || '"]'
1723                 ELSE '*' || attr_def.stat_cat_data
1724             END;
1725
1726         parts_data :=
1727             CASE
1728                 WHEN attr_def.parts_data IS NULL THEN 'null()'
1729                 WHEN LENGTH( attr_def.parts_data ) = 1 THEN '*[@code="' || attr_def.parts_data || '"]'
1730                 ELSE '*' || attr_def.parts_data
1731             END;
1732
1733
1734
1735         xpaths := ARRAY[owning_lib, circ_lib, call_number, copy_number, status, location, circulate,
1736                         deposit, deposit_amount, ref, holdable, price, barcode, circ_modifier, circ_as_type,
1737                         alert_message, pub_note, priv_note, internal_id, stat_cat_data, parts_data, opac_visible];
1738
1739         FOR tmp_attr_set IN
1740                 SELECT  *
1741                   FROM  oils_xpath_tag_to_table( (SELECT marc FROM vandelay.queued_bib_record WHERE id = import_id), attr_def.tag, xpaths)
1742                             AS t( ol TEXT, clib TEXT, cn TEXT, cnum TEXT, cs TEXT, cl TEXT, circ TEXT,
1743                                   dep TEXT, dep_amount TEXT, r TEXT, hold TEXT, pr TEXT, bc TEXT, circ_mod TEXT,
1744                                   circ_as TEXT, amessage TEXT, note TEXT, pnote TEXT, internal_id TEXT,
1745                                   stat_cat_data TEXT, parts_data TEXT, opac_vis TEXT )
1746         LOOP
1747
1748             attr_set.import_error := NULL;
1749             attr_set.error_detail := NULL;
1750             attr_set.deposit_amount := NULL;
1751             attr_set.copy_number := NULL;
1752             attr_set.price := NULL;
1753             attr_set.circ_modifier := NULL;
1754             attr_set.location := NULL;
1755             attr_set.barcode := NULL;
1756             attr_set.call_number := NULL;
1757
1758             IF tmp_attr_set.pr != '' THEN
1759                 tmp_str = REGEXP_REPLACE(tmp_attr_set.pr, E'[^0-9\\.]', '', 'g');
1760                 IF tmp_str = '' THEN 
1761                     attr_set.import_error := 'import.item.invalid.price';
1762                     attr_set.error_detail := tmp_attr_set.pr; -- original value
1763                     RETURN NEXT attr_set; CONTINUE; 
1764                 END IF;
1765                 attr_set.price := tmp_str::NUMERIC(8,2); 
1766             END IF;
1767
1768             IF tmp_attr_set.dep_amount != '' THEN
1769                 tmp_str = REGEXP_REPLACE(tmp_attr_set.dep_amount, E'[^0-9\\.]', '', 'g');
1770                 IF tmp_str = '' THEN 
1771                     attr_set.import_error := 'import.item.invalid.deposit_amount';
1772                     attr_set.error_detail := tmp_attr_set.dep_amount; 
1773                     RETURN NEXT attr_set; CONTINUE; 
1774                 END IF;
1775                 attr_set.deposit_amount := tmp_str::NUMERIC(8,2); 
1776             END IF;
1777
1778             IF tmp_attr_set.cnum != '' THEN
1779                 tmp_str = REGEXP_REPLACE(tmp_attr_set.cnum, E'[^0-9]', '', 'g');
1780                 IF tmp_str = '' THEN 
1781                     attr_set.import_error := 'import.item.invalid.copy_number';
1782                     attr_set.error_detail := tmp_attr_set.cnum; 
1783                     RETURN NEXT attr_set; CONTINUE; 
1784                 END IF;
1785                 attr_set.copy_number := tmp_str::INT; 
1786             END IF;
1787
1788             IF tmp_attr_set.ol != '' THEN
1789                 SELECT id INTO attr_set.owning_lib FROM actor.org_unit WHERE shortname = UPPER(tmp_attr_set.ol); -- INT
1790                 IF NOT FOUND THEN
1791                     attr_set.import_error := 'import.item.invalid.owning_lib';
1792                     attr_set.error_detail := tmp_attr_set.ol;
1793                     RETURN NEXT attr_set; CONTINUE; 
1794                 END IF;
1795             END IF;
1796
1797             IF tmp_attr_set.clib != '' THEN
1798                 SELECT id INTO attr_set.circ_lib FROM actor.org_unit WHERE shortname = UPPER(tmp_attr_set.clib); -- INT
1799                 IF NOT FOUND THEN
1800                     attr_set.import_error := 'import.item.invalid.circ_lib';
1801                     attr_set.error_detail := tmp_attr_set.clib;
1802                     RETURN NEXT attr_set; CONTINUE; 
1803                 END IF;
1804             END IF;
1805
1806             IF tmp_attr_set.cs != '' THEN
1807                 SELECT id INTO attr_set.status FROM config.copy_status WHERE LOWER(name) = LOWER(tmp_attr_set.cs); -- INT
1808                 IF NOT FOUND THEN
1809                     attr_set.import_error := 'import.item.invalid.status';
1810                     attr_set.error_detail := tmp_attr_set.cs;
1811                     RETURN NEXT attr_set; CONTINUE; 
1812                 END IF;
1813             END IF;
1814
1815             IF COALESCE(tmp_attr_set.circ_mod, '') = '' THEN
1816
1817                 -- no circ mod defined, see if we should apply a default
1818                 SELECT INTO attr_set.circ_modifier TRIM(BOTH '"' FROM value) 
1819                     FROM actor.org_unit_ancestor_setting(
1820                         'vandelay.item.circ_modifier.default', 
1821                         attr_set.owning_lib
1822                     );
1823
1824                 -- make sure the value from the org setting is still valid
1825                 PERFORM 1 FROM config.circ_modifier WHERE code = attr_set.circ_modifier;
1826                 IF NOT FOUND THEN
1827                     attr_set.import_error := 'import.item.invalid.circ_modifier';
1828                     attr_set.error_detail := tmp_attr_set.circ_mod;
1829                     RETURN NEXT attr_set; CONTINUE; 
1830                 END IF;
1831
1832             ELSE 
1833
1834                 SELECT code INTO attr_set.circ_modifier FROM config.circ_modifier WHERE code = tmp_attr_set.circ_mod;
1835                 IF NOT FOUND THEN
1836                     attr_set.import_error := 'import.item.invalid.circ_modifier';
1837                     attr_set.error_detail := tmp_attr_set.circ_mod;
1838                     RETURN NEXT attr_set; CONTINUE; 
1839                 END IF;
1840             END IF;
1841
1842             IF tmp_attr_set.circ_as != '' THEN
1843                 SELECT code INTO attr_set.circ_as_type FROM config.coded_value_map WHERE ctype = 'item_type' AND code = tmp_attr_set.circ_as;
1844                 IF NOT FOUND THEN
1845                     attr_set.import_error := 'import.item.invalid.circ_as_type';
1846                     attr_set.error_detail := tmp_attr_set.circ_as;
1847                     RETURN NEXT attr_set; CONTINUE; 
1848                 END IF;
1849             END IF;
1850
1851             IF COALESCE(tmp_attr_set.cl, '') = '' THEN
1852                 -- no location specified, see if we should apply a default
1853
1854                 SELECT INTO attr_set.location TRIM(BOTH '"' FROM value) 
1855                     FROM actor.org_unit_ancestor_setting(
1856                         'vandelay.item.copy_location.default', 
1857                         attr_set.owning_lib
1858                     );
1859
1860                 -- make sure the value from the org setting is still valid
1861                 PERFORM 1 FROM asset.copy_location 
1862                     WHERE id = attr_set.location AND NOT deleted;
1863                 IF NOT FOUND THEN
1864                     attr_set.import_error := 'import.item.invalid.location';
1865                     attr_set.error_detail := tmp_attr_set.cs;
1866                     RETURN NEXT attr_set; CONTINUE; 
1867                 END IF;
1868             ELSE
1869
1870                 -- search up the org unit tree for a matching copy location
1871                 WITH RECURSIVE anscestor_depth AS (
1872                     SELECT  ou.id,
1873                         out.depth AS depth,
1874                         ou.parent_ou
1875                     FROM  actor.org_unit ou
1876                         JOIN actor.org_unit_type out ON (out.id = ou.ou_type)
1877                     WHERE ou.id = COALESCE(attr_set.owning_lib, attr_set.circ_lib)
1878                         UNION ALL
1879                     SELECT  ou.id,
1880                         out.depth,
1881                         ou.parent_ou
1882                     FROM  actor.org_unit ou
1883                         JOIN actor.org_unit_type out ON (out.id = ou.ou_type)
1884                         JOIN anscestor_depth ot ON (ot.parent_ou = ou.id)
1885                 ) SELECT  cpl.id INTO attr_set.location
1886                     FROM  anscestor_depth a
1887                         JOIN asset.copy_location cpl ON (cpl.owning_lib = a.id)
1888                     WHERE LOWER(cpl.name) = LOWER(tmp_attr_set.cl) 
1889                         AND NOT cpl.deleted
1890                     ORDER BY a.depth DESC
1891                     LIMIT 1; 
1892
1893                 IF NOT FOUND THEN
1894                     attr_set.import_error := 'import.item.invalid.location';
1895                     attr_set.error_detail := tmp_attr_set.cs;
1896                     RETURN NEXT attr_set; CONTINUE; 
1897                 END IF;
1898             END IF;
1899
1900             attr_set.circulate      :=
1901                 LOWER( SUBSTRING( tmp_attr_set.circ, 1, 1)) IN ('t','y','1')
1902                 OR LOWER(tmp_attr_set.circ) = 'circulating'; -- BOOL
1903
1904             attr_set.deposit        :=
1905                 LOWER( SUBSTRING( tmp_attr_set.dep, 1, 1 ) ) IN ('t','y','1')
1906                 OR LOWER(tmp_attr_set.dep) = 'deposit'; -- BOOL
1907
1908             attr_set.holdable       :=
1909                 LOWER( SUBSTRING( tmp_attr_set.hold, 1, 1 ) ) IN ('t','y','1')
1910                 OR LOWER(tmp_attr_set.hold) = 'holdable'; -- BOOL
1911
1912             attr_set.opac_visible   :=
1913                 LOWER( SUBSTRING( tmp_attr_set.opac_vis, 1, 1 ) ) IN ('t','y','1')
1914                 OR LOWER(tmp_attr_set.opac_vis) = 'visible'; -- BOOL
1915
1916             attr_set.ref            :=
1917                 LOWER( SUBSTRING( tmp_attr_set.r, 1, 1 ) ) IN ('t','y','1')
1918                 OR LOWER(tmp_attr_set.r) = 'reference'; -- BOOL
1919
1920             attr_set.call_number    := tmp_attr_set.cn; -- TEXT
1921             attr_set.barcode        := tmp_attr_set.bc; -- TEXT,
1922             attr_set.alert_message  := tmp_attr_set.amessage; -- TEXT,
1923             attr_set.pub_note       := tmp_attr_set.note; -- TEXT,
1924             attr_set.priv_note      := tmp_attr_set.pnote; -- TEXT,
1925             attr_set.alert_message  := tmp_attr_set.amessage; -- TEXT,
1926             attr_set.internal_id    := tmp_attr_set.internal_id::BIGINT;
1927             attr_set.stat_cat_data  := tmp_attr_set.stat_cat_data; -- TEXT,
1928             attr_set.parts_data     := tmp_attr_set.parts_data; -- TEXT,
1929
1930             RETURN NEXT attr_set;
1931
1932         END LOOP;
1933
1934     END IF;
1935
1936     RETURN;
1937
1938 END;
1939 $$ LANGUAGE PLPGSQL;
1940
1941
1942
1943
1944 CREATE OR REPLACE FUNCTION vandelay.ingest_bib_items ( ) RETURNS TRIGGER AS $func$
1945 DECLARE
1946     attr_def    BIGINT;
1947     item_data   vandelay.import_item%ROWTYPE;
1948 BEGIN
1949
1950     IF TG_OP IN ('INSERT','UPDATE') AND NEW.imported_as IS NOT NULL THEN
1951         RETURN NEW;
1952     END IF;
1953
1954     SELECT item_attr_def INTO attr_def FROM vandelay.bib_queue WHERE id = NEW.queue;
1955
1956     FOR item_data IN SELECT * FROM vandelay.ingest_items( NEW.id::BIGINT, attr_def ) LOOP
1957         INSERT INTO vandelay.import_item (
1958             record,
1959             definition,
1960             owning_lib,
1961             circ_lib,
1962             call_number,
1963             copy_number,
1964             status,
1965             location,
1966             circulate,
1967             deposit,
1968             deposit_amount,
1969             ref,
1970             holdable,
1971             price,
1972             barcode,
1973             circ_modifier,
1974             circ_as_type,
1975             alert_message,
1976             pub_note,
1977             priv_note,
1978             internal_id,
1979             opac_visible,
1980             stat_cat_data,
1981             parts_data,
1982             import_error,
1983             error_detail
1984         ) VALUES (
1985             NEW.id,
1986             item_data.definition,
1987             item_data.owning_lib,
1988             item_data.circ_lib,
1989             item_data.call_number,
1990             item_data.copy_number,
1991             item_data.status,
1992             item_data.location,
1993             item_data.circulate,
1994             item_data.deposit,
1995             item_data.deposit_amount,
1996             item_data.ref,
1997             item_data.holdable,
1998             item_data.price,
1999             item_data.barcode,
2000             item_data.circ_modifier,
2001             item_data.circ_as_type,
2002             item_data.alert_message,
2003             item_data.pub_note,
2004             item_data.priv_note,
2005             item_data.internal_id,
2006             item_data.opac_visible,
2007             item_data.stat_cat_data,
2008             item_data.parts_data,
2009             item_data.import_error,
2010             item_data.error_detail
2011         );
2012     END LOOP;
2013
2014     RETURN NULL;
2015 END;
2016 $func$ LANGUAGE PLPGSQL;
2017
2018 CREATE TRIGGER ingest_item_trigger
2019     AFTER INSERT OR UPDATE ON vandelay.queued_bib_record
2020     FOR EACH ROW EXECUTE PROCEDURE vandelay.ingest_bib_items();
2021
2022
2023 -- evergreen.generic_map_normalizer 
2024
2025 CREATE OR REPLACE FUNCTION evergreen.generic_map_normalizer ( TEXT, TEXT ) RETURNS TEXT AS $f$
2026 my $string = shift;
2027 my %map;
2028
2029 my $default = $string;
2030
2031 $_ = shift;
2032 while (/^\s*?(.*?)\s*?=>\s*?(\S+)\s*/) {
2033     if ($1 eq '') {
2034         $default = $2;
2035     } else {
2036         $map{$2} = [split(/\s*,\s*/, $1)];
2037     }
2038     $_ = $';
2039 }
2040
2041 for my $key ( keys %map ) {
2042     return $key if (grep { $_ eq $string } @{ $map{$key} });
2043 }
2044
2045 return $default;
2046
2047 $f$ LANGUAGE PLPERLU;
2048
2049 CREATE OR REPLACE FUNCTION actor.address_alert_matches (
2050         org_unit INT, 
2051         street1 TEXT, 
2052         street2 TEXT, 
2053         city TEXT, 
2054         county TEXT, 
2055         state TEXT, 
2056         country TEXT, 
2057         post_code TEXT,
2058         mailing_address BOOL DEFAULT FALSE,
2059         billing_address BOOL DEFAULT FALSE
2060     ) RETURNS SETOF actor.address_alert AS $$
2061
2062 SELECT *
2063 FROM actor.address_alert
2064 WHERE
2065     active
2066     AND owner IN (SELECT id FROM actor.org_unit_ancestors($1)) 
2067     AND (
2068         (NOT mailing_address AND NOT billing_address)
2069         OR (mailing_address AND $9)
2070         OR (billing_address AND $10)
2071     )
2072     AND (
2073             (
2074                 match_all
2075                 AND COALESCE($2, '') ~* COALESCE(street1,   '.*')
2076                 AND COALESCE($3, '') ~* COALESCE(street2,   '.*')
2077                 AND COALESCE($4, '') ~* COALESCE(city,      '.*')
2078                 AND COALESCE($5, '') ~* COALESCE(county,    '.*')
2079                 AND COALESCE($6, '') ~* COALESCE(state,     '.*')
2080                 AND COALESCE($7, '') ~* COALESCE(country,   '.*')
2081                 AND COALESCE($8, '') ~* COALESCE(post_code, '.*')
2082             ) OR (
2083                 NOT match_all 
2084                 AND (  
2085                        $2 ~* street1
2086                     OR $3 ~* street2
2087                     OR $4 ~* city
2088                     OR $5 ~* county
2089                     OR $6 ~* state
2090                     OR $7 ~* country
2091                     OR $8 ~* post_code
2092                 )
2093             )
2094         )
2095     ORDER BY actor.org_unit_proximity(owner, $1)
2096 $$ LANGUAGE SQL;
2097
2098 CREATE OR REPLACE FUNCTION evergreen.coded_value_map_normalizer( input TEXT, ctype TEXT ) 
2099     RETURNS TEXT AS $F$
2100         SELECT COALESCE(value,$1) 
2101             FROM config.coded_value_map 
2102             WHERE ctype = $2 AND code = $1;
2103 $F$ LANGUAGE SQL;
2104
2105 -- user activity functions --
2106
2107 -- remove transient activity entries on insert of new entries
2108 CREATE OR REPLACE FUNCTION actor.usr_activity_transient_trg () RETURNS TRIGGER AS $$
2109 BEGIN
2110     DELETE FROM actor.usr_activity act USING config.usr_activity_type atype
2111         WHERE atype.transient AND 
2112             NEW.etype = atype.id AND
2113             act.etype = atype.id AND
2114             act.usr = NEW.usr;
2115     RETURN NEW;
2116 END;
2117 $$ LANGUAGE PLPGSQL;
2118
2119 CREATE TRIGGER remove_transient_usr_activity
2120     BEFORE INSERT ON actor.usr_activity
2121     FOR EACH ROW EXECUTE PROCEDURE actor.usr_activity_transient_trg();
2122
2123 -- given a set of activity criteria, find the most approprate activity type
2124 CREATE OR REPLACE FUNCTION actor.usr_activity_get_type (
2125         ewho TEXT, 
2126         ewhat TEXT, 
2127         ehow TEXT
2128     ) RETURNS SETOF config.usr_activity_type AS $$
2129 SELECT * FROM config.usr_activity_type 
2130     WHERE 
2131         enabled AND 
2132         (ewho  IS NULL OR ewho  = $1) AND
2133         (ewhat IS NULL OR ewhat = $2) AND
2134         (ehow  IS NULL OR ehow  = $3) 
2135     ORDER BY 
2136         -- BOOL comparisons sort false to true
2137         COALESCE(ewho, '')  != COALESCE($1, ''),
2138         COALESCE(ewhat,'')  != COALESCE($2, ''),
2139         COALESCE(ehow, '')  != COALESCE($3, '') 
2140     LIMIT 1;
2141 $$ LANGUAGE SQL;
2142
2143 -- given a set of activity criteria, finds the best
2144 -- activity type and inserts the activity entry
2145 CREATE OR REPLACE FUNCTION actor.insert_usr_activity (
2146         usr INT,
2147         ewho TEXT, 
2148         ewhat TEXT, 
2149         ehow TEXT
2150     ) RETURNS SETOF actor.usr_activity AS $$
2151 DECLARE
2152     new_row actor.usr_activity%ROWTYPE;
2153 BEGIN
2154     SELECT id INTO new_row.etype FROM actor.usr_activity_get_type(ewho, ewhat, ehow);
2155     IF FOUND THEN
2156         new_row.usr := usr;
2157         INSERT INTO actor.usr_activity (usr, etype) 
2158             VALUES (usr, new_row.etype)
2159             RETURNING * INTO new_row;
2160         RETURN NEXT new_row;
2161     END IF;
2162 END;
2163 $$ LANGUAGE plpgsql;
2164
2165 CREATE OR REPLACE FUNCTION evergreen.rel_bump(terms TEXT[], value TEXT, bumps TEXT[], mults NUMERIC[]) RETURNS NUMERIC AS
2166 $BODY$
2167 use strict;
2168 my ($terms,$value,$bumps,$mults) = @_;
2169
2170 my $retval = 1;
2171
2172 for (my $id = 0; $id < @$bumps; $id++) {
2173         if ($bumps->[$id] eq 'first_word') {
2174                 $retval *= $mults->[$id] if ($value =~ /^$terms->[0]/);
2175         } elsif ($bumps->[$id] eq 'full_match') {
2176                 my $fullmatch = join(' ', @$terms);
2177                 $retval *= $mults->[$id] if ($value =~ /^$fullmatch$/);
2178         } elsif ($bumps->[$id] eq 'word_order') {
2179                 my $wordorder = join('.*', @$terms);
2180                 $retval *= $mults->[$id] if ($value =~ /$wordorder/);
2181         }
2182 }
2183 return $retval;
2184 $BODY$ LANGUAGE plperlu IMMUTABLE STRICT COST 100;
2185
2186 -- user activity functions --
2187
2188
2189 -- find the most relevant set of credentials for the Z source and org
2190 CREATE OR REPLACE FUNCTION config.z3950_source_credentials_lookup
2191         (source TEXT, owner INTEGER) 
2192         RETURNS config.z3950_source_credentials AS $$
2193
2194     SELECT creds.* 
2195     FROM config.z3950_source_credentials creds
2196         JOIN actor.org_unit aou ON (aou.id = creds.owner)
2197         JOIN actor.org_unit_type aout ON (aout.id = aou.ou_type)
2198     WHERE creds.source = $1 AND creds.owner IN ( 
2199         SELECT id FROM actor.org_unit_ancestors($2) 
2200     )
2201     ORDER BY aout.depth DESC LIMIT 1;
2202
2203 $$ LANGUAGE SQL STABLE;
2204
2205 -- since we are not exposing config.z3950_source_credentials
2206 -- via the IDL, providing a stored proc gives us a way to
2207 -- set values in the table via cstore
2208 CREATE OR REPLACE FUNCTION config.z3950_source_credentials_apply
2209         (src TEXT, org INTEGER, uname TEXT, passwd TEXT) 
2210         RETURNS VOID AS $$
2211 BEGIN
2212     PERFORM 1 FROM config.z3950_source_credentials
2213         WHERE owner = org AND source = src;
2214
2215     IF FOUND THEN
2216         IF COALESCE(uname, '') = '' AND COALESCE(passwd, '') = '' THEN
2217             DELETE FROM config.z3950_source_credentials 
2218                 WHERE owner = org AND source = src;
2219         ELSE 
2220             UPDATE config.z3950_source_credentials 
2221                 SET username = uname, password = passwd
2222                 WHERE owner = org AND source = src;
2223         END IF;
2224     ELSE
2225         IF COALESCE(uname, '') <> '' OR COALESCE(passwd, '') <> '' THEN
2226             INSERT INTO config.z3950_source_credentials
2227                 (source, owner, username, password) 
2228                 VALUES (src, org, uname, passwd);
2229         END IF;
2230     END IF;
2231 END;
2232 $$ LANGUAGE PLPGSQL;
2233
2234 -- Handy function for transforming marc to a variant available on config.xml_transform
2235 CREATE OR REPLACE FUNCTION evergreen.marc_to (marc text, xfrm text) RETURNS TEXT AS $$
2236     SELECT evergreen.xml_pretty_print(xslt_process($1,xslt)::XML)::TEXT FROM config.xml_transform WHERE name = $2;
2237 $$ LANGUAGE SQL;
2238