Forward-port 3.1.8 upgrade script
[working/Evergreen.git] / Open-ILS / src / sql / Pg / version-upgrade / 3.1.7-3.1.8-upgrade-db.sql
1 --Upgrade Script for 3.1.7 to 3.1.8
2 \set eg_version '''3.1.8'''
3 BEGIN;
4 INSERT INTO config.upgrade_log (version, applied_to) VALUES ('3.1.8', :eg_version);
5
6 SELECT evergreen.upgrade_deps_block_check('1134', :eg_version);
7
8 CREATE OR REPLACE FUNCTION metabib.staged_browse(query text, fields integer[], context_org integer, context_locations integer[], staff boolean, browse_superpage_size integer, count_up_from_zero boolean, result_limit integer, next_pivot_pos integer)
9  RETURNS SETOF metabib.flat_browse_entry_appearance
10 AS $f$
11 DECLARE
12     curs                    REFCURSOR;
13     rec                     RECORD;
14     qpfts_query             TEXT;
15     aqpfts_query            TEXT;
16     afields                 INT[];
17     bfields                 INT[];
18     result_row              metabib.flat_browse_entry_appearance%ROWTYPE;
19     results_skipped         INT := 0;
20     row_counter             INT := 0;
21     row_number              INT;
22     slice_start             INT;
23     slice_end               INT;
24     full_end                INT;
25     all_records             BIGINT[];
26     all_brecords             BIGINT[];
27     all_arecords            BIGINT[];
28     superpage_of_records    BIGINT[];
29     superpage_size          INT;
30     c_tests                 TEXT := '';
31     b_tests                 TEXT := '';
32     c_orgs                  INT[];
33     unauthorized_entry      RECORD;
34 BEGIN
35     IF count_up_from_zero THEN
36         row_number := 0;
37     ELSE
38         row_number := -1;
39     END IF;
40
41     IF NOT staff THEN
42         SELECT x.c_attrs, x.b_attrs INTO c_tests, b_tests FROM asset.patron_default_visibility_mask() x;
43     END IF;
44
45     -- b_tests supplies its own query_int operator, c_tests does not
46     IF c_tests <> '' THEN c_tests := c_tests || '&'; END IF;
47
48     SELECT ARRAY_AGG(id) INTO c_orgs FROM actor.org_unit_descendants(context_org);
49
50     c_tests := c_tests || search.calculate_visibility_attribute_test('circ_lib',c_orgs)
51                || '&' || search.calculate_visibility_attribute_test('owning_lib',c_orgs);
52
53     PERFORM 1 FROM config.internal_flag WHERE enabled AND name = 'opac.located_uri.act_as_copy';
54     IF FOUND THEN
55         b_tests := b_tests || search.calculate_visibility_attribute_test(
56             'luri_org',
57             (SELECT ARRAY_AGG(id) FROM actor.org_unit_full_path(context_org) x)
58         );
59     ELSE
60         b_tests := b_tests || search.calculate_visibility_attribute_test(
61             'luri_org',
62             (SELECT ARRAY_AGG(id) FROM actor.org_unit_ancestors(context_org) x)
63         );
64     END IF;
65
66     IF context_locations THEN
67         IF c_tests <> '' THEN c_tests := c_tests || '&'; END IF;
68         c_tests := c_tests || search.calculate_visibility_attribute_test('location',context_locations);
69     END IF;
70
71     OPEN curs NO SCROLL FOR EXECUTE query;
72
73     LOOP
74         FETCH curs INTO rec;
75         IF NOT FOUND THEN
76             IF result_row.pivot_point IS NOT NULL THEN
77                 RETURN NEXT result_row;
78             END IF;
79             RETURN;
80         END IF;
81
82         --Is unauthorized?
83         SELECT INTO unauthorized_entry *
84         FROM metabib.browse_entry_simple_heading_map mbeshm
85         INNER JOIN authority.simple_heading ash ON ( mbeshm.simple_heading = ash.id )
86         INNER JOIN authority.control_set_authority_field acsaf ON ( acsaf.id = ash.atag )
87         JOIN authority.heading_field ahf ON (ahf.id = acsaf.heading_field)
88         WHERE mbeshm.entry = rec.id
89         AND   ahf.heading_purpose = 'variant';
90
91         -- Gather aggregate data based on the MBE row we're looking at now, authority axis
92         IF (unauthorized_entry.record IS NOT NULL) THEN
93             --unauthorized term belongs to an auth linked to a bib?
94             SELECT INTO all_arecords, result_row.sees, afields
95                     ARRAY_AGG(DISTINCT abl.bib),
96                     STRING_AGG(DISTINCT abl.authority::TEXT, $$,$$),
97                     ARRAY_AGG(DISTINCT map.metabib_field)
98             FROM authority.bib_linking abl
99             INNER JOIN authority.control_set_auth_field_metabib_field_map_refs map ON (
100                     map.authority_field = unauthorized_entry.atag
101                     AND map.metabib_field = ANY(fields)
102             )
103             WHERE abl.authority = unauthorized_entry.record;
104         ELSE
105             --do usual procedure
106             SELECT INTO all_arecords, result_row.sees, afields
107                     ARRAY_AGG(DISTINCT abl.bib), -- bibs to check for visibility
108                     STRING_AGG(DISTINCT aal.source::TEXT, $$,$$), -- authority record ids
109                     ARRAY_AGG(DISTINCT map.metabib_field) -- authority-tag-linked CMF rows
110
111             FROM  metabib.browse_entry_simple_heading_map mbeshm
112                     JOIN authority.simple_heading ash ON ( mbeshm.simple_heading = ash.id )
113                     JOIN authority.authority_linking aal ON ( ash.record = aal.source )
114                     JOIN authority.bib_linking abl ON ( aal.target = abl.authority )
115                     JOIN authority.control_set_auth_field_metabib_field_map_refs map ON (
116                         ash.atag = map.authority_field
117                         AND map.metabib_field = ANY(fields)
118                     )
119                     JOIN authority.control_set_authority_field acsaf ON (
120                         map.authority_field = acsaf.id
121                     )
122                     JOIN authority.heading_field ahf ON (ahf.id = acsaf.heading_field)
123               WHERE mbeshm.entry = rec.id
124               AND   ahf.heading_purpose = 'variant';
125
126         END IF;
127
128         -- Gather aggregate data based on the MBE row we're looking at now, bib axis
129         SELECT INTO all_brecords, result_row.authorities, bfields
130                 ARRAY_AGG(DISTINCT source),
131                 STRING_AGG(DISTINCT authority::TEXT, $$,$$),
132                 ARRAY_AGG(DISTINCT def)
133           FROM  metabib.browse_entry_def_map
134           WHERE entry = rec.id
135                 AND def = ANY(fields);
136
137         SELECT INTO result_row.fields STRING_AGG(DISTINCT x::TEXT, $$,$$) FROM UNNEST(afields || bfields) x;
138
139         result_row.sources := 0;
140         result_row.asources := 0;
141
142         -- Bib-linked vis checking
143         IF ARRAY_UPPER(all_brecords,1) IS NOT NULL THEN
144
145             SELECT  INTO result_row.sources COUNT(DISTINCT b.id)
146               FROM  biblio.record_entry b
147                     LEFT JOIN asset.copy_vis_attr_cache acvac ON (acvac.record = b.id)
148               WHERE b.id = ANY(all_brecords[1:browse_superpage_size])
149                     AND (
150                         acvac.vis_attr_vector @@ c_tests::query_int
151                         OR b.vis_attr_vector @@ b_tests::query_int
152                     );
153
154             result_row.accurate := TRUE;
155
156         END IF;
157
158         -- Authority-linked vis checking
159         IF ARRAY_UPPER(all_arecords,1) IS NOT NULL THEN
160
161             SELECT  INTO result_row.asources COUNT(DISTINCT b.id)
162               FROM  biblio.record_entry b
163                     LEFT JOIN asset.copy_vis_attr_cache acvac ON (acvac.record = b.id)
164               WHERE b.id = ANY(all_arecords[1:browse_superpage_size])
165                     AND (
166                         acvac.vis_attr_vector @@ c_tests::query_int
167                         OR b.vis_attr_vector @@ b_tests::query_int
168                     );
169
170             result_row.aaccurate := TRUE;
171
172         END IF;
173
174         IF result_row.sources > 0 OR result_row.asources > 0 THEN
175
176             -- The function that calls this function needs row_number in order
177             -- to correctly order results from two different runs of this
178             -- functions.
179             result_row.row_number := row_number;
180
181             -- Now, if row_counter is still less than limit, return a row.  If
182             -- not, but it is less than next_pivot_pos, continue on without
183             -- returning actual result rows until we find
184             -- that next pivot, and return it.
185
186             IF row_counter < result_limit THEN
187                 result_row.browse_entry := rec.id;
188                 result_row.value := rec.value;
189
190                 RETURN NEXT result_row;
191             ELSE
192                 result_row.browse_entry := NULL;
193                 result_row.authorities := NULL;
194                 result_row.fields := NULL;
195                 result_row.value := NULL;
196                 result_row.sources := NULL;
197                 result_row.sees := NULL;
198                 result_row.accurate := NULL;
199                 result_row.aaccurate := NULL;
200                 result_row.pivot_point := rec.id;
201
202                 IF row_counter >= next_pivot_pos THEN
203                     RETURN NEXT result_row;
204                     RETURN;
205                 END IF;
206             END IF;
207
208             IF count_up_from_zero THEN
209                 row_number := row_number + 1;
210             ELSE
211                 row_number := row_number - 1;
212             END IF;
213
214             -- row_counter is different from row_number.
215             -- It simply counts up from zero so that we know when
216             -- we've reached our limit.
217             row_counter := row_counter + 1;
218         END IF;
219     END LOOP;
220 END;
221 $f$ LANGUAGE plpgsql ROWS 10;
222
223
224 SELECT evergreen.upgrade_deps_block_check('1136', :eg_version);
225
226 -- update mods33 data entered by 1100 with a format of 'mods32'
227 -- harmless if you have not run 1100 yet
228 UPDATE config.metabib_field SET format = 'mods33' WHERE format = 'mods32' and id in (38, 39, 40, 41, 42, 43, 44, 46, 47, 48, 49, 50);
229
230 -- change the default format to 'mods33'
231 ALTER TABLE config.metabib_field ALTER COLUMN format SET DEFAULT 'mods33'::text;
232
233
234
235 SELECT evergreen.upgrade_deps_block_check('1137', :eg_version);
236
237 -- This function upgrade is only for rel_3_1.  The next upgrade script 1138 in master/rel_3_2 is for future releases
238 CREATE OR REPLACE FUNCTION actor.usr_merge( src_usr INT, dest_usr INT, del_addrs BOOLEAN, del_cards BOOLEAN, deactivate_cards BOOLEAN ) RETURNS VOID AS $$
239 DECLARE
240         suffix TEXT;
241         bucket_row RECORD;
242         picklist_row RECORD;
243         queue_row RECORD;
244         folder_row RECORD;
245 BEGIN
246
247     -- Bail if src_usr equals dest_usr because the result of merging a
248     -- user with itself is not what you want.
249     IF src_usr = dest_usr THEN
250         RETURN;
251     END IF;
252
253     -- do some initial cleanup 
254     UPDATE actor.usr SET card = NULL WHERE id = src_usr;
255     UPDATE actor.usr SET mailing_address = NULL WHERE id = src_usr;
256     UPDATE actor.usr SET billing_address = NULL WHERE id = src_usr;
257
258     -- actor.*
259     IF del_cards THEN
260         DELETE FROM actor.card where usr = src_usr;
261     ELSE
262         IF deactivate_cards THEN
263             UPDATE actor.card SET active = 'f' WHERE usr = src_usr;
264         END IF;
265         UPDATE actor.card SET usr = dest_usr WHERE usr = src_usr;
266     END IF;
267
268
269     IF del_addrs THEN
270         DELETE FROM actor.usr_address WHERE usr = src_usr;
271     ELSE
272         UPDATE actor.usr_address SET usr = dest_usr WHERE usr = src_usr;
273     END IF;
274
275     UPDATE actor.usr_note SET usr = dest_usr WHERE usr = src_usr;
276     -- dupes are technically OK in actor.usr_standing_penalty, should manually delete them...
277     UPDATE actor.usr_standing_penalty SET usr = dest_usr WHERE usr = src_usr;
278     PERFORM actor.usr_merge_rows('actor.usr_org_unit_opt_in', 'usr', src_usr, dest_usr);
279     PERFORM actor.usr_merge_rows('actor.usr_setting', 'usr', src_usr, dest_usr);
280
281     -- permission.*
282     PERFORM actor.usr_merge_rows('permission.usr_perm_map', 'usr', src_usr, dest_usr);
283     PERFORM actor.usr_merge_rows('permission.usr_object_perm_map', 'usr', src_usr, dest_usr);
284     PERFORM actor.usr_merge_rows('permission.usr_grp_map', 'usr', src_usr, dest_usr);
285     PERFORM actor.usr_merge_rows('permission.usr_work_ou_map', 'usr', src_usr, dest_usr);
286
287
288     -- container.*
289         
290         -- For each *_bucket table: transfer every bucket belonging to src_usr
291         -- into the custody of dest_usr.
292         --
293         -- In order to avoid colliding with an existing bucket owned by
294         -- the destination user, append the source user's id (in parenthesese)
295         -- to the name.  If you still get a collision, add successive
296         -- spaces to the name and keep trying until you succeed.
297         --
298         FOR bucket_row in
299                 SELECT id, name
300                 FROM   container.biblio_record_entry_bucket
301                 WHERE  owner = src_usr
302         LOOP
303                 suffix := ' (' || src_usr || ')';
304                 LOOP
305                         BEGIN
306                                 UPDATE  container.biblio_record_entry_bucket
307                                 SET     owner = dest_usr, name = name || suffix
308                                 WHERE   id = bucket_row.id;
309                         EXCEPTION WHEN unique_violation THEN
310                                 suffix := suffix || ' ';
311                                 CONTINUE;
312                         END;
313                         EXIT;
314                 END LOOP;
315         END LOOP;
316
317         FOR bucket_row in
318                 SELECT id, name
319                 FROM   container.call_number_bucket
320                 WHERE  owner = src_usr
321         LOOP
322                 suffix := ' (' || src_usr || ')';
323                 LOOP
324                         BEGIN
325                                 UPDATE  container.call_number_bucket
326                                 SET     owner = dest_usr, name = name || suffix
327                                 WHERE   id = bucket_row.id;
328                         EXCEPTION WHEN unique_violation THEN
329                                 suffix := suffix || ' ';
330                                 CONTINUE;
331                         END;
332                         EXIT;
333                 END LOOP;
334         END LOOP;
335
336         FOR bucket_row in
337                 SELECT id, name
338                 FROM   container.copy_bucket
339                 WHERE  owner = src_usr
340         LOOP
341                 suffix := ' (' || src_usr || ')';
342                 LOOP
343                         BEGIN
344                                 UPDATE  container.copy_bucket
345                                 SET     owner = dest_usr, name = name || suffix
346                                 WHERE   id = bucket_row.id;
347                         EXCEPTION WHEN unique_violation THEN
348                                 suffix := suffix || ' ';
349                                 CONTINUE;
350                         END;
351                         EXIT;
352                 END LOOP;
353         END LOOP;
354
355         FOR bucket_row in
356                 SELECT id, name
357                 FROM   container.user_bucket
358                 WHERE  owner = src_usr
359         LOOP
360                 suffix := ' (' || src_usr || ')';
361                 LOOP
362                         BEGIN
363                                 UPDATE  container.user_bucket
364                                 SET     owner = dest_usr, name = name || suffix
365                                 WHERE   id = bucket_row.id;
366                         EXCEPTION WHEN unique_violation THEN
367                                 suffix := suffix || ' ';
368                                 CONTINUE;
369                         END;
370                         EXIT;
371                 END LOOP;
372         END LOOP;
373
374         UPDATE container.user_bucket_item SET target_user = dest_usr WHERE target_user = src_usr;
375
376     -- vandelay.*
377         -- transfer queues the same way we transfer buckets (see above)
378         FOR queue_row in
379                 SELECT id, name
380                 FROM   vandelay.queue
381                 WHERE  owner = src_usr
382         LOOP
383                 suffix := ' (' || src_usr || ')';
384                 LOOP
385                         BEGIN
386                                 UPDATE  vandelay.queue
387                                 SET     owner = dest_usr, name = name || suffix
388                                 WHERE   id = queue_row.id;
389                         EXCEPTION WHEN unique_violation THEN
390                                 suffix := suffix || ' ';
391                                 CONTINUE;
392                         END;
393                         EXIT;
394                 END LOOP;
395         END LOOP;
396
397     -- money.*
398     PERFORM actor.usr_merge_rows('money.collections_tracker', 'usr', src_usr, dest_usr);
399     PERFORM actor.usr_merge_rows('money.collections_tracker', 'collector', src_usr, dest_usr);
400     UPDATE money.billable_xact SET usr = dest_usr WHERE usr = src_usr;
401     UPDATE money.billing SET voider = dest_usr WHERE voider = src_usr;
402     UPDATE money.bnm_payment SET accepting_usr = dest_usr WHERE accepting_usr = src_usr;
403
404     -- action.*
405     UPDATE action.circulation SET usr = dest_usr WHERE usr = src_usr;
406     UPDATE action.circulation SET circ_staff = dest_usr WHERE circ_staff = src_usr;
407     UPDATE action.circulation SET checkin_staff = dest_usr WHERE checkin_staff = src_usr;
408     UPDATE action.usr_circ_history SET usr = dest_usr WHERE usr = src_usr;
409
410     UPDATE action.hold_request SET usr = dest_usr WHERE usr = src_usr;
411     UPDATE action.hold_request SET fulfillment_staff = dest_usr WHERE fulfillment_staff = src_usr;
412     UPDATE action.hold_request SET requestor = dest_usr WHERE requestor = src_usr;
413     UPDATE action.hold_notification SET notify_staff = dest_usr WHERE notify_staff = src_usr;
414
415     UPDATE action.in_house_use SET staff = dest_usr WHERE staff = src_usr;
416     UPDATE action.non_cataloged_circulation SET staff = dest_usr WHERE staff = src_usr;
417     UPDATE action.non_cataloged_circulation SET patron = dest_usr WHERE patron = src_usr;
418     UPDATE action.non_cat_in_house_use SET staff = dest_usr WHERE staff = src_usr;
419     UPDATE action.survey_response SET usr = dest_usr WHERE usr = src_usr;
420
421     -- acq.*
422     UPDATE acq.fund_allocation SET allocator = dest_usr WHERE allocator = src_usr;
423         UPDATE acq.fund_transfer SET transfer_user = dest_usr WHERE transfer_user = src_usr;
424
425         -- transfer picklists the same way we transfer buckets (see above)
426         FOR picklist_row in
427                 SELECT id, name
428                 FROM   acq.picklist
429                 WHERE  owner = src_usr
430         LOOP
431                 suffix := ' (' || src_usr || ')';
432                 LOOP
433                         BEGIN
434                                 UPDATE  acq.picklist
435                                 SET     owner = dest_usr, name = name || suffix
436                                 WHERE   id = picklist_row.id;
437                         EXCEPTION WHEN unique_violation THEN
438                                 suffix := suffix || ' ';
439                                 CONTINUE;
440                         END;
441                         EXIT;
442                 END LOOP;
443         END LOOP;
444
445     UPDATE acq.purchase_order SET owner = dest_usr WHERE owner = src_usr;
446     UPDATE acq.po_note SET creator = dest_usr WHERE creator = src_usr;
447     UPDATE acq.po_note SET editor = dest_usr WHERE editor = src_usr;
448     UPDATE acq.provider_note SET creator = dest_usr WHERE creator = src_usr;
449     UPDATE acq.provider_note SET editor = dest_usr WHERE editor = src_usr;
450     UPDATE acq.lineitem_note SET creator = dest_usr WHERE creator = src_usr;
451     UPDATE acq.lineitem_note SET editor = dest_usr WHERE editor = src_usr;
452     UPDATE acq.lineitem_usr_attr_definition SET usr = dest_usr WHERE usr = src_usr;
453
454     -- asset.*
455     UPDATE asset.copy SET creator = dest_usr WHERE creator = src_usr;
456     UPDATE asset.copy SET editor = dest_usr WHERE editor = src_usr;
457     UPDATE asset.copy_note SET creator = dest_usr WHERE creator = src_usr;
458     UPDATE asset.call_number SET creator = dest_usr WHERE creator = src_usr;
459     UPDATE asset.call_number SET editor = dest_usr WHERE editor = src_usr;
460     UPDATE asset.call_number_note SET creator = dest_usr WHERE creator = src_usr;
461
462     -- serial.*
463     UPDATE serial.record_entry SET creator = dest_usr WHERE creator = src_usr;
464     UPDATE serial.record_entry SET editor = dest_usr WHERE editor = src_usr;
465
466     -- reporter.*
467     -- It's not uncommon to define the reporter schema in a replica 
468     -- DB only, so don't assume these tables exist in the write DB.
469     BEGIN
470         UPDATE reporter.template SET owner = dest_usr WHERE owner = src_usr;
471     EXCEPTION WHEN undefined_table THEN
472         -- do nothing
473     END;
474     BEGIN
475         UPDATE reporter.report SET owner = dest_usr WHERE owner = src_usr;
476     EXCEPTION WHEN undefined_table THEN
477         -- do nothing
478     END;
479     BEGIN
480         UPDATE reporter.schedule SET runner = dest_usr WHERE runner = src_usr;
481     EXCEPTION WHEN undefined_table THEN
482         -- do nothing
483     END;
484     BEGIN
485                 -- transfer folders the same way we transfer buckets (see above)
486                 FOR folder_row in
487                         SELECT id, name
488                         FROM   reporter.template_folder
489                         WHERE  owner = src_usr
490                 LOOP
491                         suffix := ' (' || src_usr || ')';
492                         LOOP
493                                 BEGIN
494                                         UPDATE  reporter.template_folder
495                                         SET     owner = dest_usr, name = name || suffix
496                                         WHERE   id = folder_row.id;
497                                 EXCEPTION WHEN unique_violation THEN
498                                         suffix := suffix || ' ';
499                                         CONTINUE;
500                                 END;
501                                 EXIT;
502                         END LOOP;
503                 END LOOP;
504     EXCEPTION WHEN undefined_table THEN
505         -- do nothing
506     END;
507     BEGIN
508                 -- transfer folders the same way we transfer buckets (see above)
509                 FOR folder_row in
510                         SELECT id, name
511                         FROM   reporter.report_folder
512                         WHERE  owner = src_usr
513                 LOOP
514                         suffix := ' (' || src_usr || ')';
515                         LOOP
516                                 BEGIN
517                                         UPDATE  reporter.report_folder
518                                         SET     owner = dest_usr, name = name || suffix
519                                         WHERE   id = folder_row.id;
520                                 EXCEPTION WHEN unique_violation THEN
521                                         suffix := suffix || ' ';
522                                         CONTINUE;
523                                 END;
524                                 EXIT;
525                         END LOOP;
526                 END LOOP;
527     EXCEPTION WHEN undefined_table THEN
528         -- do nothing
529     END;
530     BEGIN
531                 -- transfer folders the same way we transfer buckets (see above)
532                 FOR folder_row in
533                         SELECT id, name
534                         FROM   reporter.output_folder
535                         WHERE  owner = src_usr
536                 LOOP
537                         suffix := ' (' || src_usr || ')';
538                         LOOP
539                                 BEGIN
540                                         UPDATE  reporter.output_folder
541                                         SET     owner = dest_usr, name = name || suffix
542                                         WHERE   id = folder_row.id;
543                                 EXCEPTION WHEN unique_violation THEN
544                                         suffix := suffix || ' ';
545                                         CONTINUE;
546                                 END;
547                                 EXIT;
548                         END LOOP;
549                 END LOOP;
550     EXCEPTION WHEN undefined_table THEN
551         -- do nothing
552     END;
553
554     -- Finally, delete the source user
555     PERFORM actor.usr_delete(src_usr,dest_usr);
556
557 END;
558 $$ LANGUAGE plpgsql;
559
560 COMMIT;