]> git.evergreen-ils.org Git - working/Evergreen.git/blob - Open-ILS/src/perlmods/lib/OpenILS/WWW/EGCatLoader/Util.pm
LP#1744385: Make use of short-term unAPI cache and parallelize metarecord constituent...
[working/Evergreen.git] / Open-ILS / src / perlmods / lib / OpenILS / WWW / EGCatLoader / Util.pm
1 package OpenILS::WWW::EGCatLoader;
2 use strict; use warnings;
3 use Apache2::Const -compile => qw(OK DECLINED FORBIDDEN HTTP_INTERNAL_SERVER_ERROR REDIRECT HTTP_BAD_REQUEST);
4 use File::Spec;
5 use Time::HiRes qw/time sleep/;
6 use OpenSRF::Utils::Cache;
7 use OpenSRF::Utils::Logger qw/$logger/;
8 use OpenILS::Utils::CStoreEditor qw/:funcs/;
9 use OpenILS::Utils::Fieldmapper;
10 use OpenILS::Application::AppUtils;
11 use OpenSRF::MultiSession;
12
13 my $U = 'OpenILS::Application::AppUtils';
14
15 my $ro_object_subs; # cached subs
16 our %cache = ( # cached data
17     map => {en_us => {}},
18     list => {en_us => {}},
19     search => {en_us => {}},
20     org_settings => {en_us => {}},
21     search_filter_groups => {en_us => {}},
22     aou_tree => {en_us => undef},
23     aouct_tree => {},
24     eg_cache_hash => undef,
25     authority_fields => {en_us => {}}
26 );
27
28 sub child_init {
29     my $class = shift;
30     my %locales = @_;
31
32     # create a stub object with just enough in place
33     # to call init_ro_object_cache()
34     my $stub = bless({}, ref($class) || $class);
35     my $ctx = {};
36     $stub->ctx($ctx);
37
38     foreach my $locale (sort keys %locales) {
39         OpenSRF::AppSession->default_locale($locales{$locale});
40         $ctx->{locale} = $locale;
41         $stub->init_ro_object_cache();
42
43         # pre-cache various sets of objects
44         # known to be time-consuming to retrieve
45         # the first go around
46         $ro_object_subs->{$locale}->{aou_tree}();
47         $ro_object_subs->{$locale}->{aouct_tree}();
48         $ro_object_subs->{$locale}->{ccvm_list}();
49         $ro_object_subs->{$locale}->{crad_list}();
50         $ro_object_subs->{$locale}->{get_authority_fields}(1);
51     }
52 }
53
54 sub init_ro_object_cache {
55     my $self = shift;
56     my $ctx = $self->ctx;
57     my $memcache ||= OpenSRF::Utils::Cache->new('global');
58
59     # reset org unit setting cache on each page load to avoid the
60     # requirement of reloading apache with each org-setting change
61     $cache{org_settings} = {};
62
63     if($ro_object_subs->{$ctx->{locale}}) {
64         # subs have been built.  insert into the context then move along.
65         $ctx->{$_} = $ro_object_subs->{$ctx->{locale}}->{$_} for keys %{ $ro_object_subs->{$ctx->{locale}} };
66         return;
67     }
68
69     my $locale_subs = {};
70     my $locale = $ctx->{locale};
71
72     # make all "field_safe" classes accesible by default in the template context
73     my @classes = grep {
74         ($Fieldmapper::fieldmap->{$_}->{field_safe} || '') =~ /true/i
75     } keys %{ $Fieldmapper::fieldmap };
76
77     for my $class (@classes) {
78
79         my $hint = $Fieldmapper::fieldmap->{$class}->{hint};
80         next if $hint eq 'aou'; # handled separately
81
82         my $ident_field =  $Fieldmapper::fieldmap->{$class}->{identity};
83         (my $eclass = $class) =~ s/Fieldmapper:://o;
84         $eclass =~ s/::/_/g;
85
86         my $list_key = "${hint}_list";
87         my $get_key = "get_$hint";
88         my $search_key = "search_$hint";
89
90         my $memcache_key = join('.', 'EGWeb',$locale,$hint) . '.';
91
92         # Retrieve the full set of objects with class $hint
93         $locale_subs->{$list_key} = sub {
94             my $from_memcache = 0;
95             my $list = $memcache->get_cache($memcache_key.'list');
96             if ($list) {
97                 $cache{list}{$locale}{$hint} = $list;
98                 $from_memcache = 1;
99             }
100             my $method = "retrieve_all_$eclass";
101             my $e = new_editor();
102             $cache{list}{$locale}{$hint} = $e->$method() unless $cache{list}{$locale}{$hint};
103             undef $e;
104             $memcache->put_cache($memcache_key.'list',$cache{list}{$locale}{$hint}) unless $from_memcache;
105             return $cache{list}{$locale}{$hint};
106         };
107
108         # locate object of class $hint with Ident field $id
109         $cache{map}{$hint} = {};
110         $locale_subs->{$get_key} = sub {
111             my $id = shift;
112             return $cache{map}{$locale}{$hint}{$id} if $cache{map}{$locale}{$hint}{$id};
113             ($cache{map}{$locale}{$hint}{$id}) = grep { $_->$ident_field eq $id } @{$locale_subs->{$list_key}->()};
114             return $cache{map}{$locale}{$hint}{$id};
115         };
116
117         # search for objects of class $hint where field=value
118         $cache{search}{$hint} = {};
119         $locale_subs->{$search_key} = sub {
120             my ($field, $val, $filterfield, $filterval) = @_;
121             my $method = "search_$eclass";
122             my $cacheval = $val;
123             my $scalar_cacheval = 1;
124
125             if (ref $val) {
126                 $scalar_cacheval = 0;
127                 $val = [sort(@$val)] if ref $val eq 'ARRAY';
128                 $cacheval = OpenSRF::Utils::JSON->perl2JSON($val);
129                 #$self->apache->log->info("cacheval : $cacheval");
130             }
131
132             my $search_obj = {$field => $val};
133             if($filterfield) {
134                 $search_obj->{$filterfield} = $filterval;
135                 $cacheval .= ':' . $filterfield . ':' . $filterval;
136             } elsif (
137                 $scalar_cacheval
138                 and $cache{list}{$locale}{$hint}
139                 and !$cache{search}{$locale}{$hint}{$field}{$cacheval}
140             ) {
141                 return $cache{search}{$locale}{$hint}{$field}{$cacheval} =
142                     [ grep { $_->$field() eq $val } @{$cache{list}{$locale}{$hint}} ];
143             }
144
145             my $e = new_editor();
146             $cache{search}{$locale}{$hint}{$field}{$cacheval} = $e->$method($search_obj)
147                 unless $cache{search}{$locale}{$hint}{$field}{$cacheval};
148             undef $e;
149             return $cache{search}{$locale}{$hint}{$field}{$cacheval};
150         };
151     }
152
153     $locale_subs->{aou_tree} = sub {
154
155         # fetch the org unit tree
156         unless($cache{aou_tree}{$locale}) {
157             my $e = new_editor();
158             my $tree = $e->search_actor_org_unit([
159                 {   parent_ou => undef},
160                 {   flesh            => -1,
161                     flesh_fields    => {aou =>  ['children']},
162                     order_by        => {aou => 'name'}
163                 }
164             ])->[0];
165
166             # flesh the org unit type for each org unit
167             # and simultaneously set the id => aou map cache
168             sub flesh_aout {
169                 my $node = shift;
170                 my $locale_subs = shift;
171                 my $locale = shift;
172                 $node->ou_type( $locale_subs->{get_aout}->($node->ou_type) );
173                 $cache{map}{$locale}{aou}{$node->id} = $node;
174                 flesh_aout($_, $locale_subs, $locale) foreach @{$node->children};
175             };
176             flesh_aout($tree, $locale_subs, $locale);
177             undef $e;
178             $cache{aou_tree}{$locale} = $tree;
179         }
180
181         return $cache{aou_tree}{$locale};
182     };
183
184     # Add a special handler for the tree-shaped org unit cache
185     $locale_subs->{get_aou} = sub {
186         my $org_id = shift;
187         return undef unless defined $org_id;
188         $locale_subs->{aou_tree}->(); # force the org tree to load
189         return $cache{map}{$locale}{aou}{$org_id};
190     };
191
192     # Returns a flat list of aou objects.  often easier to manage than a tree.
193     $locale_subs->{aou_list} = sub {
194         $locale_subs->{aou_tree}->(); # force the org tree to load
195         return [ values %{$cache{map}{$locale}{aou}} ];
196     };
197
198     # returns the org unit object by shortname
199     $locale_subs->{get_aou_by_shortname} = sub {
200         my $sn = shift or return undef;
201         my $list = $locale_subs->{aou_list}->();
202         return (grep {$_->shortname eq $sn} @$list)[0];
203     };
204
205     $locale_subs->{aouct_tree} = sub {
206
207         # fetch the org unit tree
208         unless(exists $cache{aouct_tree}{$locale}) {
209             $cache{aouct_tree}{$locale} = undef;
210
211             my $e = new_editor();
212             my $tree_id = $e->search_actor_org_unit_custom_tree(
213                 {purpose => 'opac', active => 't'},
214                 {idlist => 1}
215             )->[0];
216
217             if ($tree_id) {
218                 my $node_tree = $e->search_actor_org_unit_custom_tree_node([
219                 {parent_node => undef, tree => $tree_id},
220                 {   flesh        => -1,
221                     flesh_fields => {aouctn => ['children', 'org_unit']},
222                     order_by     => {aouctn => 'sibling_order'}
223                 }
224                 ])->[0];
225
226                 # tree-ify the org units.  note that since the orgs are fleshed
227                 # upon retrieval, this org tree will not clobber ctx->{aou_tree}.
228                 my @nodes = ($node_tree);
229                 while (my $node = shift(@nodes)) {
230                     my $aou = $node->org_unit;
231                     $aou->children([]);
232                     for my $cnode (@{$node->children}) {
233                         my $child_org = $cnode->org_unit;
234                         $child_org->parent_ou($aou->id);
235                         $child_org->ou_type( $locale_subs->{get_aout}->($child_org->ou_type) );
236                         push(@{$aou->children}, $child_org);
237                         push(@nodes, $cnode);
238                     }
239                 }
240
241                 $cache{aouct_tree}{$locale} = 
242                     $node_tree->org_unit if $node_tree;
243             }
244             undef $e;
245         }
246
247         return $cache{aouct_tree}{$locale};
248     };
249
250     # turns an ISO date into something TT can understand
251     $locale_subs->{parse_datetime} = sub {
252         my $date = shift;
253         my $context_org = shift; # optional, for setting timezone via YAOUS
254
255         # Calling parse_datetime() with empty $date will lead to Internal Server Error
256         return '' if (!defined($date) or $date eq '');
257
258         # Probably an accidental entry like '0212' instead of '2012',
259         # but 1) the leading 0 may get stripped in cstore and
260         # 2) DateTime::Format::ISO8601 returns an error as years
261         # must be 2 or 4 digits
262         if ($date =~ m/^\d{3}-/) {
263             $logger->warn("Invalid date had a 3-digit year: $date");
264             $date = '0' . $date;
265         } elsif ($date =~ m/^\d{1}-/) {
266             $logger->warn("Invalid date had a 1-digit year: $date");
267             $date = '000' . $date;
268         }
269
270         my $cleansed_date = cleanse_ISO8601($date);
271
272         $date = DateTime::Format::ISO8601->new->parse_datetime($cleansed_date);
273         if ($context_org) {
274             $context_org = $context_org->id if ref($context_org);
275             my $tz = $locale_subs->{get_org_setting}->($context_org,'lib.timezone');
276             $date->set_time_zone($tz) if ($tz);
277         }
278         return sprintf(
279             "%0.2d:%0.2d:%0.2d %0.2d-%0.2d-%0.4d",
280             $date->hour,
281             $date->minute,
282             $date->second,
283             $date->day,
284             $date->month,
285             $date->year
286         );
287     };
288
289     # retrieve and cache org unit setting values
290     $locale_subs->{get_org_setting} = sub {
291         my($org_id, $setting) = @_;
292
293         $cache{org_settings}{$locale}{$org_id}{$setting} =
294             $U->ou_ancestor_setting_value($org_id, $setting)
295                 unless exists $cache{org_settings}{$locale}{$org_id}{$setting};
296
297         return $cache{org_settings}{$locale}{$org_id}{$setting};
298     };
299
300     # retrieve and cache acsaf values
301     $locale_subs->{get_authority_fields} = sub {
302         my ($control_set) = @_;
303
304         if (not exists $cache{authority_fields}{$locale}{$control_set}) {
305             my $e = new_editor();
306             if (my $acs = $e->search_authority_control_set_authority_field(
307                                     {control_set => $control_set}
308                                 )
309             ) {
310                 $cache{authority_fields}{$locale}{$control_set} =
311                  +{ map { $_->id => $_ } @$acs };
312                 undef $e;
313             } else {
314                 undef $e;
315                 return;
316             }
317         }
318
319         return $cache{authority_fields}{$locale}{$control_set};
320     };
321
322     $ctx->{$_} = $locale_subs->{$_} for keys %$locale_subs;
323     $ro_object_subs->{$locale} = $locale_subs;
324 }
325
326 sub generic_redirect {
327     my $self = shift;
328     my $url = shift;
329     my $cookie = shift; # can be an array of cgi.cookie's
330
331     $self->apache->print(
332         $self->cgi->redirect(
333             -url => $url || 
334                 $self->cgi->param('redirect_to') || 
335                 $self->ctx->{referer} || 
336                 $self->ctx->{home_page},
337             -cookie => $cookie
338         )
339     );
340
341     return Apache2::Const::REDIRECT;
342 }
343
344 my $unapi_cache;
345 sub get_records_and_facets {
346     my ($self, $rec_ids, $facet_key, $unapi_args) = @_;
347
348     # collect the facet data
349     my $search = OpenSRF::AppSession->create('open-ils.search');
350     my $facet_req;
351     if ($facet_key) {
352         $facet_req = $search->request(
353             'open-ils.search.facet_cache.retrieve', $facet_key
354         );
355     }
356
357     $unapi_args ||= {};
358     $unapi_args->{site} ||= $self->ctx->{aou_tree}->()->shortname;
359     $unapi_args->{depth} ||= $self->ctx->{aou_tree}->()->ou_type->depth;
360     $unapi_args->{flesh_depth} ||= 5;
361
362     my $is_meta = delete $unapi_args->{metarecord};
363     #my $unapi_type = $is_meta ? 'unapi.mmr' : 'unapi.bre';
364     my $unapi_type = $is_meta ? 'unapi.metabib_virtual_record_feed' : 'unapi.biblio_record_entry_feed';
365
366     $unapi_cache ||= OpenSRF::Utils::Cache->new('global');
367     my $unapi_cache_key_suffix = join(
368         '_',
369         $is_meta || 0,
370         $unapi_args->{site},
371         $unapi_args->{depth},
372         $unapi_args->{flesh_depth},
373         ($unapi_args->{pref_lib} || '')
374     );
375
376     my %tmp_data;
377     my %hl_tmp_data;
378     my $outer_self = $self;
379
380     my $sdepth = $unapi_args->{flesh_depth};
381     my $slimit = "acn=>$sdepth,acp=>$sdepth";
382     $slimit .= ",bre=>$sdepth" if $is_meta;
383     my $flesh = $unapi_args->{flesh} || '';
384
385     # tag the record with the MR id
386     $flesh =~ s/}$/,mmr.unapi}/g if $is_meta;
387
388     my $ses = OpenSRF::AppSession->create('open-ils.cstore');
389     my $hl_ses = OpenSRF::AppSession->create('open-ils.search');
390
391     my @loop_recs;
392     for my $bid (@$rec_ids) {
393         my $unapi_cache_key = 'TPAC_unapi_cache_'.$bid.'_'.$unapi_cache_key_suffix;
394         my $unapi_data = $unapi_cache->get_cache($unapi_cache_key);
395
396         if (!$unapi_data || $unapi_data->{running}) { #cache entry not done yet, get our own copy
397             push(@loop_recs, $bid);
398         } else {
399             $unapi_data->{marc_xml} = XML::LibXML->new->parse_string($unapi_data->{marc_xml})->documentElement;
400             $tmp_data{$unapi_data->{id}} = $unapi_data;
401             $unapi_cache->put_cache($unapi_cache_key, { running => $$ }, 5);
402         }
403     }
404
405     my $hl_req = $hl_ses->request(
406         'open-ils.search.fetch.metabib.display_field.highlight.atomic',
407         $self->ctx->{query_struct}{additional_data}{highlight_map},
408         @$rec_ids
409     ) if (!$is_meta);
410
411     if (@loop_recs) {
412         my $unapi_req = $ses->request(
413             'open-ils.cstore.json_query',
414              {from => [
415                 $unapi_type, '{'.join(',',@loop_recs).'}', 'marcxml', $flesh,
416                 $unapi_args->{site}, 
417                 $unapi_args->{depth}, 
418                 $slimit,
419                 undef, undef, $unapi_args->{pref_lib}
420             ]}
421         );
422     
423         my $data = $unapi_req->gather(1);
424     
425         $outer_self->timelog("get_records_and_facets(): got feed content");
426     
427         # Protect against requests for non-existent records
428         return unless ($data->{$unapi_type});
429     
430         my $doc = XML::LibXML->new->parse_string($data->{$unapi_type})->documentElement;
431     
432         $outer_self->timelog("get_records_and_facets(): parsed xml");
433         for my $xml ($doc->getElementsByTagName('record')) {
434             $xml = XML::LibXML->new->parse_string($xml->toString)->documentElement;
435     
436             # Protect against legacy invalid MARCXML that might not have a 901c
437             my $bre_id;
438             my $mmr_id;
439             my $bre_id_nodes =  $xml->find('*[@tag="901"]/*[@code="c"]');
440             if ($bre_id_nodes) {
441                 $bre_id =  $bre_id_nodes->[0]->textContent;
442             } else {
443                 $logger->warn("Missing 901 subfield 'c' in " . $xml->toString());
444             }
445         
446             if ($is_meta) {
447                 # extract metarecord ID from mmr.unapi tag
448                 for my $node ($xml->getElementsByTagName('abbr')) {
449                     my $title = $node->getAttribute('title');
450                     ($mmr_id = $title) =~ 
451                         s/tag:open-ils.org:U2\@mmr\/(\d+)\/.*/$1/g;
452                     last if $mmr_id;
453                 }
454             }
455         
456             my $rec_id = $mmr_id ? $mmr_id : $bre_id;
457             $tmp_data{$rec_id} = {
458                 id => $rec_id, 
459                 bre_id => $bre_id, 
460                 mmr_id => $mmr_id,
461                 marc_xml => $xml
462             };
463         
464             if ($rec_id) {
465                 # Let other backends grab our data now that we're done.
466                 my $key = 'TPAC_unapi_cache_'.$rec_id.'_'.$unapi_cache_key_suffix;
467                 my $cache_data = $unapi_cache->get_cache($key);
468                 if (!$cache_data || $$cache_data{running} == $$) {
469                     $unapi_cache->put_cache($key, {
470                         bre_id => $bre_id,
471                         mmr_id => $mmr_id,
472                         id => $rec_id, 
473                         marc_xml => $xml->toString
474                     }, 10);
475                 }
476             }
477         }
478     }
479
480     if (!$is_meta) {
481         my $hl_data = $hl_req->gather(1); # list of arrayref of hashrefs
482         $self->ctx->{_hl_data} = { map { ''.$$_[0]{source} => $_ } @$hl_data };
483         $outer_self->timelog("get_records_and_facets(): got highlighting content (". keys(%{$self->ctx->{_hl_data}}).")");
484     }
485
486     my $facets = {};
487     if ($facet_req) {
488         $self->timelog("get_records_and_facets():almost ready to fetch facets");
489
490         my $tmp_facets = $facet_req->gather(1);
491         $self->timelog("get_records_and_facets(): gathered facet data");
492         for my $cmf_id (keys %$tmp_facets) {
493
494             # sort highest to lowest match count
495             my @entries;
496             my $entries = $tmp_facets->{$cmf_id};
497             for my $ent (keys %$entries) {
498                 push(@entries, {value => $ent, count => $$entries{$ent}});
499             };
500
501             # Sort facet entries by 1) count descending, 2) text ascending
502             @entries = sort {
503                 $b->{count} <=> $a->{count} ||
504                 $a->{value} cmp $b->{value}
505             } @entries;
506
507             $facets->{$cmf_id} = {
508                 cmf => $self->ctx->{get_cmf}->($cmf_id),
509                 data => \@entries
510             }
511         }
512         $self->timelog("get_records_and_facets(): gathered/sorted facet data");
513     } else {
514         $facets = undef;
515     }
516     $search->kill_me;
517
518
519     return ($facets, map { $tmp_data{$_} } @$rec_ids);
520 }
521
522 sub _resolve_org_id_or_shortname {
523     my ($self, $str) = @_;
524
525     if (length $str) {
526         # Match on shortname case insensitively, but only if there's exactly
527         # one match.  We wouldn't want the system to arbitrarily interpret
528         # 'foo' as either the org unit with shortname 'FOO' or 'Foo' and fail
529         # to make it clear to the user which one was chosen and why.
530         my $res = $self->editor->search_actor_org_unit({
531             shortname => {
532                 '=' => {
533                     transform => 'evergreen.lowercase',
534                     value => lc($str)
535                 }
536             }
537         });
538         return $res->[0]->id if $res and @$res == 1;
539     }
540
541     # Note that we don't validate IDs; we only try a shortname lookup and then
542     # assume anything else must be an ID.
543     return int($str); # Wrapping in int() prevents 500 on unmatched string.
544 }
545
546 sub _get_search_lib {
547     my $self = shift;
548     my $ctx = $self->ctx;
549
550     # avoid duplicate lookups
551     return $ctx->{search_ou} if $ctx->{search_ou};
552
553     my $loc = $ctx->{copy_location_group_org};
554     return $loc if $loc;
555
556     # loc param takes precedence
557     # XXX ^-- over what exactly? We could use clarification here. To me it looks
558     # like locg takes precedence over loc which in turn takes precedence over
559     # request headers which take precedence over pref_lib (which can be
560     # specified a lot of different ways and eventually falls back to
561     # physical_loc) and it all finally defaults to top of the org tree.
562     # To say nothing of all the code that doesn't look to this function at all
563     # but rather accesses some subset of these inputs directly.
564
565     $loc = $self->cgi->param('loc');
566     return $loc if $loc;
567
568     if ($self->apache->headers_in->get('OILS-Search-Lib')) {
569         return $self->apache->headers_in->get('OILS-Search-Lib');
570     }
571     if ($self->cgi->cookie('eg_search_lib')) {
572         return $self->cgi->cookie('eg_search_lib');
573     }
574
575     my $pref_lib = $self->_get_pref_lib();
576     return $pref_lib if $pref_lib;
577
578     return $ctx->{aou_tree}->()->id;
579 }
580
581 sub _get_pref_lib {
582     my $self = shift;
583     my $ctx = $self->ctx;
584
585     # plib param takes precedence
586     my $plib = $self->cgi->param('plib');
587     return $plib if $plib;
588
589     if ($self->apache->headers_in->get('OILS-Pref-Lib')) {
590         return $self->apache->headers_in->get('OILS-Pref-Lib');
591     }
592     if ($self->cgi->cookie('eg_pref_lib')) {
593         return $self->cgi->cookie('eg_pref_lib');
594     }
595
596     if ($ctx->{user}) {
597         # See if the user has a search library preference
598         my $lset = $self->editor->search_actor_user_setting({
599             usr => $ctx->{user}->id, 
600             name => 'opac.default_search_location'
601         })->[0];
602         return OpenSRF::Utils::JSON->JSON2perl($lset->value) if $lset;
603
604         # Otherwise return the user's home library
605         my $ou = $ctx->{user}->home_ou;
606         return ref($ou) ? $ou->id : $ou;
607     }
608
609     if ($ctx->{physical_loc}) {
610         return $ctx->{physical_loc};
611     }
612
613 }
614
615 # This is defensively coded since we don't do much manual reading from the
616 # file system in this module.
617 sub load_eg_cache_hash {
618     my ($self) = @_;
619
620     # just a context helper
621     $self->ctx->{eg_cache_hash} = sub { return $cache{eg_cache_hash}; };
622
623     # Need to actually load the value? If already done, move on.
624     return if defined $cache{eg_cache_hash};
625
626     # In this way even if we fail, we won't slow things down by ever trying
627     # again within this Apache process' lifetime.
628     $cache{eg_cache_hash} = 0;
629
630     my $path = File::Spec->catfile(
631         $self->apache->document_root, "eg_cache_hash"
632     );
633
634     if (not open FH, "<$path") {
635         $self->apache->log->warn("error opening $path : $!");
636         return;
637     } else {
638         my $buf;
639         my $rv = read FH, $buf, 64;  # defensive
640         close FH;
641
642         if (not defined $rv) {  # error
643             $self->apache->log->warn("error reading $path : $!");
644         } elsif ($rv > 0) {     # no error, something read
645             chomp $buf;
646             $cache{eg_cache_hash} = $buf;
647         }
648     }
649 }
650
651 # Extracts the copy location org unit and group from the 
652 # "logc" param, which takes the form org_id:grp_id.
653 sub extract_copy_location_group_info {
654     my $self = shift;
655     my $ctx = $self->ctx;
656     if (my $clump = $self->cgi->param('locg')) {
657         my ($org, $grp) = split(/:/, $clump);
658         $ctx->{copy_location_group_org} =
659             $self->_resolve_org_id_or_shortname($org);
660         $ctx->{copy_location_group} = $grp if $grp;
661     }
662 }
663
664 sub load_copy_location_groups {
665     my $self = shift;
666     my $ctx = $self->ctx;
667
668     # User can access to the search location groups at the current 
669     # search lib, the physical location lib, and the patron's home ou.
670     my @ctx_orgs = $ctx->{search_ou};
671     push(@ctx_orgs, $ctx->{physical_loc}) if $ctx->{physical_loc};
672     push(@ctx_orgs, $ctx->{user}->home_ou) if $ctx->{user};
673
674     my $grps = $self->editor->search_asset_copy_location_group([
675         {
676             opac_visible => 't',
677             owner => {
678                 in => {
679                     select => {aou => [{
680                         column => 'id', 
681                         transform => 'actor.org_unit_full_path',
682                         result_field => 'id',
683                     }]},
684                     from => 'aou',
685                     where => {id => \@ctx_orgs}
686                 }
687             }
688         },
689         {order_by => {acplg => 'pos'}}
690     ]);
691
692     my %buckets;
693     push(@{$buckets{$_->owner}}, $_) for @$grps;
694     $ctx->{copy_location_groups} = \%buckets;
695 }
696
697 sub set_file_download_headers {
698     my $self = shift;
699     my $filename = shift;
700     my $ctype = shift || "text/plain; encoding=utf8";
701
702     $self->apache->content_type($ctype);
703
704     $self->apache->headers_out->add(
705         "Content-Disposition",
706         "attachment;filename=$filename"
707     );
708
709     return Apache2::Const::OK;
710 }
711
712 sub apache_log_if_event {
713     my ($self, $event, $prefix_text, $success_ok, $level) = @_;
714
715     $prefix_text ||= "Evergreen returned event";
716     $success_ok ||= 0;
717     $level ||= "warn";
718
719     chomp $prefix_text;
720     $prefix_text .= ": ";
721
722     my $code = $U->event_code($event);
723     if (defined $code and ($code or not $success_ok)) {
724         $self->apache->log->$level(
725             $prefix_text .
726             ($event->{textcode} || "") . " ($code)" .
727             ($event->{note} ? (": " . $event->{note}) : "")
728         );
729         return 1;
730     }
731
732     return;
733 }
734
735 sub load_search_filter_groups {
736     my $self = shift;
737     my $ctx_org = shift;
738     my $org_list = $U->get_org_ancestors($ctx_org, 1);
739
740     my %seen;
741     for my $org_id (@$org_list) {
742
743         my $grps;
744         if (! ($grps = $cache{search_filter_groups}{$org_id}) ) {
745             $grps = $self->editor->search_actor_search_filter_group([
746                 {owner => $org_id},
747                 {   flesh => 2, 
748                     flesh_fields => {
749                         asfg => ['entries'],
750                         asfge => ['query']
751                     },
752                     order_by => {asfge => 'pos'}
753                 }
754             ]);
755             $cache{search_filter_groups}{$org_id} = $grps;
756         }
757
758         # for the current context, if a descendant org has a group 
759         # with a matching code replace the group from the parent.
760         $seen{$_->code} = $_ for @$grps;
761     }
762
763     return $self->ctx->{search_filter_groups} = \%seen;
764 }
765
766
767 sub check_for_temp_list_warning {
768     my $self = shift;
769     my $ctx = $self->ctx;
770     my $cgi = $self->cgi;
771
772     my $lib = $self->_get_search_lib;
773     my $warn = ($ctx->{get_org_setting}->($lib || 1, 'opac.patron.temporary_list_warn')) ? 1 : 0;
774
775     if ($warn && $ctx->{user}) {
776         $self->_load_user_with_prefs;
777         my $map = $ctx->{user_setting_map};
778         $warn = 0 if ($$map{'opac.temporary_list_no_warn'});
779     }
780
781     # Check for a cookie disabling the warning.
782     $warn = 0 if ($warn && $cgi->cookie('no_temp_list_warn'));
783
784     return $warn;
785 }
786
787 sub load_org_util_funcs {
788     my $self = shift;
789     my $ctx = $self->ctx;
790
791     # evaluates to true if test_ou is within the same depth-
792     # scoped tree as ctx_ou. both ou's are org unit objects.
793     $ctx->{org_within_scope} = sub {
794         my ($ctx_ou, $test_ou, $depth) = @_;
795
796         return 1 if $ctx_ou->id == $test_ou->id;
797
798         if ($depth) {
799
800             # find the top-most ctx-org ancestor at the provided depth
801             while ($depth < $ctx_ou->ou_type->depth 
802                     and $ctx_ou->id != $test_ou->id) {
803                 $ctx_ou = $ctx->{get_aou}->($ctx_ou->parent_ou);
804             }
805
806             # the preceeding loop may have landed on our org
807             return 1 if $ctx_ou->id == $test_ou->id;
808
809         } else {
810
811             return 1 if defined $depth; # $depth == 0;
812         }
813
814         for my $child (@{$ctx_ou->children}) {
815             return 1 if $ctx->{org_within_scope}->($child, $test_ou);
816         }
817
818         return 0;
819     };
820
821     # Returns true if the provided org unit is within the same 
822     # org unit hiding depth-scoped tree as the physical location.
823     # Org unit hiding is based on the immutable physical_loc
824     # and is not meant to change as search/pref/etc libs change
825     $ctx->{org_within_hiding_scope} = sub {
826         my $org_id = shift;
827         my $ploc = $ctx->{physical_loc} or return 1;
828
829         my $depth = $ctx->{get_org_setting}->(
830             $ploc, 'opac.org_unit_hiding.depth');
831
832         return 1 unless $depth; # 0 or undef
833
834         return $ctx->{org_within_scope}->( 
835             $ctx->{get_aou}->($ploc), 
836             $ctx->{get_aou}->($org_id), $depth);
837  
838     };
839
840     # Evaluates to true if the context org (defaults to get_library) 
841     # is not within the hiding scope.  Also evaluates to true if the 
842     # user's pref_ou is set and it's out of hiding scope.
843     # Always evaluates to true when ctx.is_staff
844     $ctx->{org_hiding_disabled} = sub {
845         my $ctx_org = shift || $ctx->{search_ou};
846
847         return 1 if $ctx->{is_staff};
848
849         # beware locg values formatted as org:loc
850         $ctx_org =~ s/:.*//g;
851
852         return 1 if !$ctx->{org_within_hiding_scope}->($ctx_org);
853
854         return 1 if $ctx->{pref_ou} and $ctx->{pref_ou} != $ctx_org 
855             and !$ctx->{org_within_hiding_scope}->($ctx->{pref_ou});
856
857         return 0;
858     };
859
860 }
861
862 # returns the list of org unit IDs for which the 
863 # selected org unit setting returned a true value
864 sub setting_is_true_for_orgs {
865     my ($self, $setting) = @_;
866     my $ctx = $self->ctx;
867     my @valid_orgs;
868
869     my $test_org;
870     $test_org = sub {
871         my $org = shift;
872         push (@valid_orgs, $org->id) if
873             $ctx->{get_org_setting}->($org->id, $setting);
874         $test_org->($_) for @{$org->children};
875     };
876
877     $test_org->($ctx->{aou_tree}->());
878     return \@valid_orgs;
879 }
880
881 # Builds and links a perm checking function, testing permissions against
882 # the currently logged in user.  
883 # ctx->{has_perm}->(perm_code, org_id) => 1/undef
884 # For security, perm checks are cached per page, not per process.
885 sub load_perm_funcs {
886     my $self = shift;
887     my %perm_cache;
888     $self->ctx->{has_perm} = sub {
889         my ($perm_code, $org_id) = @_;
890         return 0 unless $self->editor->requestor;
891
892         if ($perm_cache{$org_id}) {
893             return $perm_cache{$org_id}{$perm_code} 
894                 if exists $perm_cache{$org_id}{$perm_code};
895         } else {
896             $perm_cache{$org_id} = {};
897         }
898         return $perm_cache{$org_id}{$perm_code} =
899             $self->editor->allowed($perm_code, $org_id);
900     }
901 }
902     
903
904
905 1;