Merge the Evergreen docs into the code repository
[working/Evergreen.git] / docs / cataloging / batch_importing_MARC.txt
1 Batch Importing MARC Records\r
2 ----------------------------\r
3 \r
4 The cataloging module in version 2.2 includes an enhanced MARC Batch Import interface.  This interface features improved matching of records and managing of your import queue.  In 2.2, you will be able to specify match points between incoming and existing records.  You will also be able to apply filters to your queue that enable you to generate any errors that may have occurred during import.  You will also be able to print your queue, email your queue, or export your queue as a CSV file. \r
5 \r
6 Permissions\r
7 ~~~~~~~~~~~\r
8 \r
9 To use match sets to import records, you will need the following permission:\r
10 \r
11 ADMIN_IMPORT_MATCH_SET\r
12 \r
13 \r
14 Record Display Attributes\r
15 ~~~~~~~~~~~~~~~~~~~~~~~~~\r
16 \r
17 This feature enables you to specify the tags and subfields that will display in records that appear in the import queue. \r
18 \r
19 \r
20 *Record Match Sets*\r
21 \r
22 This feature enables you to create custom match points that you can use to accurately match incoming records with existing catalog records.  \r
23   \r
24 \r
25 In this example, to demonstrate matching on record attributes and MARC tags and subfields, we will create a record match set that defines a match based on the title of the record, in either the 240 or 245, and the fixed field, Lang.  You can add multiple record attributes and MARC tags to customize a record match set.\r
26  \r
27 \r
28 1) Click *Cataloging -> MARC Batch Import/Export*.\r
29 \r
30 2) Create a new record match set.  Click *Record Match Sets -> New Match Set*.\r
31 \r
32 3) Enter a name for the record match set.\r
33 \r
34 4) Select an *Owning Library* from the drop down menu.  Staff with permissions at this location will be able to use this record match set.\r
35 \r
36 5) Select a *Match Set Type* from the drop down menu.  You can create a match set for authority records or bibliographic records.\r
37 \r
38 6) Click *Save*.\r
39 \r
40 \r
41 image::media/Batch_Importing_MARC_Records1.jpg[Batch_Importing_MARC_Records1]\r
42 \r
43 \r
44 7) The screen will refresh to list the record match set that you created.  Click the link to the record match set.\r
45 \r
46 8) Create an expression that will define the match points for the incoming record.  You can choose from two areas to create a match: *Record Attribute* or *MARC Tag and Subfield*.  You can use the Boolean operators AND and OR to combine these elements to create a match set.\r
47 \r
48 9) Select a *Record Attribute* from the drop-down menu.\r
49 \r
50 10) Enter a *Match Score.*  The *Match Score* indicates the relative importance of that match point as Evergreen evaluates an incoming record against an existing record. You can enter any integer into this field.  The number that you enter is only important as it relates to other match points.  Recommended practice is that you create a match score of one (1) for the least important match point and assign increasing match points to the power of 2 to working points in increasing importance.\r
51 \r
52 11) Check the *Negate?* box if you want to negate the match point.  Checking this box would be the equivalent of applying a Boolean operator of NOT to the match point.\r
53 \r
54 \r
55 \r
56 image::media/Batch_Importing_MARC_Records2.jpg[Batch_Importing_MARC_Records2]\r
57 \r
58 \r
59 \r
60 12) Click *Ok.*\r
61 \r
62 13) Drag the completed match point under the folder with the appropriately-named Boolean folder under the Expression tree.\r
63 \r
64 \r
65 \r
66 image::media/Batch_Importing_MARC_Records3.jpg[Batch_Importing_MARC_Records3]\r
67 \r
68 \r
69 The match point will nest underneath the folder in the Expression tree.\r
70 \r
71 \r
72 image::media/Batch_Importing_MARC_Records4.jpg[Batch_Importing_MARC_Records4]\r
73 \r
74 \r
75 14) Enter another *Boolean Operator* to further refine your match set.\r
76 \r
77 15) Click *Boolean Operator*.\r
78 \r
79 16) Select the *OR* operator from the drop down menu.\r
80 \r
81 17) Click *Ok*.\r
82 \r
83 18) Drag the operator to the expression tree.\r
84 \r
85 \r
86 image::media/Batch_Importing_MARC_Records5.jpg[Batch_Importing_MARC_Records5]\r
87 \r
88 \r
89 19) Click *MARC Tag and Subfield*.\r
90 \r
91 20) Enter a *MARC tag* on which you want the records to match.\r
92 \r
93 21) Enter a *subfield* on which you want the records to match.\r
94 \r
95 22) Enter a *Match Score.*  The *Match Score* indicates the relative importance of that match point as Evergreen evaluates an incoming record against an existing record. You can enter any integer into this field.  The number that you enter is only important as it relates to other match points.  Recommended practice is that you create a match score of one (1) for the least important match point and assign increasing match points to the power of 2 to working points in increasing importance.\r
96 \r
97 23) Check the *Negate?* box if you want to negate the match point.  Checking this box would be the equivalent of applying a Boolean operator of NOT to the match point.\r
98 \r
99 \r
100 24) Click *Ok.*\r
101 \r
102 \r
103 image::media/Batch_Importing_MARC_Records6.jpg[Batch_Importing_MARC_Records6]\r
104 \r
105 \r
106 25) Drag the completed match point under the folder with the appropriately-named Boolean folder under the Expression tree. The Expression will build across the top of the screen.\r
107 \r
108 26) Add additional MARC tags or record attributes to build the expression tree.\r
109 \r
110 27) Click *Save Changes to Expression*.\r
111 \r
112 \r
113 image::media/Batch_Importing_MARC_Records7.jpg[Batch_Importing_MARC_Records7]\r
114 \r
115 \r
116 *Replace Mode*\r
117 \r
118 Replace Mode enables you to replace an existing part of the expression tree with a new record attribute, MARC tag, or Boolean operator.  For example, if the top of the tree is AND, in replace mode, you could change that to an OR.\r
119 \r
120 \r
121 1) Create a working match point.\r
122 \r
123 2) Click *Enter replace mode*.\r
124 \r
125 3) Highlight the piece of the tree that you want to replace.\r
126 \r
127 4) Drag the replacement piece over the highlighted piece.\r
128 \r
129 5) Click *Exit Replace Mode*.\r
130 \r
131 \r
132 *Quality Metrics*\r
133 \r
134 \r
135 1) Set the *Quality Metrics for this Match Set*.  Quality metrics are used to determine the overall quality of a record.  Each metric is given a weight and the total quality value for a record is equal to the sum of all metrics that apply to that record.  For example, a record that has been cataloged thoroughly and contains accurate data would be more valuable than one of poor quality.  You may want to ensure that the incoming record is of the same or better quality than the record that currently exists in your catalog; otherwise, you may want the match to fail.  The quality metric is optional.\r
136 \r
137 2) You can create quality metrics based on the record attribute or the MARC Tag and Subfield.\r
138 \r
139 3) Click *Record Attribute.*\r
140 \r
141 4) Select an attribute from the drop down menu.\r
142 \r
143 5) Enter a value for the attribute.\r
144 \r
145 6.) Enter a match score.  You can enter any integer into this field.  The number that you enter is only important as it relates to other quality values for the current configuration.  Higher scores would indicate increasing quality of incoming records. You can, as in the expression match score, increase the quality points by increasing subsequent records by a power of 2 (two).\r
146 \r
147 7) Click *Ok*.  \r
148  \r
149 \r
150 image::media/Batch_Importing_MARC_Records8.jpg[Batch_Importing_MARC_Records8]\r
151 \r
152 \r
153 \r
154 *Import Records*\r
155 \r
156 The *Import Records* interface incorporates record match sets, quality metrics, more merging options, and improved ways to manage your queue.  In this example, we will import a batch of records.  One of the records in the queue will contain a matching record in the catalog that is of lower quality than the incoming record.  We will import the record according to the guidelines set by our record match set, quality metrics, and merge/overlay choices that we will select.\r
157 \r
158 \r
159 1) Select a *Record Type* from the drop down menu.\r
160 \r
161 2) Create a queue to which you can upload your records, or add you records to an existing queue.  Queues are linked to match sets and a holdings import profile. You cannot change a holdings import or record match set for a queue.\r
162 \r
163 3) Select a *Record Match Set* from the drop down menu.\r
164 \r
165 4) Select a *Holdings Import Profile* if you want to import holdings that are attached to your records.\r
166 \r
167 5) Select a *Record Source* from the drop down menu.\r
168 \r
169 6) Select a *Merge Profile*.  Merge profiles enable you to specify which tags should be removed or preserved in incoming records.\r
170 \r
171 7) Choose one of the following import options if you want to auto-import records:\r
172 \r
173 a. *Merge on Single Match* - Using the Record Match Set, Evergreen will only attempt to perform the merge/overlay action if only one match was found in the catalog.\r
174 \r
175 b. *Merge on Best Match* - If more than one match is found in the catalog for a given record, Evergreen will attempt to perform the merge/overlay action with the best match as defined by the match score and quality metric.\r
176 \r
177 NOTE: Quality ratio affects only the *Merge on Single Match* and *Merge on Best Match* options.\r
178 \r
179 8) Enter a *Best/Single Match Minimum Quality Ratio.*  Divide the incoming record quality score by the record quality score of the best match that might exist in the catalog.  By default, Evergreen will assign any record a quality score of 1 (one).  If you want to ensure that the inbound record is only imported when it has a higher quality than the best match, then you must enter a ratio that is higher than 1.  For example, if you want the incoming record to have twice the quality of an existing record, then you should enter a 2 (two) in this field.  If you want to bypass all quality restraints, enter a 0 (zero) in this field.\r
180 \r
181 \r
182 9) Select an *Insufficient Quality Fall-Through Profile* if desired.  This field enables you to indicate that if the inbound record doees not meet the configured quality standards, then you may still import the record using an alternate merge profile.  This field is typically used for selecting a merge profile that allows\r
183 the user to import holdings attached to a lower quality record without replacing the existing (target) record with the incoming record.  This field is optional.  \r
184 \r
185 10) *Browse* to find the appropriate file, and click *Upload*.  The files will be uploaded to a queue.\r
186 \r
187 \r
188 image::media/Batch_Importing_MARC_Records9.jpg[Batch_Importing_MARC_Records9]\r
189 \r
190 11) The screen will display records that have been uploaded to your queue.\r
191   \r
192 image::media/Batch_Importing_MARC_Records15.jpg[Batch_Importing_MARC_Records15]\r
193 \r
194 \r
195 12) If Evergreen indicates that matching records exist, then click the *Matches* link to view the matching records.  Check the box adjacent to the existing record that you want to merge with the incoming record. \r
196 \r
197 image::media/Batch_Importing_MARC_Records10.jpg[Batch_Importing_MARC_Records10]\r
198 \r
199 13) Click *Back to Import Queue*.\r
200 \r
201 14) Check the boxes of the records that you want to import, and click *Import Selected Records*, or click *Import All Records*.\r
202 \r
203 15) A pop up window will offer you the same import choices that were present on the *Import Records* screen.  You can choose one of the import options, or click *Import*.\r
204 \r
205 image::media/Batch_Importing_MARC_Records9.jpg[Batch_Importing_MARC_Records9]\r
206 \r
207 16) The screen will refresh.  The *Queue Summary* indicates that the record was imported.  The *Import Time* column records the date that the record was imported.\r
208 \r
209 image::media/Batch_Importing_MARC_Records12.jpg[Batch_Importing_MARC_Records12] \r
210 \r
211 17) Search the catalog to confirm that the record was imported.\r
212 \r
213 image::media/Batch_Importing_MARC_Records14.jpg[Batch_Importing_MARC_Records14] \r
214 \r