schema mapping supports duplicate maps (copy instead of pointer swap)
[yaz-moved-to-github.git] / retrieval / d1_marc.c
1 /*
2  * Copyright (c) 1995-2002, Index Data.
3  * See the file LICENSE for details.
4  * Sebastian Hammer, Adam Dickmeiss
5  *
6  * $Id: d1_marc.c,v 1.19 2002-05-28 21:09:44 adam Exp $
7  */
8
9
10 #include <assert.h>
11 #include <stdlib.h>
12 #include <string.h>
13
14 #include <yaz/oid.h>
15 #include <yaz/log.h>
16 #include <yaz/marcdisp.h>
17 #include <yaz/readconf.h>
18 #include <yaz/xmalloc.h>
19 #include <yaz/data1.h>
20 #include <yaz/tpath.h>
21
22 data1_marctab *data1_read_marctab (data1_handle dh, const char *file)
23 {
24     FILE *f;
25     NMEM mem = data1_nmem_get (dh);
26     data1_marctab *res = (data1_marctab *)nmem_malloc(mem, sizeof(*res));
27     char line[512], *argv[50];
28     int lineno = 0;
29     int argc;
30     
31     if (!(f = data1_path_fopen(dh, file, "r")))
32     {
33         yaz_log(LOG_WARN|LOG_ERRNO, "%s", file);
34         return 0;
35     }
36
37     res->name = 0;
38     res->reference = VAL_NONE;
39     res->next = 0;
40     res->length_data_entry = 4;
41     res->length_starting = 5;
42     res->length_implementation = 0;
43     strcpy(res->future_use, "4");
44
45     strcpy(res->record_status, "n");
46     strcpy(res->implementation_codes, "    ");
47     res->indicator_length = 2;
48     res->identifier_length = 2;
49     res->force_indicator_length = -1;
50     res->force_identifier_length = -1;
51     strcpy(res->user_systems, "z  ");
52     
53     while ((argc = readconf_line(f, &lineno, line, 512, argv, 50)))
54         if (!strcmp(*argv, "name"))
55         {
56             if (argc != 2)
57             {
58                 yaz_log(LOG_WARN, "%s:%d:Missing arg for %s", file, lineno,
59                         *argv);
60                 continue;
61             }
62             res->name = nmem_strdup(mem, argv[1]);
63         }
64         else if (!strcmp(*argv, "reference"))
65         {
66             if (argc != 2)
67             {
68                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
69                         *argv);
70                 continue;
71             }
72             if ((res->reference = oid_getvalbyname(argv[1])) == VAL_NONE)
73             {
74                 yaz_log(LOG_WARN, "%s:%d: Unknown tagset reference '%s'",
75                         file, lineno, argv[1]);
76                 continue;
77             }
78         }
79         else if (!strcmp(*argv, "length-data-entry"))
80         {
81             if (argc != 2)
82             {
83                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
84                         *argv);
85                 continue;
86             }
87             res->length_data_entry = atoi(argv[1]);
88         }
89         else if (!strcmp(*argv, "length-starting"))
90         {
91             if (argc != 2)
92             {
93                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
94                         *argv);
95                 continue;
96             }
97             res->length_starting = atoi(argv[1]);
98         }
99         else if (!strcmp(*argv, "length-implementation"))
100         {
101             if (argc != 2)
102             {
103                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
104                         *argv);
105                 continue;
106             }
107             res->length_implementation = atoi(argv[1]);
108         }
109         else if (!strcmp(*argv, "future-use"))
110         {
111             if (argc != 2)
112             {
113                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
114                         *argv);
115                 continue;
116             }
117             strncpy(res->future_use, argv[1], 2);
118         }
119         else if (!strcmp(*argv, "force-indicator-length"))
120         {
121             if (argc != 2)
122             {
123                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
124                         *argv);
125                 continue;
126             }
127             res->force_indicator_length = atoi(argv[1]);
128         }
129         else if (!strcmp(*argv, "force-identifier-length"))
130         {
131             if (argc != 2)
132             {
133                 yaz_log(LOG_WARN, "%s:%d: Missing arg for %s", file, lineno,
134                         *argv);
135                 continue;
136             }
137             res->force_identifier_length = atoi(argv[1]);
138         }
139         else
140             yaz_log(LOG_WARN, "%s:%d: Unknown directive '%s'", file, lineno,
141                     *argv);
142
143     fclose(f);
144     return res;
145 }
146
147 /*
148  * Locate some data under this node. This routine should handle variants
149  * prettily.
150  */
151 static char *get_data(data1_node *n, int *len)
152 {
153     char *r;
154
155     while (n->which != DATA1N_data && n->child)
156         n = n->child;
157     if (n->which != DATA1N_data || 
158         (n->u.data.what != DATA1I_text && n->u.data.what != DATA1I_num))
159     {
160         r = "[Structured/included data]";
161         *len = strlen(r);
162         return r;
163     }
164
165     *len = n->u.data.len;
166     while (*len && d1_isspace(n->u.data.data[*len - 1]))
167         (*len)--;
168     return n->u.data.data;
169 }
170
171 static void memint (char *p, int val, int len)
172 {
173     char buf[10];
174
175     if (len == 1)
176         *p = val + '0';
177     else
178     {
179         sprintf (buf, "%08d", val);
180         memcpy (p, buf+8-len, len);
181     }
182 }
183
184 static int is_indicator (data1_marctab *p, data1_node *subf)
185 {
186 #if 1
187     if (p->indicator_length != 2 ||
188         (subf && subf->which == DATA1N_tag && strlen(subf->u.tag.tag) == 2))
189         return 1;
190 #else
191     if (subf && subf->which == DATA1N_tag && subf->child->which == DATA1N_tag)
192         return 1;
193 #endif
194     return 0;
195 }
196
197 static int nodetomarc(data1_marctab *p, data1_node *n, int selected,
198     char **buf, int *size)
199 {
200     int len = 26;
201     int dlen;
202     int base_address = 25;
203     int entry_p, data_p;
204     char *op;
205     data1_node *field, *subf;
206
207     yaz_log (LOG_DEBUG, "nodetomarc");
208     for (field = n->child; field; field = field->next)
209     {
210         int is00X = 0;
211
212         if (field->which != DATA1N_tag)
213         {
214             yaz_log(LOG_WARN, "Malformed field composition for marc output.");
215             return -1;
216         }
217         if (selected && !field->u.tag.node_selected)
218             continue;
219         len += 4 + p->length_data_entry + p->length_starting
220             + p->length_implementation;
221         base_address += 3 + p->length_data_entry + p->length_starting
222             + p->length_implementation;
223         subf = field->child;
224
225         if (subf->which == DATA1N_data)
226             is00X = 1;
227         
228         if (!is00X)
229             len += p->indicator_length;  
230         /*  we'll allow no indicator if length is not 2 */
231         if (is_indicator (p, subf))
232             subf = subf->child;
233
234         for (; subf; subf = subf->next)
235         {
236             if (!is00X)
237                 len += p->identifier_length;
238             get_data(subf, &dlen);
239             len += dlen;
240         }
241     }
242
243     if (!*buf)
244         *buf = (char *)xmalloc(*size = len);
245     else if (*size <= len)
246         *buf = (char *)xrealloc(*buf, *size = len);
247         
248     op = *buf;
249     memint (op, len, 5);
250     memcpy (op+5, p->record_status, 1);
251     memcpy (op+6, p->implementation_codes, 4);
252     memint (op+10, p->indicator_length, 1);
253     memint (op+11, p->identifier_length, 1);
254     memint (op+12, base_address, 5);
255     memcpy (op+17, p->user_systems, 3);
256     memint (op+20, p->length_data_entry, 1);
257     memint (op+21, p->length_starting, 1);
258     memint (op+22, p->length_implementation, 1);
259     memcpy (op+23, p->future_use, 1);
260     
261     entry_p = 24;
262     data_p = base_address;
263
264     for (field = n->child; field; field = field->next)
265     {
266         int is00X = 0;
267
268         int data_0 = data_p;
269         char *indicator_data = "    ";
270         if (selected && !field->u.tag.node_selected)
271             continue;
272
273         subf = field->child;
274
275         if (subf->which == DATA1N_data)
276             is00X = 1;
277
278         if (is_indicator (p, subf))
279         {
280             indicator_data = subf->u.tag.tag;
281             subf = subf->child;
282         }
283         if (!is00X)
284         {
285             memcpy (op + data_p, indicator_data, p->indicator_length);
286             data_p += p->indicator_length;
287         }
288         for (; subf; subf = subf->next)
289         {
290             char *data;
291
292             if (!is00X)
293             {
294                 const char *identifier = "a";
295                 if (subf->which != DATA1N_tag)
296                     yaz_log(LOG_WARN, "Malformed fields for marc output.");
297                 else
298                     identifier = subf->u.tag.tag;
299                 op[data_p] = ISO2709_IDFS;
300                 memcpy (op + data_p+1, identifier, p->identifier_length-1);
301                 data_p += p->identifier_length;
302             }
303             data = get_data(subf, &dlen);
304             memcpy (op + data_p, data, dlen);
305             data_p += dlen;
306         }
307         op[data_p++] = ISO2709_FS;
308
309         memcpy (op + entry_p, field->u.tag.tag, 3);
310         entry_p += 3;
311         memint (op + entry_p, data_p - data_0, p->length_data_entry);
312         entry_p += p->length_data_entry;
313         memint (op + entry_p, data_0 - base_address, p->length_starting);
314         entry_p += p->length_starting;
315         entry_p += p->length_implementation;
316     }
317     op[entry_p++] = ISO2709_FS;
318     assert (entry_p == base_address);
319     op[data_p++] = ISO2709_RS;
320     assert (data_p == len);
321     return len;
322 }
323
324 char *data1_nodetomarc(data1_handle dh, data1_marctab *p, data1_node *n,
325                        int selected, int *len)
326 {
327     int *size;
328     char **buf = data1_get_map_buf (dh, &size);
329
330     *len = nodetomarc(p, n, selected, buf, size);
331     return *buf;
332 }