XML reader for data1 (EXPAT)
[yaz-moved-to-github.git] / include / yaz / data1.h
1 /*
2  * Copyright (c) 1995-2002, Index Data.
3  *
4  * Permission to use, copy, modify, distribute, and sell this software and
5  * its documentation, in whole or in part, for any purpose, is hereby granted,
6  * provided that:
7  *
8  * 1. This copyright and permission notice appear in all copies of the
9  * software and its documentation. Notices of copyright or attribution
10  * which appear at the beginning of any file must remain unchanged.
11  *
12  * 2. The names of Index Data or the individual authors may not be used to
13  * endorse or promote products derived from this software without specific
14  * prior written permission.
15  *
16  * THIS SOFTWARE IS PROVIDED "AS IS" AND WITHOUT WARRANTY OF ANY KIND,
17  * EXPRESS, IMPLIED, OR OTHERWISE, INCLUDING WITHOUT LIMITATION, ANY
18  * WARRANTY OF MERCHANTABILITY OR FITNESS FOR A PARTICULAR PURPOSE.
19  * IN NO EVENT SHALL INDEX DATA BE LIABLE FOR ANY SPECIAL, INCIDENTAL,
20  * INDIRECT OR CONSEQUENTIAL DAMAGES OF ANY KIND, OR ANY DAMAGES
21  * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER OR
22  * NOT ADVISED OF THE POSSIBILITY OF DAMAGE, AND ON ANY THEORY OF
23  * LIABILITY, ARISING OUT OF OR IN CONNECTION WITH THE USE OR PERFORMANCE
24  * OF THIS SOFTWARE.
25  *
26  * $Id: data1.h,v 1.10 2002-05-13 14:13:37 adam Exp $
27  */
28
29 #ifndef DATA1_H
30 #define DATA1_H
31
32 #include <stdio.h>
33
34 #include <yaz/nmem.h>
35 #include <yaz/oid.h>
36 #include <yaz/proto.h>
37
38 #include <yaz/d1_attset.h>
39 #include <yaz/d1_map.h>
40 #include <yaz/yaz-util.h>
41 #include <yaz/wrbuf.h>
42
43 #define d1_isspace(c) strchr(" \r\n\t\f", c)
44 #define d1_isdigit(c) ((c) <= '9' && (c) >= '0')
45
46 YAZ_BEGIN_CDECL
47
48 #define data1_matchstr(s1, s2) yaz_matchstr(s1, s2)
49
50 #define DATA1_MAX_SYMBOL 31
51
52 typedef struct data1_name
53 {
54     char *name;
55     struct data1_name *next;
56 } data1_name;
57
58 typedef struct data1_absyn_cache_info *data1_absyn_cache;
59 typedef struct data1_attset_cache_info *data1_attset_cache;
60
61 typedef enum data1_datatype
62 {
63     DATA1K_unknown,
64     DATA1K_structured,
65     DATA1K_string,
66     DATA1K_numeric,
67     DATA1K_bool,
68     DATA1K_oid,
69     DATA1K_generalizedtime,
70     DATA1K_intunit,
71     DATA1K_int,
72     DATA1K_octetstring,
73     DATA1K_null
74 } data1_datatype;
75
76 typedef struct data1_marctab
77 {
78     char *name;
79     oid_value reference;
80
81     char record_status[2];
82     char implementation_codes[5];
83     int  indicator_length;
84     int  identifier_length;
85     char user_systems[4];
86
87     int  length_data_entry;
88     int  length_starting;
89     int  length_implementation;
90     char future_use[2];
91
92     int  force_indicator_length;
93     int  force_identifier_length;
94     struct data1_marctab *next;
95 } data1_marctab;
96
97 typedef struct data1_esetname
98 {
99     char *name;
100     Z_Espec1 *spec;
101     struct data1_esetname *next;
102 } data1_esetname;
103
104 /*
105  * Variant set definitions.
106  */
107
108 typedef struct data1_vartype
109 {
110     char *name;
111     struct data1_varclass *zclass;
112     int type;
113     data1_datatype datatype;
114     struct data1_vartype *next;
115 } data1_vartype;
116
117 typedef struct data1_varclass
118 {
119     char *name;
120     struct data1_varset *set;
121     int zclass;
122     data1_vartype *types;
123     struct data1_varclass *next;
124 } data1_varclass;
125
126 typedef struct data1_varset
127 {
128     char *name;
129     oid_value reference;
130     data1_varclass *classes;
131 } data1_varset;
132
133 /*
134  * Tagset definitions
135  */
136
137 struct data1_tagset;
138
139 typedef struct data1_tag
140 {
141     data1_name *names;
142 #define DATA1T_numeric 1
143 #define DATA1T_string 2
144     int which;
145     union
146     {
147         int numeric;
148         char *string;
149     } value;
150     data1_datatype kind;
151
152     struct data1_tagset *tagset;
153     struct data1_tag *next;
154 } data1_tag;
155
156 typedef struct data1_tagset data1_tagset;
157
158 struct data1_tagset
159 {
160     int type;                        /* type of tagset in current context */
161     char *name;                      /* symbolic name */
162     oid_value reference;
163     data1_tag *tags;                 /* tags defined by this set */
164     data1_tagset *children;          /* children */
165     data1_tagset *next;              /* sibling */
166 };
167
168 typedef struct data1_termlist
169 {
170     data1_att *att;
171     char *structure;
172     char *source;
173     struct data1_termlist *next;
174 } data1_termlist;
175
176 /*
177  * abstract syntax specification
178  */
179
180 typedef struct data1_element
181 {
182     char *name;
183     data1_tag *tag;
184     data1_termlist *termlists;
185     char *sub_name;
186     struct data1_element *children;
187     struct data1_element *next;
188 } data1_element;
189
190 typedef struct data1_sub_elements {
191     char *name;
192     struct data1_sub_elements *next;
193     data1_element *elements;
194 } data1_sub_elements;
195
196 typedef struct data1_xattr {
197     char *name;
198     char *value;
199     struct data1_xattr *next;
200 } data1_xattr;
201
202 typedef struct data1_absyn
203 {
204     char *name;
205     oid_value reference;
206     data1_tagset *tagset;
207     data1_attset *attset;
208     data1_varset *varset;
209     data1_esetname *esetnames;
210     data1_maptab *maptabs;
211     data1_marctab *marc;
212     data1_sub_elements *sub_elements;
213     data1_element *main_elements;
214 } data1_absyn;
215
216 /*
217  * record data node (tag/data/variant)
218  */
219
220 typedef struct data1_node
221 {
222     /* the root of a record (containing global data) */
223 #define DATA1N_root 1 
224     /* a tag */
225 #define DATA1N_tag  2       
226     /* some data under a leaf tag or variant */
227 #define DATA1N_data 3
228     /* variant specification (a triple, actually) */
229 #define DATA1N_variant 4
230     int which;
231
232     union
233     {
234         struct
235         {
236             char *type;
237             data1_absyn *absyn;  /* abstract syntax for this type */
238         } root;
239
240         struct 
241         {
242             char *tag;
243             data1_element *element;
244             int no_data_requested;
245             int get_bytes;
246             unsigned node_selected : 1;
247             unsigned make_variantlist : 1;
248             data1_xattr *attributes;
249         } tag;
250
251         struct
252         {
253             char *data;      /* filename or data */
254             int len;
255         /* text inclusion */
256 #define DATA1I_inctxt 1
257         /* binary data inclusion */
258 #define DATA1I_incbin 2
259         /* text data */
260 #define DATA1I_text 3 
261         /* numerical data */
262 #define DATA1I_num 4
263         /* object identifier */
264 #define DATA1I_oid 5         
265             unsigned what:7;
266             unsigned formatted_text : 1;   /* newlines are significant */
267         } data;
268
269         struct
270         {
271             data1_vartype *type;
272             char *value;
273         } variant;
274     } u;
275
276     void (*destroy)(struct data1_node *n);
277 #define DATA1_LOCALDATA 12
278     char lbuf[DATA1_LOCALDATA]; /* small buffer for local data */
279     struct data1_node *next;
280     struct data1_node *child;
281     struct data1_node *last_child;
282     struct data1_node *parent;
283     struct data1_node *root;
284 } data1_node;
285
286 YAZ_EXPORT data1_handle data1_create (void);
287 YAZ_EXPORT void data1_destroy(data1_handle dh);
288 YAZ_EXPORT data1_node *get_parent_tag(data1_handle dh, data1_node *n);
289 YAZ_EXPORT data1_node *data1_read_node(data1_handle dh, const char **buf,
290                                        NMEM m);
291 YAZ_EXPORT data1_node *data1_read_nodex (data1_handle dh, NMEM m,
292                                          int (*get_byte)(void *fh), void *fh,
293                                          WRBUF wrbuf);
294 YAZ_EXPORT data1_node *data1_read_record(data1_handle dh, 
295                                          int (*rf)(void *, char *, size_t),
296                                          void *fh, NMEM m);
297 YAZ_EXPORT data1_absyn *data1_read_absyn(data1_handle dh, const char *file);
298 YAZ_EXPORT data1_tag *data1_gettagbynum(data1_handle dh,
299                                         data1_tagset *s,
300                                         int type, int value);
301 YAZ_EXPORT data1_tagset *data1_empty_tagset (data1_handle dh);
302 YAZ_EXPORT data1_tagset *data1_read_tagset(data1_handle dh, 
303                                            const char *file,
304                                            int type);
305 YAZ_EXPORT data1_element *data1_getelementbytagname(data1_handle dh, 
306                                                     data1_absyn *abs,
307                                                     data1_element *parent,
308                                                     const char *tagname);
309 YAZ_EXPORT Z_GenericRecord *data1_nodetogr(data1_handle dh, data1_node *n,
310                                            int select, ODR o,
311                                            int *len);
312 YAZ_EXPORT data1_tag *data1_gettagbyname(data1_handle dh, data1_tagset *s,
313                                          const char *name);
314 YAZ_EXPORT void data1_free_tree(data1_handle dh, data1_node *t);
315 YAZ_EXPORT char *data1_nodetobuf(data1_handle dh, data1_node *n,
316                                  int select, int *len);
317 YAZ_EXPORT data1_node *data1_mk_tag_data_wd(data1_handle dh,
318                                             data1_node *at,
319                                             const char *tagname, NMEM m);
320 YAZ_EXPORT data1_node *data1_mk_tag_data(data1_handle dh, data1_node *at,
321                                          const char *tagname, NMEM m);
322 YAZ_EXPORT data1_datatype data1_maptype(data1_handle dh, char *t);
323 YAZ_EXPORT data1_varset *data1_read_varset(data1_handle dh, const char *file);
324 YAZ_EXPORT data1_vartype *data1_getvartypebyct(data1_handle dh,
325                                                data1_varset *set,
326                                                char *zclass, char *type);
327 YAZ_EXPORT Z_Espec1 *data1_read_espec1(data1_handle dh, const char *file);
328 YAZ_EXPORT int data1_doespec1(data1_handle dh, data1_node *n, Z_Espec1 *e);
329 YAZ_EXPORT data1_esetname *data1_getesetbyname(data1_handle dh, 
330                                                data1_absyn *a,
331                                                const char *name);
332 YAZ_EXPORT data1_element *data1_getelementbyname(data1_handle dh,
333                                                  data1_absyn *absyn,
334                                                  const char *name);
335 YAZ_EXPORT data1_node *data1_mk_node2(data1_handle dh, NMEM m,
336                                       int type, data1_node *parent);
337
338 YAZ_EXPORT data1_node *data1_mk_tag (data1_handle dh, NMEM nmem, 
339                                      const char *tag, const char **attr,
340                                      data1_node *at);
341 YAZ_EXPORT data1_node *data1_mk_tag_n (data1_handle dh, NMEM nmem,
342                                        const char *tag, size_t len,
343                                        const char **attr,
344                                        data1_node *at);
345
346 YAZ_EXPORT data1_node *data1_mk_text_n (data1_handle dh, NMEM mem,
347                                         const char *buf, size_t len,
348                                         data1_node *parent);
349 YAZ_EXPORT data1_node *data1_mk_text (data1_handle dh, NMEM mem,
350                                       const char *buf, data1_node *parent);
351
352 YAZ_EXPORT data1_node *data1_mk_root (data1_handle dh, NMEM nmem,
353                                       const char *name);
354
355 YAZ_EXPORT data1_node *data1_mk_tag_data_int (data1_handle dh, data1_node *at,
356                                               const char *tag, int num,
357                                               NMEM nmem);
358 YAZ_EXPORT data1_node *data1_mk_tag_data_oid (data1_handle dh, data1_node *at,
359                                               const char *tag, Odr_oid *oid,
360                                               NMEM nmem);
361 YAZ_EXPORT data1_node *data1_mk_tag_data_text (data1_handle dh, data1_node *at,
362                                                const char *tag,
363                                                const char *str,
364                                                NMEM nmem);
365 YAZ_EXPORT data1_node *data1_mk_tag_data_text_uni (data1_handle dh,
366                                                    data1_node *at,
367                                                    const char *tag,
368                                                    const char *str,
369                                                    NMEM nmem);
370
371 YAZ_EXPORT data1_absyn *data1_get_absyn (data1_handle dh, const char *name);
372
373 YAZ_EXPORT data1_node *data1_search_tag (data1_handle dh, data1_node *n,
374                                          const char *tag);
375 YAZ_EXPORT data1_node *data1_mk_tag_uni (data1_handle dh, NMEM nmem, 
376                                          const char *tag, data1_node *at);
377 YAZ_EXPORT data1_attset *data1_get_attset (data1_handle dh, const char *name);
378 YAZ_EXPORT data1_maptab *data1_read_maptab(data1_handle dh, const char *file);
379 YAZ_EXPORT data1_node *data1_map_record(data1_handle dh, data1_node *n,
380                                         data1_maptab *map, NMEM m);
381 YAZ_EXPORT data1_marctab *data1_read_marctab (data1_handle dh,
382                                               const char *file);
383 YAZ_EXPORT char *data1_nodetomarc(data1_handle dh, data1_marctab *p,
384                                   data1_node *n, int selected, int *len);
385 YAZ_EXPORT char *data1_nodetoidsgml(data1_handle dh, data1_node *n,
386                                     int select, int *len);
387 YAZ_EXPORT Z_ExplainRecord *data1_nodetoexplain(data1_handle dh,
388                                                 data1_node *n, int select,
389                                                 ODR o);
390 YAZ_EXPORT Z_BriefBib *data1_nodetosummary(data1_handle dh, 
391                                            data1_node *n, int select,
392                                            ODR o);
393 YAZ_EXPORT char *data1_nodetosoif(data1_handle dh, data1_node *n, int select,
394                                   int *len);
395 YAZ_EXPORT void data1_set_tabpath(data1_handle dh, const char *path);
396 YAZ_EXPORT void data1_set_tabroot (data1_handle dp, const char *p);
397 YAZ_EXPORT const char *data1_get_tabpath(data1_handle dh);
398 YAZ_EXPORT const char *data1_get_tabroot(data1_handle dh);
399
400 YAZ_EXPORT WRBUF data1_get_wrbuf (data1_handle dp);
401 YAZ_EXPORT char **data1_get_read_buf (data1_handle dp, int **lenp);
402 YAZ_EXPORT char **data1_get_map_buf (data1_handle dp, int **lenp);
403 YAZ_EXPORT data1_absyn_cache *data1_absyn_cache_get (data1_handle dh);
404 YAZ_EXPORT data1_attset_cache *data1_attset_cache_get (data1_handle dh);
405 YAZ_EXPORT NMEM data1_nmem_get (data1_handle dh);
406 YAZ_EXPORT void data1_pr_tree (data1_handle dh, data1_node *n, FILE *out);
407 YAZ_EXPORT char *data1_insert_string (data1_handle dh, data1_node *res,
408                                       NMEM m, const char *str);
409 YAZ_EXPORT char *data1_insert_string_n (data1_handle dh, data1_node *res,
410                                         NMEM m, const char *str, size_t len);
411 YAZ_EXPORT data1_node *data1_read_sgml (data1_handle dh, NMEM m,
412                                         const char *buf);
413 YAZ_EXPORT data1_node *data1_read_xml (data1_handle dh,
414                                        int (*rf)(void *, char *, size_t),
415                                        void *fh, NMEM m);
416 YAZ_EXPORT void data1_absyn_trav (data1_handle dh, void *handle,
417                                   void (*fh)(data1_handle dh,
418                                              void *h, data1_absyn *a));
419
420 YAZ_EXPORT data1_attset *data1_attset_search_id (data1_handle dh, int id);
421
422 YAZ_EXPORT char *data1_getNodeValue(data1_node* node, char* pTagPath);
423 YAZ_EXPORT data1_node *data1_LookupNode(data1_node* node, char* pTagPath);
424 YAZ_EXPORT int data1_CountOccurences(data1_node* node, char* pTagPath);
425
426 YAZ_EXPORT FILE *data1_path_fopen (data1_handle dh, const char *file,
427                                    const char *mode);
428
429 /* obsolete functions ... */
430
431 YAZ_EXPORT data1_node *data1_mk_node (data1_handle dh, NMEM m);
432 YAZ_EXPORT data1_node *data1_insert_taggeddata (data1_handle dh,
433                                                 data1_node *root,
434                                                 data1_node *at,
435                                                 const char *tagname, NMEM m);
436 YAZ_EXPORT data1_node *data1_mk_node_type (data1_handle dh, NMEM m, int type);
437 YAZ_EXPORT data1_node *data1_add_taggeddata (data1_handle dh, data1_node *root,
438                                              data1_node *at,
439                                              const char *tagname,
440                                              NMEM m);
441
442 YAZ_END_CDECL
443
444 #endif