Bump year to 2015
[yaz-moved-to-github.git] / include / yaz / ccl.h
1 /* This file is part of the YAZ toolkit.
2  * Copyright (C) Index Data.
3  * All rights reserved.
4  * Redistribution and use in source and binary forms, with or without
5  * modification, are permitted provided that the following conditions are met:
6  *
7  *     * Redistributions of source code must retain the above copyright
8  *       notice, this list of conditions and the following disclaimer.
9  *     * Redistributions in binary form must reproduce the above copyright
10  *       notice, this list of conditions and the following disclaimer in the
11  *       documentation and/or other materials provided with the distribution.
12  *     * Neither the name of Index Data nor the names of its contributors
13  *       may be used to endorse or promote products derived from this
14  *       software without specific prior written permission.
15  *
16  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND ANY
17  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
18  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
19  * DISCLAIMED. IN NO EVENT SHALL THE REGENTS AND CONTRIBUTORS BE LIABLE FOR ANY
20  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
21  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
22  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
23  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
24  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
25  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
26  */
27
28 /** \file ccl.h
29     \brief Header with public definitions for CCL.
30 */
31
32 /*
33  * CCL - header file
34  *
35  *
36  * Old Europagate Log:
37  *
38  * Revision 1.10  1996/01/08  08:41:22  adam
39  * Minor changes.
40  *
41  * Revision 1.9  1995/07/20  08:15:16  adam
42  * Bug fix: Token value for comma and OR were the same!
43  *
44  * Revision 1.8  1995/07/11  12:28:34  adam
45  * New function: ccl_token_simple (split into simple tokens) and
46  *  ccl_token_del (delete tokens).
47  *
48  * Revision 1.7  1995/05/16  09:39:38  adam
49  * LICENSE.
50  *
51  * Revision 1.6  1995/05/11  14:04:03  adam
52  * Changes in the reading of qualifier(s). New function: ccl_qual_fitem.
53  * New variable ccl_case_sensitive, which controls whether reserved
54  * words and field names are case sensitive or not.
55  *
56  * Revision 1.5  1995/02/23  08:32:11  adam
57  * Changed header.
58  *
59  * Revision 1.3  1995/02/16  13:20:10  adam
60  * Spell fix.
61  *
62  * Revision 1.2  1995/02/15  17:43:08  adam
63  * Minor changes to the ccl interface. Bug fix in iso2709 module.
64  *
65  * Revision 1.1  1995/02/14  19:55:21  adam
66  * Header files ccl.h/cclp.h are gone! They have been merged an
67  * moved to ../include/ccl.h.
68  *
69  */
70
71 #ifndef CCL_H
72 #define CCL_H
73
74 #include <yaz/yconfig.h>
75 #include <stdio.h>
76 #include <yaz/xmalloc.h>
77 #include <yaz/wrbuf.h>
78
79 YAZ_BEGIN_CDECL
80
81 #define YAZ_781 1
82
83 #define CCL_ERR_OK                0
84 #define CCL_ERR_TERM_EXPECTED     1
85 #define CCL_ERR_RP_EXPECTED       2
86 #define CCL_ERR_SETNAME_EXPECTED  3
87 #define CCL_ERR_OP_EXPECTED       4
88 #define CCL_ERR_BAD_RP            5
89 #define CCL_ERR_UNKNOWN_QUAL      6
90 #define CCL_ERR_DOUBLE_QUAL       7
91 #define CCL_ERR_EQ_EXPECTED       8
92 #define CCL_ERR_BAD_RELATION      9
93 #define CCL_ERR_TRUNC_NOT_LEFT   10
94 #define CCL_ERR_TRUNC_NOT_BOTH   11
95 #define CCL_ERR_TRUNC_NOT_RIGHT  12
96 #define CCL_ERR_TRUNC_NOT_EMBED  13
97 #define CCL_ERR_TRUNC_NOT_SINGLE 14
98
99 /** \brief attribute node (type, value) pair as used in RPN */
100 struct ccl_rpn_attr {
101     /** \brief next attribute */
102     struct ccl_rpn_attr *next;
103     /** \brief attribute set */
104     char *set;
105     /** \brief attribute type, Bib-1: 1=use, 2=relation, 3=position, etc */
106     int type;
107     /** \brief attribute value type (numeric or string) */
108     int kind;
109 #define CCL_RPN_ATTR_NUMERIC 1
110 #define CCL_RPN_ATTR_STRING 2
111     union {
112         /** \brief numeric attribute value */
113         int numeric;
114         /** \brief string attribute value */
115         char *str;
116     } value;
117 };
118
119 /** \brief node type or RPN tree generated by the CCL parser */
120 enum ccl_rpn_kind {
121     CCL_RPN_AND,
122     CCL_RPN_OR,
123     CCL_RPN_NOT,
124     CCL_RPN_TERM,
125     CCL_RPN_SET,
126     CCL_RPN_PROX
127 };
128
129 /** \brief RPN tree structure node */
130 struct ccl_rpn_node {
131     /** \brief node type, one of CCL_RPN_AND, CCL_RPN_OR, etc */
132     enum ccl_rpn_kind kind;
133     union {
134         /** \brief Boolean including proximity 0=left, 1=right, 2=prox parms */
135         struct ccl_rpn_node *p[3];
136         /** \brief Attributes + Term */
137         struct {
138             char *term;
139             char *qual;
140             struct ccl_rpn_attr *attr_list;
141         } t;
142         /** Result set */
143         char *setname;
144     } u;
145 };
146
147 /** \brief CCL bibset, AKA profile */
148 typedef struct ccl_qualifiers *CCL_bibset;
149
150 /** \brief CCL parser */
151 typedef struct ccl_parser *CCL_parser;
152
153 /**
154    \brief parse CCL find string using CCL profile return RPN tree
155
156    Parses a CCL Find command in a simple C string. Returns CCL parse
157    tree node describing RPN if parsing is successful. If parsing is
158    unsuccesful, NULL is returned and error and pos is set accordingly.
159 */
160 YAZ_EXPORT
161 struct ccl_rpn_node *ccl_find_str(CCL_bibset bibset,
162                                   const char *str, int *error, int *pos);
163
164
165 /**
166    \brief parse CCL find string with parser and return RPN tree
167
168    Parses a CCL Find command in a simple C string. Returns CCL parse
169    tree node describing RPN if parsing is successful. If parsing is
170    unsuccesful, NULL is returned and error and pos is set accordingly.
171 */
172 YAZ_EXPORT
173 struct ccl_rpn_node *ccl_parser_find_str(CCL_parser cclp, const char *str);
174
175 /** Set case sensitivity for parser */
176 YAZ_EXPORT
177 void ccl_parser_set_case(CCL_parser p, int case_sensitivity_flag);
178
179 /** Return english-readable error message for CCL parser error number */
180 YAZ_EXPORT
181 const char *ccl_err_msg(int ccl_errno);
182
183 /** Delete RPN tree returned by ccl_find */
184 YAZ_EXPORT
185 void ccl_rpn_delete(struct ccl_rpn_node *rpn);
186
187 /** Dump RPN tree in readable format to fd_out */
188 YAZ_EXPORT
189 void ccl_pr_tree(struct ccl_rpn_node *rpn, FILE *fd_out);
190
191 /** Add qualifier and supply attribute pairs for it */
192 YAZ_EXPORT
193 void ccl_qual_add(CCL_bibset b, const char *name, int no, int *attr);
194
195 /** Add qualifier and supply attributes pairs+attribute set for it */
196 YAZ_EXPORT
197 void ccl_qual_add_set(CCL_bibset b, const char *name, int no,
198                       int *type, int *value, char **svalue, char **attsets);
199
200 /** Add special qualifier */
201 YAZ_EXPORT
202 void ccl_qual_add_special(CCL_bibset bibset, const char *n, const char *cp);
203
204 /** Add combo qualifier */
205 YAZ_EXPORT
206 void ccl_qual_add_combi(CCL_bibset b, const char *n, const char **names);
207
208 /** Read CCL qualifier list spec from file inf */
209 YAZ_EXPORT
210 void ccl_qual_file(CCL_bibset bibset, FILE *inf);
211
212 /** Read CCL qualifier list spec from file inf */
213 YAZ_EXPORT
214 int ccl_qual_fname(CCL_bibset bibset, const char *fname);
215
216 /** Add CCL qualifier as buf spec(multiple lines). */
217 YAZ_EXPORT
218 void ccl_qual_buf(CCL_bibset bibset, const char *buf);
219
220 /** Add CCL qualifier as line spec. Note: line is _modified_ */
221 YAZ_EXPORT
222 void ccl_qual_line(CCL_bibset bibset, char *line);
223
224 /* Add CCL qualifier by using qual_name + value pair */
225 YAZ_EXPORT
226 void ccl_qual_fitem(CCL_bibset bibset, const char *value,
227                     const char *qual_name);
228 YAZ_EXPORT
229 int ccl_qual_fitem2(CCL_bibset bibset, const char *value,
230                     const char *qual_name, const char **addinfo);
231
232 /** Make CCL qualifier set */
233 YAZ_EXPORT
234 CCL_bibset ccl_qual_mk(void);
235
236 /** Make CCL qualifier set from an existing one (duplicate it) */
237 YAZ_EXPORT
238 CCL_bibset ccl_qual_dup(CCL_bibset b);
239
240 /** Delete CCL qualifier set */
241 YAZ_EXPORT
242 void ccl_qual_rm(CCL_bibset *b);
243
244 /** Char-to-upper function */
245 extern int(*ccl_toupper)(int c);
246
247 /** CCL version of ccl_stricmp */
248 YAZ_EXPORT
249 int ccl_stricmp(const char *s1, const char *s2);
250
251 /** CCL version of ccl_memicmp */
252 YAZ_EXPORT
253 int ccl_memicmp(const char *s1, const char *s2, size_t n);
254
255 /** Create CCL parser */
256 YAZ_EXPORT
257 CCL_parser ccl_parser_create(CCL_bibset bibset);
258
259 /** Destroy CCL parser */
260 YAZ_EXPORT
261 void ccl_parser_destroy(CCL_parser p);
262
263 /** Search for special qualifier */
264 YAZ_EXPORT
265 const char **ccl_qual_search_special(CCL_bibset b, const char *name);
266 /** Pretty-print CCL RPN node tree to WRBUF */
267 YAZ_EXPORT
268 void ccl_pquery(WRBUF w, struct ccl_rpn_node *p);
269
270 YAZ_EXPORT
271 int ccl_parser_get_error(CCL_parser cclp, int *pos);
272
273 YAZ_EXPORT
274 struct ccl_rpn_node *ccl_rpn_node_create(enum ccl_rpn_kind kind);
275
276 YAZ_EXPORT
277 void ccl_add_attr_numeric(struct ccl_rpn_node *p, const char *set,
278                           int type, int value);
279
280 YAZ_EXPORT
281 void ccl_add_attr_string(struct ccl_rpn_node *p, const char *set,
282                          int type, char *value);
283
284 YAZ_EXPORT
285 int ccl_search_stop(CCL_bibset bibset, const char *qname,
286                     const char *src_str, size_t src_len);
287
288
289 /** \brief stop words handle (pimpl) */
290 typedef struct ccl_stop_words *ccl_stop_words_t;
291
292 /** \brief creates stop words handle */
293 YAZ_EXPORT
294 ccl_stop_words_t ccl_stop_words_create(void);
295
296 /** \brief destroys stop words handle */
297 YAZ_EXPORT
298 void ccl_stop_words_destroy(ccl_stop_words_t csw);
299
300 /** \brief removes stop words from RPN tree */
301 YAZ_EXPORT
302 int ccl_stop_words_tree(ccl_stop_words_t csw,
303                         CCL_bibset bibset, struct ccl_rpn_node **t);
304
305 /** \brief returns information about removed "stop" words */
306 YAZ_EXPORT
307 int ccl_stop_words_info(ccl_stop_words_t csw, int idx,
308                         const char **qualname, const char **term);
309
310 YAZ_EXPORT
311 struct ccl_rpn_attr *ccl_parser_qual_search(CCL_parser cclp, const char *name,
312                                             size_t name_len);
313
314
315 #ifndef ccl_assert
316 #define ccl_assert(x) ;
317 #endif
318
319
320 /** \brief common attributes
321
322    use (1)
323
324    relation (2)
325                             -1  none
326                              0  ordered
327                            1-6  relation (<, <=, =, >=, >, <>)
328
329    position (3)
330                             -1  none
331                              1  first in field
332                              2  first in sub field
333                              3  any position in field
334    structure (4)
335                             -1  none
336                              0  word/phrase auto select
337                              1  phrase
338                              2  word
339                              3  key
340                              4  year
341                              5  date (normalized)
342                              6  word list
343                            100  date (un-normalized)
344                            101  name (normalized)
345                            102  name (un-normalized)
346    truncation (5)
347    completeness (6)
348 */
349
350 #define CCL_BIB1_USE 1
351 #define CCL_BIB1_REL 2
352 #define CCL_BIB1_POS 3
353 #define CCL_BIB1_STR 4
354 #define CCL_BIB1_TRU 5
355 #define CCL_BIB1_COM 6
356
357 #define CCL_BIB1_STR_WP (-1)
358 #define CCL_BIB1_STR_AND_LIST (-2)
359 #define CCL_BIB1_STR_OR_LIST (-3)
360 #define CCL_BIB1_STR_AUTO_GROUP (-4)
361 #define CCL_BIB1_REL_ORDER (-1)
362 #define CCL_BIB1_REL_PORDER (-2)
363 #define CCL_BIB1_REL_OMIT_EQUALS (-3)
364
365 #define CCL_BIB1_TRU_CAN_LEFT (-1)
366 #define CCL_BIB1_TRU_CAN_RIGHT (-2)
367 #define CCL_BIB1_TRU_CAN_BOTH  (-3)
368 #define CCL_BIB1_TRU_CAN_NONE  (-4)
369 #define CCL_BIB1_TRU_CAN_REGEX (-5)
370 #define CCL_BIB1_TRU_CAN_Z3958 (-6)
371
372
373 YAZ_END_CDECL
374
375 #endif
376
377 /*
378  * Local variables:
379  * c-basic-offset: 4
380  * c-file-style: "Stroustrup"
381  * indent-tabs-mode: nil
382  * End:
383  * vim: shiftwidth=4 tabstop=8 expandtab
384  */
385