Add emacs/vim local variables
[yaz-moved-to-github.git] / src / pquery.c
1 /* This file is part of the YAZ toolkit.
2  * Copyright (C) 1995-2011 Index Data
3  * See the file LICENSE for details.
4  */
5 /**
6  * \file pquery.c
7  * \brief Implements PQF parsing
8  */
9 #if HAVE_CONFIG_H
10 #include <config.h>
11 #endif
12
13 #include <stdio.h>
14 #include <string.h>
15 #include <stdlib.h>
16
17 #include <yaz/proto.h>
18 #include <yaz/oid_db.h>
19 #include <yaz/pquery.h>
20
21 struct yaz_pqf_parser {
22     const char *query_buf;
23     const char *query_ptr;
24     const char *lex_buf;
25     size_t lex_len;
26     int query_look;
27     char *left_sep;
28     char *right_sep;
29     int escape_char;
30     int term_type;
31     int external_type;
32     int error;
33 };
34
35 static Z_RPNStructure *rpn_structure(struct yaz_pqf_parser *li, ODR o,
36                                      int num_attr, int max_attr, 
37                                      Odr_int *attr_list, char **attr_clist,
38                                      Odr_oid **attr_set);
39
40 static Odr_oid *query_oid_getvalbyname(struct yaz_pqf_parser *li, ODR o)
41 {
42     char buf[32];
43
44     if (li->lex_len >= sizeof(buf)-1)
45         return 0;
46     memcpy(buf, li->lex_buf, li->lex_len);
47     buf[li->lex_len] = '\0';
48     return yaz_string_to_oid_odr(yaz_oid_std(), CLASS_ATTSET, buf, o);
49 }
50
51 static int compare_term(struct yaz_pqf_parser *li, const char *src,
52                         size_t off)
53 {
54     size_t len=strlen(src);
55     
56     if (li->lex_len == len+off && !memcmp(li->lex_buf+off, src, len-off))
57         return 1;
58     return 0;
59 }
60
61 static int query_token(struct yaz_pqf_parser *li)
62 {
63     int sep_char = ' ';
64     const char *sep_match;
65     const char **qptr = &li->query_ptr;
66
67     while (**qptr == ' ')
68         (*qptr)++;
69     if (**qptr == '\0')
70         return 0;
71     li->lex_len = 0;
72     if ((sep_match = strchr(li->left_sep, **qptr)))
73     {
74         sep_char = li->right_sep[sep_match - li->left_sep];
75         ++(*qptr);
76     }
77     li->lex_buf = *qptr;
78    
79     if (**qptr == li->escape_char && yaz_isdigit((*qptr)[1]))
80     {
81         ++(li->lex_len);
82         ++(*qptr);
83         return 'l';
84     }
85     while (**qptr && **qptr != sep_char)
86     {
87         if (**qptr == '\\')
88         {
89             ++(li->lex_len);
90             ++(*qptr);
91         }
92         ++(li->lex_len);
93         ++(*qptr);
94     }
95     if (**qptr)
96         ++(*qptr);
97     if (sep_char == ' ' &&
98         li->lex_len >= 1 && li->lex_buf[0] == li->escape_char)
99     {
100         if (compare_term(li, "and", 1))
101             return 'a';
102         if (compare_term(li, "or", 1))
103             return 'o';
104         if (compare_term(li, "not", 1))
105             return 'n';
106         if (compare_term(li, "attr", 1))
107             return 'l';
108         if (compare_term(li, "set", 1))
109             return 's';
110         if (compare_term(li, "attrset", 1))
111             return 'r';
112         if (compare_term(li, "prox", 1))
113             return 'p';
114         if (compare_term(li, "term", 1))
115             return 'y';
116     }
117     return 't';
118 }
119
120 static int lex(struct yaz_pqf_parser *li)
121 {
122     return li->query_look = query_token(li);
123 }
124
125 int escape_string(char *out_buf, const char *in, int len)
126 {
127
128     char *out = out_buf;
129     while (--len >= 0)
130         if (*in == '\\' && len > 0)
131         {
132             --len;
133             switch (*++in)
134             {
135             case 't':
136                 *out++ = '\t';
137                 break;
138             case 'n':
139                 *out++ = '\n';
140                 break;
141             case 'r':
142                 *out++ = '\r';
143                 break;
144             case 'f':
145                 *out++ = '\f';
146                 break;
147             case 'x':
148                 if (len > 1)
149                 {
150                     char s[4];
151                     int n = 0;
152                     s[0] = *++in;
153                     s[1] = *++in;
154                     s[2] = '\0';
155                     len = len - 2;
156                     sscanf(s, "%x", &n);
157                     *out++ = n;
158                 }
159                 break;
160             case '0':
161             case '1':
162             case '2':
163             case '3':
164                 if (len > 1)
165                 {
166                     char s[4];
167                     int n = 0;
168                     s[0] = *in;
169                     s[1] = *++in;                   
170                     s[2] = *++in;
171                     s[3] = '\0';
172                     len = len - 2;
173                     sscanf(s, "%o", &n);
174                     *out++ = n;
175                 }
176                 break;
177             default:
178                 *out++ = *in;
179                 break;
180             }
181             in++;
182         }
183         else
184             *out++ = *in++;
185     return out - out_buf;
186 }
187
188 int p_query_parse_attr(struct yaz_pqf_parser *li, ODR o,
189                               int num_attr, Odr_int *attr_list,
190                               char **attr_clist, Odr_oid **attr_set)
191 {
192     const char *cp;
193     size_t i;
194
195     if (!(cp = strchr(li->lex_buf, '=')) ||
196         (size_t) (cp-li->lex_buf) > li->lex_len)
197     {
198         attr_set[num_attr] = query_oid_getvalbyname(li, o);
199         if (attr_set[num_attr] == 0)
200         {
201             li->error = YAZ_PQF_ERROR_ATTSET;
202             return 0;
203         }
204         if (!lex(li))
205         {
206             li->error = YAZ_PQF_ERROR_MISSING;
207             return 0;
208         }
209         if (!(cp = strchr(li->lex_buf, '=')))
210         {
211             li->error = YAZ_PQF_ERROR_BADATTR;
212             return 0;
213         }
214     }
215     else 
216     {
217         if (num_attr > 0)
218             attr_set[num_attr] = attr_set[num_attr-1];
219         else
220             attr_set[num_attr] = 0;
221     }
222     if (*li->lex_buf < '0' || *li->lex_buf > '9')
223     {
224         li->error = YAZ_PQF_ERROR_BAD_INTEGER;
225         return 0;
226     }
227     attr_list[2*num_attr] = odr_atoi(li->lex_buf);
228     cp++;
229
230     /* inspect value .. and make it a integer if it appears to be */
231     for (i = cp - li->lex_buf; i < li->lex_len; i++)
232         if (li->lex_buf[i] < '0' || li->lex_buf[i] > '9')
233         {
234             int len = li->lex_len - (cp - li->lex_buf);
235             attr_list[2*num_attr+1] = 0;
236             attr_clist[num_attr] = (char *) odr_malloc(o, len+1);
237             len = escape_string(attr_clist[num_attr], cp, len);
238             attr_clist[num_attr][len] = '\0';
239             return 1;
240         }
241     attr_list[2*num_attr+1] = odr_atoi(cp);
242     attr_clist[num_attr] = 0;
243     return 1;
244 }
245
246 Z_AttributeList *get_attributeList(ODR o,
247         int num_attr, Odr_int *attr_list,
248         char **attr_clist, Odr_oid **attr_set)
249 {
250     int i, k = 0;
251     Odr_int *attr_tmp;
252     Z_AttributeElement **elements;
253     Z_AttributeList *attributes= (Z_AttributeList *) odr_malloc(o, sizeof(*attributes));
254     attributes->num_attributes = num_attr;
255     if (!num_attr) {
256         attributes->attributes = (Z_AttributeElement**)odr_nullval();
257         return attributes;
258     }
259     elements = (Z_AttributeElement**) odr_malloc (o, num_attr * sizeof(*elements));
260
261     attr_tmp = (Odr_int *)odr_malloc(o, num_attr * 2 * sizeof(*attr_tmp));
262     memcpy(attr_tmp, attr_list, num_attr * 2 * sizeof(*attr_tmp));
263     for (i = num_attr; --i >= 0; )
264     {
265         int j;
266         for (j = i+1; j<num_attr; j++)
267             if (attr_tmp[2*j] == attr_tmp[2*i])
268                 break;
269         if (j < num_attr)
270             continue;
271         elements[k] =
272             (Z_AttributeElement*)odr_malloc(o,sizeof(**elements));
273         elements[k]->attributeType = &attr_tmp[2*i];
274         elements[k]->attributeSet = attr_set[i];
275
276         if (attr_clist[i])
277         {
278             elements[k]->which = Z_AttributeValue_complex;
279             elements[k]->value.complex = (Z_ComplexAttribute *)
280                 odr_malloc(o, sizeof(Z_ComplexAttribute));
281             elements[k]->value.complex->num_list = 1;
282             elements[k]->value.complex->list =
283                 (Z_StringOrNumeric **)
284                 odr_malloc(o, 1 * sizeof(Z_StringOrNumeric *));
285             elements[k]->value.complex->list[0] =
286                 (Z_StringOrNumeric *)
287                 odr_malloc(o, sizeof(Z_StringOrNumeric));
288             elements[k]->value.complex->list[0]->which =
289                 Z_StringOrNumeric_string;
290             elements[k]->value.complex->list[0]->u.string =
291                 attr_clist[i];
292             elements[k]->value.complex->semanticAction = 0;
293             elements[k]->value.complex->num_semanticAction = 0;
294         }
295         else
296         {
297             elements[k]->which = Z_AttributeValue_numeric;
298             elements[k]->value.numeric = &attr_tmp[2*i+1];
299         }
300         k++;
301     }
302     attributes->num_attributes = k;
303     attributes->attributes = elements;
304     return attributes;
305 }
306
307 static Z_AttributesPlusTerm *rpn_term_attributes(struct yaz_pqf_parser *li, ODR o, Z_AttributeList *attributes) {
308     Z_AttributesPlusTerm *zapt;
309     Odr_oct *term_octet;
310     Z_Term *term;
311
312     zapt = (Z_AttributesPlusTerm *)odr_malloc(o, sizeof(*zapt));
313     term = (Z_Term *)odr_malloc(o, sizeof(*term));
314     zapt->term = term;
315     zapt->attributes = attributes;
316
317     term_octet = (Odr_oct *)odr_malloc(o, sizeof(*term_octet));
318     term_octet->buf = (unsigned char *)odr_malloc(o, 1 + li->lex_len);
319     term_octet->size = term_octet->len =
320         escape_string((char *) (term_octet->buf), li->lex_buf, li->lex_len);
321     term_octet->buf[term_octet->size] = 0;  /* null terminate */
322     
323     switch (li->term_type)
324     {
325     case Z_Term_general:
326         term->which = Z_Term_general;
327         term->u.general = term_octet;
328         break;
329     case Z_Term_characterString:
330         term->which = Z_Term_characterString;
331         term->u.characterString = (char*) term_octet->buf; 
332         /* null terminated above */
333         break;
334     case Z_Term_numeric:
335         term->which = Z_Term_numeric;
336         term->u.numeric = odr_intdup(o, odr_atoi((const char*) term_octet->buf));
337         break;
338     case Z_Term_null:
339         term->which = Z_Term_null;
340         term->u.null = odr_nullval();
341         break;
342     case Z_Term_external:
343         term->which = Z_Term_external;
344         term->u.external = 0;
345         break;
346     default:
347         term->which = Z_Term_null;
348         term->u.null = odr_nullval();
349         break;
350     }
351     return zapt;
352
353 }
354
355 static Z_AttributesPlusTerm *rpn_term(struct yaz_pqf_parser *li, ODR o,
356                                       int num_attr, Odr_int *attr_list,
357                                       char **attr_clist, Odr_oid **attr_set)
358 {
359     return rpn_term_attributes(li, o, get_attributeList(o, num_attr, attr_list, attr_clist, attr_set));
360 }
361
362 static Z_Operand *rpn_simple(struct yaz_pqf_parser *li, ODR o,
363                              int num_attr, Odr_int *attr_list,
364                              char **attr_clist,
365                              Odr_oid **attr_set)
366 {
367     Z_Operand *zo;
368
369     zo = (Z_Operand *)odr_malloc(o, sizeof(*zo));
370     switch (li->query_look)
371     {
372     case 't':
373         zo->which = Z_Operand_APT;
374         if (!(zo->u.attributesPlusTerm =
375               rpn_term(li, o, num_attr, attr_list, attr_clist, attr_set)))
376             return 0;
377         lex(li);
378         break;
379     case 's':
380         lex(li);
381         if (!li->query_look)
382         {
383             li->error = YAZ_PQF_ERROR_MISSING;
384             return 0;
385         }
386         zo->which = Z_Operand_resultSetId;
387         zo->u.resultSetId = (char *)odr_malloc(o, li->lex_len+1);
388         memcpy(zo->u.resultSetId, li->lex_buf, li->lex_len);
389         zo->u.resultSetId[li->lex_len] = '\0';
390         lex(li);
391         break;
392     default:
393         /* we're only called if one of the above types are seens so
394            this shouldn't happen */
395         li->error = YAZ_PQF_ERROR_INTERNAL;
396         return 0;
397     }
398     return zo;
399 }
400
401 static Z_ProximityOperator *rpn_proximity(struct yaz_pqf_parser *li, ODR o)
402 {
403     Z_ProximityOperator *p = (Z_ProximityOperator *)odr_malloc(o, sizeof(*p));
404
405     if (!lex(li))
406     {
407         li->error = YAZ_PQF_ERROR_MISSING;
408         return NULL;
409     }
410     if (*li->lex_buf == '1')
411         p->exclusion = odr_booldup(o, 1);
412     else if (*li->lex_buf == '0')
413         p->exclusion = odr_booldup(o, 0);
414     else if (*li->lex_buf == 'v' || *li->lex_buf == 'n')
415         p->exclusion = NULL;
416     else
417     {
418         li->error = YAZ_PQF_ERROR_PROXIMITY;
419         return NULL;
420     }
421
422     if (!lex(li))
423     {
424         li->error = YAZ_PQF_ERROR_MISSING;
425         return NULL;
426     }
427     if (*li->lex_buf >= '0' && *li->lex_buf <= '9')
428         p->distance = odr_intdup(o, odr_atoi(li->lex_buf));
429     else
430     {
431         li->error = YAZ_PQF_ERROR_BAD_INTEGER;
432         return NULL;
433     }
434
435     if (!lex(li))
436     {
437         li->error = YAZ_PQF_ERROR_MISSING;
438         return NULL;
439     }
440     if (*li->lex_buf == '1')
441         p->ordered = odr_booldup(o, 1);
442     else if (*li->lex_buf == '0')
443         p->ordered = odr_booldup(o, 0);
444     else
445     {
446         li->error = YAZ_PQF_ERROR_PROXIMITY;
447         return NULL;
448     }
449     
450     if (!lex (li))
451     {
452         li->error = YAZ_PQF_ERROR_MISSING;
453         return NULL;
454     }
455     if (*li->lex_buf >= '0' && *li->lex_buf <= '9')
456         p->relationType = odr_intdup(o, odr_atoi(li->lex_buf));
457     else
458     {
459         li->error = YAZ_PQF_ERROR_BAD_INTEGER;
460         return NULL;
461     }
462
463     if (!lex(li))
464     {
465         li->error = YAZ_PQF_ERROR_MISSING;
466         return NULL;
467     }
468     if (*li->lex_buf == 'k')
469         p->which = Z_ProximityOperator_known;
470     else if (*li->lex_buf == 'p')
471         p->which = Z_ProximityOperator_private;
472     else
473         p->which = atoi(li->lex_buf);
474
475     if (p->which != Z_ProximityOperator_known
476         && p->which != Z_ProximityOperator_private)
477     {
478         li->error = YAZ_PQF_ERROR_PROXIMITY;
479         return NULL;
480     }
481
482     if (!lex(li))
483     {
484         li->error = YAZ_PQF_ERROR_MISSING;
485         return NULL;
486     }
487     if (*li->lex_buf >= '0' && *li->lex_buf <= '9')
488         p->u.known = odr_intdup(o, odr_atoi(li->lex_buf));
489     else
490     {
491         li->error = YAZ_PQF_ERROR_BAD_INTEGER;
492         return NULL;
493     }
494     return p;
495 }
496
497 static Z_Complex *rpn_complex(struct yaz_pqf_parser *li, ODR o,
498                               int num_attr, int max_attr, 
499                               Odr_int *attr_list, char **attr_clist,
500                               Odr_oid **attr_set)
501 {
502     Z_Complex *zc;
503     Z_Operator *zo;
504
505     zc = (Z_Complex *)odr_malloc(o, sizeof(*zc));
506     zo = (Z_Operator *)odr_malloc(o, sizeof(*zo));
507     zc->roperator = zo;
508     switch (li->query_look)
509     {
510     case 'a':
511         zo->which = Z_Operator_and;
512         zo->u.op_and = odr_nullval();
513         break;
514     case 'o':
515         zo->which = Z_Operator_or;
516         zo->u.op_or = odr_nullval();
517         break;
518     case 'n':
519         zo->which = Z_Operator_and_not;
520         zo->u.and_not = odr_nullval();
521         break;
522     case 'p':
523         zo->which = Z_Operator_prox;
524         zo->u.prox = rpn_proximity(li, o);
525         if (!zo->u.prox)
526             return NULL;
527         break;
528     default:
529         /* we're only called if one of the above types are seens so
530            this shouldn't happen */
531         li->error = YAZ_PQF_ERROR_INTERNAL;
532         return NULL;
533     }
534     lex(li);
535     if (!(zc->s1 =
536           rpn_structure(li, o, num_attr, max_attr, attr_list,
537                         attr_clist, attr_set)))
538         return NULL;
539     if (!(zc->s2 =
540           rpn_structure(li, o, num_attr, max_attr, attr_list,
541                         attr_clist, attr_set)))
542         return NULL;
543     return zc;
544 }
545
546 static void rpn_term_type(struct yaz_pqf_parser *li)
547 {
548     if (!li->query_look)
549         return ;
550     if (compare_term(li, "general", 0))
551         li->term_type = Z_Term_general;
552     else if (compare_term(li, "numeric", 0))
553         li->term_type = Z_Term_numeric;
554     else if (compare_term(li, "string", 0))
555         li->term_type = Z_Term_characterString;
556     else if (compare_term(li, "oid", 0))
557         li->term_type = Z_Term_oid;
558     else if (compare_term(li, "datetime", 0))
559         li->term_type = Z_Term_dateTime;
560     else if (compare_term(li, "null", 0))
561         li->term_type = Z_Term_null;
562 #if 0
563     else if (compare_term(li, "range", 0))
564     {
565         /* prepare for external: range search .. */
566         li->term_type = Z_Term_external;
567         li->external_type = VAL_MULTISRCH2;
568     }
569 #endif
570     lex(li);
571 }
572                            
573 static Z_RPNStructure *rpn_structure(struct yaz_pqf_parser *li, ODR o,
574                                      int num_attr, int max_attr, 
575                                      Odr_int *attr_list,
576                                      char **attr_clist,
577                                      Odr_oid **attr_set)
578 {
579     Z_RPNStructure *sz;
580
581     sz = (Z_RPNStructure *)odr_malloc(o, sizeof(*sz));
582     switch (li->query_look)
583     {
584     case 'a':
585     case 'o':
586     case 'n':
587     case 'p':
588         sz->which = Z_RPNStructure_complex;
589         if (!(sz->u.complex =
590               rpn_complex(li, o, num_attr, max_attr, attr_list,
591                           attr_clist, attr_set)))
592             return NULL;
593         break;
594     case 't':
595     case 's':
596         sz->which = Z_RPNStructure_simple;
597         if (!(sz->u.simple =
598               rpn_simple(li, o, num_attr, attr_list,
599                          attr_clist, attr_set)))
600             return NULL;
601         break;
602     case 'l':
603         lex(li);
604         if (!li->query_look)
605         {
606             li->error = YAZ_PQF_ERROR_MISSING;
607             return 0;
608         }
609         if (num_attr >= max_attr)
610         {
611             li->error = YAZ_PQF_ERROR_TOOMANY;
612             return 0;
613         }
614         if (!p_query_parse_attr(li, o, num_attr, attr_list,
615                                 attr_clist, attr_set))
616             return 0;
617         num_attr++;
618         lex(li);
619         return
620             rpn_structure(li, o, num_attr, max_attr, attr_list,
621                           attr_clist,  attr_set);
622     case 'y':
623         lex(li);
624         rpn_term_type(li);
625         return
626             rpn_structure(li, o, num_attr, max_attr, attr_list,
627                           attr_clist, attr_set);
628     case 0:                /* operator/operand expected! */
629         li->error = YAZ_PQF_ERROR_MISSING;
630         return 0;
631     }
632     return sz;
633 }
634
635 static Z_RPNQuery *p_query_rpn_mk(ODR o, struct yaz_pqf_parser *li)
636 {
637     Z_RPNQuery *zq;
638     Odr_int attr_array[1024];
639     char *attr_clist[512];
640     Odr_oid *attr_set[512];
641     Odr_oid *top_set = 0;
642
643     zq = (Z_RPNQuery *)odr_malloc(o, sizeof(*zq));
644     lex(li);
645     if (li->query_look == 'r')
646     {
647         lex(li);
648         top_set = query_oid_getvalbyname(li, o);
649         if (!top_set)
650         {
651             li->error = YAZ_PQF_ERROR_ATTSET;
652             return NULL;
653         }
654         lex(li);
655     }
656     if (!top_set)
657     {
658         top_set = odr_oiddup(o, yaz_oid_attset_bib_1);
659     }
660
661     zq->attributeSetId = top_set;
662
663     if (!zq->attributeSetId)
664     {
665         li->error = YAZ_PQF_ERROR_ATTSET;
666         return 0;
667     }
668
669     if (!(zq->RPNStructure = rpn_structure(li, o, 0, 512,
670                                            attr_array, attr_clist, attr_set)))
671         return 0;
672     if (li->query_look)
673     {
674         li->error = YAZ_PQF_ERROR_EXTRA;
675         return 0;
676     }
677     return zq;
678 }
679
680 Z_RPNQuery *p_query_rpn(ODR o, const char *qbuf)
681 {
682     struct yaz_pqf_parser li;
683
684     li.error = 0;
685     li.left_sep = "{\"";
686     li.right_sep = "}\"";
687     li.escape_char = '@';
688     li.term_type = Z_Term_general;
689     li.query_buf = li.query_ptr = qbuf;
690     li.lex_buf = 0;
691     return p_query_rpn_mk(o, &li);
692 }
693
694
695 static Z_AttributeList *p_query_scan_attributes_mk(struct yaz_pqf_parser *li,
696                                              ODR o,
697                                              Odr_oid **attributeSetP)
698 {
699     Odr_int attr_list[1024];
700     char *attr_clist[512];
701     Odr_oid *attr_set[512];
702     int num_attr = 0;
703     int max_attr = 512;
704     Odr_oid *top_set = 0;
705
706     lex(li);
707     if (li->query_look == 'r')
708     {
709         lex(li);
710         top_set = query_oid_getvalbyname(li, o);
711         if (!top_set)
712         {
713             li->error = YAZ_PQF_ERROR_ATTSET;
714             return NULL;
715         }
716         lex(li);
717     }
718     if (!top_set)
719     {
720         top_set = odr_oiddup(o, yaz_oid_attset_bib_1);
721     }
722     *attributeSetP = top_set;
723
724     while (1)
725     {
726         if (li->query_look == 'l')
727         {
728             lex(li);
729             if (!li->query_look)
730             {
731                 li->error = YAZ_PQF_ERROR_MISSING;
732                 return 0;
733             }
734             if (num_attr >= max_attr)
735             {
736                 li->error = YAZ_PQF_ERROR_TOOMANY;
737                 return 0;
738             }
739             if (!p_query_parse_attr(li, o, num_attr, attr_list,
740                                     attr_clist, attr_set))
741                 return 0;
742             num_attr++;
743             lex(li);
744         }
745         else if (li->query_look == 'y')
746         {
747             lex(li);
748             rpn_term_type(li);
749         }
750         else
751             break;
752     }
753     return get_attributeList(o, num_attr, attr_list, attr_clist, attr_set);
754 }
755
756 static Z_AttributesPlusTerm *p_query_scan_mk(struct yaz_pqf_parser *li,
757                                                  ODR o,
758                                                  Odr_oid **attributeSetP)
759 {
760     Z_AttributeList *attr_list = p_query_scan_attributes_mk(li, o, attributeSetP);
761     Z_AttributesPlusTerm *apt;
762
763     if (!li->query_look)
764     {
765         li->error = YAZ_PQF_ERROR_MISSING;
766         return 0;
767     }
768     apt = rpn_term_attributes(li, o, attr_list);
769
770     lex(li);
771
772     if (li->query_look != 0)
773     {
774         li->error = YAZ_PQF_ERROR_EXTRA;
775         return 0;
776     }
777     return apt;
778 }
779
780 YAZ_PQF_Parser yaz_pqf_create(void)
781 {
782     YAZ_PQF_Parser p = (YAZ_PQF_Parser) xmalloc(sizeof(*p));
783
784     p->error = 0;
785     p->left_sep = "{\"";
786     p->right_sep = "}\"";
787     p->escape_char = '@';
788     p->term_type = Z_Term_general;
789
790     return p;
791 }
792
793 void yaz_pqf_destroy(YAZ_PQF_Parser p)
794 {
795     xfree(p);
796 }
797
798 Z_RPNQuery *yaz_pqf_parse(YAZ_PQF_Parser p, ODR o, const char *qbuf)
799 {
800     if (!p)
801         return 0;
802     p->query_buf = p->query_ptr = qbuf;
803     p->lex_buf = 0;
804     return p_query_rpn_mk(o, p);
805 }
806
807 Z_AttributesPlusTerm *yaz_pqf_scan(YAZ_PQF_Parser p, ODR o,
808                                    Odr_oid **attributeSetP,
809                                    const char *qbuf)
810 {
811     if (!p)
812         return 0;
813     p->query_buf = p->query_ptr = qbuf;
814     p->lex_buf = 0;
815     return p_query_scan_mk(p, o, attributeSetP);
816 }
817
818 Z_AttributeList *yaz_pqf_scan_attribute_list(YAZ_PQF_Parser p, ODR o,
819                                    Odr_oid **attributeSetP,
820                                    const char *qbuf)
821 {
822     if (!p)
823         return 0;
824     p->query_buf = p->query_ptr = qbuf;
825     p->lex_buf = 0;
826     return p_query_scan_attributes_mk(p, o, attributeSetP);
827 }
828
829 static Z_FacetField* parse_facet(ODR odr, const char *facet, int length)
830 {
831     YAZ_PQF_Parser pqf_parser = yaz_pqf_create();
832     char *buffer = odr_strdupn(odr, facet, length);
833     Odr_oid *attributeSetId;
834     Z_FacetField *facet_field = 0;
835     Z_AttributeList *attribute_list =
836         yaz_pqf_scan_attribute_list(pqf_parser, odr, &attributeSetId, buffer);
837     
838     if (attribute_list)
839     {
840         facet_field = odr_malloc(odr, sizeof(*facet_field));
841         facet_field->attributes = attribute_list;
842         facet_field->num_terms = 0;
843         facet_field->terms = 0;
844     }
845     yaz_pqf_destroy(pqf_parser);
846     return facet_field;
847 }
848
849 #define FACET_DElIMITER ','
850
851 static int scan_facet_argument(const char *arg) {
852     int index;
853     int length = strlen(arg);
854     int count = 1;
855     for (index = 0; index < length; index++) {
856         if (arg[index] == FACET_DElIMITER)
857             count++;
858     }
859     return count;
860 }
861
862 /**
863  * yax_pdg_parse_facet_list: Parses a comma-separated list of AttributeList(s) into a FacetList.
864  * It does not handle the optional facet term(s).
865  *
866  */
867 Z_FacetList *yaz_pqf_parse_facet_list(ODR odr, const char *facet) {
868     Z_FacetList *facet_list = 0;
869     Z_FacetField  **elements;
870     int index = 0;
871     int num_elements = scan_facet_argument(facet);
872     if (num_elements == 0)
873         return facet_list;
874     facet_list = odr_malloc(odr, sizeof(*facet_list));
875     facet_list->num = num_elements;
876     elements = odr_malloc(odr, num_elements * sizeof(*elements));
877     facet_list->elements = elements;
878     for (index = 0; index < num_elements;) {
879         const char *pos = strchr(facet, FACET_DElIMITER);
880         if (pos == 0)
881             pos = facet + strlen(facet);
882         elements[index] = parse_facet(odr, (const char *) facet, (pos - facet));
883         if (elements[index]) {
884             index++;
885         }
886         else {
887             num_elements--;
888             facet_list->num = num_elements;
889         }
890         facet = pos + 1;
891     }
892     return facet_list;
893 }
894
895
896
897 int yaz_pqf_error(YAZ_PQF_Parser p, const char **msg, size_t *off)
898 {
899     switch (p->error)
900     {
901     case YAZ_PQF_ERROR_NONE:
902         *msg = "no error"; break;
903     case YAZ_PQF_ERROR_EXTRA:
904         *msg = "extra token"; break;
905     case YAZ_PQF_ERROR_MISSING:
906         *msg = "missing token"; break;
907     case YAZ_PQF_ERROR_ATTSET:
908         *msg = "unknown attribute set"; break;
909     case YAZ_PQF_ERROR_TOOMANY:
910         *msg = "too many attributes"; break;
911     case YAZ_PQF_ERROR_BADATTR:
912         *msg = "bad attribute specification"; break;
913     case YAZ_PQF_ERROR_INTERNAL:
914         *msg = "internal error"; break;
915     case YAZ_PQF_ERROR_PROXIMITY:
916         *msg = "proximity error"; break;
917     case YAZ_PQF_ERROR_BAD_INTEGER:
918         *msg = "bad integer"; break;
919     default:
920         *msg = "unknown error"; break;
921     }
922     *off = p->query_ptr - p->query_buf;
923     return p->error;
924 }
925 /*
926  * Local variables:
927  * c-basic-offset: 4
928  * c-file-style: "Stroustrup"
929  * indent-tabs-mode: nil
930  * End:
931  * vim: shiftwidth=4 tabstop=8 expandtab
932  */
933