55219f97d7fd7bc56a2c7214a5905eea2b2edcde
[idzebra-moved-to-github.git] / test / api / test_search.c
1 /* This file is part of the Zebra server.
2    Copyright (C) 1995-2008 Index Data
3
4 Zebra is free software; you can redistribute it and/or modify it under
5 the terms of the GNU General Public License as published by the Free
6 Software Foundation; either version 2, or (at your option) any later
7 version.
8
9 Zebra is distributed in the hope that it will be useful, but WITHOUT ANY
10 WARRANTY; without even the implied warranty of MERCHANTABILITY or
11 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
12 for more details.
13
14 You should have received a copy of the GNU General Public License
15 along with this program; if not, write to the Free Software
16 Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
17
18 */
19
20 /** \file
21     \brief test various search attributes */
22 #include <yaz/test.h>
23 #include "testlib.h"
24
25 const char *myrec[] = {
26         "<gils>\n<title>My title</title>\n"
27         "  <abstract>test record with single coordset, negatives</abstract>\n"
28         "  <Spatial-Domain><Bounding-Coordinates>\n"
29         "    <West-Bounding-Coordinate> -120 </West-Bounding-Coordinate>\n"
30         "    <East-Bounding-Coordinate> -102 </East-Bounding-Coordinate>\n"
31         "    <North-Bounding-Coordinate>  49 </North-Bounding-Coordinate>\n"
32         "    <South-Bounding-Coordinate>  31 </South-Bounding-Coordinate>\n"
33         "  </Bounding-Coordinates></Spatial-Domain>\n"
34         "</gils>\n",
35
36         "<gils>\n<title>My x title</title>\n"
37         "  <abstract>second test with two coord sets</abstract>\n"
38         "  <Spatial-Domain><Bounding-Coordinates>\n"
39         "    <West-Bounding-Coordinate> -120 </West-Bounding-Coordinate>\n"
40         "    <East-Bounding-Coordinate> -102 </East-Bounding-Coordinate>\n"
41         "    <North-Bounding-Coordinate>  49 </North-Bounding-Coordinate>\n"
42         "    <South-Bounding-Coordinate>  31 </South-Bounding-Coordinate>\n"
43         "  </Bounding-Coordinates>"
44         "  <Bounding-Coordinates>\n"
45         "    <West-Bounding-Coordinate> -125 </West-Bounding-Coordinate>\n"
46         "    <East-Bounding-Coordinate> -108 </East-Bounding-Coordinate>\n"
47         "    <North-Bounding-Coordinate>  41 </North-Bounding-Coordinate>\n"
48         "    <South-Bounding-Coordinate>  25 </South-Bounding-Coordinate>\n"
49         "  </Bounding-Coordinates></Spatial-Domain>\n"
50         "</gils>\n",
51
52         "<gils>\n<title>My title x</title>\n</gils>\n" ,
53
54         "<test_search>\n"
55         " <date>2107-09-19 00:00:00</date>\n"
56         "</test_search>\n"
57         ,
58         0} ;
59         
60 static void tst(int argc, char **argv)
61 {
62     ZebraService zs = tl_start_up(0, argc, argv);
63     ZebraHandle zh = zebra_open(zs, 0);
64
65     YAZ_CHECK(tl_init_data(zh, myrec));
66
67     /* simple term */
68     YAZ_CHECK(tl_query(zh, "@attr 1=4 notfound", 0));
69     YAZ_CHECK(tl_query(zh, "@attr 1=4 title", 3));
70     tl_fetch_compare(zh, 1, "zebra::facet::title:w", yaz_oid_recsyn_sutrs,
71                      "term 3 3: my\n"
72                      "term 3 3: title\n"
73                      "term 2 2: x\n");
74
75     /* trunc right */
76     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=1 titl", 3));
77
78     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=1 x", 2));
79     tl_fetch_compare(zh, 1, "zebra::facet::title:w", yaz_oid_recsyn_sutrs,
80                      "term 2 2: my\n"
81                      "term 2 2: title\n"
82                      "term 2 2: x\n");
83
84     /* trunc left */
85     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=2 titl", 0));
86     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=2 x", 2));
87     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=2 le", 3));
88
89     /* trunc left&right */
90     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=3 titl", 3));
91     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=3 x", 2));
92     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=3 le", 3));
93
94     /* trunc none */
95     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=100 titl", 0));
96     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=100 x", 2));
97     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=100 le", 0));
98
99     /* trunc: process # in term */
100     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=101 titl", 0));
101     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=101 x", 2));
102     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=101 le", 0));
103     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=101 #le", 3));
104
105     /* trunc: re-1 */
106     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=102 titl", 0));
107     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=102 x", 2));
108     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=102 le", 0));
109     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=102 .*le", 3));
110
111     /* trunc: re-2 */
112     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 titl", 3));
113     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 titlx", 3));
114     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 titlxx", 0));
115     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 x", 2));
116     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 le", 0));
117     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=103 .*le", 3));
118
119     /* trunc: CCL #=. ?=.* (?[0-9] = n times .) */
120     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 titl", 0));
121     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 tit#e", 3));
122     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 x", 2));
123     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 le", 0));
124     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 ?le", 3));
125     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 ?1le", 0));
126     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 ?2le", 0));
127     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=104 ?3le", 3));
128
129     /* trunc: * = .*   ! = . and right truncate */
130     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=105 titl", 3));
131     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=105 tit!e", 3));
132     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=105 x", 2));
133     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=105 le", 0));
134     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=105 *le", 3));
135
136     /* trunc: * = .*   ! = . and do not truncate */
137     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=106 titl", 0));
138     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=106 tit!e", 3));
139     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=106 x", 2));
140     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=106 le", 0));
141     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 5=106 *le", 3));
142
143     /* string relations, < */
144     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=1 0", 0));
145     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=1 my", 0));
146
147     /* string relations, <= */
148     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=2 my", 3));
149     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=2 mn", 0));
150
151     /* = */
152     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=3 my", 3));
153
154     /* string relations, >= */
155     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=4 x", 2));
156     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=4 tu", 2));
157     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=4 title", 3));
158
159     /* string relations, > */
160     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=5 x", 0));
161     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=5 tu", 2));
162     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=5 title", 2));
163
164     /* always-matches relation */
165     YAZ_CHECK(tl_query(zh, "@attr 1=_ALLRECORDS @attr 2=103 {ym}", 4));
166     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 2=103 {x my}", 3));
167     YAZ_CHECK(tl_query_x(zh, "@attr 1=1 @attr 2=103 {x my}", 0, 114));
168
169     /* and searches */
170     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 notfound @attr 1=4 x", 0)); 
171     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 x @attr 1=4 notfound", 0)); 
172     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 notfound @attr 1=4 notfound", 0)); 
173     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 x @attr 1=4 x", 2)); 
174     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 x @attr 1=4 my", 2)); 
175     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 my @attr 1=4 x", 2)); 
176     YAZ_CHECK(tl_query(zh, "@and @attr 1=4 my @attr 1=4 my", 3)); 
177
178     /* or searches */
179     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 notfound @attr 1=4 x", 2)); 
180     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 x @attr 1=4 notfound", 2)); 
181     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 notfound @attr 1=4 notfound", 0)); 
182     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 x @attr 1=4 x", 2)); 
183     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 x @attr 1=4 my", 3)); 
184     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 my @attr 1=4 x", 3)); 
185     YAZ_CHECK(tl_query(zh, "@or @attr 1=4 my @attr 1=4 my", 3)); 
186
187     /* not searches */
188     /* bug 619 */
189     YAZ_CHECK(tl_query(zh, "@not @attr 1=4 notfound @attr 1=4 x", 0)); 
190     YAZ_CHECK(tl_query(zh, "@not @attr 1=4 x @attr 1=4 x", 0));
191     YAZ_CHECK(tl_query(zh, "@not @attr 1=4 my @attr 1=4 x", 1));
192     YAZ_CHECK(tl_query(zh, "@not @attr 1=4 my @attr 1=4 notfound", 3));
193     YAZ_CHECK(tl_query(zh, "@not @attr 1=4 notfound @attr 1=4 notfound", 0));
194     
195     /* phrase searches */
196     YAZ_CHECK(tl_query(zh, "@attr 1=4 my", 3));
197     YAZ_CHECK(tl_query(zh, "@attr 1=4 {my x}", 1));
198     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=1 {my x}", 1));
199     YAZ_CHECK(tl_query(zh, "@attr 1=4 {my x}", 1));
200     YAZ_CHECK(tl_query(zh, "@attr 1=4 {x my}", 0));
201     YAZ_CHECK(tl_query(zh, "@attr 1=4 {my x title}", 1));
202     YAZ_CHECK(tl_query(zh, "@attr 1=4 {my title}", 2));
203
204     /* and-list searches */
205     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=6 {x my}", 2));
206     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=6 {my x}", 2));
207     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=6 {my my}", 3));
208     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=6 {e x}", 0));
209
210     /* or-list searches */
211     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=105 {x my}", 3));
212     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=105 {my x}", 3));
213     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=105 {my my}", 3));
214     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=105 {e x}", 2));
215     YAZ_CHECK(tl_query(zh, "@attr 1=4 @attr 4=106 {e x}", 2));
216
217     /* exl=0 distance=2 order=1 relation=2 (<=), known, unit=word */
218     YAZ_CHECK(tl_query(zh, "@attr 1=4 @prox 0 2 1 2 k 2 my x", 2));
219
220     /* exl=0 distance=2 order=1 relation=2 (<=), known, unit=word */
221     YAZ_CHECK(tl_query(zh, "@attr 1=4 @prox 0 2 1 2 k 2 x my", 0));
222
223     /* exl=0 distance=2 order=0 relation=2 (<=), known, unit=word */
224     YAZ_CHECK(tl_query(zh, "@attr 1=4 @prox 0 2 0 2 k 2 x my", 2));
225
226     /* exl=0 distance=2 order=0 relation=3 (=), known, unit=word */
227     YAZ_CHECK(tl_query(zh, "@attr 1=4 @prox 0 2 1 3 k 2 my x", 1));
228
229     /* exl=1 distance=2 order=0 relation=3 (=), known, unit=word */
230     YAZ_CHECK(tl_query(zh, "@attr 1=4 @prox 1 2 1 3 k 2 my x", 1));
231
232     /* Non-indexed numeric use, but specified in bib1.att (bug #1142) */
233     YAZ_CHECK(tl_query_x(zh, "@attr 1=1000 x", 0, 114));
234     YAZ_CHECK(tl_query_x(zh, "@attr 1=1000 @attr 14=0 x", 0, 114));
235     YAZ_CHECK(tl_query_x(zh, "@attr 1=1000 @attr 14=1 x", 0, 0));
236     /* Non-indexed numeric use and unspecified in bib1.att */
237     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 x", 0, 114));
238     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 @attr 14=1 x", 0, 114));
239     /* Non-indexed string use attribute */
240     YAZ_CHECK(tl_query_x(zh, "@attr 1=gyf  x", 0, 114));
241     YAZ_CHECK(tl_query_x(zh, "@attr 1=gyf @attr 14=0 x", 0, 114));
242     YAZ_CHECK(tl_query_x(zh, "@attr 1=gyf @attr 14=1 x", 0, 0));
243
244     /* provoke unsupported use attribute */
245     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 @attr 4=1 x", 0, 114));
246     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 @attr 4=6 x", 0, 114));
247     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 @attr 4=105 x", 0, 114));
248     YAZ_CHECK(tl_query_x(zh, "@attr 1=999 @attr 4=109 123", 0, 114));
249     YAZ_CHECK(tl_query_x(zh, "@attrset 1.2.840.10003.3.1 @attr 1=999 x",
250                          0, 114));
251     /* provoke unsupported attribute set */
252     YAZ_CHECK(tl_query_x(zh, "@attrset 1.2.8 @attr 1=999 @attr 4=1 x", 0, 121));
253     YAZ_CHECK(tl_query_x(zh, "@attrset 1.2.8 @attr 1=999 @attr 4=6 x", 0,
254                121));
255     YAZ_CHECK(tl_query_x(zh, "@attrset 1.2.8 @attr 1=999 @attr 4=105 x", 0,
256                121));
257     YAZ_CHECK(tl_query_x(zh, "@attrset 1.2.8 @attr 1=999 @attr 4=109 123",
258                0, 121));
259
260     /* provoke unsupported relation */
261     YAZ_CHECK(tl_query_x(zh, "@attr 1=4 @attr 2=6 x", 0, 117));
262     YAZ_CHECK(tl_query_x(zh, "@attr 1=1016 @attr 2=6 @attr 4=109 x", 0, 114));
263
264     /* position , phrase searches */
265     YAZ_CHECK(tl_query(zh, "@attr 3=1 title", 0));
266     YAZ_CHECK(tl_query(zh, "@attr 3=1 my", 3));
267
268     YAZ_CHECK(tl_query(zh, "@attr 3=1 {my title}", 2));
269     YAZ_CHECK(tl_query(zh, "@attr 4=1 @attr 3=1 {my title}", 2));
270
271     YAZ_CHECK(tl_query(zh, "@attr 3=1 {title my}", 0));
272     YAZ_CHECK(tl_query(zh, "@attr 4=1 @attr 3=1 {title my}", 0));
273
274     YAZ_CHECK(tl_query(zh, "@attr 4=1 @attr 3=1 {title my}", 0));
275
276     /* position , or-list */
277     YAZ_CHECK(tl_query(zh, "@attr 4=105 @attr 3=1 {title my}", 3));
278     YAZ_CHECK(tl_query(zh, "@attr 4=105 @attr 3=1 {title x}", 0));
279     
280     /* position, and-list */
281     YAZ_CHECK(tl_query(zh, "@attr 4=6 @attr 3=1 {title my}", 0));
282     YAZ_CHECK(tl_query(zh, "@attr 4=6 @attr 3=1 {title x}", 0));
283     YAZ_CHECK(tl_query(zh, "@attr 4=6 @attr 3=1 my", 3));
284
285
286     /* 1=2038: West-Bounding-Coordinate 2039: East: 2040: North: 2041 South*/
287     /* 4=109: numeric string */
288     /* 2=3: equal  2=1: less, 2=4: greater or equal 2=5 greater */
289
290     /* N>=25, search attributes work */
291     YAZ_CHECK(tl_query(zh,  "@attr 2=4 @attr gils 1=2040 @attr 4=109 25", 2));
292
293     /* N>49, search attributes work */
294     YAZ_CHECK(tl_query(zh,  "@attr 2=5 @attr gils 1=2040 @attr 4=109 49", 0));
295
296     /* N>=49, search attributes work */
297     YAZ_CHECK(tl_query(zh,  "@attr 2=4 @attr gils 1=2040 @attr 4=109 49", 2));
298
299     /* N>48, search attributes work */
300     YAZ_CHECK(tl_query(zh,  "@attr 2=5 @attr gils 1=2040 @attr 4=109 48", 2));
301
302     /* N<48, search attributes work */
303     YAZ_CHECK(tl_query(zh,  "@attr 2=1 @attr gils 1=2040 @attr 4=109 48", 1));
304
305     /* N<=48, search attributes work */
306     YAZ_CHECK(tl_query(zh,  "@attr 2=2 @attr gils 1=2040 @attr 4=109 48", 1));
307
308     /* N=41, get rec1 only */
309     YAZ_CHECK(tl_query(zh,  "@attr 2=3 @attr gils 1=2040 @attr 4=109 41", 1));
310
311     /* N=49, get both records */
312     YAZ_CHECK(tl_query(zh,  "@attr 2=3 @attr gils 1=2040 @attr 4=109 49", 2));
313
314     /* W=-120 get both records */
315     YAZ_CHECK(tl_query(zh,  "@attr 2=3 @attr gils 1=2038 @attr 4=109 -120", 2));
316
317     /* W<-122 get only rec1 */
318     YAZ_CHECK(tl_query(zh,  "@attr 2=1 @attr gils 1=2038 @attr 4=109 '-120' ", 1));
319
320     /* N=41 and N=49 get only rec2 */
321     YAZ_CHECK(tl_query(zh, "@attr 2=3 @attr gils 1=2040 @attr 4=109 \"41 49\" ", 1));
322
323
324     /* = */
325     YAZ_CHECK(tl_query(zh, "@attr 1=30 @attr 4=5 @attr 2=3 {2107-09-19 00:00:00}", 1));
326     /* < */
327     YAZ_CHECK(tl_query(zh, "@attr 1=30 @attr 4=5 @attr 2=1 {2107-09-19 00:00:00}", 0));
328     /* <= */
329     YAZ_CHECK(tl_query(zh, "@attr 1=30 @attr 4=5 @attr 2=2 {2107-09-19 00:00:00}", 1));
330     /* >= */
331     YAZ_CHECK(tl_query(zh, "@attr 1=30 @attr 4=5 @attr 2=4 {2107-09-19 00:00:00}", 1));
332     /* > */
333     YAZ_CHECK(tl_query(zh, "@attr 1=30 @attr 4=5 @attr 2=5 {2107-09-19 00:00:00}", 0));
334     
335
336     YAZ_CHECK(tl_close_down(zh, zs));
337 }
338
339 TL_MAIN
340
341 /*
342  * Local variables:
343  * c-basic-offset: 4
344  * indent-tabs-mode: nil
345  * End:
346  * vim: shiftwidth=4 tabstop=8 expandtab
347  */
348