test/api/test_icu_indexing.c

   1 /* This file is part of the Zebra server.
   2    Copyright (C) 1994-2011 Index Data
   3
   4 Zebra is free software; you can redistribute it and/or modify it under
   5 the terms of the GNU General Public License as published by the Free
   6 Software Foundation; either version 2, or (at your option) any later
   7 version.
   8
   9 Zebra is distributed in the hope that it will be useful, but WITHOUT ANY
  10 WARRANTY; without even the implied warranty of MERCHANTABILITY or
  11 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  12 for more details.
  13
  14 You should have received a copy of the GNU General Public License
  15 along with this program; if not, write to the Free Software
  16 Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
  17
  18 */
  19
  20 /** \file
  21     \brief tests ICU enabled maps
  22 */
  23 #if HAVE_CONFIG_H
  24 #include <config.h>
  25 #endif
  26 #include <yaz/test.h>
  27 #include "testlib.h"
  28
  29 /* utf-8 sequences for some characters */
  30 #define char_ae "\xc3\xa6"
  31 #define char_AE "\xc3\x86"
  32
  33 #define char_oslash "\xc3\xb8"
  34 #define char_Oslash "\xc3\x98"
  35
  36 #define char_aring "\xc3\xa5"
  37 #define char_Aring "\xc3\x85"
  38
  39 #define char_comb_ring_above "\xcc\x8a"
  40
  41 #define char_aring1 "a" char_comb_ring_above
  42 #define char_Aring1 "A" char_comb_ring_above
  43
  44 const char *myrec[] = {
  45         "<gils>\n<title>My computer</title>\n</gils>\n",
  46         "<gils>\n<title>My x computer</title>\n</gils>\n",
  47         "<gils>\n<title>My computer x</title>\n</gils>\n" ,
  48         "<gils>\n<title>" char_ae "</title>\n</gils>\n" ,
  49         "<gils>\n<title>B" char_aring "d</title>\n"
  50         "<abstract>זיהוי סדר הארועים בסיפור המרד הגדול מאת צביה בן-שלום 提示:直接点击数据库名称,将进入单库检索 Ngày xửa ngày xưa D.W. all wet</abstract>\n</gils>\n" ,
  51         0} ;
  52
  53 static void tst(int argc, char **argv)
  54 {
  55 #if YAZ_HAVE_ICU
  56     ZebraService zs = tl_start_up("test_icu_indexing.cfg", argc, argv);
  57     ZebraHandle zh = zebra_open(zs, 0);
  58
  59     tl_check_filter(zs, "grs.xml");
  60
  61     YAZ_CHECK(tl_init_data(zh, myrec));
  62
  63     /* simple term */
  64     YAZ_CHECK(tl_query(zh, "@attr 1=title notfound", 0));
  65
  66     YAZ_CHECK(tl_query(zh, "@attr 1=title computer", 3));
  67
  68     YAZ_CHECK(tl_query(zh, "@attr 1=title @attr 5=1 comput", 3));
  69
  70     YAZ_CHECK(tl_query(zh, "@attr 1=title .computer.", 3));
  71
  72     YAZ_CHECK(tl_query(zh, "@attr 1=title x", 2));
  73
  74     YAZ_CHECK(tl_query(zh, "@attr 1=title my", 3));
  75
  76     YAZ_CHECK(tl_query(zh, "@attr 1=title mY", 3));
  77
  78     YAZ_CHECK(tl_query(zh, char_ae, 1));
  79     YAZ_CHECK(tl_query(zh, char_AE, 1));
  80
  81     YAZ_CHECK(tl_query(zh, "b" char_aring "d", 1));
  82     YAZ_CHECK(tl_query(zh, "B" char_Aring "D", 1));
  83     YAZ_CHECK(tl_query(zh, "b" char_aring1 "d", 1));
  84     YAZ_CHECK(tl_query(zh, "B" char_Aring1 "D", 1));
  85
  86     /* Abstract searches . Chinese mostly */
  87     YAZ_CHECK(tl_query(zh, "@attr 1=abstract בן", 1));
  88     YAZ_CHECK(tl_query(zh, "@attr 1=abstract צביה", 1));
  89     YAZ_CHECK(tl_query(zh, "@attr 1=abstract הגדול", 1));
  90     YAZ_CHECK(tl_query(zh, "@attr 1=abstract בסיפור", 1));
  91     YAZ_CHECK(tl_query(zh, "@attr 1=abstract בסיפ", 0));
  92     YAZ_CHECK(tl_query(zh, "@attr 1=abstract 点", 1));
  93     YAZ_CHECK(tl_query(zh, "@attr 1=abstract wet", 1));
  94
  95     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 5=1 בסיפ", 1));
  96     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 5=1 סיפ", 0));
  97     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 5=1 בסי", 1));
  98     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 5=1 בס", 1));
  99     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 5=1 ב", 1));
 100
 101     /* phrase search */
 102     YAZ_CHECK(tl_query(zh, "@attr 1=title {my computer}", 2));
 103     YAZ_CHECK(tl_query(zh, "@attr 1=title @attr 6=1 {my computer}", 2));
 104     YAZ_CHECK(tl_query(zh, "@attr 1=title {computer x}", 1));
 105
 106     /* complete-subfield search */
 107     YAZ_CHECK(tl_query(zh, "@attr 1=title @attr 6=2 {my computer}", 1));
 108     YAZ_CHECK(tl_query(zh, "@attr 1=title @attr 6=2 {my}", 0));
 109
 110     /* always matches */
 111     YAZ_CHECK(tl_query(zh, "@attr 1=_ALLRECORDS @attr 2=103 {}", 5));
 112     YAZ_CHECK(tl_query(zh, "@attr 1=title @attr 2=103 {}", 5));
 113     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 2=103 {}", 1));
 114     YAZ_CHECK(tl_query(zh, "@attr 1=abstract @attr 2=103 {does not match}", 1));
 115
 116     /* scan */
 117     {   /* word search */
 118         const char *ent[] = { char_ae, "B" char_aring "d", "computer",
 119                               "My", "x", 0 };
 120         YAZ_CHECK(tl_scan(zh, "@attr 1=title 0", 1, 10, 1, 5, 1, ent));
 121     }
 122
 123     {   /* word search */
 124         const char *ent[] = { "My", "x", 0 };
 125         YAZ_CHECK(tl_scan(zh, "@attr 1=title cp", 1, 10, 1, 2, 1, ent));
 126     }
 127
 128     {   /* phrase search */
 129         const char *ent[] = { char_ae, "B" char_aring "d", "My computer" };
 130         YAZ_CHECK(tl_scan(zh, "@attr 1=title @attr 6=2 0", 1, 3, 1, 3, 0, ent));
 131     }
 132
 133     YAZ_CHECK(tl_close_down(zh, zs));
 134 #endif
 135 }
 136
 137 TL_MAIN
 138
 139 /*
 140  * Local variables:
 141  * c-basic-offset: 4
 142  * c-file-style: "Stroustrup"
 143  * indent-tabs-mode: nil
 144  * End:
 145  * vim: shiftwidth=4 tabstop=8 expandtab
 146  */
 147