2a1ff91800ed9289359c17a7c477219c733f4fe8
[idzebra-moved-to-github.git] / NEWS
1 --- 2.0.32 2008/06/06
2
3 Fixed OAI example.
4
5 --- 2.0.30 2008/05/14
6
7 Changed service name for Windows. Bug #978.
8
9 Fixed the alwaysmatches including _ALLRECORDS for ICU term indexing. Bug #2139.
10
11 --- 2.0.28 2008/04/03
12
13 Handle right-truncation for ICU normalized terms.
14
15 Updated OAI-PMH example.
16
17 --- 2.0.26 2008/01/28 
18
19 Fixes for searches on Chinese text.
20
21 Fixes for scan using ICU indexing terms.
22
23 --- 2.0.24 2008/01/18 
24
25 Fixed some memory violations for ICU enabled indexing that could be
26 triggered by long phrases.
27
28 Enable ICU on Windows. Thanks to Tumer Garip for makefile patches.
29
30 Fixed bug #2002: Zebra crashes during merge using ICU indexing.
31
32 --- 2.0.22 2007/12/20
33
34 Handle encoding errors for strings passed to ICU. (assert was
35 thrown earlier).
36
37 Added zebraidx command, adelete, which attempts to delete records.
38 It's like 'delete', but does not fail if a record does not exist.
39
40 --- 2.0.20 2007/12/19
41
42 Added experimental support for faceted results. This is implemented
43 as a special retrieval on a result set and is triggered using element
44 set name zebra::facet::f1:t1,f2,t2,.. which will return terms and
45 hit counts for field f1, type t1, field f2, type t2, .. The returned
46 data is packed as XML or SUTRS depending on record syntax.
47
48 Added support for Unicode-based indexing using ICU. This allows
49 locale specific scanning, sorting. The implementation is based on
50 the ICU utility part of YAZ 3.0.16 and later. See the manual as well
51 as the examples/marcxml for an example of the use of ICU.
52
53 --- 2.0.18 2007/09/19
54
55 Fixed bug with scan and staticrank enabled. Bug introduced in 2.0.16.
56
57 --- 2.0.16 2007/09/12
58
59 Scan now returns a displayTerm which closer to the original word/phrase
60 from original record.
61
62 Added snippet support. Element set name zebra::snippet will make
63 Zebra return an XML record with snippets (terms around matching terms).
64
65 Fixed bug #1142: Non-indexed but listed attributes issues diagnostic.
66
67 Fixed bug #1131: Missing value-of data in DOM filter.
68
69 Fixed bug #1049: zebra.cfg lines with leading space are ignored.
70
71 Fixed bug #1128: sortmax not honored.
72
73 Fixed bug #1121: Crash for some searches with customized string.chr.
74
75 --- 2.0.14 2007/05/09
76
77 Zebra uses the YAZ 3 API. Note that this changes the Zebra API
78 as well. The register layout is the same however. 
79
80 Fixed bug #1114: scan within set may use excessive CPU.
81
82 Fixed memory leak that occurred in scan.
83
84 Fixed memory leak that occurred for each deleted record.
85
86 Optimize updates of records where content is almost identical to previous
87 version of record. This makes updating of the internal explain database
88 faster too.
89
90 For RPN queries the index type (w,p,..) may be specified verbatim as
91 structure attribute with string value, e.g. @attr 4=w .
92
93 Changed record update API . It is now handled by function
94 zebra_record_update which does insert/replace/delete/update of records .
95 This function replaces zebra_record_{insert,delete} and
96 zebra_admin_exchange_record. The DOM filter uses this feature and the
97 @type attribute in record element specifies the action
98 insert/replace/delete/update.
99
100 Added support for multi-record updates (Bug #944). Based on patch from
101 Hans-Werner Hilse.
102
103 --- 2.0.12 2007/03/07
104
105 Fixed bug with indexing of attributes for rec.grs-class of filters.
106 If X-Path was enabled xelm a/@b would be ignored.
107
108 Fixed bug in register system where 'no more space' messages was produced
109 even though there was plenty of space.
110
111 Fixed bug #884: Entity declarations in input are lost at retrieval time.
112
113 Implemented new filter 'dom'. See test/xslt/dom-config*xml for examples. 
114 This, like alvis, performs indexing and retrieval using XSLT. But Unlike
115 alvis, it allows multiple XSLT steps to be performed and does ISO2709
116 reading. Bug #843.
117
118 --- 2.0.10 2007/01/24
119
120 Staticrank indexing is now an index register type defined in default.idx
121 via directive 'staticrank'. The 'staticrank' directive for grs is no longer
122 supported (was only implemented for Zebra 2.0.8).
123
124 For searches, allow truncmax value to be controlled with attribute 13.
125 If given, that overrides the value of 'truncmax'.
126
127 For truncations being limited (abort at truncmax terms), zebrasrv returns
128 SearchResponse with resultSetStatus=subset.
129
130 For estimated hit counts, zebrasrv returns SearchResponse with 
131 resultSetStatus=estimate.
132
133 --- 2.0.8 2007/01/15
134
135 For searches, do not truncate more than at most 'truncmax' terms in one
136 single term with right-truncation/regular attribute. By default, 'truncmax',
137 is 10000.
138
139 Bug #781: Easier tracking of result sets. We only do this when mkstemp
140 is available (most moderun Unixes supports this). The PID is included
141 in filename : tempdir/zrs_PID_XXXXXX.
142
143 Added support for specification of staticrank for grs-class of filters.
144 This is enabled by using 'staticrank indexname' in .abs. Contents of
145 indexname (elm ... indexname:w) is then used as value for staticrank.
146
147 Implemented sorting via the ISAMB system. To enable, use sortindex:i in
148 zebra.cfg.
149
150 Added special retrieval support for sort keys. These keys can also be
151 fetched using zebra::index:field:s   
152
153 Added support for specification of approximative limits for whole query.
154 This is specified as attribute type 12. Semantics is the same as
155 estimatehits in zebra.cfg.
156
157 --- 2.0.6 2006/11/28
158
159 Fixed bug #736: Updates gets slower.
160
161 Fixed bug #735: Delete fails to process rest of file after a record that
162 does not exist,
163
164 Added RPM package for Zebra 2.
165
166 Improved indexing speed for large documents.
167
168 Added support for special utility retrieval zebra:: which offers retrieval
169 of fundamental properties for record, such as indexed terms, raw record,
170 and system record ID.
171
172 --- 2.0.4 2006/10/16
173
174 Fixed bug #47: Commit needs to check for roll-back.
175
176 Fixed bug #672: Trailing characters in password are ignored
177
178 Added extra presence check for tcl.h, because some systems have
179 tclConfig.sh installed even though Tcl C headers are missing.
180
181 Optimized melm performance.
182
183 Do not use sync(2) during commit (but rely on sync'd individual files).
184
185 Fixed bug in ISAMB's utility function decode_ptr. With gcc -O3 on some
186 platforms the src argument was not updated. Problem was compiler
187 optimization due to strict aliasing rules.
188
189 --- 2.0.2 2006/09/22
190
191 Bug fixes: #638, #647, #657, #669.
192
193 Implement skip of 0 hit counts in scan. Useful for scan operations
194 limited by a result set.
195
196 Honor position attribute, i.e. allow first-in-field search. To
197 enable this, "firstinfield 1" must be given for an index in
198 default.idx. Enabled in tab/default.idx for w. At this stage
199 first-in field is supported for phrase/and-list/or-list searches
200
201 Common stream reader interface for record filters (struct ZebraRecStream).
202
203 Debian package fix: packages idzebra-2.0 + libidzebra-2.0-modules did
204 not depend properly on sub packages.
205
206 --- 2.0.0 2006/08/14
207
208 New record filter (record type) 'alvis' which uses XSLT transformations
209 to drive both indexing as well as retrieval. See example configuration in the
210 'example/alvis-oai' directory.
211
212 'isamb' is now the default ISAM system. In Zebra 1.3, the default ISAM was
213 'isamc'. The type used can still be configured with the 'isam' setting
214 in 'zebra.cfg'.
215
216 Index structure is now 64-bit based, also on 32 bit systems. 
217 There are no more 2GB register file limits.
218
219 Extended search result tuning. Approximate limit for terms can be enabled
220 and specified with attribute 11. The (approx or exact) hit count is returned
221 as part of the search response as in 1.3 series. The subqueryID of a search
222 term hit count can be specified with attribute 10.
223
224 Zebra uses string attributes for indexing internally. Using set+numeric
225 use attribute can still be used. This is a search-only conversion which
226 inspects '*.att'-set files as indicated using attset-directives in 'zebra.cfg'.
227 'attset' references are no longer required, but when used they deserve
228 as "check" for that the index names used are also present in '*.att'.
229
230 Zebra record filters (record type handlers) may be built as loadable
231 modules (.so's) on Unix. In particular the Zebra 2.0 Debian package uses
232 separate packages for each of them. This also means that zebra programs
233 such as zebraidx is no longer depending on Tcl/other..
234
235 Documentation updates, especially on query structure and syntax, SRU, 
236 XSLT support, alvis filter module, and many added examples.
237
238 Improved logging of the 'zebrasrv' and 'zebraidx' binaries.
239
240 Improved debian package structure.
241
242 --- 1.3.16 2004/08/16