Added comment.
[idzebra-moved-to-github.git] / CHANGELOG
1 --- 1.0.1 2000/2/10
2
3 Fixed bug in makefile for WIN32.
4
5 Fixed bug in configure script - used bash-specific features.
6
7 --- 1.0 1999/12/10
8
9 The software was split in two products Zebra (for testing,
10 non-profit use) and the commercial product Z'mbol. Zebra no
11 longer supports INDEX UPDATES, i.e. zebraidx should be invoked only
12 once for each register. Refer to LICENSE.zebra for more info.
13
14 Added support for multiple records in one file for filter grs.sgml.
15
16 Changed record index structure. New layout is incompatible with
17 previous releases. Added setting "recordcompression" to control
18 compression of records. Possible values are "none" (no
19 compression) and bzip2 (compression using libbz2).
20
21 Added XML transfer syntax support for retrieval of structured records.
22 Schema in CompSpec is recognised in retrieval of structured records.
23
24 Changed Tcl record filter so that it attemps to read  <filt>.tflt. If
25 that fails, the filter reads the file <filt>.flt (regx style filter).
26
27 Implemented new Tcl record filter -  use grs.tcl.<filter> to enable it.
28 Zebra's configure script automatically attempts to locate Tcl. For
29 manual Tcl configuration use option --with-tclconfig=<path> to specify
30 where Tcl's library files are located.
31
32 Implemented "compression" of Dictionary and ISAM system. Dictionary
33 format HAS changed.
34
35 Added "tagsysno" directive to zebra.cfg to control under which tag the
36 system ID is placed. Use tagsysno: 0 to disable Zebra's system number
37 entirely.
38
39 Added "tagrank" as above.
40
41 Changed file naming scheme for register files from <name>.mf.<no> to
42 <name>-<no>.mf.
43
44 Implemented "position"-flag for register type (as defined in
45 default.idx). When set to zero no position (or seqence number) is
46 saved in register for each word occurrence, thus saving some register
47 space.
48
49 Implemented database mapping. Using mapdb one can specify a database
50 to be mapped to one or more physical databases. Usage:
51 mapdb <fromdb> <todb> ..
52
53 Added SOIF-filter. Thanks to Peter Valkenburg.
54
55 For the regx-filter "end element -record" may trigger a mark-of-record
56 if outer level is reached.
57
58 Tag sets may be typed in the reference to it. From the .abs-file the
59 "tagset" directive takes a third optional integer type for the tag set
60 referenced. From a .tag-file the "include" directive takes a third
61 optional type as well. The old "type" directive in the tag set itself
62 is still recognized but acts as the default type for the tag set.
63  
64 Zebra supports the specification of arbitrary attributes sets, schemas
65 and tag sets, because of the change in YAZ' OID management system.
66
67 Fixed bug in Sort that caused it NOT to use character mapping as it
68 should.
69
70 Zebra now uses GNU configure to generate Makefile(s).
71
72 Added un-optimised support for left and left/right truncation attributes.
73
74 Added support for relational operators on text when using RPN queries.
75
76 Added support for sort specifications in RPN queries. Type 7 specifies
77 'sort' where value 1=ascending, value 2=descending. The use attribute
78 specifies the field criteria as usual.  The term specifies priority
79 where 0=first, 1=second, ...
80
81 Changed the way use attributes are specified in the recordId
82 specification.
83
84 Maximum number of databases in one Zebra register increased.
85
86 New setting, databasePath, which specifies that first directory during
87 update traversal is the database name (instead of a fixed one).
88
89 New setting, explainDatabase, which specifies that databases are
90 EXPLAIN aware.
91
92 Modified Zebra so that it works with ASN.1 compiled code for YAZ.
93
94 Implemented EXPLAIN database maintenance. Zebra automatically
95 generate - and update CategoryList, TargetInfo, DatabaseInfo,
96 AttributeSetInfo and AttributeDetails records at this stage. The
97 records may be transferred as GRS-1, SUTRS or Explain.
98
99 Fixed register spec so that colon isn't treated as size separator
100 unless followed by [0-9+-] in order to allow DOS drive specifications.
101
102 Fixed two bugs in ISAMC system.
103
104 Changed the way Zebra keeps its maintenance information about attribute
105 sets, available attributes, etc.. Records in "SGML" notation using an
106 EXPLAIN schema is now used when appropriate.
107
108 Bug fix: Index didn't handle update/insert/delete of the same record
109 (i.e. same recordId) in one run (one invocation of zebraidx). Only the
110 first occurence of a record is considered.
111
112 Most searches now return correct number of hits.
113
114 New modular ranking system. Interested programmers are encouraged to
115 inspect rank1.c and improve the algorithm.
116
117 Bug fix: Lock files weren't removed as they should on NT.
118
119 Implemented Z39.50 Sort. Zebra's sort handler uses use attributes to
120 specify a "sort register". Refer to the gils sample records which refer
121 to index type "s" which is specified as "sort" in the default.idx file.
122 Each sort criteria can either be Ascending or Descending and at most
123 three sort elements can be specified.  
124
125 Bug fix: Character mapping didn't work for text files.
126
127 --- 1.0b1 1998/1/29
128
129 Simple ranked searches now return correct number of hits.
130
131 The test option (-s) only makes a read-lock on the index as well
132 as using read-only operations anywhere.
133
134 Moved towards generic character mapping. Configuration file default.idx
135 specifies character map files for register types w, p, u, etc.
136
137 Implemented "begin variant" for the sgml.regx - filter.
138
139 Fixed a few memory leaks.
140
141 Added support for C++, headers uses extern "C" for public definitions.
142
143 Bug fix: The show records facility (-s) only displayed information for
144 the first record in a file (and not for every record in the file).
145
146 Added option "-f <n>" to limit the logging of record operations. After
147 <n> records has been processed no logging is performed (unless errors
148 occur).
149
150 Bug fix: the compressed ISAM system didn't handle update operations
151 correctly.
152
153 Added setting, "maxResultSetSize", to hold the number of records to 
154 save in a result set.
155
156 Bug fix: Complete phrase did't work for search operations.
157
158 Bug fix: temporary result sets weren't deleted.
159
160 Reduced disk space for saved keys (storeKeys = 1).
161
162 Added optional, physical ANY (key replication)
163
164 Implemented proximity operator in search.
165
166 Bug fix: the path name buffers used by file match traversal routines
167 have been extended to support long file names.
168
169 New C(ompressed) ISAM system. To enable it, specify "isam: c" in the
170 configuration file. The resulting register without "storeKeys" is about
171 half the size, and the memory used by zebraidx during phase 2 (merge) is
172 reduced to a minimum.
173
174 Reworked the way Regexp-2 queries with error tolerance are handled and
175 specified. The documentation has been updated accordingly.
176
177 Bug fix: Zebrasrv didn't search correctly when queries contained masking
178 characters. This bug was introduced in 1.0a8.
179
180 Zebrasrv now tag records with the proper database name.
181
182 New settings, memMax and keyTmpDir.
183
184 Changed name of setting lockDir (previously called lockPath) and
185 setTmpDir (previously called tempSetPath).
186
187 Generalized and changed record type specifications. In short, there are:
188        text                plain SUTRS
189        grs.sgml            structured, "SGML-like" syntax
190        grs.regx.<filter>   structured, Regular expression filter
191        grs.marc.<abs>      Reads *MARC records in the ISO2709 format. <abs>
192                            is the name of an abstract syntax file.                           
193 Bug fix: Result sets weren't sorted in operations involving boolean
194 operations with "ranked" operands.
195
196 --- 1.0a8 1996/6/6
197
198 Added national character-handling subsystem.
199
200 Various fixes.
201
202 Small modifications to input filters and profiles.
203
204 Added support for SOIF syntax (with private OID).
205
206 --- 1.0a7 1996/5/16
207
208 Fixed buffer-size problem in indexing.
209
210 Added compression to temporary files for updating.
211
212 Added phrase registers.
213
214 Added dynamic mapping of search attribute to multiple termlists (ANY).
215
216 Scan support in multiple databases/registers.
217
218 Configuration settings are case-insensitive and single dash (-)
219 characters are ignored in comparisons.
220
221 The index processing ignores empty files - warning given.
222
223 New option to zebraidx (-V) displays version information.
224
225 --- 1.0a6 1996/2/24
226
227 Fixed problem in file-update system.
228
229 Fixed problem in shadow system; register was sometimes corrupted after
230 a commit operation.
231
232 --- 1.0a5 1996/2/10
233
234 Fixed problems in the ISAM subsystem. Caused difficulties when updating
235 existing registers.
236
237 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
238 the rank and record number.
239
240 Fixed bug in the isam subsystem - caused a malfunction when accessing
241 words which occurred more than 10000 times.
242
243 Distribution should now include YAZ (Z39.50 protocol stack) to simplify
244 installation.
245
246 Server can now run under inetd. Use option -i, and -w <directory> to
247 set working directory to desired location.
248
249 New zebraidx command: clean - removes temporary shadow files.
250
251 Fixed bug in ISAM system. Occurred rarely during register updates.
252
253 Logging during index merge phase is improved. The remaining running
254 time is estimated.
255
256 Temporary files generated by zebraidx are removed after each run.
257
258 Bug fix: Dictionary didn't handle 8-bit characters correctly; was obvious
259 when doing scan operations in dictionaries with European characters.
260
261 --- 1.0a4 1996/01/11
262
263 A whole slew of updates, to make the first publicized release. Get the doc
264 and check it out.
265
266 --- 1.0a3 1995/12/06
267
268 Memory-problems in ISAM fixed. More blocktypes added to the default setup
269 to increase performance on larger databases.
270
271 Various minor changes in data management system.
272
273 --- 1.0a2 1995/12/05
274
275 A couple of portability-problems resolved.
276
277 Changed some malloc() to xmalloc().
278
279 --- 1.0a1 1995/11/28
280
281 First release.