New result set model and modular ranking system. Moved towards
[idzebra-moved-to-github.git] / CHANGELOG
1 Changed the way Zebra keeps its maintenance information. Records
2 in "SGML" notation using an EXPLAIN schema is now used when
3 appropriate.
4
5 Bug fix: Index didn't handle update/insert/delete of the same
6 record (i.e. same recordId) in one run (one invocation of zebraidx).
7 Only the first occurence of a record is considered.
8
9 Most searches now return correct number of hits.
10
11 New modular ranking system. Interested programmers are encouraged to
12 inspect rank1.c and improve the algorithm.
13
14 Bug fix: Lock files weren't removed as they should when using NT.
15
16 Implemented Z39.50 Sort. Zebra's sort handler uses use attributes to
17 specify a "sort register". Refer to the gils sample records which
18 refer to index type "s" which is specified as "sort" in the default.idx
19 file. Each sort criteria can either be Ascending or Descending and
20 at most three sort elements can be specified.  
21
22 Bug fix: Character mapping didn't work for text files.
23
24 --- 1.0b1 1998/1/29
25
26 Simple ranked searches now return correct number of hits.
27
28 The test option (-s) only makes a read-lock on the index as well
29 as using read-only operations anywhere.
30
31 Moved towards generic character mapping. Configuration file default.idx
32 specifies character map files for register types w, p, u, etc.
33
34 Implemented "begin variant" for the sgml.regx - filter.
35
36 Fixed a few memory leaks.
37
38 Added support for C++, headers uses extern "C" for public definitions.
39
40 Bug fix: The show records facility (-s) only displayed information for
41 the first record in a file (and not for every record in the file).
42
43 Added option "-f <n>" to limit the logging of record operations. After
44 <n> records has been processed no logging is performed (unless errors
45 occur).
46
47 Bug fix: the compressed ISAM system didn't handle update operations
48 correctly.
49
50 Added setting, "maxResultSetSize", to hold the number of records to 
51 save in a result set.
52
53 Bug fix: Complete phrase did't work for search operations.
54
55 Bug fix: temporary result sets weren't deleted.
56
57 Reduced disk space for saved keys (storeKeys = 1).
58
59 Added optional, physical ANY (key replication)
60
61 Implemented proximity operator in search.
62
63 Bug fix: the path name buffers used by file match traversal routines
64 have been extended to support long file names.
65
66 New C(ompressed) ISAM system. To enable it, specify "isam: c" in the
67 configuration file. The resulting register without "storeKeys" is about
68 half the size, and the memory used by zebraidx during phase 2 (merge) is
69 reduced to a minimum.
70
71 Reworked the way Regexp-2 queries with error tolerance are handled and
72 specified. The documentation has been updated accordingly.
73
74 Bug fix: Zebrasrv didn't search correctly when queries contained masking
75 characters. This bug was introduced in 1.0a8.
76
77 Zebrasrv now tag records with the proper database name.
78
79 New settings, memMax and keyTmpDir.
80
81 Changed name of setting lockDir (previously called lockPath) and
82 setTmpDir (previously called tempSetPath).
83
84 Generalized and changed record type specifications. In short, there are:
85        text                plain SUTRS
86        grs.sgml            structured, "SGML-like" syntax
87        grs.regx.<filter>   structured, Regular expression filter
88        grs.marc.<abs>      Reads *MARC records in the ISO2709 format. <abs>
89                            is the name of an abstract syntax file.                           
90 Bug fix: Result sets weren't sorted in operations involving boolean
91 operations with "ranked" operands.
92
93 --- 1.0a8 1996/6/6
94
95 Added national character-handling subsystem.
96
97 Various fixes.
98
99 Small modifications to input filters and profiles.
100
101 Added support for SOIF syntax (with private OID).
102
103 --- 1.0a7 1996/5/16
104
105 Fixed buffer-size problem in indexing.
106
107 Added compression to temporary files for updating.
108
109 Added phrase registers.
110
111 Added dynamic mapping of search attribute to multiple termlists (ANY).
112
113 Scan support in multiple databases/registers.
114
115 Configuration settings are case-insensitive and single dash (-)
116 characters are ignored in comparisons.
117
118 The index processing ignores empty files - warning given.
119
120 New option to zebraidx (-V) displays version information.
121
122 --- 1.0a6 1996/2/24
123
124 Fixed problem in file-update system.
125
126 Fixed problem in shadow system; register was sometimes corrupted after
127 a commit operation.
128
129 --- 1.0a5 1996/2/10
130
131 Fixed problems in the ISAM subsystem. Caused difficulties when updating
132 existing registers.
133
134 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
135 the rank and record number.
136
137 Fixed bug in the isam subsystem - caused a malfunction when accessing
138 words which occurred more than 10000 times.
139
140 Distribution should now include YAZ (Z39.50 protocol stack) to simplify
141 installation.
142
143 Server can now run under inetd. Use option -i, and -w <directory> to
144 set working directory to desired location.
145
146 New zebraidx command: clean - removes temporary shadow files.
147
148 Fixed bug in ISAM system. Occurred rarely during register updates.
149
150 Logging during index merge phase is improved. The remaining running
151 time is estimated.
152
153 Temporary files generated by zebraidx are removed after each run.
154
155 Bug fix: Dictionary didn't handle 8-bit characters correctly; was obvious
156 when doing scan operations in dictionaries with European characters.
157
158 --- 1.0a4 1996/01/11
159
160 A whole slew of updates, to make the first publicized release. Get the doc
161 and check it out.
162
163 --- 1.0a3 1995/12/06
164
165 Memory-problems in ISAM fixed. More blocktypes added to the default setup
166 to increase performance on larger databases.
167
168 Various minor changes in data management system.
169
170 --- 1.0a2 1995/12/05
171
172 A couple of portability-problems resolved.
173
174 Changed some malloc() to xmalloc().
175
176 --- 1.0a1 1995/11/28
177
178 First release.