CHANGELOG

   1 Implemented "compression" of Dictionary and ISAM system. Dictionary
   2 format HAS changed.
   3
   4 Added "tagsysno" directive to zebra.cfg to control under which tag the
   5 sysstem ID is placed. Use tagsysno: 0 to disable Zebra's system number
   6 entirely.
   7
   8 Added "tagrank" as above.
   9
  10 Changed file naming scheme for register files from <name>.mf.<no> to
  11 <name>-<no>.mf.
  12
  13 Implemented "position"-flag for register type (as defined in
  14 default.idx). When set to zero no position (or seqence number) is
  15 saved in register for each word occurrence, thus saving some register
  16 space.
  17
  18 Implemented database mapping. Using mapdb one can specify a database
  19 to be mapped to one or more physical databases. Usage:
  20 mapdb <fromdb> <todb> ..
  21
  22 Added SOIF-filter. Thanks to Peter Valkenburg.
  23
  24 For the regx-filter "end element -record" may trigger a mark-of-record
  25 if outer level is reached.
  26
  27 Tag sets may be typed in the reference to it. From the .abs-file the
  28 "tagset" directive takes a third optional integer type for the tag set
  29 referenced. From a .tag-file the "include" directive takes a third
  30 optional type as well. The old "type" directive in the tag set itself
  31 is still recognized but acts as the default type for the tag set.
  32
  33 Zebra supports the specification of arbitrary attributes sets, schemas
  34 and tag sets, because of the change in YAZ' OID management system.
  35
  36 Fixed bug in Sort that caused it NOT to use character mapping as it
  37 should.
  38
  39 Zebra now uses GNU configure to generate Makefile(s).
  40
  41 Added un-optimised support for left and left/right truncation attributes.
  42
  43 Added support for relational operators on text when using RPN queries.
  44
  45 Added support for sort specifications in RPN queries. Type 7 specifies
  46 'sort' where value 1=ascending, value 2=descending. The use attribute
  47 specifies the field criteria as usual.  The term specifies priority
  48 where 0=first, 1=second, ...
  49
  50 Changed the way use attributes are specified in the recordId
  51 specification.
  52
  53 Maximum number of databases in one Zebra register increased.
  54
  55 New setting, databasePath, which specifies that first directory during
  56 update traversal is the database name (instead of a fixed one).
  57
  58 New setting, explainDatabase, which specifies that databases are
  59 EXPLAIN aware.
  60
  61 Modified Zebra so that it works with ASN.1 compiled code for YAZ.
  62
  63 Implemented EXPLAIN database maintenance. Zebra automatically
  64 generate - and update CategoryList, TargetInfo, DatabaseInfo,
  65 AttributeSetInfo and AttributeDetails records at this stage. The
  66 records may be transferred as GRS-1, SUTRS or Explain.
  67
  68 Fixed register spec so that colon isn't treated as size separator
  69 unless followed by [0-9+-] in order to allow DOS drive specifications.
  70
  71 Fixed two bugs in ISAMC system.
  72
  73 Changed the way Zebra keeps its maintenance information about attribute
  74 sets, available attributes, etc.. Records in "SGML" notation using an
  75 EXPLAIN schema is now used when appropriate.
  76
  77 Bug fix: Index didn't handle update/insert/delete of the same record
  78 (i.e. same recordId) in one run (one invocation of zebraidx). Only the
  79 first occurence of a record is considered.
  80
  81 Most searches now return correct number of hits.
  82
  83 New modular ranking system. Interested programmers are encouraged to
  84 inspect rank1.c and improve the algorithm.
  85
  86 Bug fix: Lock files weren't removed as they should on NT.
  87
  88 Implemented Z39.50 Sort. Zebra's sort handler uses use attributes to
  89 specify a "sort register". Refer to the gils sample records which refer
  90 to index type "s" which is specified as "sort" in the default.idx file.
  91 Each sort criteria can either be Ascending or Descending and at most
  92 three sort elements can be specified.
  93
  94 Bug fix: Character mapping didn't work for text files.
  95
  96 --- 1.0b1 1998/1/29
  97
  98 Simple ranked searches now return correct number of hits.
  99
 100 The test option (-s) only makes a read-lock on the index as well
 101 as using read-only operations anywhere.
 102
 103 Moved towards generic character mapping. Configuration file default.idx
 104 specifies character map files for register types w, p, u, etc.
 105
 106 Implemented "begin variant" for the sgml.regx - filter.
 107
 108 Fixed a few memory leaks.
 109
 110 Added support for C++, headers uses extern "C" for public definitions.
 111
 112 Bug fix: The show records facility (-s) only displayed information for
 113 the first record in a file (and not for every record in the file).
 114
 115 Added option "-f <n>" to limit the logging of record operations. After
 116 <n> records has been processed no logging is performed (unless errors
 117 occur).
 118
 119 Bug fix: the compressed ISAM system didn't handle update operations
 120 correctly.
 121
 122 Added setting, "maxResultSetSize", to hold the number of records to
 123 save in a result set.
 124
 125 Bug fix: Complete phrase did't work for search operations.
 126
 127 Bug fix: temporary result sets weren't deleted.
 128
 129 Reduced disk space for saved keys (storeKeys = 1).
 130
 131 Added optional, physical ANY (key replication)
 132
 133 Implemented proximity operator in search.
 134
 135 Bug fix: the path name buffers used by file match traversal routines
 136 have been extended to support long file names.
 137
 138 New C(ompressed) ISAM system. To enable it, specify "isam: c" in the
 139 configuration file. The resulting register without "storeKeys" is about
 140 half the size, and the memory used by zebraidx during phase 2 (merge) is
 141 reduced to a minimum.
 142
 143 Reworked the way Regexp-2 queries with error tolerance are handled and
 144 specified. The documentation has been updated accordingly.
 145
 146 Bug fix: Zebrasrv didn't search correctly when queries contained masking
 147 characters. This bug was introduced in 1.0a8.
 148
 149 Zebrasrv now tag records with the proper database name.
 150
 151 New settings, memMax and keyTmpDir.
 152
 153 Changed name of setting lockDir (previously called lockPath) and
 154 setTmpDir (previously called tempSetPath).
 155
 156 Generalized and changed record type specifications. In short, there are:
 157        text                plain SUTRS
 158        grs.sgml            structured, "SGML-like" syntax
 159        grs.regx.<filter>   structured, Regular expression filter
 160        grs.marc.<abs>      Reads *MARC records in the ISO2709 format. <abs>
 161                            is the name of an abstract syntax file.
 162 Bug fix: Result sets weren't sorted in operations involving boolean
 163 operations with "ranked" operands.
 164
 165 --- 1.0a8 1996/6/6
 166
 167 Added national character-handling subsystem.
 168
 169 Various fixes.
 170
 171 Small modifications to input filters and profiles.
 172
 173 Added support for SOIF syntax (with private OID).
 174
 175 --- 1.0a7 1996/5/16
 176
 177 Fixed buffer-size problem in indexing.
 178
 179 Added compression to temporary files for updating.
 180
 181 Added phrase registers.
 182
 183 Added dynamic mapping of search attribute to multiple termlists (ANY).
 184
 185 Scan support in multiple databases/registers.
 186
 187 Configuration settings are case-insensitive and single dash (-)
 188 characters are ignored in comparisons.
 189
 190 The index processing ignores empty files - warning given.
 191
 192 New option to zebraidx (-V) displays version information.
 193
 194 --- 1.0a6 1996/2/24
 195
 196 Fixed problem in file-update system.
 197
 198 Fixed problem in shadow system; register was sometimes corrupted after
 199 a commit operation.
 200
 201 --- 1.0a5 1996/2/10
 202
 203 Fixed problems in the ISAM subsystem. Caused difficulties when updating
 204 existing registers.
 205
 206 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
 207 the rank and record number.
 208
 209 Fixed bug in the isam subsystem - caused a malfunction when accessing
 210 words which occurred more than 10000 times.
 211
 212 Distribution should now include YAZ (Z39.50 protocol stack) to simplify
 213 installation.
 214
 215 Server can now run under inetd. Use option -i, and -w <directory> to
 216 set working directory to desired location.
 217
 218 New zebraidx command: clean - removes temporary shadow files.
 219
 220 Fixed bug in ISAM system. Occurred rarely during register updates.
 221
 222 Logging during index merge phase is improved. The remaining running
 223 time is estimated.
 224
 225 Temporary files generated by zebraidx are removed after each run.
 226
 227 Bug fix: Dictionary didn't handle 8-bit characters correctly; was obvious
 228 when doing scan operations in dictionaries with European characters.
 229
 230 --- 1.0a4 1996/01/11
 231
 232 A whole slew of updates, to make the first publicized release. Get the doc
 233 and check it out.
 234
 235 --- 1.0a3 1995/12/06
 236
 237 Memory-problems in ISAM fixed. More blocktypes added to the default setup
 238 to increase performance on larger databases.
 239
 240 Various minor changes in data management system.
 241
 242 --- 1.0a2 1995/12/05
 243
 244 A couple of portability-problems resolved.
 245
 246 Changed some malloc() to xmalloc().
 247
 248 --- 1.0a1 1995/11/28
 249
 250 First release.