Added several OID's.
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 Added several OID's.
4
5 Changed retrieval module so that we can load records with no abstract
6 syntax defined. Tagpaths in these records are fully composed of string tags.
7
8 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
9
10 --- 1.5 1999/12/10
11
12 On UNIX, the generated makefile now supports a proper 'make install'.
13 The prefix can be set via GNU configure to set the install location
14 (default is /usr/local).
15
16 * YAZ programs client and ztest were renamed to yaz-client and
17 yaz-ztest to avoid conflicts when users install YAZ in "standard"
18 locations, such as /usr/bin,/usr/local/bin,etc.
19
20 * YAZ Header files were moved from include to include/yaz. YAZ Header
21 files are referred to as include <yaz/log.h> rather than <log.h>.
22 The YAZ include path (-I ..) is therefore the same as before. Programmers
23 should update their #include statements or use -Ipath/include/yaz
24 instead. The main motivation for doing this change is that YAZ header files
25 can be installed in "standard" locations /usr/include,/usr/local/include 
26 without introducing conflicts, since ALL YAZ header files are stored
27 in subdirectory yaz (under /usr/include for example).
28
29 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
30 rather than project/workspace files. We switched because project files
31 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
32 details.
33
34 Changed name of logging function, logf, to yaz_log, to prevent name
35 clash with some math-log functions. The YAZ header log.h defines logf
36 to yaz_log (#define) so there should be no incompatibilities by this
37 modification.
38
39 Added bend_start/bend_stop handlers for server. These handler are
40 called on start/stop of server. For windows they are called whenever
41 a service is started/stopped.
42
43 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
44 a fairly small ASN.1 compiler written in Tcl. The compiler is located
45 in util/yc.tcl. The auto-generated C code structures are, in a few
46 cases, incompatible with the old decoders. There are differences in the
47 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
48 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
49 The preprocessor variable ASN_COMPILED is defined when the compiled
50 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
51 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
52 wish to use the old encoders/decoders you can specify --disable-yc
53 for configure.
54
55 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
56 version so that it supports both new - and old version of DB Update
57
58 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
59 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
60 change. The name parameter can be set to 0 in which no name is specified
61 for the construction. The macros odr_implicit and odr_explicit sets name
62 parameter to zero for the construction involved. New macros
63 odr_implicit_tag and odr_explicit_tag are similar to the others,
64 except that a name parameter is added. For programmers' that don't use
65 ODR they probably only need to change the call to z_APDU and z_External.
66
67 Added access control facility by interfacing the TCP wrapper library.
68 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
69 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
70 name of the daemon and enables the access control as specified in
71 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
72
73 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
74 den Dool <H.M.vdnDool@kub.nl>.
75
76 Added reference ID parameter to most functions in server API - refer
77 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
78
79 Changed name of ccl library to libccl.a (was ccl.a).
80
81 Fixed bug in decoder for Explain (Category TargetInfo).
82
83 Added support for GNU readline in client. Thanks to Jacob Poulsen
84 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
85
86 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
87 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
88 IMPLEMENTATION! This change was made to the development version before
89 the ZIG decided to retract the amendment. If any users MUST be
90 compatible with the original Update definition, PLEASE CONTACT US, and
91 we will include a separate definition corresponding to the old Update
92 ES. Note that because of the change to the ASN.1 of the
93 TaskPackageRecordStructure we cannot define a single structure that
94 will support both versions.
95
96 * Added const modifier to buffer parameter for some ODR/BER encoding
97 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
98 completeWAIS, odr_dumpBER.
99
100 Fixed bug in client.c which caused a crash when a scanResponse didn't
101 contain positionOfTerm.
102
103 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
104 * will cause an error in a client if a non-YAZ target sends both a
105 * list of Scan entries and non-surrogate diagnostics.
106
107 Retrieval module enhancements. Tag sets may be typed in the reference
108 to it. From the .abs-file the "tagset" directive takes a third optional
109 integer type for the tag set referenced. From a .tag-file the "include"
110 directive takes a third optional type as well. The old "type" directive
111 in the tag set itself is still recognized but acts as the default type
112 for the tag set.
113
114 Backend interface change. Individual Scan terms returned from bend_scan
115 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
116 in include/backend.h.
117
118 Retrieval module enhancements. Multiple tag sets and attribute sets may
119 be specified in abstract syntax specs. Revised the error/warning for
120 logging messages reported by the retrieval module when reading the
121 various spec files.
122
123 Object Identifier system (oid_..) changed. The API is backwards
124 compatible but the oid-routines now allocates new OID's when needed.
125 Raw OID's may be specified in oid_getvalbyname.
126
127 YAZ now uses GNU configure to generate Makefile(s).
128
129 * Minor changes in some of the member names of DeleteResultSetRequest and
130 DeleteResultSetResponse. See include/proto.h.
131
132 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
133 and added member 'languages' in TargetInfo (which was missing).
134
135 Changed the way attribute sets are handled in the retrieval
136 module. These are now cached, just like the abstract syntaxes
137 (schemas).
138
139 Changed YAZ so that it links with compiled ASN.1.
140
141 Added Explain-schema definitions and mapping routines. The following
142 Explain categories have been implemented: AttributeDetails,
143 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
144
145 Fixed minor bug in Windows version of Server Library.
146
147 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
148
149 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
150
151 Added EXTERNAL: UNIverse Resource Report (non-standard).
152
153 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
154 ENUMERATED and SET OF.
155
156 * Added 'const' to some of the char pointer arguments for the
157 functions, data1_read_node, data1_getelementbytagname,
158 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
159 data1_get_absyn.
160
161 Fixed bug in data1_insert_taggeddata - the last_child member of
162 parent wasn't initialised.
163
164 * Changed data1_read_record and data1_read_node so that the supplied
165 "SGML"-buffer is read-only. In particular the resulting data1 - tree
166 doesn't refer to any parts of the "SGML"-buffer.
167
168 Fixed bug in server library (Windows version of statserv_remove).
169
170 * Changed code so that it compiles as C++. The type definition
171 of Odr_fun which is a member of Odr_arm was changed. The result is,
172 that an explicit typecast is needed for the fun pointer when
173 using Odr_arm - as in:
174     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
175
176 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
177
178 Implemented the new structured date and time definition as approved
179 by the ZIG. Added schemaId element to the specificTag in Espec-1
180 (also approved at the last ZIG). Thanks to RVDM.
181
182 Added some Object identifiers (RVDM).
183
184 Changed the Update Extended Service (RVDM).
185
186 Added command "refid" to client which specifies referenceId for
187 the following requests.
188
189 Implemented extended service handling for server. See ztest.c
190 for an example as well as backend.h. New handlers are registerd
191 in the Init handler.
192
193 * Changed interface for sort in server.
194
195 Added new members to statserv_options_block. It allows a server
196 to read options from another source than just the command line. Thanks
197 to Charles Woodfield.
198
199 * Changed definition of Z_Triple in file prt-grs.h - member boolean
200 renamed to zboolean. Some C++ compilers complained about the name.
201
202 Minor changes to gils.abs. Added index 's' (sort) on title
203 and date/time-last-modified.
204
205 --- 1.4pl2 1998/1/30
206
207 Fixed bug in server library regarding inetd mode (-i). This bug
208 was introduced by release 1.4.
209
210 --- 1.4pl1 1998/1/29
211
212 Added sort facility in client and backend server interface.
213
214 Fixed problem with dependencies in Makefile(s).
215
216 Fixed bugs for encoders/decoders of extended services and 
217 SearchInfoReport.
218
219 Implemented sub-tree feature for schemas. Sub-trees are
220 referenced in *.abs-files. See explain.abs for an example
221 of the use of this feature.
222
223 Modified bib1.att; local attributes for ANY didn't include
224 ANY itself (only affects use of the retrieval module).
225
226 Fixed bug in plain SGML reader in function data1_read_node:
227 tags with prefix "var" was incorrectly interpreted as variants.
228
229 Added feature "sub-schemas" to enable references to - and definitions
230 of - group of elements.
231
232 * Removed member parent from type data1_element (in data1.h).
233
234 Implemented function odr_nullval() that returns the value of
235 ODR_NULLVAL.
236
237 * Removed member num_children from data1_node (in data1.h).
238
239 Made NT service interface part of the server library. The
240 function statserv_main uses the NT service when required and
241 calls the statserv_start / statserv_close routines.
242
243 Routine zget_SearchRequest and zget_PresentRequest fills
244 resultSetName/Id member with "default" instead of "Default".
245
246 Fixed memory leak in server. Request queue member wasn't freed.
247
248 Fixed nmem_exit so that memory is freed.
249
250 --- 1.4 1997/10/2
251
252 Revised the CCL parser utility to be thread safe.
253
254 Added function, oid_ent_to_oid, to replace the function 
255 oid_getoidbyent, which is not thread safe.
256
257 * Added nmem_init and nmem_exit to initialize and release
258 NMEM resources. Function nmem_init should be called once in the
259 initial thread before NMEM/ODR is used. statserv.c and client.c
260 have been changed accordingly. The change was necessary to make
261 NMEM thread safe. The NMEM memory pool is shared amongst threads
262 in a process. Unix-based applications will still work fine without
263 calling this.
264
265 Added NT Services interface for the the Z39.50 (statserv) Server. 
266 Refer to the ztest.c source on the usage.
267
268 Windows 95/NT port using MSVC5.0. Project files are included in the
269 distribution.
270
271 * Defined new 'global' handle for the retrieval (data1) system. The
272 new handled, data1_handle, describes the state of the data1 system.
273 This handle is passed as first argument to virtually all
274 data1 related routines. The functions data1_create and data1_destroy
275 creates and destroys a data1 handle respectively.
276
277 Added ODR encode stream member to all backend request structures
278 init, search, scan etc. This stream should be used to allocate all
279 memory used for the response when thread safe operation is needed.
280
281 Changed the comstack utility, cs_addstr, to be thread safe. The
282 returned hostname string returned by the function is now part the
283 COMSTACK instance.
284
285 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
286 function. The cs_straddr takes a COMSTACK handle as argument, so this
287 function must be used after cs_create and before bind/connect.
288 This function is thread safe.
289
290 Moved test server to 'ztest' directory - generic server code still
291 in 'server' directory.
292
293 Made prefix query (pquery.c) utility thread safe.
294
295 Added new function modifier YAZ_EXPORT to 'export' public DLL
296 functions when using windows (see include/yconfig.h).
297
298 Added definitions to the OID database (util/oid.c) (RVDM).
299
300 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
301
302 Added call to ccl_rpn_delete in client program.
303
304 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
305 release of RPN structure.
306
307 Added support for C++, headers uses extern "C" for public definitions.
308 With input from RVDM.
309
310 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
311 Thanks to Ronald van der Meer (RVDM).
312
313 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
314
315 Added support for private extensions to the OID database
316 (oid_setprivateoids()). Thanks to RVDM.
317     
318 Added optional, physical ANY (key replication)
319
320 Fixed null-reference problem in GRS-1 output filter.
321
322 Proximity operator added to Prefix Query Format (PQF).
323
324 In test client command "base" accepts multiple databases.
325
326 Fixed bug in cs_close stack that caused trouble with WINSOCK.
327
328 --- 1.3 1996/10/11
329
330 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
331
332 Smallish bug-fixes in the new encoders/decoders (explain).
333
334 Bug fixed in DeleteRequest.
335
336 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
337
338 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
339
340 Added SOIF syntax (using private OID for now) to retrieval module and client.
341
342 Added Update extended service.
343
344 Added SearchResult-1 additional info structure.
345
346 Added optional CCL (ISO8777) interpreter as separate module. Available
347 in linemode client.
348
349 --- 1.2 1996/6/10 (1st anniversary release)
350
351 Added Summary record syntax. Lightly tested.
352
353 Added OPAC record syntax. Untested.
354
355 Added ResourceReport service encoders/decoders. Untested.
356
357 Fixed bug in z_Unit - wrong tagging on unitSystem.
358
359 Fixed bug in the DiagRecs decoder.
360
361 Added options for max PDU size and session timeout to frontend-server.
362
363 Added documentation of query-language parsers and other supporting utilities.
364
365 [frontend-server] Added Attribute set to the bend_scanrequest API.
366
367 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
368 surrogate diagnostics were generated.
369
370 [retrieval] Allow multiple local values for attribute.
371
372 [retrieval] Allow multiple attributes per element in .abs files. index type.
373
374 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
375
376 --- 1.1pl2  1996/4/10
377
378 Minor changes, mostly specific to Zebra's requirements (retrieval)
379
380 --- 1.1  1996/2/20
381
382 Repaired bug in frontend server when running multiple listening
383 endpoints in dynamic mode.
384
385 z_External() now won't break if a known, ASN.1 value comes encapsulated
386 in an octet-string. The value will pass through unmodified in an Odr_oct.
387
388 Added a bit of code to the demo client to decode & display
389 ASN.1-structured records represented in the octet-aligned branch of
390 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
391
392 Added z_ext_getentbyref() to the ASN module. Doc updated.
393
394 * Completed the SCAN definition in the ASN module. This may break SCAN
395 code based on older YAZ-versions at compile-time. The fix is easy -
396 look in proto.h.
397
398 * Added 'displayTerm' and OtherInformation to the TermInfo structure
399 under the SCAN definition. Remember to initialize this, server-people.
400
401 Comstack should now support the WAIS protocol in TCP/IP mode. Note
402 that this does not extend to ODR and ASN.
403
404 Comstack allows insertion of established socket (primarily for
405 inetd-operation of servers). Doc updated.
406
407 Front-end server can now start from the inetd in TCP mode. Doc
408 updated.
409
410 --- 1.0pl4 1996/1/24
411
412 Added Sort PDU.
413
414 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
415 the rank and record number.
416
417 Adjustments to the frontend server.
418
419 Fixed diagnostic BER dumper. It ignored the file argument.
420
421 --- 1.0pl3 1996/1/2
422
423 Various changes to retrieval module.
424
425 Changed the union discriminators of the protocol files from enums to
426 ints paired with #defines.
427
428 *Changed oident.class to oident.oclass to avoid a reserved word in C++
429  compilers.
430
431 *Changed operator in the RPN structure to 'roperator', again to avoid a
432  conflict with C++.
433
434 Fixed problems in Explain decoders/encoders.
435
436 --- 1.0pl2 1995/12/6
437
438 Memory bug in log module fixed.
439
440 --- 1.0pl1 1995/12/5
441
442 Occasional malloc() of 0 bytes fixed in d1_espec.c.
443
444 Bug in Explain DatabaseInfo module fixed.
445
446 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
447
448 --- 1.0 1995/11/28
449
450 The shift to v1.0 signals that we now consider the *core* functionality
451 of YAZ reasonably stable (the core being more or less equivalent to
452 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
453 tested (Explain not at all - though that will happen soonish).
454
455 Minor changes to code to support Windows port.
456
457 Various minor changes after we're getting to use GRS-1 & co. more.
458
459 Added Espec-1 format.
460
461 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
462 of the protocol and it cannot be selected when encoding (maps into 'string'
463 when decoding). Needed to talk to some servers.
464
465 Demo client can request simple element set names.
466
467 Added Diagnostic Format encoders/decoders.
468
469 Added simple Close handling to frontend server (no hooks for resource
470 reporting yet), and demonstration client.
471
472 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
473
474 --- 1.0b3 1995/08/24
475
476 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
477 handled incorrectly when records were requested in the searchResponse. This
478 will only affect you if you use the frontend-server.
479
480 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
481 Test-client will ask for and print GRS1. Ztest will return dummy records
482 on request.
483
484 Added Explain encoders/decoders to the service-level API. Untested.
485
486 Added Extended Services: Item Order encoders and decoders to the Service-
487 level API. Untested. We could use a recent copy of the pertinent bits
488 of the ILL protocol to add those bits.
489
490 Added diagnostic format 1 encoders/decoders to the service-level API.
491 Untested.
492
493 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
494 odr_cons.c, which causes a more correct output.
495
496 Fixed handling of searchRequest in frontend server. NextResultSetPosition
497 was always set to 0 when no records were requested in the searchRequest.
498
499 * Added better external-handling. This shouldn't harm old code that
500 *encodes* externals. It can break code that looks for a
501 'single-ASN1-type' representation, since those types that are known
502 are now decoded immediately. Look at the SUTRS sample code in
503 seshigh.c and client.c. Documentation updated.
504
505 Handling of structured records in bend_fetchresponse. Length -1 marks
506 structured record, type is deduced from format field.
507
508 --- 1.0b2 1995/06/27
509 Fairly quick maintenance release to add SUTRS support.
510
511 Fixed handling of SUTRS records in the demonstration client.
512
513 * Added format field to the bend_fetchrequest and bend_fetchresponce
514 structures of the backend API (frontend server). When the record is
515 returned, the value of the format field is mapped to an OID. The
516 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
517 of the record. The special value VAL_NONE in the bend_request means
518 that no specific format was requested by the client. Documentation
519 updated accordingly. Test server (ztest) will return a fixed dummy
520 SUTRS record if your client requests SUTRS.
521
522 Documentation updated accordingly.
523
524 You can now set external libraries and RANLIB support in the top-level
525 Makefile.
526
527 --- 1.0b 1995/06/19
528 First public release.