Updated version resource.
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
4 to Matthew Carey.
5
6 CCL operator names may be set in field definition files (CCL_bibset).
7 See ccl/bib1 for an example.
8
9 Fixes in ASN.1 compiler for C++ compatibility.
10
11 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
12 and "op_or" to avoid conflict with C++.
13
14 Fixed problem with GNU readline detection on Redhat 7.0.
15
16 Added step-size for Scan backend handler.
17
18 Fixed bug that made the frontend server crash when no attribute
19 set was specified for scan.
20
21 Front-end server automatically switches to original working directory
22 when installed as an NT service. Previously -w had to be specified to
23 make it work.
24
25 Added extended attributes for retrieval module (data1), so that data1
26 records carry d1_readXML/SGML attributes. d1_read also supports
27 null-data rules ( <tag/>)
28
29 On UNIX when POSIX threads are available, a separate library libyazthread
30 is created. Programmers should link with that library and the yaz library
31 when using threads. The reason for the split was that some applications
32 on Linux, such as Apache, doesn't work well when using shared objects that
33 relies on threads.
34
35 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
36 (or any frontend server) in SSL mode by specifying ssl: followed by
37 address. Only tested on UNIX.
38
39 Added feature for CCL module. Virtual structure s=al or s=ol generates
40 and-list and or-list respectively instead of phrase search.
41
42 Added some OID's.
43
44 * Added prefix "yaz_" for the functions log_init.., log_file..  and
45 log_mask_str. This was done to avoid name conflicts with other libraries
46 (such as other PHP extensions).
47
48 Added raw OID member for preferred record syntax (request_format_raw)
49 and returned record syntax (output_format_raw) for backend fetch method.
50
51 Config file yaz-config now accepts options so that it returns specific
52 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
53
54 Shared library support for UNIX using GNU libtool.
55
56 * Modified backend interface. Request/Response struct's replaced by
57 one read/write C struct. For example bend_fetchrequest and
58 bend_fetchresult have been replaced by single bend_fetch_rr struct.
59 Every handler - even search has to be registered in bend_init
60 handler. This means that the YAZ library no longer refers to
61 external functions and it makes it possible to make the whole
62 thing a single DLL/SO.
63
64 Added Segment handler for backend server.
65
66 Added Zmbol/Zebra administrative functions to YAZ client.
67
68 Threaded frontend server on UNIX (when POSIX Threads are available).
69 Starting the server with option -T enables multi-threading.
70
71 --- 1.6 2000/03/03
72
73 Added configure option --enable-comp/disable-comp to control use
74 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
75 located in sub directory asn.
76
77 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
78 in ${exec_prefix}/bin along with the other programs yaz-client and
79 yaz-ztest.
80
81 GNU automake used to maintain makefiles.
82
83 Added several OID's.
84
85 Changed retrieval module so that we can load records with no abstract
86 syntax defined. Tagpaths in these records are fully composed of string
87 tags.
88
89 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
90
91 --- 1.5 1999/12/10
92
93 On UNIX, the generated makefile now supports a proper 'make install'.
94 The prefix can be set via GNU configure to set the install location
95 (default is /usr/local).
96
97 * YAZ programs client and ztest were renamed to yaz-client and
98 yaz-ztest to avoid conflicts when users install YAZ in "standard"
99 locations, such as /usr/bin,/usr/local/bin,etc.
100
101 * YAZ Header files were moved from include to include/yaz. YAZ Header
102 files are referred to as include <yaz/log.h> rather than <log.h>.
103 The YAZ include path (-I ..) is therefore the same as before. Programmers
104 should update their #include statements or use -Ipath/include/yaz
105 instead. The main motivation for doing this change is that YAZ header files
106 can be installed in "standard" locations /usr/include,/usr/local/include 
107 without introducing conflicts, since ALL YAZ header files are stored
108 in subdirectory yaz (under /usr/include for example).
109
110 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
111 rather than project/workspace files. We switched because project files
112 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
113 details.
114
115 Changed name of logging function, logf, to yaz_log, to prevent name
116 clash with some math-log functions. The YAZ header log.h defines logf
117 to yaz_log (#define) so there should be no incompatibilities by this
118 modification.
119
120 Added bend_start/bend_stop handlers for server. These handler are
121 called on start/stop of server. For windows they are called whenever
122 a service is started/stopped.
123
124 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
125 a fairly small ASN.1 compiler written in Tcl. The compiler is located
126 in util/yc.tcl. The auto-generated C code structures are, in a few
127 cases, incompatible with the old decoders. There are differences in the
128 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
129 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
130 The preprocessor variable ASN_COMPILED is defined when the compiled
131 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
132 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
133 wish to use the old encoders/decoders you can specify --disable-yc
134 for configure.
135
136 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
137 version so that it supports both new - and old version of DB Update
138
139 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
140 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
141 change. The name parameter can be set to 0 in which no name is specified
142 for the construction. The macros odr_implicit and odr_explicit sets name
143 parameter to zero for the construction involved. New macros
144 odr_implicit_tag and odr_explicit_tag are similar to the others,
145 except that a name parameter is added. For programmers' that don't use
146 ODR they probably only need to change the call to z_APDU and z_External.
147
148 Added access control facility by interfacing the TCP wrapper library.
149 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
150 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
151 name of the daemon and enables the access control as specified in
152 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
153
154 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
155 den Dool <H.M.vdnDool@kub.nl>.
156
157 Added reference ID parameter to most functions in server API - refer
158 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
159
160 Changed name of ccl library to libccl.a (was ccl.a).
161
162 Fixed bug in decoder for Explain (Category TargetInfo).
163
164 Added support for GNU readline in client. Thanks to Jacob Poulsen
165 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
166
167 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
168 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
169 IMPLEMENTATION! This change was made to the development version before
170 the ZIG decided to retract the amendment. If any users MUST be
171 compatible with the original Update definition, PLEASE CONTACT US, and
172 we will include a separate definition corresponding to the old Update
173 ES. Note that because of the change to the ASN.1 of the
174 TaskPackageRecordStructure we cannot define a single structure that
175 will support both versions.
176
177 * Added const modifier to buffer parameter for some ODR/BER encoding
178 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
179 completeWAIS, odr_dumpBER.
180
181 Fixed bug in client.c which caused a crash when a scanResponse didn't
182 contain positionOfTerm.
183
184 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
185 * will cause an error in a client if a non-YAZ target sends both a
186 * list of Scan entries and non-surrogate diagnostics.
187
188 Retrieval module enhancements. Tag sets may be typed in the reference
189 to it. From the .abs-file the "tagset" directive takes a third optional
190 integer type for the tag set referenced. From a .tag-file the "include"
191 directive takes a third optional type as well. The old "type" directive
192 in the tag set itself is still recognized but acts as the default type
193 for the tag set.
194
195 Backend interface change. Individual Scan terms returned from bend_scan
196 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
197 in include/backend.h.
198
199 Retrieval module enhancements. Multiple tag sets and attribute sets may
200 be specified in abstract syntax specs. Revised the error/warning for
201 logging messages reported by the retrieval module when reading the
202 various spec files.
203
204 Object Identifier system (oid_..) changed. The API is backwards
205 compatible but the oid-routines now allocates new OID's when needed.
206 Raw OID's may be specified in oid_getvalbyname.
207
208 YAZ now uses GNU configure to generate Makefile(s).
209
210 * Minor changes in some of the member names of DeleteResultSetRequest and
211 DeleteResultSetResponse. See include/proto.h.
212
213 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
214 and added member 'languages' in TargetInfo (which was missing).
215
216 Changed the way attribute sets are handled in the retrieval
217 module. These are now cached, just like the abstract syntaxes
218 (schemas).
219
220 Changed YAZ so that it links with compiled ASN.1.
221
222 Added Explain-schema definitions and mapping routines. The following
223 Explain categories have been implemented: AttributeDetails,
224 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
225
226 Fixed minor bug in Windows version of Server Library.
227
228 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
229
230 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
231
232 Added EXTERNAL: UNIverse Resource Report (non-standard).
233
234 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
235 ENUMERATED and SET OF.
236
237 * Added 'const' to some of the char pointer arguments for the
238 functions, data1_read_node, data1_getelementbytagname,
239 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
240 data1_get_absyn.
241
242 Fixed bug in data1_insert_taggeddata - the last_child member of
243 parent wasn't initialised.
244
245 * Changed data1_read_record and data1_read_node so that the supplied
246 "SGML"-buffer is read-only. In particular the resulting data1 - tree
247 doesn't refer to any parts of the "SGML"-buffer.
248
249 Fixed bug in server library (Windows version of statserv_remove).
250
251 * Changed code so that it compiles as C++. The type definition
252 of Odr_fun which is a member of Odr_arm was changed. The result is,
253 that an explicit typecast is needed for the fun pointer when
254 using Odr_arm - as in:
255     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
256
257 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
258
259 Implemented the new structured date and time definition as approved
260 by the ZIG. Added schemaId element to the specificTag in Espec-1
261 (also approved at the last ZIG). Thanks to RVDM.
262
263 Added some Object identifiers (RVDM).
264
265 Changed the Update Extended Service (RVDM).
266
267 Added command "refid" to client which specifies referenceId for
268 the following requests.
269
270 Implemented extended service handling for server. See ztest.c
271 for an example as well as backend.h. New handlers are registerd
272 in the Init handler.
273
274 * Changed interface for sort in server.
275
276 Added new members to statserv_options_block. It allows a server
277 to read options from another source than just the command line. Thanks
278 to Charles Woodfield.
279
280 * Changed definition of Z_Triple in file prt-grs.h - member boolean
281 renamed to zboolean. Some C++ compilers complained about the name.
282
283 Minor changes to gils.abs. Added index 's' (sort) on title
284 and date/time-last-modified.
285
286 --- 1.4pl2 1998/1/30
287
288 Fixed bug in server library regarding inetd mode (-i). This bug
289 was introduced by release 1.4.
290
291 --- 1.4pl1 1998/1/29
292
293 Added sort facility in client and backend server interface.
294
295 Fixed problem with dependencies in Makefile(s).
296
297 Fixed bugs for encoders/decoders of extended services and 
298 SearchInfoReport.
299
300 Implemented sub-tree feature for schemas. Sub-trees are
301 referenced in *.abs-files. See explain.abs for an example
302 of the use of this feature.
303
304 Modified bib1.att; local attributes for ANY didn't include
305 ANY itself (only affects use of the retrieval module).
306
307 Fixed bug in plain SGML reader in function data1_read_node:
308 tags with prefix "var" was incorrectly interpreted as variants.
309
310 Added feature "sub-schemas" to enable references to - and definitions
311 of - group of elements.
312
313 * Removed member parent from type data1_element (in data1.h).
314
315 Implemented function odr_nullval() that returns the value of
316 ODR_NULLVAL.
317
318 * Removed member num_children from data1_node (in data1.h).
319
320 Made NT service interface part of the server library. The
321 function statserv_main uses the NT service when required and
322 calls the statserv_start / statserv_close routines.
323
324 Routine zget_SearchRequest and zget_PresentRequest fills
325 resultSetName/Id member with "default" instead of "Default".
326
327 Fixed memory leak in server. Request queue member wasn't freed.
328
329 Fixed nmem_exit so that memory is freed.
330
331 --- 1.4 1997/10/2
332
333 Revised the CCL parser utility to be thread safe.
334
335 Added function, oid_ent_to_oid, to replace the function 
336 oid_getoidbyent, which is not thread safe.
337
338 * Added nmem_init and nmem_exit to initialize and release
339 NMEM resources. Function nmem_init should be called once in the
340 initial thread before NMEM/ODR is used. statserv.c and client.c
341 have been changed accordingly. The change was necessary to make
342 NMEM thread safe. The NMEM memory pool is shared amongst threads
343 in a process. Unix-based applications will still work fine without
344 calling this.
345
346 Added NT Services interface for the the Z39.50 (statserv) Server. 
347 Refer to the ztest.c source on the usage.
348
349 Windows 95/NT port using MSVC5.0. Project files are included in the
350 distribution.
351
352 * Defined new 'global' handle for the retrieval (data1) system. The
353 new handled, data1_handle, describes the state of the data1 system.
354 This handle is passed as first argument to virtually all
355 data1 related routines. The functions data1_create and data1_destroy
356 creates and destroys a data1 handle respectively.
357
358 Added ODR encode stream member to all backend request structures
359 init, search, scan etc. This stream should be used to allocate all
360 memory used for the response when thread safe operation is needed.
361
362 Changed the comstack utility, cs_addstr, to be thread safe. The
363 returned hostname string returned by the function is now part the
364 COMSTACK instance.
365
366 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
367 function. The cs_straddr takes a COMSTACK handle as argument, so this
368 function must be used after cs_create and before bind/connect.
369 This function is thread safe.
370
371 Moved test server to 'ztest' directory - generic server code still
372 in 'server' directory.
373
374 Made prefix query (pquery.c) utility thread safe.
375
376 Added new function modifier YAZ_EXPORT to 'export' public DLL
377 functions when using windows (see include/yconfig.h).
378
379 Added definitions to the OID database (util/oid.c) (RVDM).
380
381 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
382
383 Added call to ccl_rpn_delete in client program.
384
385 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
386 release of RPN structure.
387
388 Added support for C++, headers uses extern "C" for public definitions.
389 With input from RVDM.
390
391 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
392 Thanks to Ronald van der Meer (RVDM).
393
394 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
395
396 Added support for private extensions to the OID database
397 (oid_setprivateoids()). Thanks to RVDM.
398     
399 Added optional, physical ANY (key replication)
400
401 Fixed null-reference problem in GRS-1 output filter.
402
403 Proximity operator added to Prefix Query Format (PQF).
404
405 In test client command "base" accepts multiple databases.
406
407 Fixed bug in cs_close stack that caused trouble with WINSOCK.
408
409 --- 1.3 1996/10/11
410
411 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
412
413 Smallish bug-fixes in the new encoders/decoders (explain).
414
415 Bug fixed in DeleteRequest.
416
417 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
418
419 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
420
421 Added SOIF syntax (using private OID for now) to retrieval module and client.
422
423 Added Update extended service.
424
425 Added SearchResult-1 additional info structure.
426
427 Added optional CCL (ISO8777) interpreter as separate module. Available
428 in linemode client.
429
430 --- 1.2 1996/6/10 (1st anniversary release)
431
432 Added Summary record syntax. Lightly tested.
433
434 Added OPAC record syntax. Untested.
435
436 Added ResourceReport service encoders/decoders. Untested.
437
438 Fixed bug in z_Unit - wrong tagging on unitSystem.
439
440 Fixed bug in the DiagRecs decoder.
441
442 Added options for max PDU size and session timeout to frontend-server.
443
444 Added documentation of query-language parsers and other supporting utilities.
445
446 [frontend-server] Added Attribute set to the bend_scanrequest API.
447
448 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
449 surrogate diagnostics were generated.
450
451 [retrieval] Allow multiple local values for attribute.
452
453 [retrieval] Allow multiple attributes per element in .abs files. index type.
454
455 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
456
457 --- 1.1pl2  1996/4/10
458
459 Minor changes, mostly specific to Zebra's requirements (retrieval)
460
461 --- 1.1  1996/2/20
462
463 Repaired bug in frontend server when running multiple listening
464 endpoints in dynamic mode.
465
466 z_External() now won't break if a known, ASN.1 value comes encapsulated
467 in an octet-string. The value will pass through unmodified in an Odr_oct.
468
469 Added a bit of code to the demo client to decode & display
470 ASN.1-structured records represented in the octet-aligned branch of
471 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
472
473 Added z_ext_getentbyref() to the ASN module. Doc updated.
474
475 * Completed the SCAN definition in the ASN module. This may break SCAN
476 code based on older YAZ-versions at compile-time. The fix is easy -
477 look in proto.h.
478
479 * Added 'displayTerm' and OtherInformation to the TermInfo structure
480 under the SCAN definition. Remember to initialize this, server-people.
481
482 Comstack should now support the WAIS protocol in TCP/IP mode. Note
483 that this does not extend to ODR and ASN.
484
485 Comstack allows insertion of established socket (primarily for
486 inetd-operation of servers). Doc updated.
487
488 Front-end server can now start from the inetd in TCP mode. Doc
489 updated.
490
491 --- 1.0pl4 1996/1/24
492
493 Added Sort PDU.
494
495 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
496 the rank and record number.
497
498 Adjustments to the frontend server.
499
500 Fixed diagnostic BER dumper. It ignored the file argument.
501
502 --- 1.0pl3 1996/1/2
503
504 Various changes to retrieval module.
505
506 Changed the union discriminators of the protocol files from enums to
507 ints paired with #defines.
508
509 *Changed oident.class to oident.oclass to avoid a reserved word in C++
510  compilers.
511
512 *Changed operator in the RPN structure to 'roperator', again to avoid a
513  conflict with C++.
514
515 Fixed problems in Explain decoders/encoders.
516
517 --- 1.0pl2 1995/12/6
518
519 Memory bug in log module fixed.
520
521 --- 1.0pl1 1995/12/5
522
523 Occasional malloc() of 0 bytes fixed in d1_espec.c.
524
525 Bug in Explain DatabaseInfo module fixed.
526
527 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
528
529 --- 1.0 1995/11/28
530
531 The shift to v1.0 signals that we now consider the *core* functionality
532 of YAZ reasonably stable (the core being more or less equivalent to
533 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
534 tested (Explain not at all - though that will happen soonish).
535
536 Minor changes to code to support Windows port.
537
538 Various minor changes after we're getting to use GRS-1 & co. more.
539
540 Added Espec-1 format.
541
542 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
543 of the protocol and it cannot be selected when encoding (maps into 'string'
544 when decoding). Needed to talk to some servers.
545
546 Demo client can request simple element set names.
547
548 Added Diagnostic Format encoders/decoders.
549
550 Added simple Close handling to frontend server (no hooks for resource
551 reporting yet), and demonstration client.
552
553 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
554
555 --- 1.0b3 1995/08/24
556
557 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
558 handled incorrectly when records were requested in the searchResponse. This
559 will only affect you if you use the frontend-server.
560
561 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
562 Test-client will ask for and print GRS1. Ztest will return dummy records
563 on request.
564
565 Added Explain encoders/decoders to the service-level API. Untested.
566
567 Added Extended Services: Item Order encoders and decoders to the Service-
568 level API. Untested. We could use a recent copy of the pertinent bits
569 of the ILL protocol to add those bits.
570
571 Added diagnostic format 1 encoders/decoders to the service-level API.
572 Untested.
573
574 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
575 odr_cons.c, which causes a more correct output.
576
577 Fixed handling of searchRequest in frontend server. NextResultSetPosition
578 was always set to 0 when no records were requested in the searchRequest.
579
580 * Added better external-handling. This shouldn't harm old code that
581 *encodes* externals. It can break code that looks for a
582 'single-ASN1-type' representation, since those types that are known
583 are now decoded immediately. Look at the SUTRS sample code in
584 seshigh.c and client.c. Documentation updated.
585
586 Handling of structured records in bend_fetchresponse. Length -1 marks
587 structured record, type is deduced from format field.
588
589 --- 1.0b2 1995/06/27
590 Fairly quick maintenance release to add SUTRS support.
591
592 Fixed handling of SUTRS records in the demonstration client.
593
594 * Added format field to the bend_fetchrequest and bend_fetchresponce
595 structures of the backend API (frontend server). When the record is
596 returned, the value of the format field is mapped to an OID. The
597 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
598 of the record. The special value VAL_NONE in the bend_request means
599 that no specific format was requested by the client. Documentation
600 updated accordingly. Test server (ztest) will return a fixed dummy
601 SUTRS record if your client requests SUTRS.
602
603 Documentation updated accordingly.
604
605 You can now set external libraries and RANLIB support in the top-level
606 Makefile.
607
608 --- 1.0b 1995/06/19
609 First public release.