Added script cvs-date.tcl that determines last CVS change for YAZ by
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 * Minor adjustments to pquery parser (PQF). Token characters may be
4 escaped by using backslash (C-style).
5
6 PQF parser allows string attribute values to be specified. For @attr,
7 non-numeric characters after the equal-sign are treated as strings
8 (e.g. @attr 9=title).
9
10 CCL trunction character may be defined (@truncation in file)
11
12 * function zget_ExtendedServicesRequest sets waitAction to
13   waitIfPossible (was wait).
14
15 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
16 to Matthew Carey.
17
18 CCL operator names may be set in field definition files (CCL_bibset).
19 See ccl/bib1 for an example.
20
21 Fixes in ASN.1 compiler for C++ compatibility.
22
23 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
24 and "op_or" to avoid conflict with C++.
25
26 Fixed problem with GNU readline detection on Redhat 7.0.
27
28 Added step-size for Scan backend handler.
29
30 Fixed bug that made the frontend server crash when no attribute
31 set was specified for scan.
32
33 Front-end server automatically switches to original working directory
34 when installed as an NT service. Previously -w had to be specified to
35 make it work.
36
37 Added extended attributes for retrieval module (data1), so that data1
38 records carry d1_readXML/SGML attributes. d1_read also supports
39 null-data rules ( <tag/>)
40
41 On UNIX when POSIX threads are available, a separate library libyazthread
42 is created. Programmers should link with that library and the yaz library
43 when using threads. The reason for the split was that some applications
44 on Linux, such as Apache, doesn't work well when using shared objects that
45 relies on threads.
46
47 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
48 (or any frontend server) in SSL mode by specifying ssl: followed by
49 address. Only tested on UNIX.
50
51 Added feature for CCL module. Virtual structure s=al or s=ol generates
52 and-list and or-list respectively instead of phrase search.
53
54 Added some OID's.
55
56 * Added prefix "yaz_" for the functions log_init.., log_file..  and
57 log_mask_str. This was done to avoid name conflicts with other libraries
58 (such as other PHP extensions).
59
60 Added raw OID member for preferred record syntax (request_format_raw)
61 and returned record syntax (output_format_raw) for backend fetch method.
62
63 Config file yaz-config now accepts options so that it returns specific
64 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
65
66 Shared library support for UNIX using GNU libtool.
67
68 * Modified backend interface. Request/Response struct's replaced by
69 one read/write C struct. For example bend_fetchrequest and
70 bend_fetchresult have been replaced by single bend_fetch_rr struct.
71 Every handler - even search has to be registered in bend_init
72 handler. This means that the YAZ library no longer refers to
73 external functions and it makes it possible to make the whole
74 thing a single DLL/SO.
75
76 Added Segment handler for backend server.
77
78 Added Zmbol/Zebra administrative functions to YAZ client.
79
80 Threaded frontend server on UNIX (when POSIX Threads are available).
81 Starting the server with option -T enables multi-threading.
82
83 --- 1.6 2000/03/03
84
85 Added configure option --enable-comp/disable-comp to control use
86 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
87 located in sub directory asn.
88
89 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
90 in ${exec_prefix}/bin along with the other programs yaz-client and
91 yaz-ztest.
92
93 GNU automake used to maintain makefiles.
94
95 Added several OID's.
96
97 Changed retrieval module so that we can load records with no abstract
98 syntax defined. Tagpaths in these records are fully composed of string
99 tags.
100
101 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
102
103 --- 1.5 1999/12/10
104
105 On UNIX, the generated makefile now supports a proper 'make install'.
106 The prefix can be set via GNU configure to set the install location
107 (default is /usr/local).
108
109 * YAZ programs client and ztest were renamed to yaz-client and
110 yaz-ztest to avoid conflicts when users install YAZ in "standard"
111 locations, such as /usr/bin,/usr/local/bin,etc.
112
113 * YAZ Header files were moved from include to include/yaz. YAZ Header
114 files are referred to as include <yaz/log.h> rather than <log.h>.
115 The YAZ include path (-I ..) is therefore the same as before. Programmers
116 should update their #include statements or use -Ipath/include/yaz
117 instead. The main motivation for doing this change is that YAZ header files
118 can be installed in "standard" locations /usr/include,/usr/local/include 
119 without introducing conflicts, since ALL YAZ header files are stored
120 in subdirectory yaz (under /usr/include for example).
121
122 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
123 rather than project/workspace files. We switched because project files
124 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
125 details.
126
127 Changed name of logging function, logf, to yaz_log, to prevent name
128 clash with some math-log functions. The YAZ header log.h defines logf
129 to yaz_log (#define) so there should be no incompatibilities by this
130 modification.
131
132 Added bend_start/bend_stop handlers for server. These handler are
133 called on start/stop of server. For windows they are called whenever
134 a service is started/stopped.
135
136 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
137 a fairly small ASN.1 compiler written in Tcl. The compiler is located
138 in util/yc.tcl. The auto-generated C code structures are, in a few
139 cases, incompatible with the old decoders. There are differences in the
140 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
141 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
142 The preprocessor variable ASN_COMPILED is defined when the compiled
143 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
144 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
145 wish to use the old encoders/decoders you can specify --disable-yc
146 for configure.
147
148 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
149 version so that it supports both new - and old version of DB Update
150
151 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
152 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
153 change. The name parameter can be set to 0 in which no name is specified
154 for the construction. The macros odr_implicit and odr_explicit sets name
155 parameter to zero for the construction involved. New macros
156 odr_implicit_tag and odr_explicit_tag are similar to the others,
157 except that a name parameter is added. For programmers' that don't use
158 ODR they probably only need to change the call to z_APDU and z_External.
159
160 Added access control facility by interfacing the TCP wrapper library.
161 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
162 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
163 name of the daemon and enables the access control as specified in
164 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
165
166 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
167 den Dool <H.M.vdnDool@kub.nl>.
168
169 Added reference ID parameter to most functions in server API - refer
170 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
171
172 Changed name of ccl library to libccl.a (was ccl.a).
173
174 Fixed bug in decoder for Explain (Category TargetInfo).
175
176 Added support for GNU readline in client. Thanks to Jacob Poulsen
177 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
178
179 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
180 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
181 IMPLEMENTATION! This change was made to the development version before
182 the ZIG decided to retract the amendment. If any users MUST be
183 compatible with the original Update definition, PLEASE CONTACT US, and
184 we will include a separate definition corresponding to the old Update
185 ES. Note that because of the change to the ASN.1 of the
186 TaskPackageRecordStructure we cannot define a single structure that
187 will support both versions.
188
189 * Added const modifier to buffer parameter for some ODR/BER encoding
190 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
191 completeWAIS, odr_dumpBER.
192
193 Fixed bug in client.c which caused a crash when a scanResponse didn't
194 contain positionOfTerm.
195
196 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
197 * will cause an error in a client if a non-YAZ target sends both a
198 * list of Scan entries and non-surrogate diagnostics.
199
200 Retrieval module enhancements. Tag sets may be typed in the reference
201 to it. From the .abs-file the "tagset" directive takes a third optional
202 integer type for the tag set referenced. From a .tag-file the "include"
203 directive takes a third optional type as well. The old "type" directive
204 in the tag set itself is still recognized but acts as the default type
205 for the tag set.
206
207 Backend interface change. Individual Scan terms returned from bend_scan
208 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
209 in include/backend.h.
210
211 Retrieval module enhancements. Multiple tag sets and attribute sets may
212 be specified in abstract syntax specs. Revised the error/warning for
213 logging messages reported by the retrieval module when reading the
214 various spec files.
215
216 Object Identifier system (oid_..) changed. The API is backwards
217 compatible but the oid-routines now allocates new OID's when needed.
218 Raw OID's may be specified in oid_getvalbyname.
219
220 YAZ now uses GNU configure to generate Makefile(s).
221
222 * Minor changes in some of the member names of DeleteResultSetRequest and
223 DeleteResultSetResponse. See include/proto.h.
224
225 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
226 and added member 'languages' in TargetInfo (which was missing).
227
228 Changed the way attribute sets are handled in the retrieval
229 module. These are now cached, just like the abstract syntaxes
230 (schemas).
231
232 Changed YAZ so that it links with compiled ASN.1.
233
234 Added Explain-schema definitions and mapping routines. The following
235 Explain categories have been implemented: AttributeDetails,
236 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
237
238 Fixed minor bug in Windows version of Server Library.
239
240 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
241
242 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
243
244 Added EXTERNAL: UNIverse Resource Report (non-standard).
245
246 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
247 ENUMERATED and SET OF.
248
249 * Added 'const' to some of the char pointer arguments for the
250 functions, data1_read_node, data1_getelementbytagname,
251 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
252 data1_get_absyn.
253
254 Fixed bug in data1_insert_taggeddata - the last_child member of
255 parent wasn't initialised.
256
257 * Changed data1_read_record and data1_read_node so that the supplied
258 "SGML"-buffer is read-only. In particular the resulting data1 - tree
259 doesn't refer to any parts of the "SGML"-buffer.
260
261 Fixed bug in server library (Windows version of statserv_remove).
262
263 * Changed code so that it compiles as C++. The type definition
264 of Odr_fun which is a member of Odr_arm was changed. The result is,
265 that an explicit typecast is needed for the fun pointer when
266 using Odr_arm - as in:
267     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
268
269 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
270
271 Implemented the new structured date and time definition as approved
272 by the ZIG. Added schemaId element to the specificTag in Espec-1
273 (also approved at the last ZIG). Thanks to RVDM.
274
275 Added some Object identifiers (RVDM).
276
277 Changed the Update Extended Service (RVDM).
278
279 Added command "refid" to client which specifies referenceId for
280 the following requests.
281
282 Implemented extended service handling for server. See ztest.c
283 for an example as well as backend.h. New handlers are registerd
284 in the Init handler.
285
286 * Changed interface for sort in server.
287
288 Added new members to statserv_options_block. It allows a server
289 to read options from another source than just the command line. Thanks
290 to Charles Woodfield.
291
292 * Changed definition of Z_Triple in file prt-grs.h - member boolean
293 renamed to zboolean. Some C++ compilers complained about the name.
294
295 Minor changes to gils.abs. Added index 's' (sort) on title
296 and date/time-last-modified.
297
298 --- 1.4pl2 1998/1/30
299
300 Fixed bug in server library regarding inetd mode (-i). This bug
301 was introduced by release 1.4.
302
303 --- 1.4pl1 1998/1/29
304
305 Added sort facility in client and backend server interface.
306
307 Fixed problem with dependencies in Makefile(s).
308
309 Fixed bugs for encoders/decoders of extended services and 
310 SearchInfoReport.
311
312 Implemented sub-tree feature for schemas. Sub-trees are
313 referenced in *.abs-files. See explain.abs for an example
314 of the use of this feature.
315
316 Modified bib1.att; local attributes for ANY didn't include
317 ANY itself (only affects use of the retrieval module).
318
319 Fixed bug in plain SGML reader in function data1_read_node:
320 tags with prefix "var" was incorrectly interpreted as variants.
321
322 Added feature "sub-schemas" to enable references to - and definitions
323 of - group of elements.
324
325 * Removed member parent from type data1_element (in data1.h).
326
327 Implemented function odr_nullval() that returns the value of
328 ODR_NULLVAL.
329
330 * Removed member num_children from data1_node (in data1.h).
331
332 Made NT service interface part of the server library. The
333 function statserv_main uses the NT service when required and
334 calls the statserv_start / statserv_close routines.
335
336 Routine zget_SearchRequest and zget_PresentRequest fills
337 resultSetName/Id member with "default" instead of "Default".
338
339 Fixed memory leak in server. Request queue member wasn't freed.
340
341 Fixed nmem_exit so that memory is freed.
342
343 --- 1.4 1997/10/2
344
345 Revised the CCL parser utility to be thread safe.
346
347 Added function, oid_ent_to_oid, to replace the function 
348 oid_getoidbyent, which is not thread safe.
349
350 * Added nmem_init and nmem_exit to initialize and release
351 NMEM resources. Function nmem_init should be called once in the
352 initial thread before NMEM/ODR is used. statserv.c and client.c
353 have been changed accordingly. The change was necessary to make
354 NMEM thread safe. The NMEM memory pool is shared amongst threads
355 in a process. Unix-based applications will still work fine without
356 calling this.
357
358 Added NT Services interface for the the Z39.50 (statserv) Server. 
359 Refer to the ztest.c source on the usage.
360
361 Windows 95/NT port using MSVC5.0. Project files are included in the
362 distribution.
363
364 * Defined new 'global' handle for the retrieval (data1) system. The
365 new handled, data1_handle, describes the state of the data1 system.
366 This handle is passed as first argument to virtually all
367 data1 related routines. The functions data1_create and data1_destroy
368 creates and destroys a data1 handle respectively.
369
370 Added ODR encode stream member to all backend request structures
371 init, search, scan etc. This stream should be used to allocate all
372 memory used for the response when thread safe operation is needed.
373
374 Changed the comstack utility, cs_addstr, to be thread safe. The
375 returned hostname string returned by the function is now part the
376 COMSTACK instance.
377
378 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
379 function. The cs_straddr takes a COMSTACK handle as argument, so this
380 function must be used after cs_create and before bind/connect.
381 This function is thread safe.
382
383 Moved test server to 'ztest' directory - generic server code still
384 in 'server' directory.
385
386 Made prefix query (pquery.c) utility thread safe.
387
388 Added new function modifier YAZ_EXPORT to 'export' public DLL
389 functions when using windows (see include/yconfig.h).
390
391 Added definitions to the OID database (util/oid.c) (RVDM).
392
393 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
394
395 Added call to ccl_rpn_delete in client program.
396
397 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
398 release of RPN structure.
399
400 Added support for C++, headers uses extern "C" for public definitions.
401 With input from RVDM.
402
403 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
404 Thanks to Ronald van der Meer (RVDM).
405
406 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
407
408 Added support for private extensions to the OID database
409 (oid_setprivateoids()). Thanks to RVDM.
410     
411 Added optional, physical ANY (key replication)
412
413 Fixed null-reference problem in GRS-1 output filter.
414
415 Proximity operator added to Prefix Query Format (PQF).
416
417 In test client command "base" accepts multiple databases.
418
419 Fixed bug in cs_close stack that caused trouble with WINSOCK.
420
421 --- 1.3 1996/10/11
422
423 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
424
425 Smallish bug-fixes in the new encoders/decoders (explain).
426
427 Bug fixed in DeleteRequest.
428
429 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
430
431 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
432
433 Added SOIF syntax (using private OID for now) to retrieval module and client.
434
435 Added Update extended service.
436
437 Added SearchResult-1 additional info structure.
438
439 Added optional CCL (ISO8777) interpreter as separate module. Available
440 in linemode client.
441
442 --- 1.2 1996/6/10 (1st anniversary release)
443
444 Added Summary record syntax. Lightly tested.
445
446 Added OPAC record syntax. Untested.
447
448 Added ResourceReport service encoders/decoders. Untested.
449
450 Fixed bug in z_Unit - wrong tagging on unitSystem.
451
452 Fixed bug in the DiagRecs decoder.
453
454 Added options for max PDU size and session timeout to frontend-server.
455
456 Added documentation of query-language parsers and other supporting utilities.
457
458 [frontend-server] Added Attribute set to the bend_scanrequest API.
459
460 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
461 surrogate diagnostics were generated.
462
463 [retrieval] Allow multiple local values for attribute.
464
465 [retrieval] Allow multiple attributes per element in .abs files. index type.
466
467 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
468
469 --- 1.1pl2  1996/4/10
470
471 Minor changes, mostly specific to Zebra's requirements (retrieval)
472
473 --- 1.1  1996/2/20
474
475 Repaired bug in frontend server when running multiple listening
476 endpoints in dynamic mode.
477
478 z_External() now won't break if a known, ASN.1 value comes encapsulated
479 in an octet-string. The value will pass through unmodified in an Odr_oct.
480
481 Added a bit of code to the demo client to decode & display
482 ASN.1-structured records represented in the octet-aligned branch of
483 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
484
485 Added z_ext_getentbyref() to the ASN module. Doc updated.
486
487 * Completed the SCAN definition in the ASN module. This may break SCAN
488 code based on older YAZ-versions at compile-time. The fix is easy -
489 look in proto.h.
490
491 * Added 'displayTerm' and OtherInformation to the TermInfo structure
492 under the SCAN definition. Remember to initialize this, server-people.
493
494 Comstack should now support the WAIS protocol in TCP/IP mode. Note
495 that this does not extend to ODR and ASN.
496
497 Comstack allows insertion of established socket (primarily for
498 inetd-operation of servers). Doc updated.
499
500 Front-end server can now start from the inetd in TCP mode. Doc
501 updated.
502
503 --- 1.0pl4 1996/1/24
504
505 Added Sort PDU.
506
507 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
508 the rank and record number.
509
510 Adjustments to the frontend server.
511
512 Fixed diagnostic BER dumper. It ignored the file argument.
513
514 --- 1.0pl3 1996/1/2
515
516 Various changes to retrieval module.
517
518 Changed the union discriminators of the protocol files from enums to
519 ints paired with #defines.
520
521 *Changed oident.class to oident.oclass to avoid a reserved word in C++
522  compilers.
523
524 *Changed operator in the RPN structure to 'roperator', again to avoid a
525  conflict with C++.
526
527 Fixed problems in Explain decoders/encoders.
528
529 --- 1.0pl2 1995/12/6
530
531 Memory bug in log module fixed.
532
533 --- 1.0pl1 1995/12/5
534
535 Occasional malloc() of 0 bytes fixed in d1_espec.c.
536
537 Bug in Explain DatabaseInfo module fixed.
538
539 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
540
541 --- 1.0 1995/11/28
542
543 The shift to v1.0 signals that we now consider the *core* functionality
544 of YAZ reasonably stable (the core being more or less equivalent to
545 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
546 tested (Explain not at all - though that will happen soonish).
547
548 Minor changes to code to support Windows port.
549
550 Various minor changes after we're getting to use GRS-1 & co. more.
551
552 Added Espec-1 format.
553
554 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
555 of the protocol and it cannot be selected when encoding (maps into 'string'
556 when decoding). Needed to talk to some servers.
557
558 Demo client can request simple element set names.
559
560 Added Diagnostic Format encoders/decoders.
561
562 Added simple Close handling to frontend server (no hooks for resource
563 reporting yet), and demonstration client.
564
565 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
566
567 --- 1.0b3 1995/08/24
568
569 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
570 handled incorrectly when records were requested in the searchResponse. This
571 will only affect you if you use the frontend-server.
572
573 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
574 Test-client will ask for and print GRS1. Ztest will return dummy records
575 on request.
576
577 Added Explain encoders/decoders to the service-level API. Untested.
578
579 Added Extended Services: Item Order encoders and decoders to the Service-
580 level API. Untested. We could use a recent copy of the pertinent bits
581 of the ILL protocol to add those bits.
582
583 Added diagnostic format 1 encoders/decoders to the service-level API.
584 Untested.
585
586 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
587 odr_cons.c, which causes a more correct output.
588
589 Fixed handling of searchRequest in frontend server. NextResultSetPosition
590 was always set to 0 when no records were requested in the searchRequest.
591
592 * Added better external-handling. This shouldn't harm old code that
593 *encodes* externals. It can break code that looks for a
594 'single-ASN1-type' representation, since those types that are known
595 are now decoded immediately. Look at the SUTRS sample code in
596 seshigh.c and client.c. Documentation updated.
597
598 Handling of structured records in bend_fetchresponse. Length -1 marks
599 structured record, type is deduced from format field.
600
601 --- 1.0b2 1995/06/27
602 Fairly quick maintenance release to add SUTRS support.
603
604 Fixed handling of SUTRS records in the demonstration client.
605
606 * Added format field to the bend_fetchrequest and bend_fetchresponce
607 structures of the backend API (frontend server). When the record is
608 returned, the value of the format field is mapped to an OID. The
609 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
610 of the record. The special value VAL_NONE in the bend_request means
611 that no specific format was requested by the client. Documentation
612 updated accordingly. Test server (ztest) will return a fixed dummy
613 SUTRS record if your client requests SUTRS.
614
615 Documentation updated accordingly.
616
617 You can now set external libraries and RANLIB support in the top-level
618 Makefile.
619
620 --- 1.0b 1995/06/19
621 First public release.