03724e96e3c11fa9c130fd31e8c675e966ec112d
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 Added feature for CCL module. Virtual structure s=al or s=ol generates
4 and-list and or-list respectively instead of phrase search.
5
6 Added some OID's.
7
8 * Added prefix "yaz_" for the functions log_init.., log_file..  and
9 log_mask_str. This was done to avoid name conflicts with other
10 libraries (say other PHP extensions).
11
12 Added raw OID member for preferred record syntax (request_format_raw)
13 and returned record syntax (output_format_raw) for backend fetch method.
14
15 Config file yaz-config now accepts options so that it returns specific
16 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
17
18 Shared library support for UNIX using GNU libtool.
19
20 * Modified backend interface. Request/Response struct's replaced by
21 one read/write C struct. For example bend_fetchrequest and
22 bend_fetchresult have been replaced by single bend_fetch_rr struct.
23 Every handler - even search has to be registered in bend_init
24 handler. This means that the YAZ library no longer refers to
25 external functions and it makes it possible to make the whole
26 thing a single DLL/SO.
27
28 Added Segment handler for backend server.
29
30 Added Zmbol/Zebra administrative functions to YAZ client.
31
32 Threaded frontend server on UNIX (when POSIX Threads are available).
33 Starting the server with option -T enables multi-threading.
34
35 --- 1.6 2000/03/03
36
37 Added configure option --enable-comp/disable-comp to control use
38 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
39 located in sub directory asn.
40
41 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
42 in ${exec_prefix}/bin along with the other programs yaz-client and
43 yaz-ztest.
44
45 GNU automake used to maintain makefiles.
46
47 Added several OID's.
48
49 Changed retrieval module so that we can load records with no abstract
50 syntax defined. Tagpaths in these records are fully composed of string
51 tags.
52
53 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
54
55 --- 1.5 1999/12/10
56
57 On UNIX, the generated makefile now supports a proper 'make install'.
58 The prefix can be set via GNU configure to set the install location
59 (default is /usr/local).
60
61 * YAZ programs client and ztest were renamed to yaz-client and
62 yaz-ztest to avoid conflicts when users install YAZ in "standard"
63 locations, such as /usr/bin,/usr/local/bin,etc.
64
65 * YAZ Header files were moved from include to include/yaz. YAZ Header
66 files are referred to as include <yaz/log.h> rather than <log.h>.
67 The YAZ include path (-I ..) is therefore the same as before. Programmers
68 should update their #include statements or use -Ipath/include/yaz
69 instead. The main motivation for doing this change is that YAZ header files
70 can be installed in "standard" locations /usr/include,/usr/local/include 
71 without introducing conflicts, since ALL YAZ header files are stored
72 in subdirectory yaz (under /usr/include for example).
73
74 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
75 rather than project/workspace files. We switched because project files
76 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
77 details.
78
79 Changed name of logging function, logf, to yaz_log, to prevent name
80 clash with some math-log functions. The YAZ header log.h defines logf
81 to yaz_log (#define) so there should be no incompatibilities by this
82 modification.
83
84 Added bend_start/bend_stop handlers for server. These handler are
85 called on start/stop of server. For windows they are called whenever
86 a service is started/stopped.
87
88 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
89 a fairly small ASN.1 compiler written in Tcl. The compiler is located
90 in util/yc.tcl. The auto-generated C code structures are, in a few
91 cases, incompatible with the old decoders. There are differences in the
92 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
93 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
94 The preprocessor variable ASN_COMPILED is defined when the compiled
95 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
96 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
97 wish to use the old encoders/decoders you can specify --disable-yc
98 for configure.
99
100 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
101 version so that it supports both new - and old version of DB Update
102
103 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
104 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
105 change. The name parameter can be set to 0 in which no name is specified
106 for the construction. The macros odr_implicit and odr_explicit sets name
107 parameter to zero for the construction involved. New macros
108 odr_implicit_tag and odr_explicit_tag are similar to the others,
109 except that a name parameter is added. For programmers' that don't use
110 ODR they probably only need to change the call to z_APDU and z_External.
111
112 Added access control facility by interfacing the TCP wrapper library.
113 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
114 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
115 name of the daemon and enables the access control as specified in
116 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
117
118 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
119 den Dool <H.M.vdnDool@kub.nl>.
120
121 Added reference ID parameter to most functions in server API - refer
122 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
123
124 Changed name of ccl library to libccl.a (was ccl.a).
125
126 Fixed bug in decoder for Explain (Category TargetInfo).
127
128 Added support for GNU readline in client. Thanks to Jacob Poulsen
129 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
130
131 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
132 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
133 IMPLEMENTATION! This change was made to the development version before
134 the ZIG decided to retract the amendment. If any users MUST be
135 compatible with the original Update definition, PLEASE CONTACT US, and
136 we will include a separate definition corresponding to the old Update
137 ES. Note that because of the change to the ASN.1 of the
138 TaskPackageRecordStructure we cannot define a single structure that
139 will support both versions.
140
141 * Added const modifier to buffer parameter for some ODR/BER encoding
142 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
143 completeWAIS, odr_dumpBER.
144
145 Fixed bug in client.c which caused a crash when a scanResponse didn't
146 contain positionOfTerm.
147
148 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
149 * will cause an error in a client if a non-YAZ target sends both a
150 * list of Scan entries and non-surrogate diagnostics.
151
152 Retrieval module enhancements. Tag sets may be typed in the reference
153 to it. From the .abs-file the "tagset" directive takes a third optional
154 integer type for the tag set referenced. From a .tag-file the "include"
155 directive takes a third optional type as well. The old "type" directive
156 in the tag set itself is still recognized but acts as the default type
157 for the tag set.
158
159 Backend interface change. Individual Scan terms returned from bend_scan
160 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
161 in include/backend.h.
162
163 Retrieval module enhancements. Multiple tag sets and attribute sets may
164 be specified in abstract syntax specs. Revised the error/warning for
165 logging messages reported by the retrieval module when reading the
166 various spec files.
167
168 Object Identifier system (oid_..) changed. The API is backwards
169 compatible but the oid-routines now allocates new OID's when needed.
170 Raw OID's may be specified in oid_getvalbyname.
171
172 YAZ now uses GNU configure to generate Makefile(s).
173
174 * Minor changes in some of the member names of DeleteResultSetRequest and
175 DeleteResultSetResponse. See include/proto.h.
176
177 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
178 and added member 'languages' in TargetInfo (which was missing).
179
180 Changed the way attribute sets are handled in the retrieval
181 module. These are now cached, just like the abstract syntaxes
182 (schemas).
183
184 Changed YAZ so that it links with compiled ASN.1.
185
186 Added Explain-schema definitions and mapping routines. The following
187 Explain categories have been implemented: AttributeDetails,
188 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
189
190 Fixed minor bug in Windows version of Server Library.
191
192 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
193
194 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
195
196 Added EXTERNAL: UNIverse Resource Report (non-standard).
197
198 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
199 ENUMERATED and SET OF.
200
201 * Added 'const' to some of the char pointer arguments for the
202 functions, data1_read_node, data1_getelementbytagname,
203 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
204 data1_get_absyn.
205
206 Fixed bug in data1_insert_taggeddata - the last_child member of
207 parent wasn't initialised.
208
209 * Changed data1_read_record and data1_read_node so that the supplied
210 "SGML"-buffer is read-only. In particular the resulting data1 - tree
211 doesn't refer to any parts of the "SGML"-buffer.
212
213 Fixed bug in server library (Windows version of statserv_remove).
214
215 * Changed code so that it compiles as C++. The type definition
216 of Odr_fun which is a member of Odr_arm was changed. The result is,
217 that an explicit typecast is needed for the fun pointer when
218 using Odr_arm - as in:
219     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
220
221 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
222
223 Implemented the new structured date and time definition as approved
224 by the ZIG. Added schemaId element to the specificTag in Espec-1
225 (also approved at the last ZIG). Thanks to RVDM.
226
227 Added some Object identifiers (RVDM).
228
229 Changed the Update Extended Service (RVDM).
230
231 Added command "refid" to client which specifies referenceId for
232 the following requests.
233
234 Implemented extended service handling for server. See ztest.c
235 for an example as well as backend.h. New handlers are registerd
236 in the Init handler.
237
238 * Changed interface for sort in server.
239
240 Added new members to statserv_options_block. It allows a server
241 to read options from another source than just the command line. Thanks
242 to Charles Woodfield.
243
244 * Changed definition of Z_Triple in file prt-grs.h - member boolean
245 renamed to zboolean. Some C++ compilers complained about the name.
246
247 Minor changes to gils.abs. Added index 's' (sort) on title
248 and date/time-last-modified.
249
250 --- 1.4pl2 1998/1/30
251
252 Fixed bug in server library regarding inetd mode (-i). This bug
253 was introduced by release 1.4.
254
255 --- 1.4pl1 1998/1/29
256
257 Added sort facility in client and backend server interface.
258
259 Fixed problem with dependencies in Makefile(s).
260
261 Fixed bugs for encoders/decoders of extended services and 
262 SearchInfoReport.
263
264 Implemented sub-tree feature for schemas. Sub-trees are
265 referenced in *.abs-files. See explain.abs for an example
266 of the use of this feature.
267
268 Modified bib1.att; local attributes for ANY didn't include
269 ANY itself (only affects use of the retrieval module).
270
271 Fixed bug in plain SGML reader in function data1_read_node:
272 tags with prefix "var" was incorrectly interpreted as variants.
273
274 Added feature "sub-schemas" to enable references to - and definitions
275 of - group of elements.
276
277 * Removed member parent from type data1_element (in data1.h).
278
279 Implemented function odr_nullval() that returns the value of
280 ODR_NULLVAL.
281
282 * Removed member num_children from data1_node (in data1.h).
283
284 Made NT service interface part of the server library. The
285 function statserv_main uses the NT service when required and
286 calls the statserv_start / statserv_close routines.
287
288 Routine zget_SearchRequest and zget_PresentRequest fills
289 resultSetName/Id member with "default" instead of "Default".
290
291 Fixed memory leak in server. Request queue member wasn't freed.
292
293 Fixed nmem_exit so that memory is freed.
294
295 --- 1.4 1997/10/2
296
297 Revised the CCL parser utility to be thread safe.
298
299 Added function, oid_ent_to_oid, to replace the function 
300 oid_getoidbyent, which is not thread safe.
301
302 * Added nmem_init and nmem_exit to initialize and release
303 NMEM resources. Function nmem_init should be called once in the
304 initial thread before NMEM/ODR is used. statserv.c and client.c
305 have been changed accordingly. The change was necessary to make
306 NMEM thread safe. The NMEM memory pool is shared amongst threads
307 in a process. Unix-based applications will still work fine without
308 calling this.
309
310 Added NT Services interface for the the Z39.50 (statserv) Server. 
311 Refer to the ztest.c source on the usage.
312
313 Windows 95/NT port using MSVC5.0. Project files are included in the
314 distribution.
315
316 * Defined new 'global' handle for the retrieval (data1) system. The
317 new handled, data1_handle, describes the state of the data1 system.
318 This handle is passed as first argument to virtually all
319 data1 related routines. The functions data1_create and data1_destroy
320 creates and destroys a data1 handle respectively.
321
322 Added ODR encode stream member to all backend request structures
323 init, search, scan etc. This stream should be used to allocate all
324 memory used for the response when thread safe operation is needed.
325
326 Changed the comstack utility, cs_addstr, to be thread safe. The
327 returned hostname string returned by the function is now part the
328 COMSTACK instance.
329
330 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
331 function. The cs_straddr takes a COMSTACK handle as argument, so this
332 function must be used after cs_create and before bind/connect.
333 This function is thread safe.
334
335 Moved test server to 'ztest' directory - generic server code still
336 in 'server' directory.
337
338 Made prefix query (pquery.c) utility thread safe.
339
340 Added new function modifier YAZ_EXPORT to 'export' public DLL
341 functions when using windows (see include/yconfig.h).
342
343 Added definitions to the OID database (util/oid.c) (RVDM).
344
345 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
346
347 Added call to ccl_rpn_delete in client program.
348
349 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
350 release of RPN structure.
351
352 Added support for C++, headers uses extern "C" for public definitions.
353 With input from RVDM.
354
355 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
356 Thanks to Ronald van der Meer (RVDM).
357
358 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
359
360 Added support for private extensions to the OID database
361 (oid_setprivateoids()). Thanks to RVDM.
362     
363 Added optional, physical ANY (key replication)
364
365 Fixed null-reference problem in GRS-1 output filter.
366
367 Proximity operator added to Prefix Query Format (PQF).
368
369 In test client command "base" accepts multiple databases.
370
371 Fixed bug in cs_close stack that caused trouble with WINSOCK.
372
373 --- 1.3 1996/10/11
374
375 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
376
377 Smallish bug-fixes in the new encoders/decoders (explain).
378
379 Bug fixed in DeleteRequest.
380
381 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
382
383 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
384
385 Added SOIF syntax (using private OID for now) to retrieval module and client.
386
387 Added Update extended service.
388
389 Added SearchResult-1 additional info structure.
390
391 Added optional CCL (ISO8777) interpreter as separate module. Available
392 in linemode client.
393
394 --- 1.2 1996/6/10 (1st anniversary release)
395
396 Added Summary record syntax. Lightly tested.
397
398 Added OPAC record syntax. Untested.
399
400 Added ResourceReport service encoders/decoders. Untested.
401
402 Fixed bug in z_Unit - wrong tagging on unitSystem.
403
404 Fixed bug in the DiagRecs decoder.
405
406 Added options for max PDU size and session timeout to frontend-server.
407
408 Added documentation of query-language parsers and other supporting utilities.
409
410 [frontend-server] Added Attribute set to the bend_scanrequest API.
411
412 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
413 surrogate diagnostics were generated.
414
415 [retrieval] Allow multiple local values for attribute.
416
417 [retrieval] Allow multiple attributes per element in .abs files. index type.
418
419 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
420
421 --- 1.1pl2  1996/4/10
422
423 Minor changes, mostly specific to Zebra's requirements (retrieval)
424
425 --- 1.1  1996/2/20
426
427 Repaired bug in frontend server when running multiple listening
428 endpoints in dynamic mode.
429
430 z_External() now won't break if a known, ASN.1 value comes encapsulated
431 in an octet-string. The value will pass through unmodified in an Odr_oct.
432
433 Added a bit of code to the demo client to decode & display
434 ASN.1-structured records represented in the octet-aligned branch of
435 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
436
437 Added z_ext_getentbyref() to the ASN module. Doc updated.
438
439 * Completed the SCAN definition in the ASN module. This may break SCAN
440 code based on older YAZ-versions at compile-time. The fix is easy -
441 look in proto.h.
442
443 * Added 'displayTerm' and OtherInformation to the TermInfo structure
444 under the SCAN definition. Remember to initialize this, server-people.
445
446 Comstack should now support the WAIS protocol in TCP/IP mode. Note
447 that this does not extend to ODR and ASN.
448
449 Comstack allows insertion of established socket (primarily for
450 inetd-operation of servers). Doc updated.
451
452 Front-end server can now start from the inetd in TCP mode. Doc
453 updated.
454
455 --- 1.0pl4 1996/1/24
456
457 Added Sort PDU.
458
459 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
460 the rank and record number.
461
462 Adjustments to the frontend server.
463
464 Fixed diagnostic BER dumper. It ignored the file argument.
465
466 --- 1.0pl3 1996/1/2
467
468 Various changes to retrieval module.
469
470 Changed the union discriminators of the protocol files from enums to
471 ints paired with #defines.
472
473 *Changed oident.class to oident.oclass to avoid a reserved word in C++
474  compilers.
475
476 *Changed operator in the RPN structure to 'roperator', again to avoid a
477  conflict with C++.
478
479 Fixed problems in Explain decoders/encoders.
480
481 --- 1.0pl2 1995/12/6
482
483 Memory bug in log module fixed.
484
485 --- 1.0pl1 1995/12/5
486
487 Occasional malloc() of 0 bytes fixed in d1_espec.c.
488
489 Bug in Explain DatabaseInfo module fixed.
490
491 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
492
493 --- 1.0 1995/11/28
494
495 The shift to v1.0 signals that we now consider the *core* functionality
496 of YAZ reasonably stable (the core being more or less equivalent to
497 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
498 tested (Explain not at all - though that will happen soonish).
499
500 Minor changes to code to support Windows port.
501
502 Various minor changes after we're getting to use GRS-1 & co. more.
503
504 Added Espec-1 format.
505
506 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
507 of the protocol and it cannot be selected when encoding (maps into 'string'
508 when decoding). Needed to talk to some servers.
509
510 Demo client can request simple element set names.
511
512 Added Diagnostic Format encoders/decoders.
513
514 Added simple Close handling to frontend server (no hooks for resource
515 reporting yet), and demonstration client.
516
517 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
518
519 --- 1.0b3 1995/08/24
520
521 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
522 handled incorrectly when records were requested in the searchResponse. This
523 will only affect you if you use the frontend-server.
524
525 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
526 Test-client will ask for and print GRS1. Ztest will return dummy records
527 on request.
528
529 Added Explain encoders/decoders to the service-level API. Untested.
530
531 Added Extended Services: Item Order encoders and decoders to the Service-
532 level API. Untested. We could use a recent copy of the pertinent bits
533 of the ILL protocol to add those bits.
534
535 Added diagnostic format 1 encoders/decoders to the service-level API.
536 Untested.
537
538 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
539 odr_cons.c, which causes a more correct output.
540
541 Fixed handling of searchRequest in frontend server. NextResultSetPosition
542 was always set to 0 when no records were requested in the searchRequest.
543
544 * Added better external-handling. This shouldn't harm old code that
545 *encodes* externals. It can break code that looks for a
546 'single-ASN1-type' representation, since those types that are known
547 are now decoded immediately. Look at the SUTRS sample code in
548 seshigh.c and client.c. Documentation updated.
549
550 Handling of structured records in bend_fetchresponse. Length -1 marks
551 structured record, type is deduced from format field.
552
553 --- 1.0b2 1995/06/27
554 Fairly quick maintenance release to add SUTRS support.
555
556 Fixed handling of SUTRS records in the demonstration client.
557
558 * Added format field to the bend_fetchrequest and bend_fetchresponce
559 structures of the backend API (frontend server). When the record is
560 returned, the value of the format field is mapped to an OID. The
561 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
562 of the record. The special value VAL_NONE in the bend_request means
563 that no specific format was requested by the client. Documentation
564 updated accordingly. Test server (ztest) will return a fixed dummy
565 SUTRS record if your client requests SUTRS.
566
567 Documentation updated accordingly.
568
569 You can now set external libraries and RANLIB support in the top-level
570 Makefile.
571
572 --- 1.0b 1995/06/19
573 First public release.