Renamed ASN.1 compiler to yaz-comp (used to be yc.tcl).
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 Added configure option --enable-comp/disable-comp to control use
4 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
5 located in sub directory asn.
6
7 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
8 in ${exec_prefix}/bin along with the other programs yaz-client and
9 yaz-ztest.
10
11 GNU automake used to maintain makefiles.
12
13 Added several OID's.
14
15 Changed retrieval module so that we can load records with no abstract
16 syntax defined. Tagpaths in these records are fully composed of string
17 tags.
18
19 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
20
21 --- 1.5 1999/12/10
22
23 On UNIX, the generated makefile now supports a proper 'make install'.
24 The prefix can be set via GNU configure to set the install location
25 (default is /usr/local).
26
27 * YAZ programs client and ztest were renamed to yaz-client and
28 yaz-ztest to avoid conflicts when users install YAZ in "standard"
29 locations, such as /usr/bin,/usr/local/bin,etc.
30
31 * YAZ Header files were moved from include to include/yaz. YAZ Header
32 files are referred to as include <yaz/log.h> rather than <log.h>.
33 The YAZ include path (-I ..) is therefore the same as before. Programmers
34 should update their #include statements or use -Ipath/include/yaz
35 instead. The main motivation for doing this change is that YAZ header files
36 can be installed in "standard" locations /usr/include,/usr/local/include 
37 without introducing conflicts, since ALL YAZ header files are stored
38 in subdirectory yaz (under /usr/include for example).
39
40 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
41 rather than project/workspace files. We switched because project files
42 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
43 details.
44
45 Changed name of logging function, logf, to yaz_log, to prevent name
46 clash with some math-log functions. The YAZ header log.h defines logf
47 to yaz_log (#define) so there should be no incompatibilities by this
48 modification.
49
50 Added bend_start/bend_stop handlers for server. These handler are
51 called on start/stop of server. For windows they are called whenever
52 a service is started/stopped.
53
54 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
55 a fairly small ASN.1 compiler written in Tcl. The compiler is located
56 in util/yc.tcl. The auto-generated C code structures are, in a few
57 cases, incompatible with the old decoders. There are differences in the
58 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
59 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
60 The preprocessor variable ASN_COMPILED is defined when the compiled
61 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
62 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
63 wish to use the old encoders/decoders you can specify --disable-yc
64 for configure.
65
66 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
67 version so that it supports both new - and old version of DB Update
68
69 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
70 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
71 change. The name parameter can be set to 0 in which no name is specified
72 for the construction. The macros odr_implicit and odr_explicit sets name
73 parameter to zero for the construction involved. New macros
74 odr_implicit_tag and odr_explicit_tag are similar to the others,
75 except that a name parameter is added. For programmers' that don't use
76 ODR they probably only need to change the call to z_APDU and z_External.
77
78 Added access control facility by interfacing the TCP wrapper library.
79 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
80 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
81 name of the daemon and enables the access control as specified in
82 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
83
84 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
85 den Dool <H.M.vdnDool@kub.nl>.
86
87 Added reference ID parameter to most functions in server API - refer
88 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
89
90 Changed name of ccl library to libccl.a (was ccl.a).
91
92 Fixed bug in decoder for Explain (Category TargetInfo).
93
94 Added support for GNU readline in client. Thanks to Jacob Poulsen
95 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
96
97 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
98 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
99 IMPLEMENTATION! This change was made to the development version before
100 the ZIG decided to retract the amendment. If any users MUST be
101 compatible with the original Update definition, PLEASE CONTACT US, and
102 we will include a separate definition corresponding to the old Update
103 ES. Note that because of the change to the ASN.1 of the
104 TaskPackageRecordStructure we cannot define a single structure that
105 will support both versions.
106
107 * Added const modifier to buffer parameter for some ODR/BER encoding
108 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
109 completeWAIS, odr_dumpBER.
110
111 Fixed bug in client.c which caused a crash when a scanResponse didn't
112 contain positionOfTerm.
113
114 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
115 * will cause an error in a client if a non-YAZ target sends both a
116 * list of Scan entries and non-surrogate diagnostics.
117
118 Retrieval module enhancements. Tag sets may be typed in the reference
119 to it. From the .abs-file the "tagset" directive takes a third optional
120 integer type for the tag set referenced. From a .tag-file the "include"
121 directive takes a third optional type as well. The old "type" directive
122 in the tag set itself is still recognized but acts as the default type
123 for the tag set.
124
125 Backend interface change. Individual Scan terms returned from bend_scan
126 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
127 in include/backend.h.
128
129 Retrieval module enhancements. Multiple tag sets and attribute sets may
130 be specified in abstract syntax specs. Revised the error/warning for
131 logging messages reported by the retrieval module when reading the
132 various spec files.
133
134 Object Identifier system (oid_..) changed. The API is backwards
135 compatible but the oid-routines now allocates new OID's when needed.
136 Raw OID's may be specified in oid_getvalbyname.
137
138 YAZ now uses GNU configure to generate Makefile(s).
139
140 * Minor changes in some of the member names of DeleteResultSetRequest and
141 DeleteResultSetResponse. See include/proto.h.
142
143 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
144 and added member 'languages' in TargetInfo (which was missing).
145
146 Changed the way attribute sets are handled in the retrieval
147 module. These are now cached, just like the abstract syntaxes
148 (schemas).
149
150 Changed YAZ so that it links with compiled ASN.1.
151
152 Added Explain-schema definitions and mapping routines. The following
153 Explain categories have been implemented: AttributeDetails,
154 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
155
156 Fixed minor bug in Windows version of Server Library.
157
158 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
159
160 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
161
162 Added EXTERNAL: UNIverse Resource Report (non-standard).
163
164 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
165 ENUMERATED and SET OF.
166
167 * Added 'const' to some of the char pointer arguments for the
168 functions, data1_read_node, data1_getelementbytagname,
169 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
170 data1_get_absyn.
171
172 Fixed bug in data1_insert_taggeddata - the last_child member of
173 parent wasn't initialised.
174
175 * Changed data1_read_record and data1_read_node so that the supplied
176 "SGML"-buffer is read-only. In particular the resulting data1 - tree
177 doesn't refer to any parts of the "SGML"-buffer.
178
179 Fixed bug in server library (Windows version of statserv_remove).
180
181 * Changed code so that it compiles as C++. The type definition
182 of Odr_fun which is a member of Odr_arm was changed. The result is,
183 that an explicit typecast is needed for the fun pointer when
184 using Odr_arm - as in:
185     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
186
187 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
188
189 Implemented the new structured date and time definition as approved
190 by the ZIG. Added schemaId element to the specificTag in Espec-1
191 (also approved at the last ZIG). Thanks to RVDM.
192
193 Added some Object identifiers (RVDM).
194
195 Changed the Update Extended Service (RVDM).
196
197 Added command "refid" to client which specifies referenceId for
198 the following requests.
199
200 Implemented extended service handling for server. See ztest.c
201 for an example as well as backend.h. New handlers are registerd
202 in the Init handler.
203
204 * Changed interface for sort in server.
205
206 Added new members to statserv_options_block. It allows a server
207 to read options from another source than just the command line. Thanks
208 to Charles Woodfield.
209
210 * Changed definition of Z_Triple in file prt-grs.h - member boolean
211 renamed to zboolean. Some C++ compilers complained about the name.
212
213 Minor changes to gils.abs. Added index 's' (sort) on title
214 and date/time-last-modified.
215
216 --- 1.4pl2 1998/1/30
217
218 Fixed bug in server library regarding inetd mode (-i). This bug
219 was introduced by release 1.4.
220
221 --- 1.4pl1 1998/1/29
222
223 Added sort facility in client and backend server interface.
224
225 Fixed problem with dependencies in Makefile(s).
226
227 Fixed bugs for encoders/decoders of extended services and 
228 SearchInfoReport.
229
230 Implemented sub-tree feature for schemas. Sub-trees are
231 referenced in *.abs-files. See explain.abs for an example
232 of the use of this feature.
233
234 Modified bib1.att; local attributes for ANY didn't include
235 ANY itself (only affects use of the retrieval module).
236
237 Fixed bug in plain SGML reader in function data1_read_node:
238 tags with prefix "var" was incorrectly interpreted as variants.
239
240 Added feature "sub-schemas" to enable references to - and definitions
241 of - group of elements.
242
243 * Removed member parent from type data1_element (in data1.h).
244
245 Implemented function odr_nullval() that returns the value of
246 ODR_NULLVAL.
247
248 * Removed member num_children from data1_node (in data1.h).
249
250 Made NT service interface part of the server library. The
251 function statserv_main uses the NT service when required and
252 calls the statserv_start / statserv_close routines.
253
254 Routine zget_SearchRequest and zget_PresentRequest fills
255 resultSetName/Id member with "default" instead of "Default".
256
257 Fixed memory leak in server. Request queue member wasn't freed.
258
259 Fixed nmem_exit so that memory is freed.
260
261 --- 1.4 1997/10/2
262
263 Revised the CCL parser utility to be thread safe.
264
265 Added function, oid_ent_to_oid, to replace the function 
266 oid_getoidbyent, which is not thread safe.
267
268 * Added nmem_init and nmem_exit to initialize and release
269 NMEM resources. Function nmem_init should be called once in the
270 initial thread before NMEM/ODR is used. statserv.c and client.c
271 have been changed accordingly. The change was necessary to make
272 NMEM thread safe. The NMEM memory pool is shared amongst threads
273 in a process. Unix-based applications will still work fine without
274 calling this.
275
276 Added NT Services interface for the the Z39.50 (statserv) Server. 
277 Refer to the ztest.c source on the usage.
278
279 Windows 95/NT port using MSVC5.0. Project files are included in the
280 distribution.
281
282 * Defined new 'global' handle for the retrieval (data1) system. The
283 new handled, data1_handle, describes the state of the data1 system.
284 This handle is passed as first argument to virtually all
285 data1 related routines. The functions data1_create and data1_destroy
286 creates and destroys a data1 handle respectively.
287
288 Added ODR encode stream member to all backend request structures
289 init, search, scan etc. This stream should be used to allocate all
290 memory used for the response when thread safe operation is needed.
291
292 Changed the comstack utility, cs_addstr, to be thread safe. The
293 returned hostname string returned by the function is now part the
294 COMSTACK instance.
295
296 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
297 function. The cs_straddr takes a COMSTACK handle as argument, so this
298 function must be used after cs_create and before bind/connect.
299 This function is thread safe.
300
301 Moved test server to 'ztest' directory - generic server code still
302 in 'server' directory.
303
304 Made prefix query (pquery.c) utility thread safe.
305
306 Added new function modifier YAZ_EXPORT to 'export' public DLL
307 functions when using windows (see include/yconfig.h).
308
309 Added definitions to the OID database (util/oid.c) (RVDM).
310
311 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
312
313 Added call to ccl_rpn_delete in client program.
314
315 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
316 release of RPN structure.
317
318 Added support for C++, headers uses extern "C" for public definitions.
319 With input from RVDM.
320
321 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
322 Thanks to Ronald van der Meer (RVDM).
323
324 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
325
326 Added support for private extensions to the OID database
327 (oid_setprivateoids()). Thanks to RVDM.
328     
329 Added optional, physical ANY (key replication)
330
331 Fixed null-reference problem in GRS-1 output filter.
332
333 Proximity operator added to Prefix Query Format (PQF).
334
335 In test client command "base" accepts multiple databases.
336
337 Fixed bug in cs_close stack that caused trouble with WINSOCK.
338
339 --- 1.3 1996/10/11
340
341 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
342
343 Smallish bug-fixes in the new encoders/decoders (explain).
344
345 Bug fixed in DeleteRequest.
346
347 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
348
349 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
350
351 Added SOIF syntax (using private OID for now) to retrieval module and client.
352
353 Added Update extended service.
354
355 Added SearchResult-1 additional info structure.
356
357 Added optional CCL (ISO8777) interpreter as separate module. Available
358 in linemode client.
359
360 --- 1.2 1996/6/10 (1st anniversary release)
361
362 Added Summary record syntax. Lightly tested.
363
364 Added OPAC record syntax. Untested.
365
366 Added ResourceReport service encoders/decoders. Untested.
367
368 Fixed bug in z_Unit - wrong tagging on unitSystem.
369
370 Fixed bug in the DiagRecs decoder.
371
372 Added options for max PDU size and session timeout to frontend-server.
373
374 Added documentation of query-language parsers and other supporting utilities.
375
376 [frontend-server] Added Attribute set to the bend_scanrequest API.
377
378 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
379 surrogate diagnostics were generated.
380
381 [retrieval] Allow multiple local values for attribute.
382
383 [retrieval] Allow multiple attributes per element in .abs files. index type.
384
385 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
386
387 --- 1.1pl2  1996/4/10
388
389 Minor changes, mostly specific to Zebra's requirements (retrieval)
390
391 --- 1.1  1996/2/20
392
393 Repaired bug in frontend server when running multiple listening
394 endpoints in dynamic mode.
395
396 z_External() now won't break if a known, ASN.1 value comes encapsulated
397 in an octet-string. The value will pass through unmodified in an Odr_oct.
398
399 Added a bit of code to the demo client to decode & display
400 ASN.1-structured records represented in the octet-aligned branch of
401 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
402
403 Added z_ext_getentbyref() to the ASN module. Doc updated.
404
405 * Completed the SCAN definition in the ASN module. This may break SCAN
406 code based on older YAZ-versions at compile-time. The fix is easy -
407 look in proto.h.
408
409 * Added 'displayTerm' and OtherInformation to the TermInfo structure
410 under the SCAN definition. Remember to initialize this, server-people.
411
412 Comstack should now support the WAIS protocol in TCP/IP mode. Note
413 that this does not extend to ODR and ASN.
414
415 Comstack allows insertion of established socket (primarily for
416 inetd-operation of servers). Doc updated.
417
418 Front-end server can now start from the inetd in TCP mode. Doc
419 updated.
420
421 --- 1.0pl4 1996/1/24
422
423 Added Sort PDU.
424
425 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
426 the rank and record number.
427
428 Adjustments to the frontend server.
429
430 Fixed diagnostic BER dumper. It ignored the file argument.
431
432 --- 1.0pl3 1996/1/2
433
434 Various changes to retrieval module.
435
436 Changed the union discriminators of the protocol files from enums to
437 ints paired with #defines.
438
439 *Changed oident.class to oident.oclass to avoid a reserved word in C++
440  compilers.
441
442 *Changed operator in the RPN structure to 'roperator', again to avoid a
443  conflict with C++.
444
445 Fixed problems in Explain decoders/encoders.
446
447 --- 1.0pl2 1995/12/6
448
449 Memory bug in log module fixed.
450
451 --- 1.0pl1 1995/12/5
452
453 Occasional malloc() of 0 bytes fixed in d1_espec.c.
454
455 Bug in Explain DatabaseInfo module fixed.
456
457 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
458
459 --- 1.0 1995/11/28
460
461 The shift to v1.0 signals that we now consider the *core* functionality
462 of YAZ reasonably stable (the core being more or less equivalent to
463 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
464 tested (Explain not at all - though that will happen soonish).
465
466 Minor changes to code to support Windows port.
467
468 Various minor changes after we're getting to use GRS-1 & co. more.
469
470 Added Espec-1 format.
471
472 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
473 of the protocol and it cannot be selected when encoding (maps into 'string'
474 when decoding). Needed to talk to some servers.
475
476 Demo client can request simple element set names.
477
478 Added Diagnostic Format encoders/decoders.
479
480 Added simple Close handling to frontend server (no hooks for resource
481 reporting yet), and demonstration client.
482
483 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
484
485 --- 1.0b3 1995/08/24
486
487 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
488 handled incorrectly when records were requested in the searchResponse. This
489 will only affect you if you use the frontend-server.
490
491 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
492 Test-client will ask for and print GRS1. Ztest will return dummy records
493 on request.
494
495 Added Explain encoders/decoders to the service-level API. Untested.
496
497 Added Extended Services: Item Order encoders and decoders to the Service-
498 level API. Untested. We could use a recent copy of the pertinent bits
499 of the ILL protocol to add those bits.
500
501 Added diagnostic format 1 encoders/decoders to the service-level API.
502 Untested.
503
504 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
505 odr_cons.c, which causes a more correct output.
506
507 Fixed handling of searchRequest in frontend server. NextResultSetPosition
508 was always set to 0 when no records were requested in the searchRequest.
509
510 * Added better external-handling. This shouldn't harm old code that
511 *encodes* externals. It can break code that looks for a
512 'single-ASN1-type' representation, since those types that are known
513 are now decoded immediately. Look at the SUTRS sample code in
514 seshigh.c and client.c. Documentation updated.
515
516 Handling of structured records in bend_fetchresponse. Length -1 marks
517 structured record, type is deduced from format field.
518
519 --- 1.0b2 1995/06/27
520 Fairly quick maintenance release to add SUTRS support.
521
522 Fixed handling of SUTRS records in the demonstration client.
523
524 * Added format field to the bend_fetchrequest and bend_fetchresponce
525 structures of the backend API (frontend server). When the record is
526 returned, the value of the format field is mapped to an OID. The
527 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
528 of the record. The special value VAL_NONE in the bend_request means
529 that no specific format was requested by the client. Documentation
530 updated accordingly. Test server (ztest) will return a fixed dummy
531 SUTRS record if your client requests SUTRS.
532
533 Documentation updated accordingly.
534
535 You can now set external libraries and RANLIB support in the top-level
536 Makefile.
537
538 --- 1.0b 1995/06/19
539 First public release.