Towards 2.0.7
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 --- 2.0.7 2003/12/16
4
5 MARC conversion can now generate ISO2709 output in another
6 character set. yaz-marcdump uses this facility if you invoke it
7 with option -O.
8
9 Added missing C decl macros for include/yaz/{soap.h,srw.h,cql.h}, so that
10 functions from there can be used from C++.
11
12 --- 2.0.6 2003/12/04
13
14 Frontend server now transfers memory from decoded packages to stream
15 ODR for search.
16
17 NMEM now clears freed blocks with 'Y' (hex 59) to force bad memory
18 references to show up. 
19
20 ZOOM-C now supports standard ZOOM option names as described in v1.4 of
21 the ZOOM Abstract API.  The older names for the same options are still
22 also supported for the benefit of old applications.
23
24 ZOOM-C supports "implementationId" and "implementationVersion" options
25 to go along with "implementationName".  These allow the user code to
26 specify identification strings to be sent to servers.
27 Add OID for the new ExtLite attribute set.
28
29 Add OIDs for NACSIS-CATP, FINMARC2000 and MARC21-fin record-syntaxes,
30  as requested/supplid by Ere Maijala <ere@atp.fi>
31
32 For generic frontend server, reverse the order of
33 "toolkit-supplied / application-supplied" strings sent as implementationId,
34 Name and Version.  Also, remove the spaces around the slash.  This brings
35 the GFS in line with the behaviour of ZOOM-C on the client side.
36
37 Add function ZOOM_scanset_display_term.
38
39 yaz-client shows scan displayTerm if present.
40
41 Utility yaz-iconv is now installed by default along with the man page 
42 yaz-iconv.1.
43
44 Extend configure check for OpenSSL to use pkg-config where available (such
45 as RedHat 9).
46
47 Incorporate patch by Morten Bogeskov which allows a Unix file socket
48 server to specify uid/gid/mask for socket using the format
49  unix:[user=uid,][group=gid,][umask=mask,]file=path
50 If file= is omitted the existing format is assumed, e.g.
51  unix:path
52 in which case the mask is 0666 (rw for everybody).
53
54 Major restructure of YAZ source. All source in libyaz is in src directory.
55 Programs in client (yaz-client), ztest (yaz-ztest), zoom (zoom programs),
56 util (utility programs such as ASN.1 compiler, yaz-marcdump). 
57
58 Added man page for utility yaz-marcdump (used to be called marcdump).
59 yaz-marcdump is installed by 'make install'.
60
61 Fixed a memory leak in Generic Frontend Server that occurred when decoding
62 of incoming package failed.
63
64 Fixed a potential DOS attack vulnerability in COMSTACK/ODR.
65
66 Change prototype of odr_perror: add const to message string.
67
68 New function yaz_log_reopen which reopens log file (for log rotate, etc.)
69
70 * Blocking parameter for COMSTACK cs_create is now a bit mask rather
71 than a blocking flag. Bit 0 is set for blocking, reset for non-blocking.
72 Bit 1 is set if cs_addrstr should avoid DNS lookup; reset for full
73 DNS lookup. There should not be any compatibility problems with this
74 assuming that blocking=1 or 0 is used.
75
76 Fix bad reference in UNIX comstack in function cs_addrstr.
77
78 Fix for compilation on AIX.
79
80 The generic front-end server (server/seshigh.c) now supports returning
81 Init diagnostics to the client in User-information-field, in
82 accordance with Z35.90 Implementor Agreement 5 (Returning diagnostics
83 in an InitResponse)
84
85 --- 2.0.4 2003/09/04
86
87 Allow any CQL relation (not just all,any,exact,scr).
88
89 Fixes for OCLC UI ASN.1 to make it work with SilverPlatter targets
90 that features the same UI.
91
92 Implemented command update0 in YAZ client which is equivalent to
93 update but uses old of Ext Update ASN.1.
94
95 Use OID 1.2.840.10003.15.1000.81.1 for privately defined charsets
96 in charset negotiation. Added VAL_ID_CHARSET in oid.h.
97 Previously no OID was used for this info.
98
99 ZOOM uses smallSetUpperBound=1 instead of 0 for piggyback searches.
100 It apparantely upsets EBSCO Publishing IR Z39.50 Server which
101 returns 'malformed search term' otherwise.
102
103 SortResponse member resultCount now set to NULL in sort handler of
104 frontend server.
105
106 OPAC support ZOOM. ZOOM_record_get returns OPAC info (as XML) if
107 type is "opac".
108
109 Add three new utility functions for translating OIDs between various
110 formats -- symbolic name such as "Usmarc", minus-1-terminated int
111 arrays and dotted strings such as "1.2.840.10003.9.5.1":
112  int *oid_name_to_oid(oid_class oclass, const char *name, int *oid);
113  char *oid_to_dotstring(const int *oid, char *oidbuf);
114  char *oid_name_to_dotstring(oid_class oclass, const char *name, char *oidbuf);
115
116 Reverted modifications for ES Update definition for z_IU0Update 
117 (OID 1.2.840.10003.9.5.1 and 1.2.840.10003.9.5). The definition
118 is back to YAZ 2.0.2.
119
120 String value attributes for CCL parser.
121
122 Support for OCLC's locally registered "OCLC-UserInformation" PDU,
123 which their FirstSearch server returns in Init responses, sometimes
124 carrying useful diagnostic information when Init fails.  This has the
125 OID 1.2.840.10003.10.1000.17.1 and is defined in the file
126 "z39.50/oclcui.asn", where its definition is somewhat different from
127 what OCLC document on their web-site, as required to interoperate with
128 their servers.
129
130 Support for anonymous authentication in yaz-client.  Use the command
131 "auth -".
132
133 * Fix the OID of the Index Data-local "admin" Extended Service from 
134   1.2.840.10003.9.81.1 to 1.2.840.10003.9.1000.81.1.  The omission of
135   the 1000, which indicates a locally-defined OID, was a mistake.
136
137 --- 2.0.3 2003/06/20
138
139 Fix CCL directive @case handling so that it affects string match for
140 both CCL keywords and qualifiers.
141
142 * ESFormat-Update updates. Packages with OID 1.2.840.10003.9.5.1 and
143 1.2.840.10003.9.5 are now handled by the same decoder z_IU0Update .
144 Decoder has been updated with ASN.1 changes as listed in
145 http://lcweb.loc.gov/z3950/agency/defns/updateES.html
146 Note that the "latest" DB Update, OID 1.2.840.10003.9.5.1.1 , handler
147 z_IUUpdate, remains unchanged. 
148
149 ZOOM_record_get may now return a record in a specific character set.
150 For type use "form; charset=from[,to]" where form (render, xml, ..) ,
151 "from" is the character set of record as returned by target. "to" is
152 the character set to be returned. If omitted, "to" is UTF-8.
153
154 YAZ ASN.1 compiler renamed from yaz-comp to yaz-asncomp
155
156 New ODR utility, odr_getelement, which returns name of element for
157 which encoding/decoding failed.
158
159 Fixed ODR so that it returns error code OREQUIRED rather than ONONE
160 in cases where a required element was omitted.
161
162 Bug fix: some MARC8 sequences were not converted.
163
164 New ZOOM option "step" which specifies number of records to be
165 retrieved in one chunk. Used in conjunction with "start" and "count".
166
167 SRW support for yaz-client. Use scheme http: to use it, e.g.
168  http://host:port/db
169
170 yaz-client no longer does (un)intelligent character set conversions
171 by default. Can be enabled with charset and marc_charset commands.
172
173 xmalloc trace fix for 64-bit systems such as DEC alpha. 
174
175 Solaris 2.6 compile fix.
176
177 New function, cql_strerror() translates SRW error codes, as returned
178 by cql_transform_error(), into human-readable English strings.  Used
179 in yaz-client diagnostics when appropriate.
180
181 New CQL2RPN query-type for the command-line yaz-client, parses CQL and
182 converts it into a type-1 query which is sent to the server.  This
183 makes CQL available for use with all Z-servers, as opposed to the tiny
184 minority that can handle CQL queries themselves.
185
186 --- 2.0.2 2003/04/28
187
188 New Debian package layout similar to the Redhat Package layout.
189
190 New ZOOM events ZOOM_EVENT_RECV_{RECORD,SEARCH} for receiving a record
191 and search result respectively.
192
193 --- 2.0.1 2003/04/25
194
195 Redhat package is now several packages: libyaz (runtime libraries),
196 libyaz-devel (development and documentation, and yaz (utility programs).
197 Package spec file by Morten Bøgeskov.
198
199 New member 'schema' in struct bend_fetch_rr which the name of requested
200 schema (SRW/SRU) for record (or NULL if none was given). The fetch
201 handler MAY set this to reflect the schema of the returned record.
202
203 New member 'display_term' in struct scan_entry. GFS now sets member entries
204 and allocates scan entries to be filled by user scan handler. In previous
205 version, entries member was allocated by the scan handler. That still works,
206 but the GFS will ignore member display_term - assuming it was NOT set by
207 the handler. The fact that the GFS now allocates the entries both allows
208 for new members and makes a scan handler easier to write.
209
210 Fix CQL lex buffer overflow.
211
212 SRW/SRU recordPacking. For SRW default recordPacking is string. For
213 SRU default recordPacking is string.
214
215 SRU protocol support for frontend server.
216
217 Fix compile bug for systems that have nl_langinfo but CODESET undefined.
218
219 Added missing PQF transform rules for <= and >= . Thanks to Peter Popovics.
220
221 Added scan for the ZOOM shell (zoomsh).
222
223 --- 2.0 2003/02/23
224
225 * String Identifers for Schemas (Amendment 5).
226 http://lcweb.loc.gov/z3950/agency/amend/am5.html
227 Old definition for schema
228   Odr_oid *schema; /* OPT */
229 New:
230   int which;
231   union {
232      Odr_oid *oid;
233      Z_InternationalString *uri;
234   #define Z_Schema_oid 1
235   #define Z_Schema_uri 2
236   } schema; /* OPT */
237
238 * resultCount parameter to Sort Response (Amendment 1).
239 http://lcweb.loc.gov/z3950/agency/amend/am1.html
240
241 Support for SRW 1.0 over HTTP. This is an optional feature and
242 requires libxml2 to operate. Enable SOAP by specifying --with-xml2
243 for configure.
244
245 Generic frontend server supports HTTP/SOAP/SRW and Z39.50/BER
246 on the same port.  SRW SearchRetrieveRequests are mapped
247 to bend_init,bend_search,bend_fetch,bend_close. 
248
249 Z39.50 Query Type-104 added - to facilitate CQL within Z39.50.
250
251 CQL support. Source is directory 'cql'. CQL is supported in ZOOM
252 (both SRW and Z39.50) and the YAZ client (Z39.50 only).
253
254 ZOOM connections are SRW based if schem http is used for hostname
255 in connect, e.g.  z = ZOOM_connection_new("http://myserver");
256 ZOOM_query may be of type CQL, e.g. ZOOM_query_cql(q, "dc.title=x");
257
258 CCL proximity operators !n, %n converts to PQF @prox 0 n 1 2 k 2
259 and @prox 0 n 0 1 k 2 respectively, meaning: exlusion=false,
260 distance=n, order=true/false, relation=le, prox unit=word. If
261 n is omitted, distance 1 is used.
262
263 Fixed problem with C compiler include path in wrong order.
264
265 For TCP/IP COMSTACK, set recv buffer to an appropriate "large" value
266 on Solaris. Patch from Ko van der Sloot.
267
268 New MARC decode API. All new functions operate on a yaz_marc_t
269 handle. The most important new functions are: yaz_marc_create,
270 yaz_marc_decode_{buf,wrbuf}, yaz_marc_destroy, .. to create handler,
271 decode and destroy respectively. Decoder can produce formats
272 MARC line, simple XML, OAI MARC and MARC XML (LoC). See
273 include/yaz/marcdisp.h.
274
275 YAZ Iconv utility now supports MARC8 decoding (marc8.c). Converts
276 to UTF-8, UCS-32, wchar_t or Latin-1.
277
278 * Prototypes for yaz_iconv_-functions moved to separate header 
279 include/yaz/yaz-iconv.h.
280
281 Make a few private functions 'static' in unix.c. This prevents
282 duplicate unix_close in PHP with YAZ and imap. PHP Bug 20977.
283
284 For ZOOM connection, the options targetImplementation{Id,Name,Version}
285 are set when Init Response is received.
286
287 New function ZOOM_connection_error_x similar to ZOOM_connection_error
288 but returns diagnostic set as well.
289
290 New function yaz_strerror which is a portable wrapper for
291 strerror/strerror_r/GetLastMessage.
292
293 * ZOOM_record_get supports type "xml" in which case MARC XML (from LOC)
294 is returned for MARC. If type is "oai", then OAI MARC is returned.
295
296 Fix creation of lib/yaz-config so it works if srcdir != objdir. Patch
297 from Kang-Jin Lee.
298
299 --- 1.9.2 2002/11/26
300
301 yaz_marc_decode uses OAI MARC as XML format for ISO2709 records.
302
303 Fix bad race conditions on SIGTERM and terminate gracefully in
304 frontend server.
305
306 Move retrieval (data1) module to Zebra since nobody seems to be
307 using it.
308
309 Add GRS-1 render for ZOOM using same format as yaz-client.
310
311 --- 1.9.1 2002/10/05
312
313 Added man pages: yaz-client(1), yaz-ztest(8), yaz(7), zoomsh(1).
314
315 Fix broken ESpec handling in data1 module.
316
317 SGML reader parses comments and makes them part of the data1 tree.
318
319 Added several type casts so that YAZ compiles as C++ code.
320
321 ZOOM didn't handle PDU encoding failures properly.
322
323 Added more Bib-1 diagnostics (approved extensions).
324
325 GNU configure: better check for iconv.
326
327 More portable use of accept, getpeername. Check for socklen_t. Use
328 int/size_t if socklen_t is not defined.
329
330 --- 1.9 2002/09/06
331
332 PQF parser rejects bad queries - including those with extra
333 characters in them. PQF parser used to silently ignore that.
334 Cleaner API for PQF added, which allows you to get detailed
335 error information for bad queries (see yaz/pquery.h).
336
337 Fixed bug in ZOOM_record_get for type "database".
338
339 Implemented mini iconv library supporting conversions between
340 UTF-8, UCS4, UCS4LE and ISO-8859-1. Implemented in util/siconv.c.
341
342 * Removed XML reader (d1_expat.c). It's part of Zebra instead.
343
344 --- 1.8.9 2002/08/20
345
346 Fixed ZOOM C record cache so that preferredRecordSyntax and
347 elementSetName is used to check for already fetched records.
348
349 --- 1.8.8 2002/08/02
350
351 Added three members in bend_initrequest structure to facilitate
352 character set negotiation.
353
354 Fixed a bug in frontend server that could cause indefinite
355 loops under rare conditions. 
356
357 Revised character set utilities (charneg.h) so that encoding
358 UCS-4, UCSA-4, UTF-16 and UTF-8 are encoded non-privately.
359
360 For PQF, directive @term <type> sets term type for Scan/Search.
361 Here <type> is general, string, numeric, null. The term type
362 is inherited - just like @attr.
363
364 New call odr_set_charset that sets character set conversion for
365 international-strings on a ODR stream. Prototype is:
366  int odr_set_charset(ODR o, const char *to, const char *from);
367 The InternationalString is still represented as C string in YAZ 
368 so native strings of type UTF-8, ASCII, etc. will work (UTF-16
369 won't). On the protocol level, you can use any encoding.
370
371 Support for UNIX sockets in ZOOM.
372
373 Solaris recv sometimes returns errno == ENOENT. It is treated as
374 EINPROGRESS. COMSTACK patch by Ko van der Sloot.
375
376 New COMSTACK of type UNIX Socket. Use "unix:/path" as address for
377 both client and server. Code by Morten Bøgeskov.
378
379 --- 1.8.7 2002/05/22
380
381 On Windows ZOOM functions are of type __stdcall rather than __cdecl, so
382 that they can be used directly from Visual Basic. You must recompile
383 your windows APP if you're using ZOOM.
384
385 Character Set and Language Negotiation(3) for ZOOM API and YAZ client.
386 Commands "lang" and "charset" sets language and character set respectively.
387 Options "lang" and "charset" is interpreted by the ZOOM API. Note, these
388 are not part of the official ZOOM spec) All is due to Oleg Kolobov. 
389
390 Attributes from multiple CCL fields may be OR'ed rather than merged
391 using directive "@field or". Fields are still merged by default -
392 equivalent to "@field merge".
393
394 Fixed bug in ZOOM connect that occurred on OpenBSD (maybe others). Patch
395 by Oleg Kolobov.
396
397 Fixed bug in zget for parameter ExtendedServicesResponse.
398
399 Fix OID for ILL.
400
401 --- 1.8.6 2002/03/25
402
403 Added PQF feature: '@attr type=value' may be written as '@type=value'.
404
405 Client displays USR.1:SearchResult-1 (hits per term).
406
407 Additional Search Info for search in Generic Frontend Server.
408
409 Fixed CCL parsing of "field=s".
410
411 WIN32 installer - using the excellent NSIS software from nullsoft.
412
413 Fixed CCL parsing of "field = - <number>".
414
415 Added function yaz_marc_decode that decodes MARC for line mode
416 display or XML (similar to that used by JZKit).
417
418 Fixed BER decoding of OPTIONAL CHOICE. The bug didn't affect the
419 Z39.50. But ISO/ILL was, however.
420
421 Added patch by Rustam T. Usmanov that implements Z39.50 duplicate
422 detection service (Z39.50-1995 Amendment 2) and Language Negotiation (3).
423 See:
424  http://lcweb.loc.gov/z3950/agency/amend/am2.html
425  http://lcweb.loc.gov/z3950/agency/defns/charneg-3.html
426
427 --- 1.8.5 2002/02/03
428
429 New YAZ client features: Command completion and new commands:
430 push_command, set_apdufile, set_marcdump, set_cclfields, register_oid.
431 Code provided by Jacob Poulsen.
432
433 New call oid_trav, that visits all registered OIDs via callback.
434
435 Function ZOOM_record_get now returns const char pointer rather than
436 void pointer. It saves a lot of type casts.
437
438 For YAZ client, command "auth" now allows you to set authentication
439 in IdPass style. It is enabled when three tokens are given - order
440 is user, group and password.
441
442 Fix memory leaks in MARC record handling for ZOOM.
443
444 New option for YAZ client, -k <kilobytes> that sets
445 maximum record size. Similar to -k option for generic frontend
446 server and yaz-ztest.
447
448 More fixes for scan. Non-zero stepSize handled. OID's fixes.
449
450 Prefix query parser reports "fail" when bad attribute set is given.
451
452 Fix in MARC decoder. Proximity logging. Fix for attribute set
453 in scan handler for server. Patches by Shigeru Ishida.
454
455 SSL/COMSTACK updates. cs_rcvconnect completes SSL handshake. ZOOM
456 works with SSL.
457
458 Configure option --with-openssl=<dir> now works when a directory is
459 specified. Patch provided by Morten Bøgeskov.
460
461 New option for YAZ client, -u <auth>, that sets authentication.
462
463 ZOOM fix: error information was sometimes "missing", since error
464 was cleared/reset too when it shouldn't.
465
466 ZOOM_record_get returns ISO2709 buffer when "raw" is given.
467
468 --- 1.8.4 2002/01/04
469
470 Scan for ZOOM API. New object ZOOM_scanset. New functions
471 ZOOM_connection_scan, ZOOM_scanset_size, ZOOM_scanset_term and
472 ZOOM_scanset_destroy.
473
474 New ZOOM function, ZOOM_connection_last_event, that returns type
475 of last event (such as "receive data", "send data", "apdu received",
476 etc.
477
478 New ZOOM option, schema, that specifies schema for retrieval.
479
480 New CCL feature. Qualifiers can be aliases for one or more
481 other qualifiers (if more than one is given, OR is used).
482
483 ZOOM uses named result sets if target supports it.
484
485 Two new YAZ client commands: .  (dot, which sources a script of YAZ
486 client commands), and ! (to execute shell command.). Implemented
487 by Jacob Poulsen.
488
489 Working on Debian packages.
490
491 --- 1.8.3 2001/11/19
492
493 YAZ client enables named result sets only if target supports it.
494
495 *** ZOOM. Prefix for ZOOM definitions changed from Z3950_ to ZOOM_.
496
497 * ZOOM. Removed Z3950_connection_host. Use Z3950_connection_option_get
498 with key="host" to get same result.
499
500 * ZOOM. Added Z3950_record_clone and removed Z3950_resultset_get.
501 Function Z3950_resultset_record(s) returns references to records
502 "owned" by resultset. To become owner use Z3950_record_clone.
503
504 Function z_ext_record handles Extended Services. Thanks to
505 Irina Dijour.
506
507 --- 1.8.2 2001/11/12
508
509 CCL Parser fix: ignore token comma when dealing with and-lists.
510
511 Documentation updates for COMSTACK.
512
513 * ZOOM changes. Query object renamed from Z3950_search to Z3950_query.
514 Changed prototype Z3950_records. For some functions, int parameters
515 were changed to size_t.
516
517 TCP/IP COMSTACK no longer uses getprotobyname to avoid memory leak
518 on some Unices.
519
520 New MARC decode/display function, marc_display_exl, which properly rejects
521 non-ISO2709 records. YAZ client uses it.
522
523 --- 1.8.1 2001/10/29
524
525 Fix bug: local attribute set wasn't set correctly in PQF strings.
526
527 --- 1.8 2001/10/25
528
529 * Old Z39.50 codecs no longer supported. 
530
531 Added ZOOM C binding. See http://zoom.z3950.org/
532
533 Renamed states for COMSTACKs to avoid confusion with events.
534
535 Implemented cs_look and proper cs_rcvconnect.
536
537 Fixed COMSTACK error that occurred on HPUX. Fix by Giannis Kosmas.
538
539 Configure detects POSIX threads on OpenBSD.
540
541 When sort flag 'i' was specified in yaz-client the caseSensitivy flag
542 was set to a wrong value.  Thanks to Robert Sanderson for reporting this.
543
544 When error is returned from present handler, non-surrogate diagnostic
545 is returned in present response (and fetch handler is no longer called).
546
547 * Minor adjustments to pquery parser (PQF). Token characters may be
548 escaped by using backslash (C-style).
549
550 PQF parser allows string attribute values to be specified. For @attr,
551 non-numeric characters after the equal-sign are treated as strings
552 (e.g. @attr 9=title).
553
554 CCL trunction character may be defined (@truncation in file)
555
556 * function zget_ExtendedServicesRequest sets waitAction to
557   waitIfPossible (was wait).
558
559 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
560 to Matthew Carey.
561
562 CCL operator names may be set in field definition files (CCL_bibset).
563 See ccl/bib1 for an example.
564
565 Fixes in ASN.1 compiler for C++ compatibility.
566
567 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
568 and "op_or" to avoid conflict with C++.
569
570 Fixed problem with GNU readline detection on Redhat 7.0.
571
572 Added step-size for Scan backend handler.
573
574 Fixed bug that made the frontend server crash when no attribute
575 set was specified for scan.
576
577 Front-end server automatically switches to original working directory
578 when installed as an NT service. Previously -w had to be specified to
579 make it work.
580
581 Added extended attributes for retrieval module (data1), so that data1
582 records carry d1_readXML/SGML attributes. d1_read also supports
583 null-data rules ( <tag/>)
584
585 On UNIX when POSIX threads are available, a separate library libyazthread
586 is created. Programmers should link with that library and the yaz library
587 when using threads. The reason for the split was that some applications
588 on Linux, such as Apache, doesn't work well when using shared objects that
589 relies on threads.
590
591 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
592 (or any frontend server) in SSL mode by specifying ssl: followed by
593 address. Only tested on UNIX.
594
595 Added feature for CCL module. Virtual structure s=al or s=ol generates
596 and-list and or-list respectively instead of phrase search.
597
598 Added some OID's.
599
600 * Added prefix "yaz_" for the functions log_init.., log_file..  and
601 log_mask_str. This was done to avoid name conflicts with other libraries
602 (such as other PHP extensions).
603
604 Added raw OID member for preferred record syntax (request_format_raw)
605 and returned record syntax (output_format_raw) for backend fetch method.
606
607 Config file yaz-config now accepts options so that it returns specific
608 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
609
610 Shared library support for UNIX using GNU libtool.
611
612 * Modified backend interface. Request/Response struct's replaced by
613 one read/write C struct. For example bend_fetchrequest and
614 bend_fetchresult have been replaced by single bend_fetch_rr struct.
615 Every handler - even search has to be registered in bend_init
616 handler. This means that the YAZ library no longer refers to
617 external functions and it makes it possible to make the whole
618 thing a single DLL/SO.
619
620 Added Segment handler for backend server.
621
622 Added Zmbol/Zebra administrative functions to YAZ client.
623
624 Threaded frontend server on UNIX (when POSIX Threads are available).
625 Starting the server with option -T enables multi-threading.
626
627 --- 1.6 2000/03/03
628
629 Added configure option --enable-comp/disable-comp to control use
630 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
631 located in sub directory asn.
632
633 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
634 in ${exec_prefix}/bin along with the other programs yaz-client and
635 yaz-ztest.
636
637 GNU automake used to maintain makefiles.
638
639 Added several OID's.
640
641 Changed retrieval module so that we can load records with no abstract
642 syntax defined. Tagpaths in these records are fully composed of string
643 tags.
644
645 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
646
647 --- 1.5 1999/12/10
648
649 On UNIX, the generated makefile now supports a proper 'make install'.
650 The prefix can be set via GNU configure to set the install location
651 (default is /usr/local).
652
653 * YAZ programs client and ztest were renamed to yaz-client and
654 yaz-ztest to avoid conflicts when users install YAZ in "standard"
655 locations, such as /usr/bin,/usr/local/bin,etc.
656
657 * YAZ Header files were moved from include to include/yaz. YAZ Header
658 files are referred to as include <yaz/log.h> rather than <log.h>.
659 The YAZ include path (-I ..) is therefore the same as before. Programmers
660 should update their #include statements or use -Ipath/include/yaz
661 instead. The main motivation for doing this change is that YAZ header files
662 can be installed in "standard" locations /usr/include,/usr/local/include 
663 without introducing conflicts, since ALL YAZ header files are stored
664 in subdirectory yaz (under /usr/include for example).
665
666 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
667 rather than project/workspace files. We switched because project files
668 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
669 details.
670
671 Changed name of logging function, logf, to yaz_log, to prevent name
672 clash with some math-log functions. The YAZ header log.h defines logf
673 to yaz_log (#define) so there should be no incompatibilities by this
674 modification.
675
676 Added bend_start/bend_stop handlers for server. These handler are
677 called on start/stop of server. For windows they are called whenever
678 a service is started/stopped.
679
680 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
681 a fairly small ASN.1 compiler written in Tcl. The compiler is located
682 in util/yc.tcl. The auto-generated C code structures are, in a few
683 cases, incompatible with the old decoders. There are differences in the
684 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
685 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
686 The preprocessor variable ASN_COMPILED is defined when the compiled
687 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
688 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
689 wish to use the old encoders/decoders you can specify --disable-yc
690 for configure.
691
692 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
693 version so that it supports both new - and old version of DB Update
694
695 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
696 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
697 change. The name parameter can be set to 0 in which no name is specified
698 for the construction. The macros odr_implicit and odr_explicit sets name
699 parameter to zero for the construction involved. New macros
700 odr_implicit_tag and odr_explicit_tag are similar to the others,
701 except that a name parameter is added. For programmers' that don't use
702 ODR they probably only need to change the call to z_APDU and z_External.
703
704 Added access control facility by interfacing the TCP wrapper library.
705 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
706 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
707 name of the daemon and enables the access control as specified in
708 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
709
710 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
711 den Dool <H.M.vdnDool@kub.nl>.
712
713 Added reference ID parameter to most functions in server API - refer
714 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
715
716 Changed name of ccl library to libccl.a (was ccl.a).
717
718 Fixed bug in decoder for Explain (Category TargetInfo).
719
720 Added support for GNU readline in client. Thanks to Jacob Poulsen
721 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
722
723 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
724 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
725 IMPLEMENTATION! This change was made to the development version before
726 the ZIG decided to retract the amendment. If any users MUST be
727 compatible with the original Update definition, PLEASE CONTACT US, and
728 we will include a separate definition corresponding to the old Update
729 ES. Note that because of the change to the ASN.1 of the
730 TaskPackageRecordStructure we cannot define a single structure that
731 will support both versions.
732
733 * Added const modifier to buffer parameter for some ODR/BER encoding
734 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
735 completeWAIS, odr_dumpBER.
736
737 Fixed bug in client.c which caused a crash when a scanResponse didn't
738 contain positionOfTerm.
739
740 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
741 * will cause an error in a client if a non-YAZ target sends both a
742 * list of Scan entries and non-surrogate diagnostics.
743
744 Retrieval module enhancements. Tag sets may be typed in the reference
745 to it. From the .abs-file the "tagset" directive takes a third optional
746 integer type for the tag set referenced. From a .tag-file the "include"
747 directive takes a third optional type as well. The old "type" directive
748 in the tag set itself is still recognized but acts as the default type
749 for the tag set.
750
751 Backend interface change. Individual Scan terms returned from bend_scan
752 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
753 in include/backend.h.
754
755 Retrieval module enhancements. Multiple tag sets and attribute sets may
756 be specified in abstract syntax specs. Revised the error/warning for
757 logging messages reported by the retrieval module when reading the
758 various spec files.
759
760 Object Identifier system (oid_..) changed. The API is backwards
761 compatible but the oid-routines now allocates new OID's when needed.
762 Raw OID's may be specified in oid_getvalbyname.
763
764 YAZ now uses GNU configure to generate Makefile(s).
765
766 * Minor changes in some of the member names of DeleteResultSetRequest and
767 DeleteResultSetResponse. See include/proto.h.
768
769 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
770 and added member 'languages' in TargetInfo (which was missing).
771
772 Changed the way attribute sets are handled in the retrieval
773 module. These are now cached, just like the abstract syntaxes
774 (schemas).
775
776 Changed YAZ so that it links with compiled ASN.1.
777
778 Added Explain-schema definitions and mapping routines. The following
779 Explain categories have been implemented: AttributeDetails,
780 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
781
782 Fixed minor bug in Windows version of Server Library.
783
784 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
785
786 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
787
788 Added EXTERNAL: UNIverse Resource Report (non-standard).
789
790 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
791 ENUMERATED and SET OF.
792
793 * Added 'const' to some of the char pointer arguments for the
794 functions, data1_read_node, data1_getelementbytagname,
795 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
796 data1_get_absyn.
797
798 Fixed bug in data1_insert_taggeddata - the last_child member of
799 parent wasn't initialised.
800
801 * Changed data1_read_record and data1_read_node so that the supplied
802 "SGML"-buffer is read-only. In particular the resulting data1 - tree
803 doesn't refer to any parts of the "SGML"-buffer.
804
805 Fixed bug in server library (Windows version of statserv_remove).
806
807 * Changed code so that it compiles as C++. The type definition
808 of Odr_fun which is a member of Odr_arm was changed. The result is,
809 that an explicit typecast is needed for the fun pointer when
810 using Odr_arm - as in:
811     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
812
813 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
814
815 Implemented the new structured date and time definition as approved
816 by the ZIG. Added schemaId element to the specificTag in Espec-1
817 (also approved at the last ZIG). Thanks to RVDM.
818
819 Added some Object identifiers (RVDM).
820
821 Changed the Update Extended Service (RVDM).
822
823 Added command "refid" to client which specifies referenceId for
824 the following requests.
825
826 Implemented extended service handling for server. See ztest.c
827 for an example as well as backend.h. New handlers are registerd
828 in the Init handler.
829
830 * Changed interface for sort in server.
831
832 Added new members to statserv_options_block. It allows a server
833 to read options from another source than just the command line. Thanks
834 to Charles Woodfield.
835
836 * Changed definition of Z_Triple in file prt-grs.h - member boolean
837 renamed to zboolean. Some C++ compilers complained about the name.
838
839 Minor changes to gils.abs. Added index 's' (sort) on title
840 and date/time-last-modified.
841
842 --- 1.4pl2 1998/1/30
843
844 Fixed bug in server library regarding inetd mode (-i). This bug
845 was introduced by release 1.4.
846
847 --- 1.4pl1 1998/1/29
848
849 Added sort facility in client and backend server interface.
850
851 Fixed problem with dependencies in Makefile(s).
852
853 Fixed bugs for encoders/decoders of extended services and 
854 SearchInfoReport.
855
856 Implemented sub-tree feature for schemas. Sub-trees are
857 referenced in *.abs-files. See explain.abs for an example
858 of the use of this feature.
859
860 Modified bib1.att; local attributes for ANY didn't include
861 ANY itself (only affects use of the retrieval module).
862
863 Fixed bug in plain SGML reader in function data1_read_node:
864 tags with prefix "var" was incorrectly interpreted as variants.
865
866 Added feature "sub-schemas" to enable references to - and definitions
867 of - group of elements.
868
869 * Removed member parent from type data1_element (in data1.h).
870
871 Implemented function odr_nullval() that returns the value of
872 ODR_NULLVAL.
873
874 * Removed member num_children from data1_node (in data1.h).
875
876 Made NT service interface part of the server library. The
877 function statserv_main uses the NT service when required and
878 calls the statserv_start / statserv_close routines.
879
880 Routine zget_SearchRequest and zget_PresentRequest fills
881 resultSetName/Id member with "default" instead of "Default".
882
883 Fixed memory leak in server. Request queue member wasn't freed.
884
885 Fixed nmem_exit so that memory is freed.
886
887 --- 1.4 1997/10/2
888
889 Revised the CCL parser utility to be thread safe.
890
891 Added function, oid_ent_to_oid, to replace the function 
892 oid_getoidbyent, which is not thread safe.
893
894 * Added nmem_init and nmem_exit to initialize and release
895 NMEM resources. Function nmem_init should be called once in the
896 initial thread before NMEM/ODR is used. statserv.c and client.c
897 have been changed accordingly. The change was necessary to make
898 NMEM thread safe. The NMEM memory pool is shared amongst threads
899 in a process. Unix-based applications will still work fine without
900 calling this.
901
902 Added NT Services interface for the the Z39.50 (statserv) Server. 
903 Refer to the ztest.c source on the usage.
904
905 Windows 95/NT port using MSVC5.0. Project files are included in the
906 distribution.
907
908 * Defined new 'global' handle for the retrieval (data1) system. The
909 new handled, data1_handle, describes the state of the data1 system.
910 This handle is passed as first argument to virtually all
911 data1 related routines. The functions data1_create and data1_destroy
912 creates and destroys a data1 handle respectively.
913
914 Added ODR encode stream member to all backend request structures
915 init, search, scan etc. This stream should be used to allocate all
916 memory used for the response when thread safe operation is needed.
917
918 Changed the comstack utility, cs_addstr, to be thread safe. The
919 returned hostname string returned by the function is now part the
920 COMSTACK instance.
921
922 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
923 function. The cs_straddr takes a COMSTACK handle as argument, so this
924 function must be used after cs_create and before bind/connect.
925 This function is thread safe.
926
927 Moved test server to 'ztest' directory - generic server code still
928 in 'server' directory.
929
930 Made prefix query (pquery.c) utility thread safe.
931
932 Added new function modifier YAZ_EXPORT to 'export' public DLL
933 functions when using windows (see include/yconfig.h).
934
935 Added definitions to the OID database (util/oid.c) (RVDM).
936
937 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
938
939 Added call to ccl_rpn_delete in client program.
940
941 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
942 release of RPN structure.
943
944 Added support for C++, headers uses extern "C" for public definitions.
945 With input from RVDM.
946
947 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
948 Thanks to Ronald van der Meer (RVDM).
949
950 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
951
952 Added support for private extensions to the OID database
953 (oid_setprivateoids()). Thanks to RVDM.
954     
955 Added optional, physical ANY (key replication)
956
957 Fixed null-reference problem in GRS-1 output filter.
958
959 Proximity operator added to Prefix Query Format (PQF).
960
961 In test client command "base" accepts multiple databases.
962
963 Fixed bug in cs_close stack that caused trouble with WINSOCK.
964
965 --- 1.3 1996/10/11
966
967 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
968
969 Smallish bug-fixes in the new encoders/decoders (explain).
970
971 Bug fixed in DeleteRequest.
972
973 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
974
975 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
976
977 Added SOIF syntax (using private OID for now) to retrieval module and client.
978
979 Added Update extended service.
980
981 Added SearchResult-1 additional info structure.
982
983 Added optional CCL (ISO8777) interpreter as separate module. Available
984 in linemode client.
985
986 --- 1.2 1996/6/10 (1st anniversary release)
987
988 Added Summary record syntax. Lightly tested.
989
990 Added OPAC record syntax. Untested.
991
992 Added ResourceReport service encoders/decoders. Untested.
993
994 Fixed bug in z_Unit - wrong tagging on unitSystem.
995
996 Fixed bug in the DiagRecs decoder.
997
998 Added options for max PDU size and session timeout to frontend-server.
999
1000 Added documentation of query-language parsers and other supporting utilities.
1001
1002 [frontend-server] Added Attribute set to the bend_scanrequest API.
1003
1004 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
1005 surrogate diagnostics were generated.
1006
1007 [retrieval] Allow multiple local values for attribute.
1008
1009 [retrieval] Allow multiple attributes per element in .abs files. index type.
1010
1011 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
1012
1013 --- 1.1pl2  1996/4/10
1014
1015 Minor changes, mostly specific to Zebra's requirements (retrieval)
1016
1017 --- 1.1  1996/2/20
1018
1019 Repaired bug in frontend server when running multiple listening
1020 endpoints in dynamic mode.
1021
1022 z_External() now won't break if a known, ASN.1 value comes encapsulated
1023 in an octet-string. The value will pass through unmodified in an Odr_oct.
1024
1025 Added a bit of code to the demo client to decode & display
1026 ASN.1-structured records represented in the octet-aligned branch of
1027 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
1028
1029 Added z_ext_getentbyref() to the ASN module. Doc updated.
1030
1031 * Completed the SCAN definition in the ASN module. This may break SCAN
1032 code based on older YAZ-versions at compile-time. The fix is easy -
1033 look in proto.h.
1034
1035 * Added 'displayTerm' and OtherInformation to the TermInfo structure
1036 under the SCAN definition. Remember to initialize this, server-people.
1037
1038 Comstack should now support the WAIS protocol in TCP/IP mode. Note
1039 that this does not extend to ODR and ASN.
1040
1041 Comstack allows insertion of established socket (primarily for
1042 inetd-operation of servers). Doc updated.
1043
1044 Front-end server can now start from the inetd in TCP mode. Doc
1045 updated.
1046
1047 --- 1.0pl4 1996/1/24
1048
1049 Added Sort PDU.
1050
1051 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
1052 the rank and record number.
1053
1054 Adjustments to the frontend server.
1055
1056 Fixed diagnostic BER dumper. It ignored the file argument.
1057
1058 --- 1.0pl3 1996/1/2
1059
1060 Various changes to retrieval module.
1061
1062 Changed the union discriminators of the protocol files from enums to
1063 ints paired with #defines.
1064
1065 *Changed oident.class to oident.oclass to avoid a reserved word in C++
1066  compilers.
1067
1068 *Changed operator in the RPN structure to 'roperator', again to avoid a
1069  conflict with C++.
1070
1071 Fixed problems in Explain decoders/encoders.
1072
1073 --- 1.0pl2 1995/12/6
1074
1075 Memory bug in log module fixed.
1076
1077 --- 1.0pl1 1995/12/5
1078
1079 Occasional malloc() of 0 bytes fixed in d1_espec.c.
1080
1081 Bug in Explain DatabaseInfo module fixed.
1082
1083 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
1084
1085 --- 1.0 1995/11/28
1086
1087 The shift to v1.0 signals that we now consider the *core* functionality
1088 of YAZ reasonably stable (the core being more or less equivalent to
1089 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
1090 tested (Explain not at all - though that will happen soonish).
1091
1092 Minor changes to code to support Windows port.
1093
1094 Various minor changes after we're getting to use GRS-1 & co. more.
1095
1096 Added Espec-1 format.
1097
1098 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
1099 of the protocol and it cannot be selected when encoding (maps into 'string'
1100 when decoding). Needed to talk to some servers.
1101
1102 Demo client can request simple element set names.
1103
1104 Added Diagnostic Format encoders/decoders.
1105
1106 Added simple Close handling to frontend server (no hooks for resource
1107 reporting yet), and demonstration client.
1108
1109 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
1110
1111 --- 1.0b3 1995/08/24
1112
1113 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
1114 handled incorrectly when records were requested in the searchResponse. This
1115 will only affect you if you use the frontend-server.
1116
1117 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
1118 Test-client will ask for and print GRS1. Ztest will return dummy records
1119 on request.
1120
1121 Added Explain encoders/decoders to the service-level API. Untested.
1122
1123 Added Extended Services: Item Order encoders and decoders to the Service-
1124 level API. Untested. We could use a recent copy of the pertinent bits
1125 of the ILL protocol to add those bits.
1126
1127 Added diagnostic format 1 encoders/decoders to the service-level API.
1128 Untested.
1129
1130 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
1131 odr_cons.c, which causes a more correct output.
1132
1133 Fixed handling of searchRequest in frontend server. NextResultSetPosition
1134 was always set to 0 when no records were requested in the searchRequest.
1135
1136 * Added better external-handling. This shouldn't harm old code that
1137 *encodes* externals. It can break code that looks for a
1138 'single-ASN1-type' representation, since those types that are known
1139 are now decoded immediately. Look at the SUTRS sample code in
1140 seshigh.c and client.c. Documentation updated.
1141
1142 Handling of structured records in bend_fetchresponse. Length -1 marks
1143 structured record, type is deduced from format field.
1144
1145 --- 1.0b2 1995/06/27
1146 Fairly quick maintenance release to add SUTRS support.
1147
1148 Fixed handling of SUTRS records in the demonstration client.
1149
1150 * Added format field to the bend_fetchrequest and bend_fetchresponce
1151 structures of the backend API (frontend server). When the record is
1152 returned, the value of the format field is mapped to an OID. The
1153 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
1154 of the record. The special value VAL_NONE in the bend_request means
1155 that no specific format was requested by the client. Documentation
1156 updated accordingly. Test server (ztest) will return a fixed dummy
1157 SUTRS record if your client requests SUTRS.
1158
1159 Documentation updated accordingly.
1160
1161 You can now set external libraries and RANLIB support in the top-level
1162 Makefile.
1163
1164 --- 1.0b 1995/06/19
1165 First public release.