Use docbook to man script wrapper
[yaz-moved-to-github.git] / NEWS
1 Added retrieval handling support in Generic Frontend Server to support
2 conversion between MARC/XML as well as XSLTtransforms. See
3 etc/yazgfs.xml for an example.
4
5 Added Authentication support to Generic Frontend Server in SRU
6 mode. Authentication using HTTP Basic is supported, as is the use
7 of 'x-username' and 'x-password' parameters in the request itself.
8
9 Added support for a new character set MARC8s identical to MARC8 except
10 that it converts combined characters to single Unicode characters in the
11 Latin-1 range (when possible).
12
13 --- 2.1.18 2006/04/24
14
15 ASN.1 compiler 0.4: generates brief Doxygen file header for 
16 generated .h/.c files. 
17
18 Utility yaz_iconv now supports conversion to MARC-8.
19
20 New facilities for the MARC module. The reading - and writing of
21 content are separate methods for the yaz_marc_t handle. The following
22 read functions are available: yaz_marc_read_iso2709 (Reads MARC in
23 ISO2709 format), yaz_marc_read_xml (reads MARC in MARCXML/MarcXchange
24 format). Write functions have prefix yaz_marc_write_.. The existing
25 utilities yaz_marc_decode_wrbuf and yaz_marc_decode_buf are still
26 available. Removed support for OAI-MARC and simplexml (not the
27 simplexml from PHP5).
28
29 Added a new ZOOM event type ZOOM_EVENT_END which signals no more events
30 to be returned for this connection.
31
32 --- 2.1.16 2006/03/31
33
34 Allow multiple languages and charsets to be specified with
35 yaz-client. Each item must be separated by comma (NO BLANKS). E.g.
36   negcharset iso-8859-1,utf-8
37
38 Translation of proximity nodes from CQL into PQF now works.
39
40 Moved to automake 1.8, 1.9.
41
42 Added function yaz_log_set_handler which allows a log handler to be
43 installed. This handler will be called for all log messages.  Output
44 to file is also produced; but that can be disabled by passing NULL
45 fname to yaz_log_init_file.
46
47 Fixed another problem with MARC-8 -> ISO-8859-1 conversions. Bug #537.
48
49 For SRW (including GFS), accept application/soap+xml as content-type
50 for SOAP msg.
51
52 For GFS in SRU mode, an empty stylesheet in SRU URL (&stylesheet=&)
53 produces NO stylesheet reference even if a default stylesheet is specified
54 in GFS XML config.
55
56 --- 2.1.14 2006/03/14 
57
58 Updated Windows package to include yazd.dll + yazd.lib for the
59 Development component.
60
61 If the environment variable YAZ_LOG is set, then it is used as a
62 string indicating the default level of logging to use if not
63 overridden by calls to yaz_log_init() or yaz_log_init_level().  If
64 it's not defined, then the manifest constant YLOG_DEFAULT_LEVEL is
65 used as before.  So, for example, to omit warnings from YAZ logging,
66         export YAZ_LOG=-warn
67
68 cql_transform() now map structure and other attributes before indexes,
69 so that index-specific structures and other attributes can override
70 defaults.  So now a combination of mapping specifications such as:
71         structure.* = 4=1
72         index.dc.date = 1=date-modified 4=5
73 does the right thing.
74
75 cql_transform() now also respects the "always" mapping specification,
76 which establishes an initial set of attributes to be used for all
77 terms except where overridden by more specific attributes associated
78 with the index, relation or modifier.
79
80 Added SRU-GET and SRU-POST support for ZOOM C. Option "sru" specifies
81 which mode to use; one of "post", "get" or "soap" (SRW, default).
82
83 Fixes for yaz_iconv routines: changed trie-based character set conversions
84 to use only non-negative values for bit fields due to Sun's C compiler not
85 supporting negative values.
86
87 Fixed bug in character set conversion yaz_iconv. Some three byte UTF-8
88 sequences where not read correctly. Fix by Rustam Usmanov.
89
90 Updated win/makefile to use options, settings which makes things
91 compile with VS C 2005.
92
93 --- 2.1.12 2006/02/01 
94
95 Fixed bug in yaz_oi_update which used incorrect value for categoryValue.
96
97 In ZOOM socket code, use select instead of poll on MacOSX.
98
99 ZOOM-C now support client-side compilation of CQL into RPN that is
100 sent to the server, enabling CQL to be used against all Z39.50
101 servers.  Use ZOOM_query_cql2rpn() to set the compiled CQL into a
102 ZOOM_query object, and submit it using ZOOM_connection_search().
103 The CQL-to-RPN translation uses a configuration file, the name of
104 which must be specified in the Connection's "cqlfile" option.
105
106 ZOOM-C also support CQL scanning, via the new ZOOM_connection_scan1()
107 function, which takes as its start-term parameter a ZOOM_query object
108 (which may have had either CQL or RPN set into it).
109
110
111 --- 2.1.10 2005/11/29 
112
113 Added ZiNG Update Support. New codecs are defined in srw.h. Extended the
114 GFS to support this as well. Backend handler, bend_srw_update, does the
115 update work. Code contributed by Ko van der Sloot.
116
117 Allow retrieval of Search Result-1 information in ZOOM by the use of
118 options that are attached to a result set. ZOOM documentation updated
119 accordingly.
120
121 Fixed bug #416: First/second comb characters not handled in the MARC-8 to
122 UTF-8 conversion. Patch by Raj Patel.
123
124 Added option -m to GFS to control formatting of timestamps in log file.
125
126 Added 'exit' as synonym for 'quit' in yaz-client
127
128 Added support for specifying SRW resultSetId + resultSetIdleTime in a
129 Generic Frontend Server's search handler. Refer to include/yaz/backend.h
130 for the new members. Patch by Ko van der Sloot.
131
132 Added support for SRU POST. It is supported for content-type
133 application/x-www-form-urlencoded only. Patch by Ko van der Sloot.
134
135 Do not build the separate Multi-threaded (MT) library libyazthread.la.
136 Instead make the library libyaz.la multi-threaded. Threading as a whole
137 can still be disabled by configure option --disable-threads. Previosly, 
138 with older GLIBCs there were problems with MT libs under Apache. This
139 has now been fixed a long time ago.
140
141 Fixed bugs in yaz_log that occurred on Sparc Solaris in Multi-threaded
142 applications.
143
144 CQL module modified to be case insensitive for relations/indexes/operations.
145
146 Fixed bug in CQL transform code: incorrect value relationModifieder
147 was used.
148
149 Added 'show all' command for yaz-client which retrieves all results
150 for last search.
151
152 Added new yaz-client, xmles, which takes a (private) OID and
153 a document to be sent as an extended service request.
154
155 Describe new yaz-client commands wait_response and set_auto_wait.
156
157 Increase TCP/IP listener backlog from 3 (which I am guessing was
158 copied from the SunOS manual entry way back when) so SOMAXCONN, so
159 that the socket will queue as many incoming connections as it's able
160 to handle ongoing connections.  In other words, it will never now
161 refuse a connection that it would be able to handle merely because
162 it's not got around to accepting() enough of the pending connections
163 yet.  This is the behaviour anyway under Linux, where the listen()
164 argument is ignored; but not under BSD and on systems such as
165 MS-Windows that use BSD-derived TCP/IP stacks.  The behaviour of
166 YAZ-based servers should now be uniform across operating systems in
167 this respect.
168
169 yaz-marcdump uses 64-bit file access on some systems. This is enabled 
170 on Linux and other Unix variants where _FILE_OFSET_BITS=64 is supported.
171 This allows yaz-marcdump to read large MARC batches (>2 GB).
172
173 Modified all YAZ source files - except the source which is auto-generated
174 by tools - to use spaces rather than TABS. Emacs/VIM trailer added to
175 all source files.
176
177 Add ZOOM_connection_option_getl() and ZOOM_options_getl(),
178 corresponding to the existing *_setl() function.  These allow option
179 values containing arbitrary valuues.
180
181 Add ZOOM_resultset_sort1(), which should ALWAYS be used in place of
182 ZOOM_resultset_sort() in new applications.  Its behaviour is identical
183 except that it returns an indicator of whether or not the sort
184 criterion was accepted (0 for OK, -1 for invalid).
185
186 --- 2.1.8 2005/06/07 
187
188 Fixed bug in yaz_marc_decode_buf. By mistake the routine appended
189 MARC output rather than returning "new" buffer.
190
191 yaz-client warns about unknown init options.
192
193 Fixed bug #371: "options concurrentOperations ignores concurrentOperations"
194
195 --- 2.1.6 2005/05/24 
196
197 Added support for SRW sort in Generic Frontend Server. Patch
198 by Ko van der Sloot. Member srw_sortKeys in bend_search_rr holds
199 sortKeys - or NULL if none is provided.
200
201 Fixed bug #307: It was impossible to specify indefinite/no timeout
202 for ZOOM_event. Special timeout value -1 now means indefinite timeout
203 (i.e.  no timeout).
204
205 Added support for multiple languages and charsets to be specified in
206 ZOOM. Each charset/language is separated by a blank. If negotiation is
207 in effect in init-response, Option
208 "negotiation-charset-in-effect-for-records" set to 1(true) or 0(false). 
209 Code based on patch by Vasiliy Osadchuk.
210
211 Fixed bug #306: infinite recursion that occurred when calling
212 yaz_log_level_init as the first call (before other log level or
213 nmem_init calls)
214
215 Fixed bug in scan handling in front end server: if preferred-Position-In-
216 Response was non-present, a NULL pointer referece was performed.
217
218 --- 2.1.4 2005/04/26 
219
220 Changed include/yaz/diagbib1.h and added include/yaz/diagsrw.h with
221 diagnostic messages+codes for Bib-1 and SRW. Preprocessor defines are
222 now defined for all those error codes. So instead of putting 109 in
223 your program you'd use YAZ_BIB1_DATABASE_UNAVAILABLE. The messages
224 are generated from a .csv - file. See src/bib1.csv and srw/srw.csv.
225
226 Modified the yaz-marcdump utility to skip garbage bytes between MARC
227 records in a file.
228
229 Fixed bug - uninitialized memory - due to bad code for fix of bug #272.
230
231 Program yaz-client now exits and produces an error message if multiple
232 Z39.50 servers are specified on the command line (none or one allowed
233 only).
234
235 Program yaz-marcdump skips garbage bytes between ISO2709 records rather
236 than abort.
237
238 --- 2.1.2 2005/03/16 
239
240 Fixed bug #273: Update for recent MARC-8 -> UNICODE changes. 
241
242 Fixed bug #272: Preserve spacing for CCL terms.
243
244 --- 2.1.0 2005/03/14 
245
246 Added support for virtual hosts and multiple backend servers for
247 the YAZ frontend server. The configution is XML based and
248 support specificition of CQL to RPN mappings and explain information.
249 See section "Virtual Hosts" in the YAZ manual.
250
251 Extended OPAC display utility. OPAC display utility renders
252 bibliographic (MARC) record as well. Added yaz_opac_decode_wrbuf
253 to supplement yaz_marc_decode_wrbuf.
254
255 Fixed a bug in MARC decoder that could caused it to crash for some
256 invalid MARC records. More diagnostics and warnings where added in
257 XML output (warnings, etc are stored in comments).
258
259 --- 2.0.34 2005/02/08 
260
261 Fixes for UNIX domain sockets. Bug #261.
262
263 Fixes for MARC-8 to UTF-8 conversion. Bugs #258 and #260.
264
265 Fixed bug #263: YAZ MARCXML dump shows extra spaces after control fields.
266 Added yaz_marc_subfield_str which defines subfield lead string which is
267 used in YAZ_MARC_LINE format. Default string is blank+$. Added
268 yaz_marc_endline_str which defines end of fields string used in
269 YAZ_MARC_LINE format. Default string is newline.
270
271 Experimental support for MarcXChange. This format can be produced
272 by yaz-marcdump and is implemented in yaz_marc_decode - functions.
273  http://www.bs.dk/standards/MarcXchange.xsd
274
275 Added yaz-client commands scansize that sets maximum number of
276 entries to be returned by scan.
277
278 --- 2.0.32 2005/01/11 
279
280 Added support for SRW scan in yaz-client and Generic Frontend Server.
281
282 * Added whereInList member to SRW Scan Term.
283
284 * Changed Z_SRW_scanRequest to be able to carry both CCL and PQF.
285
286 Fixed NMEM system to return aligned blocks on the smallest boundaries
287 that are suitably aligned for all possible types on the particular
288 architecture YAZ is being built for.
289
290 --- 2.0.30 2005/01/04 
291
292 Fixed numerious warnings that was issued with newer versions of GCC.
293
294 Fixed NMEM system to return aligned blocks on 8 byte boundaries rather
295 than 4 bytes, since 4 may not be enough on some systems such as GCC 3.4.3
296 on Solaris.
297
298 Make YAZ Generic Frontend Server slightly faster.
299
300 Enhance (and reduce) logging for Generic Frontend Server.
301
302 Revert YAZ log system so that it flushes every write operation
303 by default. (YAZ 2.0.26 and earlier verisons did that). Bug #240.
304
305 Modified the YAZ logging system. The LOG level defines use YLOG_ prefix
306 instead of LOG_, due to name clash with syslog(3). LOG_ are still
307 present. New applications should define YAZ_USE_NEW_LOG=1 - this
308 will effectively disable old definitions.
309
310 --- 2.0.28 2004/11/09 
311
312 Added yaz_log_time_format which specifies log format using
313 strftime(3).
314
315 Added yaz_log_module_level which returns mask for a module. Value
316 is non-zero mask a if module is enabled; zero if disabled.
317
318 * Fixed bug #148: CQL parser may leak. A few prototypes were changed
319 in include/yaz/cql.h.
320
321 Fixed bug #176: Dont throw diagnostics on empty SRU args.
322
323 Fixed bug #175: surrogate diagnostics in SRW lacking NS.
324
325 Fixed bug #172: RPM builds does not enable SSL.
326
327 Doxyfile.in part of dist. Doxyfile generated by configure.
328
329 Configure aborts if any of --with-xml2, --with-openssl, --enable-tcpd 
330 are given and the corresponding component does not exist.
331
332 Extend CCL documentation in YAZ reference. Describe r=r.
333
334 --- 2.0.26 2004/10/01
335
336 Fixed MARC->MARCXML conversion to properly deal with
337 fields, subfields, indicators having non-ASCII characters.
338
339 Fixed MARC->MARCXML conversion so that ASCII control characters
340 except TAB,CR,LF are removed from resulting XML (XML 1.0 does not
341 support these).
342
343 Added YAZ GFS support for conversion from Z39.50 surrogate
344 diagnostics to SRW surrogate diagnostics.
345
346 Bug fix: YAZ GFS did not return schema in explainResponse.
347
348 --- 2.0.25 2004/09/30
349
350 The YAZ GFS when converting SRW/SRU requests to Z39.50 structures
351 now converts recordSchema to elementSetName as well as schema URI.
352
353 Fixed bug in COMSTACK that prevented HTTP request packages from being
354 decoded properly.
355
356 --- 2.0.24 2004/09/29
357
358 Added CCL facility r=r "range" which is similar to r=o "ordered" but
359 does not require white-space before and after the dash in a range, e.g.
360 x=-1990 is equivalent to x <= 1990 iff r=r, but equivalent to x= -1980
361 iff r=o.
362
363 Fixed a few AC_TRY_LINK configure tests that did not operate properly
364 due to new GCC removing "redundant" code.
365
366 Added yaz-client commands scanpos and scanstep that sets preferred
367 position and step-size for scan.
368
369 Macro YAZ_INIT in yaz.m4: option --with-yazconfig renamed to --with-yaz.
370
371 Added CCL utility ccl_qual_buf which parses one or more CCL 
372 spec lines in a buffer.
373
374 Added CCL utility ccl_qual_line which adds CCL qualifier line consisting
375 of name and value - ignoring empty lines and comments.
376
377 On Windows, the debug DLL/import lib is now named yazd.{dll,lib}.
378
379 Added odr_get_element_path which returns current element path for an
380 ODR handle. This utility is useful in error handling or user-defined
381 ODR_PRINT stream.
382
383 Added ODR_PRINT utility odr_set_stream which is is a more generic
384 alternative to odr_setprint. odr_set_stream takes a stream handle, pointer
385 to a write function and pointer to close function. The close function - if
386 non-NULL - will be called during odr_destroy.
387
388 Fixed bug in CCL parser where truncation char was not removed from
389 right side when truncation=both was in effect.
390
391 Fixed CQL parser to use unsigned chars for isxxx from ctype.h due
392 to VS.NET.
393
394 --- 2.0.23 2004/08/11
395
396 Fix buffer overrun in CQL parser when dealing with proximity (%).
397
398 Fixes for MARC-8 in yaz_iconv character set utilies. The MARC-8
399 to UTF-8/UCS conversion is now only based on codetables.xml.
400
401 yaz_marc_decode_buf sets leader pos 9 to "a" for MARCXML output.
402
403 --- 2.0.22 2004/08/06
404
405 Add support for more "commit changes" in ZOOM (uses Extended Services).
406
407 For yaz-client, command set_marcdump <file> / -m <file> dumps SUTRS/XML/..
408 records as well.
409
410 Yet another small fix for configure of SSL.
411
412 --- 2.0.21 2004/05/14
413
414 Fix SSL libs for configure when --with-openssl=DIR is given.  
415
416 --- 2.0.20 2004/05/10
417
418 Add autoconf m4 macro YAZ_DOC for YAZ documentation setup (docbook).
419
420 SSL comstack now uses yaz.pem certificate file on server side
421 by default. Certificate filename can be configured by calling
422 comstack function cs_set_ssl_certificate_file before cs_bind is used.
423
424 Fix bug regarding multiple calls to ZOOM_connection_connect.
425
426 Implement cs_set_ssl_ctx which sets SSL_CTX for SSL comstack.
427
428 Do not create SSL_CTX in cs_create (ssl_type). Create in tcpip_bind,
429 tcpip_rcvconnect instead. This allows user to set custom SSL_CTX.
430
431 ZOOM now allows inspection of X509 peer certificate for verification.
432 The X509 buffer is retrived by reading ZOOM option "sslPeerCert".
433
434 Removed libyazssl.la. When SSL is enabled, libyaz.la has SSL support and
435 all programs have too (yaz-ztest, yaz-client, zoom..). May not be
436 as "modular" but it simplifies things.
437
438 Added cs_get_peer_certificate to that returns peer X509 PEM.
439
440 Added cs_get_ssl that returns SSL handle (SSL *) for SSL comstack; returns
441 NULL if SSL is unavailable.
442
443 Documentation about MARC decoding tools.
444
445 Fix --disable-tcpd to really disable tcpd. Patch by Robin H. Johnson.
446
447 --- 2.0.19 2004/03/30
448
449 Rename CHANGELOG to NEWS to follow GNU style packing.
450
451 Fix bug with missing initialization of member in init_diagnostics.
452 This bug affects threaded version of GFS server.
453
454 --- 2.0.18 2004/03/20
455
456 Use wrbuf_xmlputs_n instead of wrbuf_write_cdata to avoid clash with
457 Zebra symbol.
458
459 Ensure zlib.dll is packed with Windows install.
460
461 --- 2.0.17 2004/03/17
462
463 Fix encoding of xsd:string to use text instead of CDATA.
464
465 Fix endless loop in CQL parser with unbalanced ".
466
467 Use a more compact way to store MARC-8 conversion tables.
468
469 --- 2.0.16 2004/03/16 Debian only
470
471 Oleg Kolobov Fixed a bug in yaz_iconv regarding conversion to
472 UCS4 / UCS4LE.
473
474 Update CQL parser to use new CQL 1.1 modifiers for booleans and
475 relations.
476
477 Add CQL test cases.
478
479 --- 2.0.15 2004/03/01
480
481 Another fix for decoding of XML packed records.
482
483 --- 2.0.14 2004/02/25
484
485 Fixes for Chunked encoding. White space not ignored after length spec.
486
487 Update NS and use default NS for SRW diagnostic elements.
488
489 --- 2.0.13 2004/02/23
490
491 Implement ZOOM_resultset_cache_reset which resets record cache.
492
493 Implement ZOOM_resultset_sort which sorts a result set.
494
495 Implement chunked HTTP transfer.
496
497 For SSL, use -lssl -lcrypto on systems that don't have pkg-config.
498
499 --- 2.0.12 2004/02/16
500
501 Added member 'schema' to bend_explain_rr structure so that backend
502 can specify explain record identifier. Defaults to Zeerex 2.0.
503
504 Fix encoding of OID's of form 1.0.X. Bug introduced in 2.0.11.
505
506 --- 2.0.11 2004/02/16
507
508 * SRW/SRU 1.1 updates: updated diagnostic in srw.h to use uri instead
509 of code.
510
511 Added init command for yaz-client which sends "extra" init request.
512
513 Fixed two bugs in OID codec - ber_oidc. Throw error when encoding/decoding
514 bad truncated OID. Fix decoding of OID X.Y... when X=2 and Y>39.
515
516 Fixed a bug in ASN.1 compiler that caused Type-1 Operator codec to fail.
517
518 Make ZOOM error code for "invalid query".
519
520 Fixed compilation for SSL which wasn't properly enabled for all platforms.
521
522 --- 2.0.10 2004/02/05 
523
524 For yaz.m4, allow second argument for YAZ_INIT to hold minimal version of
525 YAZ required.
526
527 * SRW/SRU 1.1 updates. Diagnostic code now a URI.
528
529 Added option -p <file> to make Generic Frontend Server to write PID file.
530
531 Added option -D to put Generic Frontend Server in background on its own.
532
533 Make ZOOM C recognize option "password". If unset, "pass" is used
534 (for backwards compatibility).
535
536 Fixed a bug in Generic Frontend Server that could make it crash if a
537 client sets characterSetNegotation bit, but didn't pass negotiation stuff
538 in InitRequest.
539
540 New YAZ client command, zversion, that sets Z39.50 version (1,2,3..).
541 Must be issued before open, in order to be in effect.
542
543 --- 2.0.9-6 2004/01/12  Debian/Windows
544
545 Make the SRU server more picky WRT unknown params, etc.
546
547 Bug fix: ZOOM scan response didn't return displayTerm - when present.
548
549 New YAZ client command, options, that sets Z39.50 options.
550
551 New utility functions yaz_init_opt_{encode,decode} to encode/decode Z39.50
552 options from a string of tokens (one token for each option bit).
553
554 Update SRW diagnostic code messages.
555
556 --- 2.0.9-5 2004/01/07  Debian/Windows
557
558 Handle user defined stylesheet for SRW/SRU.
559
560 --- 2.0.9-4 2004/01/06  Debian/Windows
561
562 Fix bug in decoding of Content-Length.
563
564 --- 2.0.9-3 2004/01/06  Debian/Windows
565
566 Fix a bug with decoding of XML packed records.
567
568 --- 2.0.9-2 2004/01/05  Debian only
569
570 Allow empty ODR (NMEM=0) for odr_oiddup and odr_getoidbystr.
571
572 Fix bug in SRW/SRU diagnostics decoding.
573
574 --- 2.0.9 2004/01/05
575
576 Fixed bug in Generic Frontend Server which could drop records exceeding
577 preferred message size. Reported and fixed by Irina Dijour.
578
579 Fixed calculation of package size for structured records in Generic
580 Frontend Server. Reported and fixed by Irina Dijour.
581
582 Fixed namespace for SRW/SRU diagnostics.
583
584 Fixed SEGV in yaz-client that occured for HTTP connection errors.
585
586 --- 2.0.8 2003/12/22
587
588 * SRW/SRU 1.1. Since the Namespace has changed for SRW/SRU, it means that
589 this version is incompatible with version 1.0 and older YAZ SRW/SRU
590 implementations.
591
592 CQL changes to reflect recent changes to the specification:
593 * Documentation talks about context sets instead of index sets.
594 * Documentation talks about indexes instead of qualifiers.
595 * The CQL-to-PQF transformer's configuration file now uses
596         "index.set.name = <attributes>" instead of the old form
597         "qualifier.set.name = <attributes>".  (Both forms are still
598         understood but the latter is deprecated.)
599 * CQL terms with no explicit index specified are now interpreted as
600         cql.serverChoice instead of srw.serverChoice (which of course
601         behaves exactly the same.)
602
603 --- 2.0.7 2003/12/16
604
605 MARC conversion can now generate ISO2709 output in another
606 character set. yaz-marcdump uses this facility if you invoke it
607 with option -O.
608
609 Added missing C decl macros for include/yaz/{soap.h,srw.h,cql.h}, so that
610 functions from there can be used from C++.
611
612 --- 2.0.6 2003/12/04
613
614 Frontend server now transfers memory from decoded packages to stream
615 ODR for search.
616
617 NMEM now clears freed blocks with 'Y' (hex 59) to force bad memory
618 references to show up. 
619
620 ZOOM-C now supports standard ZOOM option names as described in v1.4 of
621 the ZOOM Abstract API.  The older names for the same options are still
622 also supported for the benefit of old applications.
623
624 ZOOM-C supports "implementationId" and "implementationVersion" options
625 to go along with "implementationName".  These allow the user code to
626 specify identification strings to be sent to servers.
627 Add OID for the new ExtLite attribute set.
628
629 Add OIDs for NACSIS-CATP, FINMARC2000 and MARC21-fin record-syntaxes,
630  as requested/supplid by Ere Maijala <ere@atp.fi>
631
632 For generic frontend server, reverse the order of
633 "toolkit-supplied / application-supplied" strings sent as implementationId,
634 Name and Version.  Also, remove the spaces around the slash.  This brings
635 the GFS in line with the behaviour of ZOOM-C on the client side.
636
637 Add function ZOOM_scanset_display_term.
638
639 yaz-client shows scan displayTerm if present.
640
641 Utility yaz-iconv is now installed by default along with the man page 
642 yaz-iconv.1.
643
644 Extend configure check for OpenSSL to use pkg-config where available (such
645 as RedHat 9).
646
647 Incorporate patch by Morten Bogeskov which allows a Unix file socket
648 server to specify uid/gid/mask for socket using the format
649  unix:[user=uid,][group=gid,][umask=mask,]file=path
650 If file= is omitted the existing format is assumed, e.g.
651  unix:path
652 in which case the mask is 0666 (rw for everybody).
653
654 Major restructure of YAZ source. All source in libyaz is in src directory.
655 Programs in client (yaz-client), ztest (yaz-ztest), zoom (zoom programs),
656 util (utility programs such as ASN.1 compiler, yaz-marcdump). 
657
658 Added man page for utility yaz-marcdump (used to be called marcdump).
659 yaz-marcdump is installed by 'make install'.
660
661 Fixed a memory leak in Generic Frontend Server that occurred when decoding
662 of incoming package failed.
663
664 Fixed a potential DOS attack vulnerability in COMSTACK/ODR.
665
666 Change prototype of odr_perror: add const to message string.
667
668 New function yaz_log_reopen which reopens log file (for log rotate, etc.)
669
670 * Blocking parameter for COMSTACK cs_create is now a bit mask rather
671 than a blocking flag. Bit 0 is set for blocking, reset for non-blocking.
672 Bit 1 is set if cs_addrstr should avoid DNS lookup; reset for full
673 DNS lookup. There should not be any compatibility problems with this
674 assuming that blocking=1 or 0 is used.
675
676 Fix bad reference in UNIX comstack in function cs_addrstr.
677
678 Fix for compilation on AIX.
679
680 The generic front-end server (server/seshigh.c) now supports returning
681 Init diagnostics to the client in User-information-field, in
682 accordance with Z35.90 Implementor Agreement 5 (Returning diagnostics
683 in an InitResponse)
684
685 --- 2.0.4 2003/09/04
686
687 Allow any CQL relation (not just all,any,exact,scr).
688
689 Fixes for OCLC UI ASN.1 to make it work with SilverPlatter targets
690 that features the same UI.
691
692 Implemented command update0 in YAZ client which is equivalent to
693 update but uses old of Ext Update ASN.1.
694
695 Use OID 1.2.840.10003.15.1000.81.1 for privately defined charsets
696 in charset negotiation. Added VAL_ID_CHARSET in oid.h.
697 Previously no OID was used for this info.
698
699 ZOOM uses smallSetUpperBound=1 instead of 0 for piggyback searches.
700 It apparantely upsets EBSCO Publishing IR Z39.50 Server which
701 returns 'malformed search term' otherwise.
702
703 SortResponse member resultCount now set to NULL in sort handler of
704 frontend server.
705
706 OPAC support ZOOM. ZOOM_record_get returns OPAC info (as XML) if
707 type is "opac".
708
709 Add three new utility functions for translating OIDs between various
710 formats -- symbolic name such as "Usmarc", minus-1-terminated int
711 arrays and dotted strings such as "1.2.840.10003.9.5.1":
712  int *oid_name_to_oid(oid_class oclass, const char *name, int *oid);
713  char *oid_to_dotstring(const int *oid, char *oidbuf);
714  char *oid_name_to_dotstring(oid_class oclass, const char *name, char *oidbuf);
715
716 Reverted modifications for ES Update definition for z_IU0Update 
717 (OID 1.2.840.10003.9.5.1 and 1.2.840.10003.9.5). The definition
718 is back to YAZ 2.0.2.
719
720 String value attributes for CCL parser.
721
722 Support for OCLC's locally registered "OCLC-UserInformation" PDU,
723 which their FirstSearch server returns in Init responses, sometimes
724 carrying useful diagnostic information when Init fails.  This has the
725 OID 1.2.840.10003.10.1000.17.1 and is defined in the file
726 "z39.50/oclcui.asn", where its definition is somewhat different from
727 what OCLC document on their web-site, as required to interoperate with
728 their servers.
729
730 Support for anonymous authentication in yaz-client.  Use the command
731 "auth -".
732
733 * Fix the OID of the Index Data-local "admin" Extended Service from 
734   1.2.840.10003.9.81.1 to 1.2.840.10003.9.1000.81.1.  The omission of
735   the 1000, which indicates a locally-defined OID, was a mistake.
736
737 --- 2.0.3 2003/06/20
738
739 Fix CCL directive @case handling so that it affects string match for
740 both CCL keywords and qualifiers.
741
742 * ESFormat-Update updates. Packages with OID 1.2.840.10003.9.5.1 and
743 1.2.840.10003.9.5 are now handled by the same decoder z_IU0Update .
744 Decoder has been updated with ASN.1 changes as listed in
745 http://lcweb.loc.gov/z3950/agency/defns/updateES.html
746 Note that the "latest" DB Update, OID 1.2.840.10003.9.5.1.1 , handler
747 z_IUUpdate, remains unchanged. 
748
749 ZOOM_record_get may now return a record in a specific character set.
750 For type use "form; charset=from[,to]" where form (render, xml, ..) ,
751 "from" is the character set of record as returned by target. "to" is
752 the character set to be returned. If omitted, "to" is UTF-8.
753
754 YAZ ASN.1 compiler renamed from yaz-comp to yaz-asncomp
755
756 New ODR utility, odr_getelement, which returns name of element for
757 which encoding/decoding failed.
758
759 Fixed ODR so that it returns error code OREQUIRED rather than ONONE
760 in cases where a required element was omitted.
761
762 Bug fix: some MARC8 sequences were not converted.
763
764 New ZOOM option "step" which specifies number of records to be
765 retrieved in one chunk. Used in conjunction with "start" and "count".
766
767 SRW support for yaz-client. Use scheme http: to use it, e.g.
768  http://host:port/db
769
770 yaz-client no longer does (un)intelligent character set conversions
771 by default. Can be enabled with charset and marc_charset commands.
772
773 xmalloc trace fix for 64-bit systems such as DEC alpha. 
774
775 Solaris 2.6 compile fix.
776
777 New function, cql_strerror() translates SRW error codes, as returned
778 by cql_transform_error(), into human-readable English strings.  Used
779 in yaz-client diagnostics when appropriate.
780
781 New CQL2RPN query-type for the command-line yaz-client, parses CQL and
782 converts it into a type-1 query which is sent to the server.  This
783 makes CQL available for use with all Z-servers, as opposed to the tiny
784 minority that can handle CQL queries themselves.
785
786 --- 2.0.2 2003/04/28
787
788 New Debian package layout similar to the Redhat Package layout.
789
790 New ZOOM events ZOOM_EVENT_RECV_{RECORD,SEARCH} for receiving a record
791 and search result respectively.
792
793 --- 2.0.1 2003/04/25
794
795 Redhat package is now several packages: libyaz (runtime libraries),
796 libyaz-devel (development and documentation, and yaz (utility programs).
797 Package spec file by Morten Bøgeskov.
798
799 New member 'schema' in struct bend_fetch_rr which the name of requested
800 schema (SRW/SRU) for record (or NULL if none was given). The fetch
801 handler MAY set this to reflect the schema of the returned record.
802
803 New member 'display_term' in struct scan_entry. GFS now sets member entries
804 and allocates scan entries to be filled by user scan handler. In previous
805 version, entries member was allocated by the scan handler. That still works,
806 but the GFS will ignore member display_term - assuming it was NOT set by
807 the handler. The fact that the GFS now allocates the entries both allows
808 for new members and makes a scan handler easier to write.
809
810 Fix CQL lex buffer overflow.
811
812 SRW/SRU recordPacking. For SRW default recordPacking is string. For
813 SRU default recordPacking is string.
814
815 SRU protocol support for frontend server.
816
817 Fix compile bug for systems that have nl_langinfo but CODESET undefined.
818
819 Added missing PQF transform rules for <= and >= . Thanks to Peter Popovics.
820
821 Added scan for the ZOOM shell (zoomsh).
822
823 --- 2.0 2003/02/23
824
825 * String Identifers for Schemas (Amendment 5).
826 http://lcweb.loc.gov/z3950/agency/amend/am5.html
827 Old definition for schema
828   Odr_oid *schema; /* OPT */
829 New:
830   int which;
831   union {
832      Odr_oid *oid;
833      Z_InternationalString *uri;
834   #define Z_Schema_oid 1
835   #define Z_Schema_uri 2
836   } schema; /* OPT */
837
838 * resultCount parameter to Sort Response (Amendment 1).
839 http://lcweb.loc.gov/z3950/agency/amend/am1.html
840
841 Support for SRW 1.0 over HTTP. This is an optional feature and
842 requires libxml2 to operate. Enable SOAP by specifying --with-xml2
843 for configure.
844
845 Generic frontend server supports HTTP/SOAP/SRW and Z39.50/BER
846 on the same port.  SRW SearchRetrieveRequests are mapped
847 to bend_init,bend_search,bend_fetch,bend_close. 
848
849 Z39.50 Query Type-104 added - to facilitate CQL within Z39.50.
850
851 CQL support. Source is directory 'cql'. CQL is supported in ZOOM
852 (both SRW and Z39.50) and the YAZ client (Z39.50 only).
853
854 ZOOM connections are SRW based if schem http is used for hostname
855 in connect, e.g.  z = ZOOM_connection_new("http://myserver");
856 ZOOM_query may be of type CQL, e.g. ZOOM_query_cql(q, "dc.title=x");
857
858 CCL proximity operators !n, %n converts to PQF @prox 0 n 1 2 k 2
859 and @prox 0 n 0 1 k 2 respectively, meaning: exlusion=false,
860 distance=n, order=true/false, relation=le, prox unit=word. If
861 n is omitted, distance 1 is used.
862
863 Fixed problem with C compiler include path in wrong order.
864
865 For TCP/IP COMSTACK, set recv buffer to an appropriate "large" value
866 on Solaris. Patch from Ko van der Sloot.
867
868 New MARC decode API. All new functions operate on a yaz_marc_t
869 handle. The most important new functions are: yaz_marc_create,
870 yaz_marc_decode_{buf,wrbuf}, yaz_marc_destroy, .. to create handler,
871 decode and destroy respectively. Decoder can produce formats
872 MARC line, simple XML, OAI MARC and MARC XML (LoC). See
873 include/yaz/marcdisp.h.
874
875 YAZ Iconv utility now supports MARC8 decoding (marc8.c). Converts
876 to UTF-8, UCS-32, wchar_t or Latin-1.
877
878 * Prototypes for yaz_iconv_-functions moved to separate header 
879 include/yaz/yaz-iconv.h.
880
881 Make a few private functions 'static' in unix.c. This prevents
882 duplicate unix_close in PHP with YAZ and imap. PHP Bug 20977.
883
884 For ZOOM connection, the options targetImplementation{Id,Name,Version}
885 are set when Init Response is received.
886
887 New function ZOOM_connection_error_x similar to ZOOM_connection_error
888 but returns diagnostic set as well.
889
890 New function yaz_strerror which is a portable wrapper for
891 strerror/strerror_r/GetLastMessage.
892
893 * ZOOM_record_get supports type "xml" in which case MARC XML (from LOC)
894 is returned for MARC. If type is "oai", then OAI MARC is returned.
895
896 Fix creation of lib/yaz-config so it works if srcdir != objdir. Patch
897 from Kang-Jin Lee.
898
899 --- 1.9.2 2002/11/26
900
901 yaz_marc_decode uses OAI MARC as XML format for ISO2709 records.
902
903 Fix bad race conditions on SIGTERM and terminate gracefully in
904 frontend server.
905
906 Move retrieval (data1) module to Zebra since nobody seems to be
907 using it.
908
909 Add GRS-1 render for ZOOM using same format as yaz-client.
910
911 --- 1.9.1 2002/10/05
912
913 Added man pages: yaz-client(1), yaz-ztest(8), yaz(7), zoomsh(1).
914
915 Fix broken ESpec handling in data1 module.
916
917 SGML reader parses comments and makes them part of the data1 tree.
918
919 Added several type casts so that YAZ compiles as C++ code.
920
921 ZOOM didn't handle PDU encoding failures properly.
922
923 Added more Bib-1 diagnostics (approved extensions).
924
925 GNU configure: better check for iconv.
926
927 More portable use of accept, getpeername. Check for socklen_t. Use
928 int/size_t if socklen_t is not defined.
929
930 --- 1.9 2002/09/06
931
932 PQF parser rejects bad queries - including those with extra
933 characters in them. PQF parser used to silently ignore that.
934 Cleaner API for PQF added, which allows you to get detailed
935 error information for bad queries (see yaz/pquery.h).
936
937 Fixed bug in ZOOM_record_get for type "database".
938
939 Implemented mini iconv library supporting conversions between
940 UTF-8, UCS4, UCS4LE and ISO-8859-1. Implemented in util/siconv.c.
941
942 * Removed XML reader (d1_expat.c). It's part of Zebra instead.
943
944 --- 1.8.9 2002/08/20
945
946 Fixed ZOOM C record cache so that preferredRecordSyntax and
947 elementSetName is used to check for already fetched records.
948
949 --- 1.8.8 2002/08/02
950
951 Added three members in bend_initrequest structure to facilitate
952 character set negotiation.
953
954 Fixed a bug in frontend server that could cause indefinite
955 loops under rare conditions. 
956
957 Revised character set utilities (charneg.h) so that encoding
958 UCS-4, UCSA-4, UTF-16 and UTF-8 are encoded non-privately.
959
960 For PQF, directive @term <type> sets term type for Scan/Search.
961 Here <type> is general, string, numeric, null. The term type
962 is inherited - just like @attr.
963
964 New call odr_set_charset that sets character set conversion for
965 international-strings on a ODR stream. Prototype is:
966  int odr_set_charset(ODR o, const char *to, const char *from);
967 The InternationalString is still represented as C string in YAZ 
968 so native strings of type UTF-8, ASCII, etc. will work (UTF-16
969 won't). On the protocol level, you can use any encoding.
970
971 Support for UNIX sockets in ZOOM.
972
973 Solaris recv sometimes returns errno == ENOENT. It is treated as
974 EINPROGRESS. COMSTACK patch by Ko van der Sloot.
975
976 New COMSTACK of type UNIX Socket. Use "unix:/path" as address for
977 both client and server. Code by Morten Bøgeskov.
978
979 --- 1.8.7 2002/05/22
980
981 On Windows ZOOM functions are of type __stdcall rather than __cdecl, so
982 that they can be used directly from Visual Basic. You must recompile
983 your windows APP if you're using ZOOM.
984
985 Character Set and Language Negotiation(3) for ZOOM API and YAZ client.
986 Commands "lang" and "charset" sets language and character set respectively.
987 Options "lang" and "charset" is interpreted by the ZOOM API. Note, these
988 are not part of the official ZOOM spec) All is due to Oleg Kolobov. 
989
990 Attributes from multiple CCL fields may be OR'ed rather than merged
991 using directive "@field or". Fields are still merged by default -
992 equivalent to "@field merge".
993
994 Fixed bug in ZOOM connect that occurred on OpenBSD (maybe others). Patch
995 by Oleg Kolobov.
996
997 Fixed bug in zget for parameter ExtendedServicesResponse.
998
999 Fix OID for ILL.
1000
1001 --- 1.8.6 2002/03/25
1002
1003 Added PQF feature: '@attr type=value' may be written as '@type=value'.
1004
1005 Client displays USR.1:SearchResult-1 (hits per term).
1006
1007 Additional Search Info for search in Generic Frontend Server.
1008
1009 Fixed CCL parsing of "field=s".
1010
1011 WIN32 installer - using the excellent NSIS software from nullsoft.
1012
1013 Fixed CCL parsing of "field = - <number>".
1014
1015 Added function yaz_marc_decode that decodes MARC for line mode
1016 display or XML (similar to that used by JZKit).
1017
1018 Fixed BER decoding of OPTIONAL CHOICE. The bug didn't affect the
1019 Z39.50. But ISO/ILL was, however.
1020
1021 Added patch by Rustam T. Usmanov that implements Z39.50 duplicate
1022 detection service (Z39.50-1995 Amendment 2) and Language Negotiation (3).
1023 See:
1024  http://lcweb.loc.gov/z3950/agency/amend/am2.html
1025  http://lcweb.loc.gov/z3950/agency/defns/charneg-3.html
1026
1027 --- 1.8.5 2002/02/03
1028
1029 New YAZ client features: Command completion and new commands:
1030 push_command, set_apdufile, set_marcdump, set_cclfields, register_oid.
1031 Code provided by Jacob Poulsen.
1032
1033 New call oid_trav, that visits all registered OIDs via callback.
1034
1035 Function ZOOM_record_get now returns const char pointer rather than
1036 void pointer. It saves a lot of type casts.
1037
1038 For YAZ client, command "auth" now allows you to set authentication
1039 in IdPass style. It is enabled when three tokens are given - order
1040 is user, group and password.
1041
1042 Fix memory leaks in MARC record handling for ZOOM.
1043
1044 New option for YAZ client, -k <kilobytes> that sets
1045 maximum record size. Similar to -k option for generic frontend
1046 server and yaz-ztest.
1047
1048 More fixes for scan. Non-zero stepSize handled. OID's fixes.
1049
1050 Prefix query parser reports "fail" when bad attribute set is given.
1051
1052 Fix in MARC decoder. Proximity logging. Fix for attribute set
1053 in scan handler for server. Patches by Shigeru Ishida.
1054
1055 SSL/COMSTACK updates. cs_rcvconnect completes SSL handshake. ZOOM
1056 works with SSL.
1057
1058 Configure option --with-openssl=<dir> now works when a directory is
1059 specified. Patch provided by Morten Bøgeskov.
1060
1061 New option for YAZ client, -u <auth>, that sets authentication.
1062
1063 ZOOM fix: error information was sometimes "missing", since error
1064 was cleared/reset too when it shouldn't.
1065
1066 ZOOM_record_get returns ISO2709 buffer when "raw" is given.
1067
1068 --- 1.8.4 2002/01/04
1069
1070 Scan for ZOOM API. New object ZOOM_scanset. New functions
1071 ZOOM_connection_scan, ZOOM_scanset_size, ZOOM_scanset_term and
1072 ZOOM_scanset_destroy.
1073
1074 New ZOOM function, ZOOM_connection_last_event, that returns type
1075 of last event (such as "receive data", "send data", "apdu received",
1076 etc.
1077
1078 New ZOOM option, schema, that specifies schema for retrieval.
1079
1080 New CCL feature. Qualifiers can be aliases for one or more
1081 other qualifiers (if more than one is given, OR is used).
1082
1083 ZOOM uses named result sets if target supports it.
1084
1085 Two new YAZ client commands: .  (dot, which sources a script of YAZ
1086 client commands), and ! (to execute shell command.). Implemented
1087 by Jacob Poulsen.
1088
1089 Working on Debian packages.
1090
1091 --- 1.8.3 2001/11/19
1092
1093 YAZ client enables named result sets only if target supports it.
1094
1095 *** ZOOM. Prefix for ZOOM definitions changed from Z3950_ to ZOOM_.
1096
1097 * ZOOM. Removed Z3950_connection_host. Use Z3950_connection_option_get
1098 with key="host" to get same result.
1099
1100 * ZOOM. Added Z3950_record_clone and removed Z3950_resultset_get.
1101 Function Z3950_resultset_record(s) returns references to records
1102 "owned" by resultset. To become owner use Z3950_record_clone.
1103
1104 Function z_ext_record handles Extended Services. Thanks to
1105 Irina Dijour.
1106
1107 --- 1.8.2 2001/11/12
1108
1109 CCL Parser fix: ignore token comma when dealing with and-lists.
1110
1111 Documentation updates for COMSTACK.
1112
1113 * ZOOM changes. Query object renamed from Z3950_search to Z3950_query.
1114 Changed prototype Z3950_records. For some functions, int parameters
1115 were changed to size_t.
1116
1117 TCP/IP COMSTACK no longer uses getprotobyname to avoid memory leak
1118 on some Unices.
1119
1120 New MARC decode/display function, marc_display_exl, which properly rejects
1121 non-ISO2709 records. YAZ client uses it.
1122
1123 --- 1.8.1 2001/10/29
1124
1125 Fix bug: local attribute set wasn't set correctly in PQF strings.
1126
1127 --- 1.8 2001/10/25
1128
1129 * Old Z39.50 codecs no longer supported. 
1130
1131 Added ZOOM C binding. See http://zoom.z3950.org/
1132
1133 Renamed states for COMSTACKs to avoid confusion with events.
1134
1135 Implemented cs_look and proper cs_rcvconnect.
1136
1137 Fixed COMSTACK error that occurred on HPUX. Fix by Giannis Kosmas.
1138
1139 Configure detects POSIX threads on OpenBSD.
1140
1141 When sort flag 'i' was specified in yaz-client the caseSensitivy flag
1142 was set to a wrong value.  Thanks to Robert Sanderson for reporting this.
1143
1144 When error is returned from present handler, non-surrogate diagnostic
1145 is returned in present response (and fetch handler is no longer called).
1146
1147 * Minor adjustments to pquery parser (PQF). Token characters may be
1148 escaped by using backslash (C-style).
1149
1150 PQF parser allows string attribute values to be specified. For @attr,
1151 non-numeric characters after the equal-sign are treated as strings
1152 (e.g. @attr 9=title).
1153
1154 CCL trunction character may be defined (@truncation in file)
1155
1156 * function zget_ExtendedServicesRequest sets waitAction to
1157   waitIfPossible (was wait).
1158
1159 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
1160 to Matthew Carey.
1161
1162 CCL operator names may be set in field definition files (CCL_bibset).
1163 See ccl/bib1 for an example.
1164
1165 Fixes in ASN.1 compiler for C++ compatibility.
1166
1167 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
1168 and "op_or" to avoid conflict with C++.
1169
1170 Fixed problem with GNU readline detection on Redhat 7.0.
1171
1172 Added step-size for Scan backend handler.
1173
1174 Fixed bug that made the frontend server crash when no attribute
1175 set was specified for scan.
1176
1177 Front-end server automatically switches to original working directory
1178 when installed as an NT service. Previously -w had to be specified to
1179 make it work.
1180
1181 Added extended attributes for retrieval module (data1), so that data1
1182 records carry d1_readXML/SGML attributes. d1_read also supports
1183 null-data rules ( <tag/>)
1184
1185 On UNIX when POSIX threads are available, a separate library libyazthread
1186 is created. Programmers should link with that library and the yaz library
1187 when using threads. The reason for the split was that some applications
1188 on Linux, such as Apache, doesn't work well when using shared objects that
1189 relies on threads.
1190
1191 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
1192 (or any frontend server) in SSL mode by specifying ssl: followed by
1193 address. Only tested on UNIX.
1194
1195 Added feature for CCL module. Virtual structure s=al or s=ol generates
1196 and-list and or-list respectively instead of phrase search.
1197
1198 Added some OID's.
1199
1200 * Added prefix "yaz_" for the functions log_init.., log_file..  and
1201 log_mask_str. This was done to avoid name conflicts with other libraries
1202 (such as other PHP extensions).
1203
1204 Added raw OID member for preferred record syntax (request_format_raw)
1205 and returned record syntax (output_format_raw) for backend fetch method.
1206
1207 Config file yaz-config now accepts options so that it returns specific
1208 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
1209
1210 Shared library support for UNIX using GNU libtool.
1211
1212 * Modified backend interface. Request/Response struct's replaced by
1213 one read/write C struct. For example bend_fetchrequest and
1214 bend_fetchresult have been replaced by single bend_fetch_rr struct.
1215 Every handler - even search has to be registered in bend_init
1216 handler. This means that the YAZ library no longer refers to
1217 external functions and it makes it possible to make the whole
1218 thing a single DLL/SO.
1219
1220 Added Segment handler for backend server.
1221
1222 Added Zmbol/Zebra administrative functions to YAZ client.
1223
1224 Threaded frontend server on UNIX (when POSIX Threads are available).
1225 Starting the server with option -T enables multi-threading.
1226
1227 --- 1.6 2000/03/03
1228
1229 Added configure option --enable-comp/disable-comp to control use
1230 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
1231 located in sub directory asn.
1232
1233 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
1234 in ${exec_prefix}/bin along with the other programs yaz-client and
1235 yaz-ztest.
1236
1237 GNU automake used to maintain makefiles.
1238
1239 Added several OID's.
1240
1241 Changed retrieval module so that we can load records with no abstract
1242 syntax defined. Tagpaths in these records are fully composed of string
1243 tags.
1244
1245 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
1246
1247 --- 1.5 1999/12/10
1248
1249 On UNIX, the generated makefile now supports a proper 'make install'.
1250 The prefix can be set via GNU configure to set the install location
1251 (default is /usr/local).
1252
1253 * YAZ programs client and ztest were renamed to yaz-client and
1254 yaz-ztest to avoid conflicts when users install YAZ in "standard"
1255 locations, such as /usr/bin,/usr/local/bin,etc.
1256
1257 * YAZ Header files were moved from include to include/yaz. YAZ Header
1258 files are referred to as include <yaz/log.h> rather than <log.h>.
1259 The YAZ include path (-I ..) is therefore the same as before. Programmers
1260 should update their #include statements or use -Ipath/include/yaz
1261 instead. The main motivation for doing this change is that YAZ header files
1262 can be installed in "standard" locations /usr/include,/usr/local/include 
1263 without introducing conflicts, since ALL YAZ header files are stored
1264 in subdirectory yaz (under /usr/include for example).
1265
1266 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
1267 rather than project/workspace files. We switched because project files
1268 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
1269 details.
1270
1271 Changed name of logging function, logf, to yaz_log, to prevent name
1272 clash with some math-log functions. The YAZ header log.h defines logf
1273 to yaz_log (#define) so there should be no incompatibilities by this
1274 modification.
1275
1276 Added bend_start/bend_stop handlers for server. These handler are
1277 called on start/stop of server. For windows they are called whenever
1278 a service is started/stopped.
1279
1280 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
1281 a fairly small ASN.1 compiler written in Tcl. The compiler is located
1282 in util/yc.tcl. The auto-generated C code structures are, in a few
1283 cases, incompatible with the old decoders. There are differences in the
1284 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
1285 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
1286 The preprocessor variable ASN_COMPILED is defined when the compiled
1287 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
1288 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
1289 wish to use the old encoders/decoders you can specify --disable-yc
1290 for configure.
1291
1292 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
1293 version so that it supports both new - and old version of DB Update
1294
1295 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
1296 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
1297 change. The name parameter can be set to 0 in which no name is specified
1298 for the construction. The macros odr_implicit and odr_explicit sets name
1299 parameter to zero for the construction involved. New macros
1300 odr_implicit_tag and odr_explicit_tag are similar to the others,
1301 except that a name parameter is added. For programmers' that don't use
1302 ODR they probably only need to change the call to z_APDU and z_External.
1303
1304 Added access control facility by interfacing the TCP wrapper library.
1305 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
1306 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
1307 name of the daemon and enables the access control as specified in
1308 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
1309
1310 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
1311 den Dool <H.M.vdnDool@kub.nl>.
1312
1313 Added reference ID parameter to most functions in server API - refer
1314 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
1315
1316 Changed name of ccl library to libccl.a (was ccl.a).
1317
1318 Fixed bug in decoder for Explain (Category TargetInfo).
1319
1320 Added support for GNU readline in client. Thanks to Jacob Poulsen
1321 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
1322
1323 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
1324 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
1325 IMPLEMENTATION! This change was made to the development version before
1326 the ZIG decided to retract the amendment. If any users MUST be
1327 compatible with the original Update definition, PLEASE CONTACT US, and
1328 we will include a separate definition corresponding to the old Update
1329 ES. Note that because of the change to the ASN.1 of the
1330 TaskPackageRecordStructure we cannot define a single structure that
1331 will support both versions.
1332
1333 * Added const modifier to buffer parameter for some ODR/BER encoding
1334 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
1335 completeWAIS, odr_dumpBER.
1336
1337 Fixed bug in client.c which caused a crash when a scanResponse didn't
1338 contain positionOfTerm.
1339
1340 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
1341 * will cause an error in a client if a non-YAZ target sends both a
1342 * list of Scan entries and non-surrogate diagnostics.
1343
1344 Retrieval module enhancements. Tag sets may be typed in the reference
1345 to it. From the .abs-file the "tagset" directive takes a third optional
1346 integer type for the tag set referenced. From a .tag-file the "include"
1347 directive takes a third optional type as well. The old "type" directive
1348 in the tag set itself is still recognized but acts as the default type
1349 for the tag set.
1350
1351 Backend interface change. Individual Scan terms returned from bend_scan
1352 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
1353 in include/backend.h.
1354
1355 Retrieval module enhancements. Multiple tag sets and attribute sets may
1356 be specified in abstract syntax specs. Revised the error/warning for
1357 logging messages reported by the retrieval module when reading the
1358 various spec files.
1359
1360 Object Identifier system (oid_..) changed. The API is backwards
1361 compatible but the oid-routines now allocates new OID's when needed.
1362 Raw OID's may be specified in oid_getvalbyname.
1363
1364 YAZ now uses GNU configure to generate Makefile(s).
1365
1366 * Minor changes in some of the member names of DeleteResultSetRequest and
1367 DeleteResultSetResponse. See include/proto.h.
1368
1369 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
1370 and added member 'languages' in TargetInfo (which was missing).
1371
1372 Changed the way attribute sets are handled in the retrieval
1373 module. These are now cached, just like the abstract syntaxes
1374 (schemas).
1375
1376 Changed YAZ so that it links with compiled ASN.1.
1377
1378 Added Explain-schema definitions and mapping routines. The following
1379 Explain categories have been implemented: AttributeDetails,
1380 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
1381
1382 Fixed minor bug in Windows version of Server Library.
1383
1384 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
1385
1386 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
1387
1388 Added EXTERNAL: UNIverse Resource Report (non-standard).
1389
1390 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
1391 ENUMERATED and SET OF.
1392
1393 * Added 'const' to some of the char pointer arguments for the
1394 functions, data1_read_node, data1_getelementbytagname,
1395 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
1396 data1_get_absyn.
1397
1398 Fixed bug in data1_insert_taggeddata - the last_child member of
1399 parent wasn't initialised.
1400
1401 * Changed data1_read_record and data1_read_node so that the supplied
1402 "SGML"-buffer is read-only. In particular the resulting data1 - tree
1403 doesn't refer to any parts of the "SGML"-buffer.
1404
1405 Fixed bug in server library (Windows version of statserv_remove).
1406
1407 * Changed code so that it compiles as C++. The type definition
1408 of Odr_fun which is a member of Odr_arm was changed. The result is,
1409 that an explicit typecast is needed for the fun pointer when
1410 using Odr_arm - as in:
1411     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
1412
1413 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
1414
1415 Implemented the new structured date and time definition as approved
1416 by the ZIG. Added schemaId element to the specificTag in Espec-1
1417 (also approved at the last ZIG). Thanks to RVDM.
1418
1419 Added some Object identifiers (RVDM).
1420
1421 Changed the Update Extended Service (RVDM).
1422
1423 Added command "refid" to client which specifies referenceId for
1424 the following requests.
1425
1426 Implemented extended service handling for server. See ztest.c
1427 for an example as well as backend.h. New handlers are registerd
1428 in the Init handler.
1429
1430 * Changed interface for sort in server.
1431
1432 Added new members to statserv_options_block. It allows a server
1433 to read options from another source than just the command line. Thanks
1434 to Charles Woodfield.
1435
1436 * Changed definition of Z_Triple in file prt-grs.h - member boolean
1437 renamed to zboolean. Some C++ compilers complained about the name.
1438
1439 Minor changes to gils.abs. Added index 's' (sort) on title
1440 and date/time-last-modified.
1441
1442 --- 1.4pl2 1998/1/30
1443
1444 Fixed bug in server library regarding inetd mode (-i). This bug
1445 was introduced by release 1.4.
1446
1447 --- 1.4pl1 1998/1/29
1448
1449 Added sort facility in client and backend server interface.
1450
1451 Fixed problem with dependencies in Makefile(s).
1452
1453 Fixed bugs for encoders/decoders of extended services and 
1454 SearchInfoReport.
1455
1456 Implemented sub-tree feature for schemas. Sub-trees are
1457 referenced in *.abs-files. See explain.abs for an example
1458 of the use of this feature.
1459
1460 Modified bib1.att; local attributes for ANY didn't include
1461 ANY itself (only affects use of the retrieval module).
1462
1463 Fixed bug in plain SGML reader in function data1_read_node:
1464 tags with prefix "var" was incorrectly interpreted as variants.
1465
1466 Added feature "sub-schemas" to enable references to - and definitions
1467 of - group of elements.
1468
1469 * Removed member parent from type data1_element (in data1.h).
1470
1471 Implemented function odr_nullval() that returns the value of
1472 ODR_NULLVAL.
1473
1474 * Removed member num_children from data1_node (in data1.h).
1475
1476 Made NT service interface part of the server library. The
1477 function statserv_main uses the NT service when required and
1478 calls the statserv_start / statserv_close routines.
1479
1480 Routine zget_SearchRequest and zget_PresentRequest fills
1481 resultSetName/Id member with "default" instead of "Default".
1482
1483 Fixed memory leak in server. Request queue member wasn't freed.
1484
1485 Fixed nmem_exit so that memory is freed.
1486
1487 --- 1.4 1997/10/2
1488
1489 Revised the CCL parser utility to be thread safe.
1490
1491 Added function, oid_ent_to_oid, to replace the function 
1492 oid_getoidbyent, which is not thread safe.
1493
1494 * Added nmem_init and nmem_exit to initialize and release
1495 NMEM resources. Function nmem_init should be called once in the
1496 initial thread before NMEM/ODR is used. statserv.c and client.c
1497 have been changed accordingly. The change was necessary to make
1498 NMEM thread safe. The NMEM memory pool is shared amongst threads
1499 in a process. Unix-based applications will still work fine without
1500 calling this.
1501
1502 Added NT Services interface for the the Z39.50 (statserv) Server. 
1503 Refer to the ztest.c source on the usage.
1504
1505 Windows 95/NT port using MSVC5.0. Project files are included in the
1506 distribution.
1507
1508 * Defined new 'global' handle for the retrieval (data1) system. The
1509 new handled, data1_handle, describes the state of the data1 system.
1510 This handle is passed as first argument to virtually all
1511 data1 related routines. The functions data1_create and data1_destroy
1512 creates and destroys a data1 handle respectively.
1513
1514 Added ODR encode stream member to all backend request structures
1515 init, search, scan etc. This stream should be used to allocate all
1516 memory used for the response when thread safe operation is needed.
1517
1518 Changed the comstack utility, cs_addstr, to be thread safe. The
1519 returned hostname string returned by the function is now part the
1520 COMSTACK instance.
1521
1522 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
1523 function. The cs_straddr takes a COMSTACK handle as argument, so this
1524 function must be used after cs_create and before bind/connect.
1525 This function is thread safe.
1526
1527 Moved test server to 'ztest' directory - generic server code still
1528 in 'server' directory.
1529
1530 Made prefix query (pquery.c) utility thread safe.
1531
1532 Added new function modifier YAZ_EXPORT to 'export' public DLL
1533 functions when using windows (see include/yconfig.h).
1534
1535 Added definitions to the OID database (util/oid.c) (RVDM).
1536
1537 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
1538
1539 Added call to ccl_rpn_delete in client program.
1540
1541 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
1542 release of RPN structure.
1543
1544 Added support for C++, headers uses extern "C" for public definitions.
1545 With input from RVDM.
1546
1547 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
1548 Thanks to Ronald van der Meer (RVDM).
1549
1550 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
1551
1552 Added support for private extensions to the OID database
1553 (oid_setprivateoids()). Thanks to RVDM.
1554     
1555 Added optional, physical ANY (key replication)
1556
1557 Fixed null-reference problem in GRS-1 output filter.
1558
1559 Proximity operator added to Prefix Query Format (PQF).
1560
1561 In test client command "base" accepts multiple databases.
1562
1563 Fixed bug in cs_close stack that caused trouble with WINSOCK.
1564
1565 --- 1.3 1996/10/11
1566
1567 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
1568
1569 Smallish bug-fixes in the new encoders/decoders (explain).
1570
1571 Bug fixed in DeleteRequest.
1572
1573 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
1574
1575 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
1576
1577 Added SOIF syntax (using private OID for now) to retrieval module and client.
1578
1579 Added Update extended service.
1580
1581 Added SearchResult-1 additional info structure.
1582
1583 Added optional CCL (ISO8777) interpreter as separate module. Available
1584 in linemode client.
1585
1586 --- 1.2 1996/6/10 (1st anniversary release)
1587
1588 Added Summary record syntax. Lightly tested.
1589
1590 Added OPAC record syntax. Untested.
1591
1592 Added ResourceReport service encoders/decoders. Untested.
1593
1594 Fixed bug in z_Unit - wrong tagging on unitSystem.
1595
1596 Fixed bug in the DiagRecs decoder.
1597
1598 Added options for max PDU size and session timeout to frontend-server.
1599
1600 Added documentation of query-language parsers and other supporting utilities.
1601
1602 [frontend-server] Added Attribute set to the bend_scanrequest API.
1603
1604 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
1605 surrogate diagnostics were generated.
1606
1607 [retrieval] Allow multiple local values for attribute.
1608
1609 [retrieval] Allow multiple attributes per element in .abs files. index type.
1610
1611 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
1612
1613 --- 1.1pl2  1996/4/10
1614
1615 Minor changes, mostly specific to Zebra's requirements (retrieval)
1616
1617 --- 1.1  1996/2/20
1618
1619 Repaired bug in frontend server when running multiple listening
1620 endpoints in dynamic mode.
1621
1622 z_External() now won't break if a known, ASN.1 value comes encapsulated
1623 in an octet-string. The value will pass through unmodified in an Odr_oct.
1624
1625 Added a bit of code to the demo client to decode & display
1626 ASN.1-structured records represented in the octet-aligned branch of
1627 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
1628
1629 Added z_ext_getentbyref() to the ASN module. Doc updated.
1630
1631 * Completed the SCAN definition in the ASN module. This may break SCAN
1632 code based on older YAZ-versions at compile-time. The fix is easy -
1633 look in proto.h.
1634
1635 * Added 'displayTerm' and OtherInformation to the TermInfo structure
1636 under the SCAN definition. Remember to initialize this, server-people.
1637
1638 Comstack should now support the WAIS protocol in TCP/IP mode. Note
1639 that this does not extend to ODR and ASN.
1640
1641 Comstack allows insertion of established socket (primarily for
1642 inetd-operation of servers). Doc updated.
1643
1644 Front-end server can now start from the inetd in TCP mode. Doc
1645 updated.
1646
1647 --- 1.0pl4 1996/1/24
1648
1649 Added Sort PDU.
1650
1651 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
1652 the rank and record number.
1653
1654 Adjustments to the frontend server.
1655
1656 Fixed diagnostic BER dumper. It ignored the file argument.
1657
1658 --- 1.0pl3 1996/1/2
1659
1660 Various changes to retrieval module.
1661
1662 Changed the union discriminators of the protocol files from enums to
1663 ints paired with #defines.
1664
1665 *Changed oident.class to oident.oclass to avoid a reserved word in C++
1666  compilers.
1667
1668 *Changed operator in the RPN structure to 'roperator', again to avoid a
1669  conflict with C++.
1670
1671 Fixed problems in Explain decoders/encoders.
1672
1673 --- 1.0pl2 1995/12/6
1674
1675 Memory bug in log module fixed.
1676
1677 --- 1.0pl1 1995/12/5
1678
1679 Occasional malloc() of 0 bytes fixed in d1_espec.c.
1680
1681 Bug in Explain DatabaseInfo module fixed.
1682
1683 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
1684
1685 --- 1.0 1995/11/28
1686
1687 The shift to v1.0 signals that we now consider the *core* functionality
1688 of YAZ reasonably stable (the core being more or less equivalent to
1689 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
1690 tested (Explain not at all - though that will happen soonish).
1691
1692 Minor changes to code to support Windows port.
1693
1694 Various minor changes after we're getting to use GRS-1 & co. more.
1695
1696 Added Espec-1 format.
1697
1698 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
1699 of the protocol and it cannot be selected when encoding (maps into 'string'
1700 when decoding). Needed to talk to some servers.
1701
1702 Demo client can request simple element set names.
1703
1704 Added Diagnostic Format encoders/decoders.
1705
1706 Added simple Close handling to frontend server (no hooks for resource
1707 reporting yet), and demonstration client.
1708
1709 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
1710
1711 --- 1.0b3 1995/08/24
1712
1713 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
1714 handled incorrectly when records were requested in the searchResponse. This
1715 will only affect you if you use the frontend-server.
1716
1717 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
1718 Test-client will ask for and print GRS1. Ztest will return dummy records
1719 on request.
1720
1721 Added Explain encoders/decoders to the service-level API. Untested.
1722
1723 Added Extended Services: Item Order encoders and decoders to the Service-
1724 level API. Untested. We could use a recent copy of the pertinent bits
1725 of the ILL protocol to add those bits.
1726
1727 Added diagnostic format 1 encoders/decoders to the service-level API.
1728 Untested.
1729
1730 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
1731 odr_cons.c, which causes a more correct output.
1732
1733 Fixed handling of searchRequest in frontend server. NextResultSetPosition
1734 was always set to 0 when no records were requested in the searchRequest.
1735
1736 * Added better external-handling. This shouldn't harm old code that
1737 *encodes* externals. It can break code that looks for a
1738 'single-ASN1-type' representation, since those types that are known
1739 are now decoded immediately. Look at the SUTRS sample code in
1740 seshigh.c and client.c. Documentation updated.
1741
1742 Handling of structured records in bend_fetchresponse. Length -1 marks
1743 structured record, type is deduced from format field.
1744
1745 --- 1.0b2 1995/06/27
1746 Fairly quick maintenance release to add SUTRS support.
1747
1748 Fixed handling of SUTRS records in the demonstration client.
1749
1750 * Added format field to the bend_fetchrequest and bend_fetchresponce
1751 structures of the backend API (frontend server). When the record is
1752 returned, the value of the format field is mapped to an OID. The
1753 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
1754 of the record. The special value VAL_NONE in the bend_request means
1755 that no specific format was requested by the client. Documentation
1756 updated accordingly. Test server (ztest) will return a fixed dummy
1757 SUTRS record if your client requests SUTRS.
1758
1759 Documentation updated accordingly.
1760
1761 You can now set external libraries and RANLIB support in the top-level
1762 Makefile.
1763
1764 --- 1.0b 1995/06/19
1765 First public release.