Note ZOOM-C enhancements
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 --- (IN PROGRESS)
4
5 Incorporate patch by Morten Bogeskov which allows a Unix file socket
6 server to specify uid/gid/mask for socket using the format
7  unix:[user=uid,][group=gid,][umask=mask,]file=path
8 If file= is omitted the existing format is assumed, e.g.
9  unix:path
10 in which case the mask is 0666 (rw for everybody).
11
12 Major restructure of YAZ source. All source in libyaz is in src directory.
13 Programs in client (yaz-client), ztest (yaz-ztest), zoom (zoom programs),
14 util (utility programs such as ASN.1 compiler, yaz-marcdump). 
15
16 Added man page for utility yaz-marcdump (used to be called marcdump).
17 yaz-marcdump is installed by 'make install'.
18
19 Fixed a memory leak in Generic Frontend Server that occurred when decoding
20 of incoming package failed.
21
22 Fixed a potential DOS attack vulnerability in COMSTACK/ODR.
23
24 Change prototype of odr_perror: add const to message string.
25
26 New function yaz_log_reopen which reopens log file (for log rotate, etc.)
27
28 * Blocking parameter for COMSTACK cs_create is now a bit mask rather
29 than a blocking flag. Bit 0 is set for blocking, reset for non-blocking.
30 Bit 1 is set if cs_addrstr should avoid DNS lookup; reset for full
31 DNS lookup. There should not be any compatibility problems with this
32 assuming that blocking=1 or 0 is used.
33
34 Fix bad reference in UNIX comstack in function cs_addrstr.
35
36 Fix for compilation on AIX.
37
38 The generic front-end server (server/seshigh.c) now supports returning
39 Init diagnostics to the client in User-information-field, in
40 accordance with Z35.90 Implementor Agreement 5 (Returning diagnostics
41 in an InitResponse)
42
43 ZOOM-C supports "implementationId" and "implementationVersion" options
44 to go along with "implementationName".  These allow the user code to
45 specify identification strings to be sent to servers.
46
47
48 --- 2.0.4 2003/09/04
49
50 Allow any CQL relation (not just all,any,exact,scr).
51
52 Fixes for OCLC UI ASN.1 to make it work with SilverPlatter targets
53 that features the same UI.
54
55 Implemented command update0 in YAZ client which is equivalent to
56 update but uses old of Ext Update ASN.1.
57
58 Use OID 1.2.840.10003.15.1000.81.1 for privately defined charsets
59 in charset negotiation. Added VAL_ID_CHARSET in oid.h.
60 Previously no OID was used for this info.
61
62 ZOOM uses smallSetUpperBound=1 instead of 0 for piggyback searches.
63 It apparantely upsets EBSCO Publishing IR Z39.50 Server which
64 returns 'malformed search term' otherwise.
65
66 SortResponse member resultCount now set to NULL in sort handler of
67 frontend server.
68
69 OPAC support ZOOM. ZOOM_record_get returns OPAC info (as XML) if
70 type is "opac".
71
72 Add three new utility functions for translating OIDs between various
73 formats -- symbolic name such as "Usmarc", minus-1-terminated int
74 arrays and dotted strings such as "1.2.840.10003.9.5.1":
75  int *oid_name_to_oid(oid_class oclass, const char *name, int *oid);
76  char *oid_to_dotstring(const int *oid, char *oidbuf);
77  char *oid_name_to_dotstring(oid_class oclass, const char *name, char *oidbuf);
78
79 Reverted modifications for ES Update definition for z_IU0Update 
80 (OID 1.2.840.10003.9.5.1 and 1.2.840.10003.9.5). The definition
81 is back to YAZ 2.0.2.
82
83 String value attributes for CCL parser.
84
85 Support for OCLC's locally registered "OCLC-UserInformation" PDU,
86 which their FirstSearch server returns in Init responses, sometimes
87 carrying useful diagnostic information when Init fails.  This has the
88 OID 1.2.840.10003.10.1000.17.1 and is defined in the file
89 "z39.50/oclcui.asn", where its definition is somewhat different from
90 what OCLC document on their web-site, as required to interoperate with
91 their servers.
92
93 Support for anonymous authentication in yaz-client.  Use the command
94 "auth -".
95
96 * Fix the OID of the Index Data-local "admin" Extended Service from 
97   1.2.840.10003.9.81.1 to 1.2.840.10003.9.1000.81.1.  The omission of
98   the 1000, which indicates a locally-defined OID, was a mistake.
99
100 --- 2.0.3 2003/06/20
101
102 Fix CCL directive @case handling so that it affects string match for
103 both CCL keywords and qualifiers.
104
105 * ESFormat-Update updates. Packages with OID 1.2.840.10003.9.5.1 and
106 1.2.840.10003.9.5 are now handled by the same decoder z_IU0Update .
107 Decoder has been updated with ASN.1 changes as listed in
108 http://lcweb.loc.gov/z3950/agency/defns/updateES.html
109 Note that the "latest" DB Update, OID 1.2.840.10003.9.5.1.1 , handler
110 z_IUUpdate, remains unchanged. 
111
112 ZOOM_record_get may now return a record in a specific character set.
113 For type use "form; charset=from[,to]" where form (render, xml, ..) ,
114 "from" is the character set of record as returned by target. "to" is
115 the character set to be returned. If omitted, "to" is UTF-8.
116
117 YAZ ASN.1 compiler renamed from yaz-comp to yaz-asncomp
118
119 New ODR utility, odr_getelement, which returns name of element for
120 which encoding/decoding failed.
121
122 Fixed ODR so that it returns error code OREQUIRED rather than ONONE
123 in cases where a required element was omitted.
124
125 Bug fix: some MARC8 sequences were not converted.
126
127 New ZOOM option "step" which specifies number of records to be
128 retrieved in one chunk. Used in conjunction with "start" and "count".
129
130 SRW support for yaz-client. Use scheme http: to use it, e.g.
131  http://host:port/db
132
133 yaz-client no longer does (un)intelligent character set conversions
134 by default. Can be enabled with charset and marc_charset commands.
135
136 xmalloc trace fix for 64-bit systems such as DEC alpha. 
137
138 Solaris 2.6 compile fix.
139
140 New function, cql_strerror() translates SRW error codes, as returned
141 by cql_transform_error(), into human-readable English strings.  Used
142 in yaz-client diagnostics when appropriate.
143
144 New CQL2RPN query-type for the command-line yaz-client, parses CQL and
145 converts it into a type-1 query which is sent to the server.  This
146 makes CQL available for use with all Z-servers, as opposed to the tiny
147 minority that can handle CQL queries themselves.
148
149 --- 2.0.2 2003/04/28
150
151 New Debian package layout similar to the Redhat Package layout.
152
153 New ZOOM events ZOOM_EVENT_RECV_{RECORD,SEARCH} for receiving a record
154 and search result respectively.
155
156 --- 2.0.1 2003/04/25
157
158 Redhat package is now several packages: libyaz (runtime libraries),
159 libyaz-devel (development and documentation, and yaz (utility programs).
160 Package spec file by Morten Bøgeskov.
161
162 New member 'schema' in struct bend_fetch_rr which the name of requested
163 schema (SRW/SRU) for record (or NULL if none was given). The fetch
164 handler MAY set this to reflect the schema of the returned record.
165
166 New member 'display_term' in struct scan_entry. GFS now sets member entries
167 and allocates scan entries to be filled by user scan handler. In previous
168 version, entries member was allocated by the scan handler. That still works,
169 but the GFS will ignore member display_term - assuming it was NOT set by
170 the handler. The fact that the GFS now allocates the entries both allows
171 for new members and makes a scan handler easier to write.
172
173 Fix CQL lex buffer overflow.
174
175 SRW/SRU recordPacking. For SRW default recordPacking is string. For
176 SRU default recordPacking is string.
177
178 SRU protocol support for frontend server.
179
180 Fix compile bug for systems that have nl_langinfo but CODESET undefined.
181
182 Added missing PQF transform rules for <= and >= . Thanks to Peter Popovics.
183
184 Added scan for the ZOOM shell (zoomsh).
185
186 --- 2.0 2003/02/23
187
188 * String Identifers for Schemas (Amendment 5).
189 http://lcweb.loc.gov/z3950/agency/amend/am5.html
190 Old definition for schema
191   Odr_oid *schema; /* OPT */
192 New:
193   int which;
194   union {
195      Odr_oid *oid;
196      Z_InternationalString *uri;
197   #define Z_Schema_oid 1
198   #define Z_Schema_uri 2
199   } schema; /* OPT */
200
201 * resultCount parameter to Sort Response (Amendment 1).
202 http://lcweb.loc.gov/z3950/agency/amend/am1.html
203
204 Support for SRW 1.0 over HTTP. This is an optional feature and
205 requires libxml2 to operate. Enable SOAP by specifying --with-xml2
206 for configure.
207
208 Generic frontend server supports HTTP/SOAP/SRW and Z39.50/BER
209 on the same port.  SRW SearchRetrieveRequests are mapped
210 to bend_init,bend_search,bend_fetch,bend_close. 
211
212 Z39.50 Query Type-104 added - to facilitate CQL within Z39.50.
213
214 CQL support. Source is directory 'cql'. CQL is supported in ZOOM
215 (both SRW and Z39.50) and the YAZ client (Z39.50 only).
216
217 ZOOM connections are SRW based if schem http is used for hostname
218 in connect, e.g.  z = ZOOM_connection_new("http://myserver");
219 ZOOM_query may be of type CQL, e.g. ZOOM_query_cql(q, "dc.title=x");
220
221 CCL proximity operators !n, %n converts to PQF @prox 0 n 1 2 k 2
222 and @prox 0 n 0 1 k 2 respectively, meaning: exlusion=false,
223 distance=n, order=true/false, relation=le, prox unit=word. If
224 n is omitted, distance 1 is used.
225
226 Fixed problem with C compiler include path in wrong order.
227
228 For TCP/IP COMSTACK, set recv buffer to an appropriate "large" value
229 on Solaris. Patch from Ko van der Sloot.
230
231 New MARC decode API. All new functions operate on a yaz_marc_t
232 handle. The most important new functions are: yaz_marc_create,
233 yaz_marc_decode_{buf,wrbuf}, yaz_marc_destroy, .. to create handler,
234 decode and destroy respectively. Decoder can produce formats
235 MARC line, simple XML, OAI MARC and MARC XML (LoC). See
236 include/yaz/marcdisp.h.
237
238 YAZ Iconv utility now supports MARC8 decoding (marc8.c). Converts
239 to UTF-8, UCS-32, wchar_t or Latin-1.
240
241 * Prototypes for yaz_iconv_-functions moved to separate header 
242 include/yaz/yaz-iconv.h.
243
244 Make a few private functions 'static' in unix.c. This prevents
245 duplicate unix_close in PHP with YAZ and imap. PHP Bug 20977.
246
247 For ZOOM connection, the options targetImplementation{Id,Name,Version}
248 are set when Init Response is received.
249
250 New function ZOOM_connection_error_x similar to ZOOM_connection_error
251 but returns diagnostic set as well.
252
253 New function yaz_strerror which is a portable wrapper for
254 strerror/strerror_r/GetLastMessage.
255
256 * ZOOM_record_get supports type "xml" in which case MARC XML (from LOC)
257 is returned for MARC. If type is "oai", then OAI MARC is returned.
258
259 Fix creation of lib/yaz-config so it works if srcdir != objdir. Patch
260 from Kang-Jin Lee.
261
262 --- 1.9.2 2002/11/26
263
264 yaz_marc_decode uses OAI MARC as XML format for ISO2709 records.
265
266 Fix bad race conditions on SIGTERM and terminate gracefully in
267 frontend server.
268
269 Move retrieval (data1) module to Zebra since nobody seems to be
270 using it.
271
272 Add GRS-1 render for ZOOM using same format as yaz-client.
273
274 --- 1.9.1 2002/10/05
275
276 Added man pages: yaz-client(1), yaz-ztest(8), yaz(7), zoomsh(1).
277
278 Fix broken ESpec handling in data1 module.
279
280 SGML reader parses comments and makes them part of the data1 tree.
281
282 Added several type casts so that YAZ compiles as C++ code.
283
284 ZOOM didn't handle PDU encoding failures properly.
285
286 Added more Bib-1 diagnostics (approved extensions).
287
288 GNU configure: better check for iconv.
289
290 More portable use of accept, getpeername. Check for socklen_t. Use
291 int/size_t if socklen_t is not defined.
292
293 --- 1.9 2002/09/06
294
295 PQF parser rejects bad queries - including those with extra
296 characters in them. PQF parser used to silently ignore that.
297 Cleaner API for PQF added, which allows you to get detailed
298 error information for bad queries (see yaz/pquery.h).
299
300 Fixed bug in ZOOM_record_get for type "database".
301
302 Implemented mini iconv library supporting conversions between
303 UTF-8, UCS4, UCS4LE and ISO-8859-1. Implemented in util/siconv.c.
304
305 * Removed XML reader (d1_expat.c). It's part of Zebra instead.
306
307 --- 1.8.9 2002/08/20
308
309 Fixed ZOOM C record cache so that preferredRecordSyntax and
310 elementSetName is used to check for already fetched records.
311
312 --- 1.8.8 2002/08/02
313
314 Added three members in bend_initrequest structure to facilitate
315 character set negotiation.
316
317 Fixed a bug in frontend server that could cause indefinite
318 loops under rare conditions. 
319
320 Revised character set utilities (charneg.h) so that encoding
321 UCS-4, UCSA-4, UTF-16 and UTF-8 are encoded non-privately.
322
323 For PQF, directive @term <type> sets term type for Scan/Search.
324 Here <type> is general, string, numeric, null. The term type
325 is inherited - just like @attr.
326
327 New call odr_set_charset that sets character set conversion for
328 international-strings on a ODR stream. Prototype is:
329  int odr_set_charset(ODR o, const char *to, const char *from);
330 The InternationalString is still represented as C string in YAZ 
331 so native strings of type UTF-8, ASCII, etc. will work (UTF-16
332 won't). On the protocol level, you can use any encoding.
333
334 Support for UNIX sockets in ZOOM.
335
336 Solaris recv sometimes returns errno == ENOENT. It is treated as
337 EINPROGRESS. COMSTACK patch by Ko van der Sloot.
338
339 New COMSTACK of type UNIX Socket. Use "unix:/path" as address for
340 both client and server. Code by Morten Bøgeskov.
341
342 --- 1.8.7 2002/05/22
343
344 On Windows ZOOM functions are of type __stdcall rather than __cdecl, so
345 that they can be used directly from Visual Basic. You must recompile
346 your windows APP if you're using ZOOM.
347
348 Character Set and Language Negotiation(3) for ZOOM API and YAZ client.
349 Commands "lang" and "charset" sets language and character set respectively.
350 Options "lang" and "charset" is interpreted by the ZOOM API. Note, these
351 are not part of the official ZOOM spec) All is due to Oleg Kolobov. 
352
353 Attributes from multiple CCL fields may be OR'ed rather than merged
354 using directive "@field or". Fields are still merged by default -
355 equivalent to "@field merge".
356
357 Fixed bug in ZOOM connect that occurred on OpenBSD (maybe others). Patch
358 by Oleg Kolobov.
359
360 Fixed bug in zget for parameter ExtendedServicesResponse.
361
362 Fix OID for ILL.
363
364 --- 1.8.6 2002/03/25
365
366 Added PQF feature: '@attr type=value' may be written as '@type=value'.
367
368 Client displays USR.1:SearchResult-1 (hits per term).
369
370 Additional Search Info for search in Generic Frontend Server.
371
372 Fixed CCL parsing of "field=s".
373
374 WIN32 installer - using the excellent NSIS software from nullsoft.
375
376 Fixed CCL parsing of "field = - <number>".
377
378 Added function yaz_marc_decode that decodes MARC for line mode
379 display or XML (similar to that used by JZKit).
380
381 Fixed BER decoding of OPTIONAL CHOICE. The bug didn't affect the
382 Z39.50. But ISO/ILL was, however.
383
384 Added patch by Rustam T. Usmanov that implements Z39.50 duplicate
385 detection service (Z39.50-1995 Amendment 2) and Language Negotiation (3).
386 See:
387  http://lcweb.loc.gov/z3950/agency/amend/am2.html
388  http://lcweb.loc.gov/z3950/agency/defns/charneg-3.html
389
390 --- 1.8.5 2002/02/03
391
392 New YAZ client features: Command completion and new commands:
393 push_command, set_apdufile, set_marcdump, set_cclfields, register_oid.
394 Code provided by Jacob Poulsen.
395
396 New call oid_trav, that visits all registered OIDs via callback.
397
398 Function ZOOM_record_get now returns const char pointer rather than
399 void pointer. It saves a lot of type casts.
400
401 For YAZ client, command "auth" now allows you to set authentication
402 in IdPass style. It is enabled when three tokens are given - order
403 is user, group and password.
404
405 Fix memory leaks in MARC record handling for ZOOM.
406
407 New option for YAZ client, -k <kilobytes> that sets
408 maximum record size. Similar to -k option for generic frontend
409 server and yaz-ztest.
410
411 More fixes for scan. Non-zero stepSize handled. OID's fixes.
412
413 Prefix query parser reports "fail" when bad attribute set is given.
414
415 Fix in MARC decoder. Proximity logging. Fix for attribute set
416 in scan handler for server. Patches by Shigeru Ishida.
417
418 SSL/COMSTACK updates. cs_rcvconnect completes SSL handshake. ZOOM
419 works with SSL.
420
421 Configure option --with-openssl=<dir> now works when a directory is
422 specified. Patch provided by Morten Bøgeskov.
423
424 New option for YAZ client, -u <auth>, that sets authentication.
425
426 ZOOM fix: error information was sometimes "missing", since error
427 was cleared/reset too when it shouldn't.
428
429 ZOOM_record_get returns ISO2709 buffer when "raw" is given.
430
431 --- 1.8.4 2002/01/04
432
433 Scan for ZOOM API. New object ZOOM_scanset. New functions
434 ZOOM_connection_scan, ZOOM_scanset_size, ZOOM_scanset_term and
435 ZOOM_scanset_destroy.
436
437 New ZOOM function, ZOOM_connection_last_event, that returns type
438 of last event (such as "receive data", "send data", "apdu received",
439 etc.
440
441 New ZOOM option, schema, that specifies schema for retrieval.
442
443 New CCL feature. Qualifiers can be aliases for one or more
444 other qualifiers (if more than one is given, OR is used).
445
446 ZOOM uses named result sets if target supports it.
447
448 Two new YAZ client commands: .  (dot, which sources a script of YAZ
449 client commands), and ! (to execute shell command.). Implemented
450 by Jacob Poulsen.
451
452 Working on Debian packages.
453
454 --- 1.8.3 2001/11/19
455
456 YAZ client enables named result sets only if target supports it.
457
458 *** ZOOM. Prefix for ZOOM definitions changed from Z3950_ to ZOOM_.
459
460 * ZOOM. Removed Z3950_connection_host. Use Z3950_connection_option_get
461 with key="host" to get same result.
462
463 * ZOOM. Added Z3950_record_clone and removed Z3950_resultset_get.
464 Function Z3950_resultset_record(s) returns references to records
465 "owned" by resultset. To become owner use Z3950_record_clone.
466
467 Function z_ext_record handles Extended Services. Thanks to
468 Irina Dijour.
469
470 --- 1.8.2 2001/11/12
471
472 CCL Parser fix: ignore token comma when dealing with and-lists.
473
474 Documentation updates for COMSTACK.
475
476 * ZOOM changes. Query object renamed from Z3950_search to Z3950_query.
477 Changed prototype Z3950_records. For some functions, int parameters
478 were changed to size_t.
479
480 TCP/IP COMSTACK no longer uses getprotobyname to avoid memory leak
481 on some Unices.
482
483 New MARC decode/display function, marc_display_exl, which properly rejects
484 non-ISO2709 records. YAZ client uses it.
485
486 --- 1.8.1 2001/10/29
487
488 Fix bug: local attribute set wasn't set correctly in PQF strings.
489
490 --- 1.8 2001/10/25
491
492 * Old Z39.50 codecs no longer supported. 
493
494 Added ZOOM C binding. See http://zoom.z3950.org/
495
496 Renamed states for COMSTACKs to avoid confusion with events.
497
498 Implemented cs_look and proper cs_rcvconnect.
499
500 Fixed COMSTACK error that occurred on HPUX. Fix by Giannis Kosmas.
501
502 Configure detects POSIX threads on OpenBSD.
503
504 When sort flag 'i' was specified in yaz-client the caseSensitivy flag
505 was set to a wrong value.  Thanks to Robert Sanderson for reporting this.
506
507 When error is returned from present handler, non-surrogate diagnostic
508 is returned in present response (and fetch handler is no longer called).
509
510 * Minor adjustments to pquery parser (PQF). Token characters may be
511 escaped by using backslash (C-style).
512
513 PQF parser allows string attribute values to be specified. For @attr,
514 non-numeric characters after the equal-sign are treated as strings
515 (e.g. @attr 9=title).
516
517 CCL trunction character may be defined (@truncation in file)
518
519 * function zget_ExtendedServicesRequest sets waitAction to
520   waitIfPossible (was wait).
521
522 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
523 to Matthew Carey.
524
525 CCL operator names may be set in field definition files (CCL_bibset).
526 See ccl/bib1 for an example.
527
528 Fixes in ASN.1 compiler for C++ compatibility.
529
530 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
531 and "op_or" to avoid conflict with C++.
532
533 Fixed problem with GNU readline detection on Redhat 7.0.
534
535 Added step-size for Scan backend handler.
536
537 Fixed bug that made the frontend server crash when no attribute
538 set was specified for scan.
539
540 Front-end server automatically switches to original working directory
541 when installed as an NT service. Previously -w had to be specified to
542 make it work.
543
544 Added extended attributes for retrieval module (data1), so that data1
545 records carry d1_readXML/SGML attributes. d1_read also supports
546 null-data rules ( <tag/>)
547
548 On UNIX when POSIX threads are available, a separate library libyazthread
549 is created. Programmers should link with that library and the yaz library
550 when using threads. The reason for the split was that some applications
551 on Linux, such as Apache, doesn't work well when using shared objects that
552 relies on threads.
553
554 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
555 (or any frontend server) in SSL mode by specifying ssl: followed by
556 address. Only tested on UNIX.
557
558 Added feature for CCL module. Virtual structure s=al or s=ol generates
559 and-list and or-list respectively instead of phrase search.
560
561 Added some OID's.
562
563 * Added prefix "yaz_" for the functions log_init.., log_file..  and
564 log_mask_str. This was done to avoid name conflicts with other libraries
565 (such as other PHP extensions).
566
567 Added raw OID member for preferred record syntax (request_format_raw)
568 and returned record syntax (output_format_raw) for backend fetch method.
569
570 Config file yaz-config now accepts options so that it returns specific
571 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
572
573 Shared library support for UNIX using GNU libtool.
574
575 * Modified backend interface. Request/Response struct's replaced by
576 one read/write C struct. For example bend_fetchrequest and
577 bend_fetchresult have been replaced by single bend_fetch_rr struct.
578 Every handler - even search has to be registered in bend_init
579 handler. This means that the YAZ library no longer refers to
580 external functions and it makes it possible to make the whole
581 thing a single DLL/SO.
582
583 Added Segment handler for backend server.
584
585 Added Zmbol/Zebra administrative functions to YAZ client.
586
587 Threaded frontend server on UNIX (when POSIX Threads are available).
588 Starting the server with option -T enables multi-threading.
589
590 --- 1.6 2000/03/03
591
592 Added configure option --enable-comp/disable-comp to control use
593 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
594 located in sub directory asn.
595
596 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
597 in ${exec_prefix}/bin along with the other programs yaz-client and
598 yaz-ztest.
599
600 GNU automake used to maintain makefiles.
601
602 Added several OID's.
603
604 Changed retrieval module so that we can load records with no abstract
605 syntax defined. Tagpaths in these records are fully composed of string
606 tags.
607
608 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
609
610 --- 1.5 1999/12/10
611
612 On UNIX, the generated makefile now supports a proper 'make install'.
613 The prefix can be set via GNU configure to set the install location
614 (default is /usr/local).
615
616 * YAZ programs client and ztest were renamed to yaz-client and
617 yaz-ztest to avoid conflicts when users install YAZ in "standard"
618 locations, such as /usr/bin,/usr/local/bin,etc.
619
620 * YAZ Header files were moved from include to include/yaz. YAZ Header
621 files are referred to as include <yaz/log.h> rather than <log.h>.
622 The YAZ include path (-I ..) is therefore the same as before. Programmers
623 should update their #include statements or use -Ipath/include/yaz
624 instead. The main motivation for doing this change is that YAZ header files
625 can be installed in "standard" locations /usr/include,/usr/local/include 
626 without introducing conflicts, since ALL YAZ header files are stored
627 in subdirectory yaz (under /usr/include for example).
628
629 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
630 rather than project/workspace files. We switched because project files
631 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
632 details.
633
634 Changed name of logging function, logf, to yaz_log, to prevent name
635 clash with some math-log functions. The YAZ header log.h defines logf
636 to yaz_log (#define) so there should be no incompatibilities by this
637 modification.
638
639 Added bend_start/bend_stop handlers for server. These handler are
640 called on start/stop of server. For windows they are called whenever
641 a service is started/stopped.
642
643 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
644 a fairly small ASN.1 compiler written in Tcl. The compiler is located
645 in util/yc.tcl. The auto-generated C code structures are, in a few
646 cases, incompatible with the old decoders. There are differences in the
647 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
648 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
649 The preprocessor variable ASN_COMPILED is defined when the compiled
650 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
651 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
652 wish to use the old encoders/decoders you can specify --disable-yc
653 for configure.
654
655 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
656 version so that it supports both new - and old version of DB Update
657
658 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
659 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
660 change. The name parameter can be set to 0 in which no name is specified
661 for the construction. The macros odr_implicit and odr_explicit sets name
662 parameter to zero for the construction involved. New macros
663 odr_implicit_tag and odr_explicit_tag are similar to the others,
664 except that a name parameter is added. For programmers' that don't use
665 ODR they probably only need to change the call to z_APDU and z_External.
666
667 Added access control facility by interfacing the TCP wrapper library.
668 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
669 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
670 name of the daemon and enables the access control as specified in
671 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
672
673 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
674 den Dool <H.M.vdnDool@kub.nl>.
675
676 Added reference ID parameter to most functions in server API - refer
677 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
678
679 Changed name of ccl library to libccl.a (was ccl.a).
680
681 Fixed bug in decoder for Explain (Category TargetInfo).
682
683 Added support for GNU readline in client. Thanks to Jacob Poulsen
684 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
685
686 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
687 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
688 IMPLEMENTATION! This change was made to the development version before
689 the ZIG decided to retract the amendment. If any users MUST be
690 compatible with the original Update definition, PLEASE CONTACT US, and
691 we will include a separate definition corresponding to the old Update
692 ES. Note that because of the change to the ASN.1 of the
693 TaskPackageRecordStructure we cannot define a single structure that
694 will support both versions.
695
696 * Added const modifier to buffer parameter for some ODR/BER encoding
697 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
698 completeWAIS, odr_dumpBER.
699
700 Fixed bug in client.c which caused a crash when a scanResponse didn't
701 contain positionOfTerm.
702
703 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
704 * will cause an error in a client if a non-YAZ target sends both a
705 * list of Scan entries and non-surrogate diagnostics.
706
707 Retrieval module enhancements. Tag sets may be typed in the reference
708 to it. From the .abs-file the "tagset" directive takes a third optional
709 integer type for the tag set referenced. From a .tag-file the "include"
710 directive takes a third optional type as well. The old "type" directive
711 in the tag set itself is still recognized but acts as the default type
712 for the tag set.
713
714 Backend interface change. Individual Scan terms returned from bend_scan
715 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
716 in include/backend.h.
717
718 Retrieval module enhancements. Multiple tag sets and attribute sets may
719 be specified in abstract syntax specs. Revised the error/warning for
720 logging messages reported by the retrieval module when reading the
721 various spec files.
722
723 Object Identifier system (oid_..) changed. The API is backwards
724 compatible but the oid-routines now allocates new OID's when needed.
725 Raw OID's may be specified in oid_getvalbyname.
726
727 YAZ now uses GNU configure to generate Makefile(s).
728
729 * Minor changes in some of the member names of DeleteResultSetRequest and
730 DeleteResultSetResponse. See include/proto.h.
731
732 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
733 and added member 'languages' in TargetInfo (which was missing).
734
735 Changed the way attribute sets are handled in the retrieval
736 module. These are now cached, just like the abstract syntaxes
737 (schemas).
738
739 Changed YAZ so that it links with compiled ASN.1.
740
741 Added Explain-schema definitions and mapping routines. The following
742 Explain categories have been implemented: AttributeDetails,
743 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
744
745 Fixed minor bug in Windows version of Server Library.
746
747 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
748
749 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
750
751 Added EXTERNAL: UNIverse Resource Report (non-standard).
752
753 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
754 ENUMERATED and SET OF.
755
756 * Added 'const' to some of the char pointer arguments for the
757 functions, data1_read_node, data1_getelementbytagname,
758 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
759 data1_get_absyn.
760
761 Fixed bug in data1_insert_taggeddata - the last_child member of
762 parent wasn't initialised.
763
764 * Changed data1_read_record and data1_read_node so that the supplied
765 "SGML"-buffer is read-only. In particular the resulting data1 - tree
766 doesn't refer to any parts of the "SGML"-buffer.
767
768 Fixed bug in server library (Windows version of statserv_remove).
769
770 * Changed code so that it compiles as C++. The type definition
771 of Odr_fun which is a member of Odr_arm was changed. The result is,
772 that an explicit typecast is needed for the fun pointer when
773 using Odr_arm - as in:
774     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
775
776 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
777
778 Implemented the new structured date and time definition as approved
779 by the ZIG. Added schemaId element to the specificTag in Espec-1
780 (also approved at the last ZIG). Thanks to RVDM.
781
782 Added some Object identifiers (RVDM).
783
784 Changed the Update Extended Service (RVDM).
785
786 Added command "refid" to client which specifies referenceId for
787 the following requests.
788
789 Implemented extended service handling for server. See ztest.c
790 for an example as well as backend.h. New handlers are registerd
791 in the Init handler.
792
793 * Changed interface for sort in server.
794
795 Added new members to statserv_options_block. It allows a server
796 to read options from another source than just the command line. Thanks
797 to Charles Woodfield.
798
799 * Changed definition of Z_Triple in file prt-grs.h - member boolean
800 renamed to zboolean. Some C++ compilers complained about the name.
801
802 Minor changes to gils.abs. Added index 's' (sort) on title
803 and date/time-last-modified.
804
805 --- 1.4pl2 1998/1/30
806
807 Fixed bug in server library regarding inetd mode (-i). This bug
808 was introduced by release 1.4.
809
810 --- 1.4pl1 1998/1/29
811
812 Added sort facility in client and backend server interface.
813
814 Fixed problem with dependencies in Makefile(s).
815
816 Fixed bugs for encoders/decoders of extended services and 
817 SearchInfoReport.
818
819 Implemented sub-tree feature for schemas. Sub-trees are
820 referenced in *.abs-files. See explain.abs for an example
821 of the use of this feature.
822
823 Modified bib1.att; local attributes for ANY didn't include
824 ANY itself (only affects use of the retrieval module).
825
826 Fixed bug in plain SGML reader in function data1_read_node:
827 tags with prefix "var" was incorrectly interpreted as variants.
828
829 Added feature "sub-schemas" to enable references to - and definitions
830 of - group of elements.
831
832 * Removed member parent from type data1_element (in data1.h).
833
834 Implemented function odr_nullval() that returns the value of
835 ODR_NULLVAL.
836
837 * Removed member num_children from data1_node (in data1.h).
838
839 Made NT service interface part of the server library. The
840 function statserv_main uses the NT service when required and
841 calls the statserv_start / statserv_close routines.
842
843 Routine zget_SearchRequest and zget_PresentRequest fills
844 resultSetName/Id member with "default" instead of "Default".
845
846 Fixed memory leak in server. Request queue member wasn't freed.
847
848 Fixed nmem_exit so that memory is freed.
849
850 --- 1.4 1997/10/2
851
852 Revised the CCL parser utility to be thread safe.
853
854 Added function, oid_ent_to_oid, to replace the function 
855 oid_getoidbyent, which is not thread safe.
856
857 * Added nmem_init and nmem_exit to initialize and release
858 NMEM resources. Function nmem_init should be called once in the
859 initial thread before NMEM/ODR is used. statserv.c and client.c
860 have been changed accordingly. The change was necessary to make
861 NMEM thread safe. The NMEM memory pool is shared amongst threads
862 in a process. Unix-based applications will still work fine without
863 calling this.
864
865 Added NT Services interface for the the Z39.50 (statserv) Server. 
866 Refer to the ztest.c source on the usage.
867
868 Windows 95/NT port using MSVC5.0. Project files are included in the
869 distribution.
870
871 * Defined new 'global' handle for the retrieval (data1) system. The
872 new handled, data1_handle, describes the state of the data1 system.
873 This handle is passed as first argument to virtually all
874 data1 related routines. The functions data1_create and data1_destroy
875 creates and destroys a data1 handle respectively.
876
877 Added ODR encode stream member to all backend request structures
878 init, search, scan etc. This stream should be used to allocate all
879 memory used for the response when thread safe operation is needed.
880
881 Changed the comstack utility, cs_addstr, to be thread safe. The
882 returned hostname string returned by the function is now part the
883 COMSTACK instance.
884
885 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
886 function. The cs_straddr takes a COMSTACK handle as argument, so this
887 function must be used after cs_create and before bind/connect.
888 This function is thread safe.
889
890 Moved test server to 'ztest' directory - generic server code still
891 in 'server' directory.
892
893 Made prefix query (pquery.c) utility thread safe.
894
895 Added new function modifier YAZ_EXPORT to 'export' public DLL
896 functions when using windows (see include/yconfig.h).
897
898 Added definitions to the OID database (util/oid.c) (RVDM).
899
900 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
901
902 Added call to ccl_rpn_delete in client program.
903
904 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
905 release of RPN structure.
906
907 Added support for C++, headers uses extern "C" for public definitions.
908 With input from RVDM.
909
910 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
911 Thanks to Ronald van der Meer (RVDM).
912
913 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
914
915 Added support for private extensions to the OID database
916 (oid_setprivateoids()). Thanks to RVDM.
917     
918 Added optional, physical ANY (key replication)
919
920 Fixed null-reference problem in GRS-1 output filter.
921
922 Proximity operator added to Prefix Query Format (PQF).
923
924 In test client command "base" accepts multiple databases.
925
926 Fixed bug in cs_close stack that caused trouble with WINSOCK.
927
928 --- 1.3 1996/10/11
929
930 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
931
932 Smallish bug-fixes in the new encoders/decoders (explain).
933
934 Bug fixed in DeleteRequest.
935
936 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
937
938 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
939
940 Added SOIF syntax (using private OID for now) to retrieval module and client.
941
942 Added Update extended service.
943
944 Added SearchResult-1 additional info structure.
945
946 Added optional CCL (ISO8777) interpreter as separate module. Available
947 in linemode client.
948
949 --- 1.2 1996/6/10 (1st anniversary release)
950
951 Added Summary record syntax. Lightly tested.
952
953 Added OPAC record syntax. Untested.
954
955 Added ResourceReport service encoders/decoders. Untested.
956
957 Fixed bug in z_Unit - wrong tagging on unitSystem.
958
959 Fixed bug in the DiagRecs decoder.
960
961 Added options for max PDU size and session timeout to frontend-server.
962
963 Added documentation of query-language parsers and other supporting utilities.
964
965 [frontend-server] Added Attribute set to the bend_scanrequest API.
966
967 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
968 surrogate diagnostics were generated.
969
970 [retrieval] Allow multiple local values for attribute.
971
972 [retrieval] Allow multiple attributes per element in .abs files. index type.
973
974 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
975
976 --- 1.1pl2  1996/4/10
977
978 Minor changes, mostly specific to Zebra's requirements (retrieval)
979
980 --- 1.1  1996/2/20
981
982 Repaired bug in frontend server when running multiple listening
983 endpoints in dynamic mode.
984
985 z_External() now won't break if a known, ASN.1 value comes encapsulated
986 in an octet-string. The value will pass through unmodified in an Odr_oct.
987
988 Added a bit of code to the demo client to decode & display
989 ASN.1-structured records represented in the octet-aligned branch of
990 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
991
992 Added z_ext_getentbyref() to the ASN module. Doc updated.
993
994 * Completed the SCAN definition in the ASN module. This may break SCAN
995 code based on older YAZ-versions at compile-time. The fix is easy -
996 look in proto.h.
997
998 * Added 'displayTerm' and OtherInformation to the TermInfo structure
999 under the SCAN definition. Remember to initialize this, server-people.
1000
1001 Comstack should now support the WAIS protocol in TCP/IP mode. Note
1002 that this does not extend to ODR and ASN.
1003
1004 Comstack allows insertion of established socket (primarily for
1005 inetd-operation of servers). Doc updated.
1006
1007 Front-end server can now start from the inetd in TCP mode. Doc
1008 updated.
1009
1010 --- 1.0pl4 1996/1/24
1011
1012 Added Sort PDU.
1013
1014 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
1015 the rank and record number.
1016
1017 Adjustments to the frontend server.
1018
1019 Fixed diagnostic BER dumper. It ignored the file argument.
1020
1021 --- 1.0pl3 1996/1/2
1022
1023 Various changes to retrieval module.
1024
1025 Changed the union discriminators of the protocol files from enums to
1026 ints paired with #defines.
1027
1028 *Changed oident.class to oident.oclass to avoid a reserved word in C++
1029  compilers.
1030
1031 *Changed operator in the RPN structure to 'roperator', again to avoid a
1032  conflict with C++.
1033
1034 Fixed problems in Explain decoders/encoders.
1035
1036 --- 1.0pl2 1995/12/6
1037
1038 Memory bug in log module fixed.
1039
1040 --- 1.0pl1 1995/12/5
1041
1042 Occasional malloc() of 0 bytes fixed in d1_espec.c.
1043
1044 Bug in Explain DatabaseInfo module fixed.
1045
1046 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
1047
1048 --- 1.0 1995/11/28
1049
1050 The shift to v1.0 signals that we now consider the *core* functionality
1051 of YAZ reasonably stable (the core being more or less equivalent to
1052 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
1053 tested (Explain not at all - though that will happen soonish).
1054
1055 Minor changes to code to support Windows port.
1056
1057 Various minor changes after we're getting to use GRS-1 & co. more.
1058
1059 Added Espec-1 format.
1060
1061 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
1062 of the protocol and it cannot be selected when encoding (maps into 'string'
1063 when decoding). Needed to talk to some servers.
1064
1065 Demo client can request simple element set names.
1066
1067 Added Diagnostic Format encoders/decoders.
1068
1069 Added simple Close handling to frontend server (no hooks for resource
1070 reporting yet), and demonstration client.
1071
1072 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
1073
1074 --- 1.0b3 1995/08/24
1075
1076 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
1077 handled incorrectly when records were requested in the searchResponse. This
1078 will only affect you if you use the frontend-server.
1079
1080 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
1081 Test-client will ask for and print GRS1. Ztest will return dummy records
1082 on request.
1083
1084 Added Explain encoders/decoders to the service-level API. Untested.
1085
1086 Added Extended Services: Item Order encoders and decoders to the Service-
1087 level API. Untested. We could use a recent copy of the pertinent bits
1088 of the ILL protocol to add those bits.
1089
1090 Added diagnostic format 1 encoders/decoders to the service-level API.
1091 Untested.
1092
1093 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
1094 odr_cons.c, which causes a more correct output.
1095
1096 Fixed handling of searchRequest in frontend server. NextResultSetPosition
1097 was always set to 0 when no records were requested in the searchRequest.
1098
1099 * Added better external-handling. This shouldn't harm old code that
1100 *encodes* externals. It can break code that looks for a
1101 'single-ASN1-type' representation, since those types that are known
1102 are now decoded immediately. Look at the SUTRS sample code in
1103 seshigh.c and client.c. Documentation updated.
1104
1105 Handling of structured records in bend_fetchresponse. Length -1 marks
1106 structured record, type is deduced from format field.
1107
1108 --- 1.0b2 1995/06/27
1109 Fairly quick maintenance release to add SUTRS support.
1110
1111 Fixed handling of SUTRS records in the demonstration client.
1112
1113 * Added format field to the bend_fetchrequest and bend_fetchresponce
1114 structures of the backend API (frontend server). When the record is
1115 returned, the value of the format field is mapped to an OID. The
1116 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
1117 of the record. The special value VAL_NONE in the bend_request means
1118 that no specific format was requested by the client. Documentation
1119 updated accordingly. Test server (ztest) will return a fixed dummy
1120 SUTRS record if your client requests SUTRS.
1121
1122 Documentation updated accordingly.
1123
1124 You can now set external libraries and RANLIB support in the top-level
1125 Makefile.
1126
1127 --- 1.0b 1995/06/19
1128 First public release.