Implemented ZOOM option: recordCharset
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 New ZOOM setting, recordCharset, wich value "from[,to]"
4 where from is the character set of a record as received
5 by the target. The character set "to" is desired charset
6 of output record as returned by ZOOM_record_get. If
7 "to" is omitted UTF-8 is assumed.
8
9 YAZ ASN.1 compiler renamed from yaz-comp to yaz-asncomp
10
11 New ODR utility, odr_getelement, which returns name of element for
12 which encoding/decoding failed.
13
14 Fixed ODR so that it returns error code OREQUIRED rather than ONONE
15 in cases where a required element was omitted.
16
17 Bug fix: some MARC8 sequences were not converted.
18
19 New ZOOM option "step" which specifies number of records to be
20 retrieved in one chunk. Used in conjunction with "start" and "count".
21
22 SRW support for yaz-client. Use scheme http: to use it, e.g.
23  http://host:port/db
24
25 yaz-client no longer does (un)intelligent character set conversions
26 by default. Can be enabled with charset and marc_charset commands.
27
28 xmalloc trace fix for 64-bit systems such as DEC alpha. 
29
30 Solaris 2.6 compile fix.
31
32 New function, cql_strerror() translates SRW error codes, as returned
33 by cql_transform_error(), into human-readable English strings.  Used
34 in yaz-client diagnostics when appropriate.
35
36 New CQL2RPN query-type for the command-line yaz-client, parses CQL and
37 converts it into a type-1 query which is sent to the server.  This
38 makes CQL available for use with all Z-servers, as opposed to the tiny
39 minority that can handle CQL queries themselves.
40
41 --- 2.0.2 2003/04/28
42
43 New Debian package layout similar to the Redhat Package layout.
44
45 New ZOOM events ZOOM_EVENT_RECV_{RECORD,SEARCH} for receiving a record
46 and search result respectively.
47
48 --- 2.0.1 2003/04/25
49
50 Redhat package is now several packages: libyaz (runtime libraries),
51 libyaz-devel (development and documentation, and yaz (utility programs).
52 Package spec file by Morten Bøgeskov.
53
54 New member 'schema' in struct bend_fetch_rr which the name of requested
55 schema (SRW/SRU) for record (or NULL if none was given). The fetch
56 handler MAY set this to reflect the schema of the returned record.
57
58 New member 'display_term' in struct scan_entry. GFS now sets member entries
59 and allocates scan entries to be filled by user scan handler. In previous
60 version, entries member was allocated by the scan handler. That still works,
61 but the GFS will ignore member display_term - assuming it was NOT set by
62 the handler. The fact that the GFS now allocates the entries both allows
63 for new members and makes a scan handler easier to write.
64
65 Fix CQL lex buffer overflow.
66
67 SRW/SRU recordPacking. For SRW default recordPacking is string. For
68 SRU default recordPacking is string.
69
70 SRU protocol support for frontend server.
71
72 Fix compile bug for systems that have nl_langinfo but CODESET undefined.
73
74 Added missing PQF transform rules for <= and >= . Thanks to Peter Popovics.
75
76 Added scan for the ZOOM shell (zoomsh).
77
78 --- 2.0 2003/02/23
79
80 * String Identifers for Schemas (Amendment 5).
81 http://lcweb.loc.gov/z3950/agency/amend/am5.html
82 Old definition for schema
83   Odr_oid *schema; /* OPT */
84 New:
85   int which;
86   union {
87      Odr_oid *oid;
88      Z_InternationalString *uri;
89   #define Z_Schema_oid 1
90   #define Z_Schema_uri 2
91   } schema; /* OPT */
92
93 * resultCount parameter to Sort Response (Amendment 1).
94 http://lcweb.loc.gov/z3950/agency/amend/am1.html
95
96 Support for SRW 1.0 over HTTP. This is an optional feature and
97 requires libxml2 to operate. Enable SOAP by specifying --with-xml2
98 for configure.
99
100 Generic frontend server supports HTTP/SOAP/SRW and Z39.50/BER
101 on the same port.  SRW SearchRetrieveRequests are mapped
102 to bend_init,bend_search,bend_fetch,bend_close. 
103
104 Z39.50 Query Type-104 added - to facilitate CQL within Z39.50.
105
106 CQL support. Source is directory 'cql'. CQL is supported in ZOOM
107 (both SRW and Z39.50) and the YAZ client (Z39.50 only).
108
109 ZOOM connections are SRW based if schem http is used for hostname
110 in connect, e.g.  z = ZOOM_connection_new("http://myserver");
111 ZOOM_query may be of type CQL, e.g. ZOOM_query_cql(q, "dc.title=x");
112
113 CCL proximity operators !n, %n converts to PQF @prox 0 n 1 2 k 2
114 and @prox 0 n 0 1 k 2 respectively, meaning: exlusion=false,
115 distance=n, order=true/false, relation=le, prox unit=word. If
116 n is omitted, distance 1 is used.
117
118 Fixed problem with C compiler include path in wrong order.
119
120 For TCP/IP COMSTACK, set recv buffer to an appropriate "large" value
121 on Solaris. Patch from Ko van der Sloot.
122
123 New MARC decode API. All new functions operate on a yaz_marc_t
124 handle. The most important new functions are: yaz_marc_create,
125 yaz_marc_decode_{buf,wrbuf}, yaz_marc_destroy, .. to create handler,
126 decode and destroy respectively. Decoder can produce formats
127 MARC line, simple XML, OAI MARC and MARC XML (LoC). See
128 include/yaz/marcdisp.h.
129
130 YAZ Iconv utility now supports MARC8 decoding (marc8.c). Converts
131 to UTF-8, UCS-32, wchar_t or Latin-1.
132
133 * Prototypes for yaz_iconv_-functions moved to separate header 
134 include/yaz/yaz-iconv.h.
135
136 Make a few private functions 'static' in unix.c. This prevents
137 duplicate unix_close in PHP with YAZ and imap. PHP Bug 20977.
138
139 For ZOOM connection, the options targetImplementation{Id,Name,Version}
140 are set when Init Response is received.
141
142 New function ZOOM_connection_error_x similar to ZOOM_connection_error
143 but returns diagnostic set as well.
144
145 New function yaz_strerror which is a portable wrapper for
146 strerror/strerror_r/GetLastMessage.
147
148 * ZOOM_record_get supports type "xml" in which case MARC XML (from LOC)
149 is returned for MARC. If type is "oai", then OAI MARC is returned.
150
151 Fix creation of lib/yaz-config so it works if srcdir != objdir. Patch
152 from Kang-Jin Lee.
153
154 --- 1.9.2 2002/11/26
155
156 yaz_marc_decode uses OAI MARC as XML format for ISO2709 records.
157
158 Fix bad race conditions on SIGTERM and terminate gracefully in
159 frontend server.
160
161 Move retrieval (data1) module to Zebra since nobody seems to be
162 using it.
163
164 Add GRS-1 render for ZOOM using same format as yaz-client.
165
166 --- 1.9.1 2002/10/05
167
168 Added man pages: yaz-client(1), yaz-ztest(8), yaz(7), zoomsh(1).
169
170 Fix broken ESpec handling in data1 module.
171
172 SGML reader parses comments and makes them part of the data1 tree.
173
174 Added several type casts so that YAZ compiles as C++ code.
175
176 ZOOM didn't handle PDU encoding failures properly.
177
178 Added more Bib-1 diagnostics (approved extensions).
179
180 GNU configure: better check for iconv.
181
182 More portable use of accept, getpeername. Check for socklen_t. Use
183 int/size_t if socklen_t is not defined.
184
185 --- 1.9 2002/09/06
186
187 PQF parser rejects bad queries - including those with extra
188 characters in them. PQF parser used to silently ignore that.
189 Cleaner API for PQF added, which allows you to get detailed
190 error information for bad queries (see yaz/pquery.h).
191
192 Fixed bug in ZOOM_record_get for type "database".
193
194 Implemented mini iconv library supporting conversions between
195 UTF-8, UCS4, UCS4LE and ISO-8859-1. Implemented in util/siconv.c.
196
197 * Removed XML reader (d1_expat.c). It's part of Zebra instead.
198
199 --- 1.8.9 2002/08/20
200
201 Fixed ZOOM C record cache so that preferredRecordSyntax and
202 elementSetName is used to check for already fetched records.
203
204 --- 1.8.8 2002/08/02
205
206 Added three members in bend_initrequest structure to facilitate
207 character set negotiation.
208
209 Fixed a bug in frontend server that could cause indefinite
210 loops under rare conditions. 
211
212 Revised character set utilities (charneg.h) so that encoding
213 UCS-4, UCSA-4, UTF-16 and UTF-8 are encoded non-privately.
214
215 For PQF, directive @term <type> sets term type for Scan/Search.
216 Here <type> is general, string, numeric, null. The term type
217 is inherited - just like @attr.
218
219 New call odr_set_charset that sets character set conversion for
220 international-strings on a ODR stream. Prototype is:
221  int odr_set_charset(ODR o, const char *to, const char *from);
222 The InternationalString is still represented as C string in YAZ 
223 so native strings of type UTF-8, ASCII, etc. will work (UTF-16
224 won't). On the protocol level, you can use any encoding.
225
226 Support for UNIX sockets in ZOOM.
227
228 Solaris recv sometimes returns errno == ENOENT. It is treated as
229 EINPROGRESS. COMSTACK patch by Ko van der Sloot.
230
231 New COMSTACK of type UNIX Socket. Use "unix:/path" as address for
232 both client and server. Code by Morten Bøgeskov.
233
234 --- 1.8.7 2002/05/22
235
236 On Windows ZOOM functions are of type __stdcall rather than __cdecl, so
237 that they can be used directly from Visual Basic. You must recompile
238 your windows APP if you're using ZOOM.
239
240 Character Set and Language Negotiation(3) for ZOOM API and YAZ client.
241 Commands "lang" and "charset" sets language and character set respectively.
242 Options "lang" and "charset" is interpreted by the ZOOM API. Note, these
243 are not part of the official ZOOM spec) All is due to Oleg Kolobov. 
244
245 Attributes from multiple CCL fields may be OR'ed rather than merged
246 using directive "@field or". Fields are still merged by default -
247 equivalent to "@field merge".
248
249 Fixed bug in ZOOM connect that occurred on OpenBSD (maybe others). Patch
250 by Oleg Kolobov.
251
252 Fixed bug in zget for parameter ExtendedServicesResponse.
253
254 Fix OID for ILL.
255
256 --- 1.8.6 2002/03/25
257
258 Added PQF feature: '@attr type=value' may be written as '@type=value'.
259
260 Client displays USR.1:SearchResult-1 (hits per term).
261
262 Additional Search Info for search in Generic Frontend Server.
263
264 Fixed CCL parsing of "field=s".
265
266 WIN32 installer - using the excellent NSIS software from nullsoft.
267
268 Fixed CCL parsing of "field = - <number>".
269
270 Added function yaz_marc_decode that decodes MARC for line mode
271 display or XML (similar to that used by JZKit).
272
273 Fixed BER decoding of OPTIONAL CHOICE. The bug didn't affect the
274 Z39.50. But ISO/ILL was, however.
275
276 Added patch by Rustam T. Usmanov that implements Z39.50 duplicate
277 detection service (Z39.50-1995 Amendment 2) and Language Negotiation (3).
278 See:
279  http://lcweb.loc.gov/z3950/agency/amend/am2.html
280  http://lcweb.loc.gov/z3950/agency/defns/charneg-3.html
281
282 --- 1.8.5 2002/02/03
283
284 New YAZ client features: Command completion and new commands:
285 push_command, set_apdufile, set_marcdump, set_cclfields, register_oid.
286 Code provided by Jacob Poulsen.
287
288 New call oid_trav, that visits all registered OIDs via callback.
289
290 Function ZOOM_record_get now returns const char pointer rather than
291 void pointer. It saves a lot of type casts.
292
293 For YAZ client, command "auth" now allows you to set authentication
294 in IdPass style. It is enabled when three tokens are given - order
295 is user, group and password.
296
297 Fix memory leaks in MARC record handling for ZOOM.
298
299 New option for YAZ client, -k <kilobytes> that sets
300 maximum record size. Similar to -k option for generic frontend
301 server and yaz-ztest.
302
303 More fixes for scan. Non-zero stepSize handled. OID's fixes.
304
305 Prefix query parser reports "fail" when bad attribute set is given.
306
307 Fix in MARC decoder. Proximity logging. Fix for attribute set
308 in scan handler for server. Patches by Shigeru Ishida.
309
310 SSL/COMSTACK updates. cs_rcvconnect completes SSL handshake. ZOOM
311 works with SSL.
312
313 Configure option --with-openssl=<dir> now works when a directory is
314 specified. Patch provided by Morten Bøgeskov.
315
316 New option for YAZ client, -u <auth>, that sets authentication.
317
318 ZOOM fix: error information was sometimes "missing", since error
319 was cleared/reset too when it shouldn't.
320
321 ZOOM_record_get returns ISO2709 buffer when "raw" is given.
322
323 --- 1.8.4 2002/01/04
324
325 Scan for ZOOM API. New object ZOOM_scanset. New functions
326 ZOOM_connection_scan, ZOOM_scanset_size, ZOOM_scanset_term and
327 ZOOM_scanset_destroy.
328
329 New ZOOM function, ZOOM_connection_last_event, that returns type
330 of last event (such as "receive data", "send data", "apdu received",
331 etc.
332
333 New ZOOM option, schema, that specifies schema for retrieval.
334
335 New CCL feature. Qualifiers can be aliases for one or more
336 other qualifiers (if more than one is given, OR is used).
337
338 ZOOM uses named result sets if target supports it.
339
340 Two new YAZ client commands: .  (dot, which sources a script of YAZ
341 client commands), and ! (to execute shell command.). Implemented
342 by Jacob Poulsen.
343
344 Working on Debian packages.
345
346 --- 1.8.3 2001/11/19
347
348 YAZ client enables named result sets only if target supports it.
349
350 *** ZOOM. Prefix for ZOOM definitions changed from Z3950_ to ZOOM_.
351
352 * ZOOM. Removed Z3950_connection_host. Use Z3950_connection_option_get
353 with key="host" to get same result.
354
355 * ZOOM. Added Z3950_record_clone and removed Z3950_resultset_get.
356 Function Z3950_resultset_record(s) returns references to records
357 "owned" by resultset. To become owner use Z3950_record_clone.
358
359 Function z_ext_record handles Extended Services. Thanks to
360 Irina Dijour.
361
362 --- 1.8.2 2001/11/12
363
364 CCL Parser fix: ignore token comma when dealing with and-lists.
365
366 Documentation updates for COMSTACK.
367
368 * ZOOM changes. Query object renamed from Z3950_search to Z3950_query.
369 Changed prototype Z3950_records. For some functions, int parameters
370 were changed to size_t.
371
372 TCP/IP COMSTACK no longer uses getprotobyname to avoid memory leak
373 on some Unices.
374
375 New MARC decode/display function, marc_display_exl, which properly rejects
376 non-ISO2709 records. YAZ client uses it.
377
378 --- 1.8.1 2001/10/29
379
380 Fix bug: local attribute set wasn't set correctly in PQF strings.
381
382 --- 1.8 2001/10/25
383
384 * Old Z39.50 codecs no longer supported. 
385
386 Added ZOOM C binding. See http://zoom.z3950.org/
387
388 Renamed states for COMSTACKs to avoid confusion with events.
389
390 Implemented cs_look and proper cs_rcvconnect.
391
392 Fixed COMSTACK error that occurred on HPUX. Fix by Giannis Kosmas.
393
394 Configure detects POSIX threads on OpenBSD.
395
396 When sort flag 'i' was specified in yaz-client the caseSensitivy flag
397 was set to a wrong value.  Thanks to Robert Sanderson for reporting this.
398
399 When error is returned from present handler, non-surrogate diagnostic
400 is returned in present response (and fetch handler is no longer called).
401
402 * Minor adjustments to pquery parser (PQF). Token characters may be
403 escaped by using backslash (C-style).
404
405 PQF parser allows string attribute values to be specified. For @attr,
406 non-numeric characters after the equal-sign are treated as strings
407 (e.g. @attr 9=title).
408
409 CCL trunction character may be defined (@truncation in file)
410
411 * function zget_ExtendedServicesRequest sets waitAction to
412   waitIfPossible (was wait).
413
414 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
415 to Matthew Carey.
416
417 CCL operator names may be set in field definition files (CCL_bibset).
418 See ccl/bib1 for an example.
419
420 Fixes in ASN.1 compiler for C++ compatibility.
421
422 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
423 and "op_or" to avoid conflict with C++.
424
425 Fixed problem with GNU readline detection on Redhat 7.0.
426
427 Added step-size for Scan backend handler.
428
429 Fixed bug that made the frontend server crash when no attribute
430 set was specified for scan.
431
432 Front-end server automatically switches to original working directory
433 when installed as an NT service. Previously -w had to be specified to
434 make it work.
435
436 Added extended attributes for retrieval module (data1), so that data1
437 records carry d1_readXML/SGML attributes. d1_read also supports
438 null-data rules ( <tag/>)
439
440 On UNIX when POSIX threads are available, a separate library libyazthread
441 is created. Programmers should link with that library and the yaz library
442 when using threads. The reason for the split was that some applications
443 on Linux, such as Apache, doesn't work well when using shared objects that
444 relies on threads.
445
446 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
447 (or any frontend server) in SSL mode by specifying ssl: followed by
448 address. Only tested on UNIX.
449
450 Added feature for CCL module. Virtual structure s=al or s=ol generates
451 and-list and or-list respectively instead of phrase search.
452
453 Added some OID's.
454
455 * Added prefix "yaz_" for the functions log_init.., log_file..  and
456 log_mask_str. This was done to avoid name conflicts with other libraries
457 (such as other PHP extensions).
458
459 Added raw OID member for preferred record syntax (request_format_raw)
460 and returned record syntax (output_format_raw) for backend fetch method.
461
462 Config file yaz-config now accepts options so that it returns specific
463 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
464
465 Shared library support for UNIX using GNU libtool.
466
467 * Modified backend interface. Request/Response struct's replaced by
468 one read/write C struct. For example bend_fetchrequest and
469 bend_fetchresult have been replaced by single bend_fetch_rr struct.
470 Every handler - even search has to be registered in bend_init
471 handler. This means that the YAZ library no longer refers to
472 external functions and it makes it possible to make the whole
473 thing a single DLL/SO.
474
475 Added Segment handler for backend server.
476
477 Added Zmbol/Zebra administrative functions to YAZ client.
478
479 Threaded frontend server on UNIX (when POSIX Threads are available).
480 Starting the server with option -T enables multi-threading.
481
482 --- 1.6 2000/03/03
483
484 Added configure option --enable-comp/disable-comp to control use
485 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
486 located in sub directory asn.
487
488 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
489 in ${exec_prefix}/bin along with the other programs yaz-client and
490 yaz-ztest.
491
492 GNU automake used to maintain makefiles.
493
494 Added several OID's.
495
496 Changed retrieval module so that we can load records with no abstract
497 syntax defined. Tagpaths in these records are fully composed of string
498 tags.
499
500 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
501
502 --- 1.5 1999/12/10
503
504 On UNIX, the generated makefile now supports a proper 'make install'.
505 The prefix can be set via GNU configure to set the install location
506 (default is /usr/local).
507
508 * YAZ programs client and ztest were renamed to yaz-client and
509 yaz-ztest to avoid conflicts when users install YAZ in "standard"
510 locations, such as /usr/bin,/usr/local/bin,etc.
511
512 * YAZ Header files were moved from include to include/yaz. YAZ Header
513 files are referred to as include <yaz/log.h> rather than <log.h>.
514 The YAZ include path (-I ..) is therefore the same as before. Programmers
515 should update their #include statements or use -Ipath/include/yaz
516 instead. The main motivation for doing this change is that YAZ header files
517 can be installed in "standard" locations /usr/include,/usr/local/include 
518 without introducing conflicts, since ALL YAZ header files are stored
519 in subdirectory yaz (under /usr/include for example).
520
521 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
522 rather than project/workspace files. We switched because project files
523 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
524 details.
525
526 Changed name of logging function, logf, to yaz_log, to prevent name
527 clash with some math-log functions. The YAZ header log.h defines logf
528 to yaz_log (#define) so there should be no incompatibilities by this
529 modification.
530
531 Added bend_start/bend_stop handlers for server. These handler are
532 called on start/stop of server. For windows they are called whenever
533 a service is started/stopped.
534
535 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
536 a fairly small ASN.1 compiler written in Tcl. The compiler is located
537 in util/yc.tcl. The auto-generated C code structures are, in a few
538 cases, incompatible with the old decoders. There are differences in the
539 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
540 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
541 The preprocessor variable ASN_COMPILED is defined when the compiled
542 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
543 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
544 wish to use the old encoders/decoders you can specify --disable-yc
545 for configure.
546
547 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
548 version so that it supports both new - and old version of DB Update
549
550 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
551 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
552 change. The name parameter can be set to 0 in which no name is specified
553 for the construction. The macros odr_implicit and odr_explicit sets name
554 parameter to zero for the construction involved. New macros
555 odr_implicit_tag and odr_explicit_tag are similar to the others,
556 except that a name parameter is added. For programmers' that don't use
557 ODR they probably only need to change the call to z_APDU and z_External.
558
559 Added access control facility by interfacing the TCP wrapper library.
560 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
561 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
562 name of the daemon and enables the access control as specified in
563 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
564
565 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
566 den Dool <H.M.vdnDool@kub.nl>.
567
568 Added reference ID parameter to most functions in server API - refer
569 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
570
571 Changed name of ccl library to libccl.a (was ccl.a).
572
573 Fixed bug in decoder for Explain (Category TargetInfo).
574
575 Added support for GNU readline in client. Thanks to Jacob Poulsen
576 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
577
578 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
579 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
580 IMPLEMENTATION! This change was made to the development version before
581 the ZIG decided to retract the amendment. If any users MUST be
582 compatible with the original Update definition, PLEASE CONTACT US, and
583 we will include a separate definition corresponding to the old Update
584 ES. Note that because of the change to the ASN.1 of the
585 TaskPackageRecordStructure we cannot define a single structure that
586 will support both versions.
587
588 * Added const modifier to buffer parameter for some ODR/BER encoding
589 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
590 completeWAIS, odr_dumpBER.
591
592 Fixed bug in client.c which caused a crash when a scanResponse didn't
593 contain positionOfTerm.
594
595 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
596 * will cause an error in a client if a non-YAZ target sends both a
597 * list of Scan entries and non-surrogate diagnostics.
598
599 Retrieval module enhancements. Tag sets may be typed in the reference
600 to it. From the .abs-file the "tagset" directive takes a third optional
601 integer type for the tag set referenced. From a .tag-file the "include"
602 directive takes a third optional type as well. The old "type" directive
603 in the tag set itself is still recognized but acts as the default type
604 for the tag set.
605
606 Backend interface change. Individual Scan terms returned from bend_scan
607 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
608 in include/backend.h.
609
610 Retrieval module enhancements. Multiple tag sets and attribute sets may
611 be specified in abstract syntax specs. Revised the error/warning for
612 logging messages reported by the retrieval module when reading the
613 various spec files.
614
615 Object Identifier system (oid_..) changed. The API is backwards
616 compatible but the oid-routines now allocates new OID's when needed.
617 Raw OID's may be specified in oid_getvalbyname.
618
619 YAZ now uses GNU configure to generate Makefile(s).
620
621 * Minor changes in some of the member names of DeleteResultSetRequest and
622 DeleteResultSetResponse. See include/proto.h.
623
624 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
625 and added member 'languages' in TargetInfo (which was missing).
626
627 Changed the way attribute sets are handled in the retrieval
628 module. These are now cached, just like the abstract syntaxes
629 (schemas).
630
631 Changed YAZ so that it links with compiled ASN.1.
632
633 Added Explain-schema definitions and mapping routines. The following
634 Explain categories have been implemented: AttributeDetails,
635 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
636
637 Fixed minor bug in Windows version of Server Library.
638
639 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
640
641 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
642
643 Added EXTERNAL: UNIverse Resource Report (non-standard).
644
645 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
646 ENUMERATED and SET OF.
647
648 * Added 'const' to some of the char pointer arguments for the
649 functions, data1_read_node, data1_getelementbytagname,
650 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
651 data1_get_absyn.
652
653 Fixed bug in data1_insert_taggeddata - the last_child member of
654 parent wasn't initialised.
655
656 * Changed data1_read_record and data1_read_node so that the supplied
657 "SGML"-buffer is read-only. In particular the resulting data1 - tree
658 doesn't refer to any parts of the "SGML"-buffer.
659
660 Fixed bug in server library (Windows version of statserv_remove).
661
662 * Changed code so that it compiles as C++. The type definition
663 of Odr_fun which is a member of Odr_arm was changed. The result is,
664 that an explicit typecast is needed for the fun pointer when
665 using Odr_arm - as in:
666     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
667
668 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
669
670 Implemented the new structured date and time definition as approved
671 by the ZIG. Added schemaId element to the specificTag in Espec-1
672 (also approved at the last ZIG). Thanks to RVDM.
673
674 Added some Object identifiers (RVDM).
675
676 Changed the Update Extended Service (RVDM).
677
678 Added command "refid" to client which specifies referenceId for
679 the following requests.
680
681 Implemented extended service handling for server. See ztest.c
682 for an example as well as backend.h. New handlers are registerd
683 in the Init handler.
684
685 * Changed interface for sort in server.
686
687 Added new members to statserv_options_block. It allows a server
688 to read options from another source than just the command line. Thanks
689 to Charles Woodfield.
690
691 * Changed definition of Z_Triple in file prt-grs.h - member boolean
692 renamed to zboolean. Some C++ compilers complained about the name.
693
694 Minor changes to gils.abs. Added index 's' (sort) on title
695 and date/time-last-modified.
696
697 --- 1.4pl2 1998/1/30
698
699 Fixed bug in server library regarding inetd mode (-i). This bug
700 was introduced by release 1.4.
701
702 --- 1.4pl1 1998/1/29
703
704 Added sort facility in client and backend server interface.
705
706 Fixed problem with dependencies in Makefile(s).
707
708 Fixed bugs for encoders/decoders of extended services and 
709 SearchInfoReport.
710
711 Implemented sub-tree feature for schemas. Sub-trees are
712 referenced in *.abs-files. See explain.abs for an example
713 of the use of this feature.
714
715 Modified bib1.att; local attributes for ANY didn't include
716 ANY itself (only affects use of the retrieval module).
717
718 Fixed bug in plain SGML reader in function data1_read_node:
719 tags with prefix "var" was incorrectly interpreted as variants.
720
721 Added feature "sub-schemas" to enable references to - and definitions
722 of - group of elements.
723
724 * Removed member parent from type data1_element (in data1.h).
725
726 Implemented function odr_nullval() that returns the value of
727 ODR_NULLVAL.
728
729 * Removed member num_children from data1_node (in data1.h).
730
731 Made NT service interface part of the server library. The
732 function statserv_main uses the NT service when required and
733 calls the statserv_start / statserv_close routines.
734
735 Routine zget_SearchRequest and zget_PresentRequest fills
736 resultSetName/Id member with "default" instead of "Default".
737
738 Fixed memory leak in server. Request queue member wasn't freed.
739
740 Fixed nmem_exit so that memory is freed.
741
742 --- 1.4 1997/10/2
743
744 Revised the CCL parser utility to be thread safe.
745
746 Added function, oid_ent_to_oid, to replace the function 
747 oid_getoidbyent, which is not thread safe.
748
749 * Added nmem_init and nmem_exit to initialize and release
750 NMEM resources. Function nmem_init should be called once in the
751 initial thread before NMEM/ODR is used. statserv.c and client.c
752 have been changed accordingly. The change was necessary to make
753 NMEM thread safe. The NMEM memory pool is shared amongst threads
754 in a process. Unix-based applications will still work fine without
755 calling this.
756
757 Added NT Services interface for the the Z39.50 (statserv) Server. 
758 Refer to the ztest.c source on the usage.
759
760 Windows 95/NT port using MSVC5.0. Project files are included in the
761 distribution.
762
763 * Defined new 'global' handle for the retrieval (data1) system. The
764 new handled, data1_handle, describes the state of the data1 system.
765 This handle is passed as first argument to virtually all
766 data1 related routines. The functions data1_create and data1_destroy
767 creates and destroys a data1 handle respectively.
768
769 Added ODR encode stream member to all backend request structures
770 init, search, scan etc. This stream should be used to allocate all
771 memory used for the response when thread safe operation is needed.
772
773 Changed the comstack utility, cs_addstr, to be thread safe. The
774 returned hostname string returned by the function is now part the
775 COMSTACK instance.
776
777 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
778 function. The cs_straddr takes a COMSTACK handle as argument, so this
779 function must be used after cs_create and before bind/connect.
780 This function is thread safe.
781
782 Moved test server to 'ztest' directory - generic server code still
783 in 'server' directory.
784
785 Made prefix query (pquery.c) utility thread safe.
786
787 Added new function modifier YAZ_EXPORT to 'export' public DLL
788 functions when using windows (see include/yconfig.h).
789
790 Added definitions to the OID database (util/oid.c) (RVDM).
791
792 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
793
794 Added call to ccl_rpn_delete in client program.
795
796 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
797 release of RPN structure.
798
799 Added support for C++, headers uses extern "C" for public definitions.
800 With input from RVDM.
801
802 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
803 Thanks to Ronald van der Meer (RVDM).
804
805 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
806
807 Added support for private extensions to the OID database
808 (oid_setprivateoids()). Thanks to RVDM.
809     
810 Added optional, physical ANY (key replication)
811
812 Fixed null-reference problem in GRS-1 output filter.
813
814 Proximity operator added to Prefix Query Format (PQF).
815
816 In test client command "base" accepts multiple databases.
817
818 Fixed bug in cs_close stack that caused trouble with WINSOCK.
819
820 --- 1.3 1996/10/11
821
822 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
823
824 Smallish bug-fixes in the new encoders/decoders (explain).
825
826 Bug fixed in DeleteRequest.
827
828 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
829
830 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
831
832 Added SOIF syntax (using private OID for now) to retrieval module and client.
833
834 Added Update extended service.
835
836 Added SearchResult-1 additional info structure.
837
838 Added optional CCL (ISO8777) interpreter as separate module. Available
839 in linemode client.
840
841 --- 1.2 1996/6/10 (1st anniversary release)
842
843 Added Summary record syntax. Lightly tested.
844
845 Added OPAC record syntax. Untested.
846
847 Added ResourceReport service encoders/decoders. Untested.
848
849 Fixed bug in z_Unit - wrong tagging on unitSystem.
850
851 Fixed bug in the DiagRecs decoder.
852
853 Added options for max PDU size and session timeout to frontend-server.
854
855 Added documentation of query-language parsers and other supporting utilities.
856
857 [frontend-server] Added Attribute set to the bend_scanrequest API.
858
859 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
860 surrogate diagnostics were generated.
861
862 [retrieval] Allow multiple local values for attribute.
863
864 [retrieval] Allow multiple attributes per element in .abs files. index type.
865
866 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
867
868 --- 1.1pl2  1996/4/10
869
870 Minor changes, mostly specific to Zebra's requirements (retrieval)
871
872 --- 1.1  1996/2/20
873
874 Repaired bug in frontend server when running multiple listening
875 endpoints in dynamic mode.
876
877 z_External() now won't break if a known, ASN.1 value comes encapsulated
878 in an octet-string. The value will pass through unmodified in an Odr_oct.
879
880 Added a bit of code to the demo client to decode & display
881 ASN.1-structured records represented in the octet-aligned branch of
882 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
883
884 Added z_ext_getentbyref() to the ASN module. Doc updated.
885
886 * Completed the SCAN definition in the ASN module. This may break SCAN
887 code based on older YAZ-versions at compile-time. The fix is easy -
888 look in proto.h.
889
890 * Added 'displayTerm' and OtherInformation to the TermInfo structure
891 under the SCAN definition. Remember to initialize this, server-people.
892
893 Comstack should now support the WAIS protocol in TCP/IP mode. Note
894 that this does not extend to ODR and ASN.
895
896 Comstack allows insertion of established socket (primarily for
897 inetd-operation of servers). Doc updated.
898
899 Front-end server can now start from the inetd in TCP mode. Doc
900 updated.
901
902 --- 1.0pl4 1996/1/24
903
904 Added Sort PDU.
905
906 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
907 the rank and record number.
908
909 Adjustments to the frontend server.
910
911 Fixed diagnostic BER dumper. It ignored the file argument.
912
913 --- 1.0pl3 1996/1/2
914
915 Various changes to retrieval module.
916
917 Changed the union discriminators of the protocol files from enums to
918 ints paired with #defines.
919
920 *Changed oident.class to oident.oclass to avoid a reserved word in C++
921  compilers.
922
923 *Changed operator in the RPN structure to 'roperator', again to avoid a
924  conflict with C++.
925
926 Fixed problems in Explain decoders/encoders.
927
928 --- 1.0pl2 1995/12/6
929
930 Memory bug in log module fixed.
931
932 --- 1.0pl1 1995/12/5
933
934 Occasional malloc() of 0 bytes fixed in d1_espec.c.
935
936 Bug in Explain DatabaseInfo module fixed.
937
938 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
939
940 --- 1.0 1995/11/28
941
942 The shift to v1.0 signals that we now consider the *core* functionality
943 of YAZ reasonably stable (the core being more or less equivalent to
944 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
945 tested (Explain not at all - though that will happen soonish).
946
947 Minor changes to code to support Windows port.
948
949 Various minor changes after we're getting to use GRS-1 & co. more.
950
951 Added Espec-1 format.
952
953 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
954 of the protocol and it cannot be selected when encoding (maps into 'string'
955 when decoding). Needed to talk to some servers.
956
957 Demo client can request simple element set names.
958
959 Added Diagnostic Format encoders/decoders.
960
961 Added simple Close handling to frontend server (no hooks for resource
962 reporting yet), and demonstration client.
963
964 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
965
966 --- 1.0b3 1995/08/24
967
968 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
969 handled incorrectly when records were requested in the searchResponse. This
970 will only affect you if you use the frontend-server.
971
972 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
973 Test-client will ask for and print GRS1. Ztest will return dummy records
974 on request.
975
976 Added Explain encoders/decoders to the service-level API. Untested.
977
978 Added Extended Services: Item Order encoders and decoders to the Service-
979 level API. Untested. We could use a recent copy of the pertinent bits
980 of the ILL protocol to add those bits.
981
982 Added diagnostic format 1 encoders/decoders to the service-level API.
983 Untested.
984
985 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
986 odr_cons.c, which causes a more correct output.
987
988 Fixed handling of searchRequest in frontend server. NextResultSetPosition
989 was always set to 0 when no records were requested in the searchRequest.
990
991 * Added better external-handling. This shouldn't harm old code that
992 *encodes* externals. It can break code that looks for a
993 'single-ASN1-type' representation, since those types that are known
994 are now decoded immediately. Look at the SUTRS sample code in
995 seshigh.c and client.c. Documentation updated.
996
997 Handling of structured records in bend_fetchresponse. Length -1 marks
998 structured record, type is deduced from format field.
999
1000 --- 1.0b2 1995/06/27
1001 Fairly quick maintenance release to add SUTRS support.
1002
1003 Fixed handling of SUTRS records in the demonstration client.
1004
1005 * Added format field to the bend_fetchrequest and bend_fetchresponce
1006 structures of the backend API (frontend server). When the record is
1007 returned, the value of the format field is mapped to an OID. The
1008 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
1009 of the record. The special value VAL_NONE in the bend_request means
1010 that no specific format was requested by the client. Documentation
1011 updated accordingly. Test server (ztest) will return a fixed dummy
1012 SUTRS record if your client requests SUTRS.
1013
1014 Documentation updated accordingly.
1015
1016 You can now set external libraries and RANLIB support in the top-level
1017 Makefile.
1018
1019 --- 1.0b 1995/06/19
1020 First public release.