Update NEWS
[metaproxy-moved-to-github.git] / NEWS
1 zoom: returns Explain records for database IR-Explain---1. The
2 target profile records are converted to Explain records via XSLT.
3
4 session_shared: make error recovery configurable. Whether a search
5 is restarted on errors or not, is configurable by attribute "restart"
6 in element "resultset" in configuration.
7
8 session_shared: only relay init for first request. session_shared, for
9 each backend class, now only relays first init request (rather than all).
10 The module only needs to save init response info once. This avoids the
11 need to check for session max.
12
13 --- 1.3.22 2012/02/02
14
15 zoom: fix memory leaks.
16
17 session_shared: maximum number of sessons is configurable. Default
18 value is 100. Result-sets for backends without named result sets are
19 only re-used if databases is identical for a search. This is under the
20 assumption that performance may suffer for those backends when
21 changing the database for each search.
22
23 multi: combines diagnostics from all backends. All diagnostics from
24 backends are combined into multiple non-surrogate diagnostics; rather
25 than just one diagnostic from first backend.
26
27 --- 1.3.21 2011/12/27
28
29 zoom: relay realm to cproxy parameter file.
30
31 Configuration: Allow filter collection element inside route. This
32 makes it possible to include multiple filters at once.
33
34 zoom: nocproxy also disables urlRecipe.
35
36 --- 1.3.20 2011/12/21
37
38 zoom: return diagnostic if CQL sortby conv fails.  Diagnostic Bib-1 214
39 "Illegal sort relation" is returned. Gets translated to SRU diagnostic
40 90: "Unsupported direction value".
41
42 zoom: honor database argument nocproxy. This disables creating a content
43 connector session (for non-CF targets, usually) and also relays nocproxy
44 as database argument to a CF target.
45
46 --- 1.3.19 2011/12/16
47
48 zoom: Multiple proxy hosts may be given for proxy rich database 
49 parameter. List is comma separated.
50
51 http_file: decodes URI paths properly. Does not return 404: not found
52 if no prefix are matches. Instead packages are passed on.
53
54 --- 1.3.18 2011/12/08
55
56 zoom: content-{user,password,proxy} are passed on to content proxy
57 system and takes precedence over user,password,proxy .
58
59 sru_z3950: SRU extra argument x-log-enable=1 enables a search response
60 with a log element including log material from children filters. At
61 this point, only the zoom filter uses this log facility. It will
62 eventually be used by other filters as well. In particular it might be
63 useful for this feature to track all filters in used during a search.
64
65 zoom: for x-log-enable=1, APDUs sent by ZOOM C, records as received
66 and queries as they are manipulated are logged.
67
68 zoom:  extend addinfo with native diagnostics. Diagnostics as received
69 by ZOOM C are put into addinfo - including ZOOM, HTTP, SRU and Bib-1
70 diagnostics. This indicates both a backend diagnostic and the original
71 form.
72
73 zoom: default urlRecipe value is ${md-electronic-url}
74
75 zoom: target profile setting sruVersion is recognized.
76
77 --- 1.3.17 2011/11/17
78
79 zoom: log target profile record fetched (AKA Torus).
80
81 --- 1.3.16 2011/11/17
82
83 Change target profile parameter CfSubDb to CfSubDB.
84
85 --- 1.3.15 2011/11/12
86
87 zoom: bug fix: realm was relayed to CF targets by mistake (realm only
88 makes sense to the zoom module itself).
89
90 --- 1.3.14 2011/11/11
91
92 zoom: realm may be given as part of database.
93
94 --- 1.3.13 2011/10/26
95
96 Fix Origin class assigment method; was removd by mistake in 1.3.12.
97
98 --- 1.3.12 2011/10/26
99
100 zoom: database args x-name=value are passed through to backend database.
101
102 SRU filter: user may specify session ID that is passed to log entries
103 that follows. It is specified by using x-session-id in the SRU arguments.
104
105 zoom: fix null pointer reference which would occur for bad url parameter
106 inside "torus" or if url was not given.
107
108 --- 1.3.11 2011/09/09
109 Fix bug in filter session_shared where sessions would not expire
110 properly (session ttl). This in turn could make the target close the
111 connection before expected and session_shared would return diagnostic
112 2: system temporarily available.
113
114 --- 1.3.10 2011/09/09
115
116 zoom: new target profile setting: sortmap_field. If sortmap_field is given
117 the field is mapped to the value for the sortmap. Values not matching
118 sortmap_field are passed verbatim.
119   
120 zoom: new target profile setting: sortStrategy. One of: "z3950", "type7",
121 "cql", "sru11" or "embed". The "embed" chooses type-7 or CQL sortby
122 depending on whether RPN or CQL is actually sent to the target.
123
124 --- 1.3.9 2011/08/25
125
126 zoom: urlRecipe result is stored in <pz:metadata type="generated-url">.
127
128 zoom: For content proxy authentication is stored in param name
129 "auth", instead of "authentication".
130
131 --- 1.3.8 2011/08/22
132
133 zoom: relay schema in SRU mode. Previously recordSchema was not affected
134 by elementSet.
135
136 --- 1.3.6 2011/08/22
137
138 zoom: new target profile element literalTransform that holds XSLT
139 (encoded as string) for target. Only if present and non-zero length it is
140 considered present. This takes precedence over transform.
141
142 Don't rely on trang anymore for Git checkout builds. Configuration in etc
143 will only be properly validated if trang is available. From now on only
144 relax NC files are bundled with the source dist.
145
146 Updates to check for Boost unit test (autoconf stuff). On MacOSX this
147 component was not detected when it should be.
148
149 --- 1.3.5 2011/08/12
150
151 z3950_client: mark non-surrogate diagnostics from backend.
152
153 zoom: a proxy may be specified for HTTP fetch of target profiles.
154
155 --- 1.3.4 2011/08/01
156
157 Honor piggyback. Makes some SRU targets behave that insist on
158 maximumRecords > 0, but also increases performance.
159
160 --- 1.3.3 2011/08/01
161
162 Fix dlpath in installed metaproxy.xml for RPM/Deb package. The
163 file was not update for libdir/metaproxy4 in version 1.3.2.
164
165 --- 1.3.2 2011/08/01
166
167 Change location of Metaproxy modules from libdir/metaproxy to
168 libdir/metaproxy4. Directory libdir/metaproxy is also owned by 
169 libmetaproxy3 and, thus, should not be used by libmetaproxy4.
170
171 New facility to dump APDUs from zoom filter. Enabled by 
172 <log apdu="true"/> in the zoom filter configuation.
173
174 zoom filter bug fix: SRU diagnostics received from backend was
175 not properly converted to Bib-1 diagnostics.
176
177 Package metaproxy depends on libmetaproxy4, same version.
178
179 --- 1.3.1 2011/07/28
180
181 zoom: fix a bug WRT passing authentication parameters to backends.
182
183 --- 1.3.0 2011/07/27
184
185 Fixes for windows Makefile.
186
187 --- 1.2.10 2011/07/25 
188
189 Change major version of metaproxy library from 3 to 4. This in turn
190 makes new package names for Debian and RPM.
191
192 --- 1.2.9 2011/06/27
193
194 zoom: enable marc-8 encoding by default for usmarc and opac (in pz2
195 transforn mode).
196
197 zoom: configurable element sets for record transforms.
198     
199 zoom: the target profile based transform is specified by element_transform
200 in element torus of of the ZOOM filter configuration ; default value
201 is "pz2". Target profile based retrieval is specified by element_raw
202 in configuration. It will perform same steps, but omit the XSL transform.
203 Default value is "raw".
204
205 zoom: element set is omitted if not set in profile. But only if pz2
206 transform is in effect. Previously the default element set was to "F".
207
208 zoom: For non-CF targets database arguments are parsed. User may supply
209 db,user=myuser&password=mypass for non-CF targets. These values override
210 what's given the authentication from the target profile.
211
212 session_shared: fix reference to freed memory. Would occur if a search
213 response had non-surrogate diagnostics.
214
215 --- 1.2.8 2011/06/22
216
217 Route may be given for each port in frontend_net.
218
219 --- 1.2.7 2011/06/22
220
221 Documentation for zoom filter. Local target profiles may be specified.
222
223 Fixes for zoom filter.
224
225 --- 1.2.6 2011/06/15
226
227 First version with zoom filter.
228
229 --- 1.2.5 2011/05/06
230
231 Filter z3950_client may be configured to always send a close APDU
232 to backend target when connection/session is closed. This will only
233 happen if close APDU is not already sent. Enabled by configuration
234 for z3950_client (force_close).
235
236 Filter virt_db and multi: relay close APDU.
237
238 Filter virt_db and multi: relay init size parameters 
239 preferredMessageSize and maximumRecordSize.
240
241 Filter sru_z3950: increase init sz parameters from 1MB to 10 MB.
242
243 --- 1.2.4 2011/01/27
244
245 RPM package for Metaproxy works for both SLES11 and Centos 5.5.
246
247 metaproxy-config: exec_prefix, libdir, includedir. Use these variables
248 as determined by configure.
249
250 RPM: Release includes 'indexdata' name. Use indexdata in release name so
251 this package can be distinguished from other vendors.
252
253 --- 1.2.3 2010/10/04
254
255 Fix filter multi: relay idAuthentication parameters.
256
257 --- 1.2.2 2010/09/15
258
259 Add metaproxy-config for returning compiler flags, libraries.
260
261 --- 1.2.1 2010/08/18
262
263 Fix --with-boost=PREFIX .
264
265 --- 1.2.0 2010/07/09
266
267 session_shared: fix use of maintenance thread.
268
269 Introduce 'start' method for filters and routers. It gets called after
270 configure and after fork, but before processing. This changes API -
271 from libmetaproxy2 to libmetaproxy3.
272
273 --- 1.1.7 2010/06/30
274
275 session_shared: ensure backend session is closed if init rejected
276 is received.
277
278 z3950_client: fix NULL ptr reference that could occur if two clients
279 connected concurrently and if max-sockets was in effect.
280
281 --- 1.1.6 2010/06/21
282
283 Fix bug 3497 - Metaproxy unstable while stopping.
284
285 Fix bug 3495 - SEGV in SRU filter.
286
287 --- 1.1.5 2010/06/15
288
289 Filter multi throws diagnostic 'Present Out of Range' when
290 appropriate - rather than returning 0 records.
291
292 Filter virt_db: fix bad result reuse. Could happen if a result
293 was overriden and a backend did not supported named result sets.
294
295 --- 1.1.4 2010/05/11
296
297 Filter log: category access logs diagnostics even if searchStatus
298 or presentStatus is 'success'.
299
300 --- 1.1.3 2010/04/21
301
302 The SRU to Z39.50 filter does repeated Z39.50 present requests
303 to fetch all records. Needed when a Z39.50 server returns partial
304 results (due to message size limits).
305
306 --- 1.1.2 2010/03/18
307
308 Metaproxy now kills all child processes that are spawned by
309 modules (in case of fork, exec).
310
311 --- 1.1.1 2010/01/28
312
313 Debian package now installs /etc/metaproxy/metaproxy.xml which
314 includes all XML files /etc/metaproxy/filters-enabled .
315 The include facility uses YAZ' yaz_xml_include_simple (YAZ 4.0.1).
316
317 --- 1.1.0 2010/01/20
318
319 Package based on YAZ version 4 and YAZ++ 1.2.0. It now includes a
320 development package to facilitate 3rd party Metaproxy modules.
321
322 --- 1.0.23 2010/01/04
323
324 Filter virt_db: Close backend filter session when Init rejected is received
325 from it (in which case it's not really closed yet). This will ensure we don't
326 run out of resources such as FDs in this case.
327
328 sru_z3950 filter: Accept any database (including those not listed).
329
330 --- 1.0.22 2009/12/03
331
332 Prepare for 64-bit YAZ. yazproxy will still work with YAZ++ 1.1.4 or
333 later which means YAZ 3.0.47 or later.
334
335 --- 1.0.20 2009/11/19
336
337 For filter virt_db, the database is a glob pattern and the virtual
338 database sections are consulted in the order given.
339
340 --- 1.0.19 2009/07/08
341
342 For filter multi, the target (for routing) may be given as a glob-pattern.
343
344 More documentation for filters virt_db and multi.
345
346 Update schema to allow for no database in sru_z3950 filter.
347
348 --- 1.0.18 2009/06/30
349
350 Added limit filter to put sleep (penalty) for heavy use.
351
352 Filter frontend_net may be configured to limit the number of new connections
353 from same IP to some value (connect-max).
354
355 Fixed the load_balance filter.
356
357 --- 1.0.17 2009/06/16
358
359 Fix path for metaproxy executable for Debian init.d script.
360
361 --- 1.0.16 2009/06/10
362
363 SRU to Z39.50 filter honors x-username and x-password. If only
364 x-username is given that translates to open authentication (Z39.50v2). If
365 both x-username and x-password is present that translates to idPass
366 authentication (Z39.50v3).
367
368 New facility to change current working directory (-w).
369
370 Update to upstream skeleton of init.d script. Should fix bug #2619.
371
372 Filter session_shared now caches records (used to only cache connections
373 and result sets).
374
375 Filter session_shared now invalidates a Z39.50 session if a server
376 returns -1 hits. This facility was also part of yazproxy and gets around
377 a bug in Voyager-based Z39.50 servers.
378
379 --- 1.0.15 2008/11/18
380
381 Fixed reference counting bug in Z39.50 client module (could cause SEGV).
382
383 --- 1.0.14 2008/06/09
384
385 Fixed the value of SRU record schema in searchRetrieve response. It was set
386 to a fixed value of "dc" before.
387
388 Serialize identical SRU requests. This is useful if HTTP client software
389 fires identical requests against metaproxy.
390
391 Allow Z39.50 target to be specified for SRU requests by using SRU extra
392 parameter x-target. Allows SRU to contact arbitrary Z39.50 targets and
393 avoid static configuration. This facility is handled by the sru_z3950 module
394 and the z3950_client module.
395
396 Allow maximum number of sockets to be used for a Z39.50 client by the
397 use of SRU extra parameter x-max-sockets. This facility is handled by the
398 sru_z3950 module and the z3950_client module.
399
400 --- 1.0.13.1 2008/02/29
401
402 Simplified check for Boost libraries.
403
404 --- 1.0.13 2008/02/29
405
406 First Debian package.
407
408 The sru_z9350 filter now recognizes SRU parameter z-target as being
409 a ZURL of the form host/database . 
410
411 Mergetype may be specified for filter 'multi'.
412
413 --- 1.0.12 2007/09/19
414
415 Fixed problem in Makefile WRT library specifictions. This could produce
416 linker errors (when they should not happen).
417
418 Fixed bug #1341: MetaProxy returning different results. Problem was that
419 fix-up of record database did not normalize the database name.
420
421 Documentation updates for Windows compilation.
422
423 --- 1.0.11 2007/06/14
424
425 Fixed problem with logfile being truncated.
426
427 --- 1.0.10 2007/05/23
428
429 Fixed bug #1136: Access rights not enforced.
430
431 Extension for log module. The log category 'access' logs more details.
432 New category 'user-access' added which is simlar to 'access' but adds
433 the Z39.50 user as for all entries in a session.
434
435 Switched to GPL v2.
436
437 Added support for configurable default/force target/vhost for module Z39.50
438 client module.
439
440 --- 1.0.8 2007/01/25
441
442 Implemented filter, session_shared, which optimizes usage of Z39.50
443 sessions and result sets.
444
445 New filter, record_transform, which converts MARC/XML records.
446
447 New filter, sru_z3950, which converts SRU to Z39.50 packages.
448
449 New filter, load_balance, in development.
450
451 New filter, zeerex_xplain.
452
453 XML framework for config files started.
454
455 Master RelaxNG Compact schema's are found in xml/schema/*.rnc,
456 RelaxNG XML schemas and XML Schema's are generated from RNC syntax.
457 XML config files are checked against RNG and XML Schema's.
458
459 XSLT transformation framework added in xml/xslt/*.xsl, consisting mainly of 
460 LOC Marc21 stylesheets found at http://www.loc.gov/marcxml/xslt.
461 Added stylesheet explain2cqlpqftxt.xsl which transforms a standard SRU ZeeReX 
462 explain record to YAZ CQL-to-PQF text config file. 
463
464 --- 1.0.7 2006/11/07
465
466 Added 'timeout' setting for filter frontend_net which specifies the number
467 of seconds a session is idle before it is closed. Default timeout is
468 300 (5 minutes).
469
470 --- 1.0.6 2006/07/07
471
472 Database name in records returned set for virt_db/multi filters.
473
474 Filter session_shared now functional.
475
476 Log filter can be configured to write to a given file using 'filename'
477 element. Also information category can be specified with 'category'. If
478 filename is omitted, the log filter writes to stdout. See etc/config5.xml
479 for example.
480
481 --- 1.0.5 2006/05/16
482
483 Fixed compilation on Windows.
484
485 --- 1.0.4 2006/05/16
486
487 Added documentation for the hidenavailable option for the multi filter.
488
489 --- 1.0.3 2006/05/16
490
491 Fixed bug #573: Hide errors for individual servers. If the element
492 'hideunavailable' is given in the configuration, individual servers
493 being unavailable are hidden (unless all are unavailable). 
494
495 Fixed bug #574: Database names are recognised case-sensitively.
496
497 Fixed bug #567: Fix up database name in Name-Plus-Record.
498
499 Fixed bug #568: Update win/makefile for VS 2005.
500
501 Fixed bug #569: Some options throws unknown exception.
502
503 --- 1.0.2 2006/04/28
504
505 More information about virtual hosts. The 'etc' directory is part of the
506 distribution tar.
507
508 --- 1.0.1 2006/04/27
509
510 Build instructions for Windows. NMake makefile part of distribution tar.
511
512 --- 1.0.0 2006/04/24
513
514 More documentation.
515
516 Filters functional: auth_simple, backend_test, frontend_net, http_file,
517  log, multi, query_rewrite, template, virt_db, z3950_client.
518
519 Filters in development: session_shared.
520
521 Pseudo-filters: template, dl
522
523 --- 0.9 2006/03/27