connect-max per IP MP-632
[metaproxy-moved-to-github.git] / NEWS
1 --- 1.10.0 2015/10/01
2
3 Fix sort: does not sort during leading present MP-630
4
5 Filter frontend_net: dynamic thread pool. max-threads and stack-size
6 may be configured MP-629
7
8 Fix boost not found on debian-testing MP-628
9
10 --- 1.9.3 2015/09/04
11
12 Fix virt_db creates result-set for failed search MP-627
13
14 --- 1.9.2 2015/09/04
15
16 Fix load_balance: does not retry dead target MP-626
17
18 Provide example of target auth MP-625
19 Also update schema, becuase route is optional for target element.
20
21 Replace indexdata.dk/gils with z3950.indexdata.com MP-624
22
23 Describe auth attribute for multi filter
24
25 --- 1.9.1 2015/08/19
26
27 Avoid naked ptr in filter configure MP-623
28
29 Update to debhelper 9 MP-622
30
31 --- 1.9.0 2015/08/06
32
33 Fix incorrect diagnostic for reverse cql2pqf MP-619
34 The cql_transform_rpn2cql_stream_r returns Bib-1 diagnostics; not
35 SRU diagnostics.
36
37 deb: deprecated substitution ${Source-Version} MP-621
38
39 Fix systemd: reload stops metaproxy MP-620
40 Detect systemd and just do nothing when reload/force-reload is
41 used. Log, however, that it really is not reloading.
42
43 Add http-req-max to frontend_net MP-617
44
45 --- 1.8.10 2015/06/24
46
47 Fix multi: hideunavailable don't hide target that timeout MP-615
48
49 --- 1.8.9 2015/06/01
50
51 Fix race condition in MP log output MP-522
52
53 Fix 'Group' is duplicated twice in RPM spec
54
55 Fix crash in log filter when record syntax is omitted MP-613
56
57 Change target z3950.loc.gov:7090/voyager -> lx2.loc.gov:210/LCDB_MARC8
58 in examples.
59
60 Fix Control-C does not stop Metaproxy spawned by shell MP-610
61 Check for fork mode instead (-D) - rather than debug (-X)
62
63 --- 1.8.8 2015/04/14
64
65 sru_z3950: allow CCL in SRU search MP-606
66 Makes the sru_z3950 filter convert to CCL queries if query type
67 "ccl" is used, eg ?query=water&queryType=ccl&... for SRU 2.0.
68
69 --- 1.8.7 2015/04/01
70
71 Fix dead lock in session_shared (init) MP-605
72
73 --- 1.8.6 2015/04/01
74
75 Fix session_shared caches set with diagnostic MP-604
76
77 Fix assertion failed in session_shared filter MP-603
78
79 Make /usr/share/metaproxy be part of metaproxy RPM MP-601
80
81 Log YAZ version upon start MP-599
82
83 --- 1.8.5 2015/03/17
84
85 sru_z3950: undo Serialize identical SRU GET requests MP-598
86 Now much more elegantly handled by session_shared.
87
88 session_shared: anticipated init and search MP-597
89
90 z3950_client: separate init timeout MP-596
91 Both init-timeout and connect-timeout are configurable by this change.
92 Default is 10 seconds.
93
94 --- 1.8.4 2015/03/16
95
96 zoom: support cf_-params MP-595
97
98 http_client: returns 404 if no destination URI is given
99
100 --- 1.8.3 2015/02/10
101
102 zoom: allow / in user and password db args MP-592
103
104 --- 1.8.2 2015/02/02
105
106 Log rotate no longer reloads configuration - instead Metaproxy just
107 re-opens log files when SIGHUP is received. MP-485
108
109 Debian : init.d metaproxy reload should check configuration MP-591
110
111 Fix Metaproxy stops logging after check config failed MP-590
112
113 --- 1.8.1 2015/01/19
114
115 Fix double free in log filter (with incorrect config) MP-589
116
117 zoom: Add allow_ip feature - fixes MP-588
118 Allow a list of IPs to be given separated by blanks
119 <allow auth_url="http://mkc-admin.indexdata.com/..."
120    allow_ip="127.0.0.1 ::1" .. >
121
122 cql2pqf.txt: Maps dc.subject to Bib-1 21 rather than 47
123
124 zoom: fix CS write-check
125
126 --- 1.8.0 2015/01/08
127
128 zoom: handle contentAuthentication MP-587
129
130 --- 1.7.2 2014/12/16
131
132 Destroy router and filters in parent process MP-584
133
134 Update NMAKE makefile to use Visual Studio 2013 along with Boost 1.57,
135 ICU 54.1, Libxml2 2.9.2, Libxslt 1.1.28.
136
137 --- 1.7.1 2014/12/02
138
139 Use YAZ backtrace facility MP-582
140
141 Fix libmetaproxy-dev depends on libgnutls-dev - MP-580
142 libgnutls-dev is unavailable on jessie.
143
144 Update template filter to avoid Pimpl MP-579
145
146 cgi: POSTed content - part of MP-562
147
148 Fix filter cgi does not relay session close MP-577
149
150 --- 1.7.0 2014/10/28
151
152 Add support for binding outgoing IP for http_client and z3950_client
153 This is enabled by bind_host setting. MP-575
154
155 --- 1.6.0 2014/10/21
156
157 z3950_client: allows negotiation charset to be set MP-574
158
159 cgi: more functional but no support for POSTed content yet (part of MP-564)
160
161 --- 1.5.11 2014/10/20
162
163 http_file: add include of sys/stat.h fixes MP-576
164
165 Fix documentation about SRU client support MP-572
166
167 Initialize Libxml2 - for threaded operation MP-571
168
169 --- 1.5.10 2014/08/26
170
171 On SIGTERM shut down connection+listening sockets MP-568
172 This fixes a problem with 'metaproxy stop' sometimes taking a long time.
173
174 --- 1.5.9 2014/08/15
175
176 zoom: make retry on failure configurable MP-565
177 The default and existing behavior is that backend failures (any
178 diagnostic) makes the module re-search once. The behavior may
179 be changed by db parameter 'retry'. If given value '0' disables
180 retry and '1' enables it. If not given, the Torus record may
181 specify with element retryOnFailure (value '0'/'1').
182
183 --- 1.5.8 2014/08/01
184
185 Fix race condition in SIGTERM handling. Could terminate whole metaproxy
186 instead of just a child process. Extremely rare in real life, hit me with
187 CF stress testing. MP-559.
188
189 --- 1.5.7 2014/07/15
190
191 http_file: passthru option MP-557
192 New facility for http_file to passthru - even if an area is matched. The
193 default behavior (passthru=false) is to return 404: Not found. With
194 passthru=false, next filter is consulted.
195
196 --- 1.5.6 2014/07/14
197
198 Fix ref to freed memory in log filter 1line - MP-556
199
200 echoedSearchRetrieveRequest support MP-555
201
202 --- 1.5.5 2014/06/06
203
204 zoom: allow hostname to be given for ipauth MP-552
205 The Torus setting for that is called auth_hostname.
206
207 --- 1.5.4 2014/06/04
208
209 zoom: IP auth use field "ipRanges" rather than "ip" MP-551
210
211 --- 1.5.3 2014/06/03
212
213 session_shared: close in ~BackendInstance MP-549
214 This fixes a serious issue where some MP would leak sockets.
215
216 session_shared: mutex lock in BackendClass::release_backend MP-550
217 Fixes a SEGV that could occur (in rare cases).
218
219 --- 1.5.2 2014/05/22
220
221 zoom: Do not include ZOOM C's fake surrogate diag recs MP-547
222
223 zoom: fix invalid present response in some cases MP-546
224
225 zoom: Relay Torus HTTP error message
226
227 --- 1.5.1 2014/04/28
228
229 Check for proper limits before using RecordCache functions MP-544
230
231 --- 1.5.0 2014/04/24
232
233 Build packages for Ubuntu Trusty Tahr 14.04 LTS
234
235 sort: crash / invalid_read in filter sort MP-541
236
237 sru_z3950: facet should be stored in additionalSearchInfo MP-533
238
239 doc: fix missing man pages MP-542
240
241 cql_rpn: fix threading problem with CQL to RPN conversion MP-497
242
243 cql_rpn: allow conversion from RPN to CQL (reverse) MP-537
244
245 --- 1.4.8 2014/04/02
246
247 sru_z3950: fix facet response (memory corruption) MP-532
248
249 log: fix crash idPass user is omitted MP-530
250
251 --- 1.4.7 2014/03/25
252
253 query_rewrite: pass-thru non Type-1 queries MP-527
254
255 metaproxy stop (SIGTERM) kills all child processes spanwed by
256 filter (if any) before invoking filter destructors. MP-525
257
258 --- 1.4.6 2014/03/21
259
260 http_file: only supports HTTP GET MP-523
261
262 session_shared: shut down expire thread in destructor
263 This ensures that expire thread is not running after destruction
264 and does bad memory references, etc.
265
266 frontend_net: fix segfault on startup MP-524
267 Would happen if MP was listening on multiple ports and one
268 of the ports was already in use (and MP would exit).
269
270 frontend_net: fix memory leak MP-521
271 This leak would occur if all sessions were in use and the input
272 queue was cleared when a client would close connection (socket).
273
274 frontend_net: fix compilation on Windows (SIGUSR1 does not exist)
275
276 --- 1.4.5 2014/03/14
277
278 http_rewrite: use local skiplist; fixes memory corruption. MP-520
279
280 http_client: x-forwarded-for controls X-Forwarded-For presence
281 If x-forwarded-for setting (boolean) is enabled, http_client will
282 generate an X-Forwarded-For header entry which includes existing
283 X-Forwarded-For (if any) and current peer address (immediate client
284 of Metaproxy). By default x-forwarded-for disabled and X-Forwarded-For
285 will not be generated.
286
287 z3950_client: client_ip controls client-IP presence
288 If client_ip setting (boolean) is enabled, z3950_client will
289 generate a client_ip OID as part of init request which includes
290 previous client_ip (if any) and current peer address (immediate
291 client of Metaproxy). By default client_ip is disabled and client_ip
292 will not be generated.
293
294 HTTP X-Forwarded-For/Z39.50 Client-IP support
295 virt_db, multi: relays Z39.50 client-IP.
296 sru_z3950: converts X-Forwarded-For header to Z39.50 client-IP.
297 zoom: uses Client-IP or origin address (prefer Client-IP).
298 frontend_net: Strips tcp: from peer address (so that it is no longer
299 printed and stripped in zoom filter).
300 z3950_client: builds client-IP list - combining immediate peer address
301 as returned by COMSTACK and existing client-IP list (if avaiable).
302 The Origin only printes first X-Forwarded address.
303
304 --- 1.4.4 2014/02/18
305
306 Log when SIG{TERM,USR1} is received ASAP MP-513
307 Do it in frontend_net event loop rather than in place for metaproxy
308 main, which only exits when all sessions are terminated for SIGUSR1
309 at graceful stop.
310
311 metaproxy-config: quote some RHS values (that might include blanks)
312
313 Fix leak in sru_z3950 filter - when explain is returned MP-511
314
315 Allow stylesheet to be given for sru_z3950 filter MP-510
316 This is based on a patch by Sven Porst and the functionality
317 of the YAZ Generic Frontend Server.
318
319 Allow base attribute in configuration file tags - the attributes are
320 inserted by XInclude usage as mentioned on
321 yazlist: http://lists.indexdata.dk/pipermail/yazlist/2012-Au
322 and noted in a gist: https://gist.github.com/3551094
323
324 Package metaproxy provides virtual package metaproxy6 MP-508
325 This allows module packages to depend on a metaproxy server
326 with version 6 API.
327
328 Filter destructors called upon daemon termination MP-505
329 When metaproxy daemon receives SIGTERM the stop method of each filter
330 is called. The stop method existed before, but did not take any
331 arguements (void).. The frontend_net filter can now distinguish
332 between SIGUSR1 (stop bind, but keep sessions running) and SIGTERM
333 (stop immediately). Note that this changes the API+ABI of Metaproxy
334 filters.
335
336 zoom: sync up with Pazpar2 WRT authentication handling MP-492
337
338 Router: use shared_ptr rather than naked one - to avoid leak if an
339 exception is thrown in configure.
340
341 --- 1.4.3 2013/12/10
342
343 zoom: Add nocproxy=1 for contentConnector sessions MP-501
344
345 Doc: mention proper versions; fix link to Boost win binaries.
346
347 Windows: update for Boost 1.55
348
349 Windows: avoid warning when using boost::split. Done by defining
350 _SCL_SECURE_NO_WARNINGS for Visual Studio.
351
352 Fix LSB conformance for /etc/init.d/metaproxy MP-500
353 Debian: add support for /etc/init.d/metaproxy status
354
355 sort: Add const to Record less than operator in order to compile on
356 OS X Maverick.
357
358 --- 1.4.2 2013/11/15
359
360 session_shared: fix element-set handling in record caching. MP-499
361
362 document http_rewrite. MP-468
363
364 http_write: Honor X-Metaproxy-SkipLink MP-479 . Filter understands and
365 respects the header (which will normally come from the cproxy filter)
366
367 --- 1.4.1 2013/10/31
368
369 RPM: fix dependency for libmetaproxy5-devel MP-496. The libmetaproxy5-devel
370 RPM was unsable in version 1.4.0.
371
372 Remove log message about "backend classes". Appeared in version 1.4.0.
373
374 --- 1.4.0 2013/10/04
375
376 Build RPM/Deb packages with YAZ 5 and yazpp 1.5. Metaproxy still compiles
377 with older version from source, but packages now use YAZ 5 that supports
378 SRU 2.0.
379
380 sru_z3950: Fix SEGV for decoding invalid SRU requests
381 Incorrect reference to union (was explain response rather than
382 search response).
383
384 session_shared: match additionalSearchInfo (includes facets). In
385 layman's terms means that means that facets are properly handled
386 by this filter. Eg a change in requested facets will issue new
387 search and facets from exisiting result set are cached.
388
389 --- 1.3.62 2013/09/11
390
391 http_rewrite: better handling of <script> content in HTML parser. MP-486
392
393 http_rewrite: fix threading issue with regex. MP-482
394
395 bounce: don't use strdup for fixed length content. Error occurred in echo
396 mode only.
397
398 session_shared: expire backend class when no instances left. This
399 means memory clean up, but not really a leak fix.
400
401 virt_db: fix leak for naked ptr.
402
403 cql_rpn: use config relative path for cql2rpn file. MP-481
404
405 Updates for upcoming YAZ 5.
406
407 --- 1.3.61 2013/08/29
408
409 New configuration directories ports.d/routes.d for metaproxy
410 configuration. This allows 3rd party packages to install config
411 for ports and new routes. MP-477
412
413 --- 1.3.60 2013/08/21
414
415 Fix metaproxy-config --libs to return non-mt over mt libs.
416 The -mt versions do not exist as shared objects and cause
417 linker errors for applications linking with Metaproxy.
418 Problem present in versions 1.3.56 - 1.3.59. MP-475
419
420 HTML: clean up char checks. Add ptr to HTML parse spec
421
422 HTML parser stops eating tag when <-char is met  MP-473
423
424 rewrite: do not even compare content types, if we don't have any
425 the regex_match caused a segfault if we had no content-type in the
426 headers. MP-471
427
428 rewrite: within header=... matches only the header value
429 Used to match the whole header line, but we need to use
430 ^$ anchoring for host-relative regexps, and they need to
431 anchor at the ends of the value. MP-470.
432
433 rewrite: Ruleset functional MP-469
434
435 --- 1.3.59 2013/07/12
436
437 session_shared: negotiate init sz parameters.
438 By default, session_shared will honor the paramters given by client.
439 An alternative, but not implemented, algorithm would be to only
440 re-use sessions with same sz parameters. This however, could reduce
441 re-use of sessions a lot. Hence this, simple algorithm instead. The
442 negotiation to a maximum sz values can be enabled by using
443    <init maximum-record-size="sz1" preferred-message-size="sz2"/>
444 in configuration. This will make session_shared send those values
445 to backends and use returned init values in negotaition to
446 client before session_shared.
447
448 session_shared: resolve result-set references.
449 The reference is substitued with the query for old set if database
450 match and query type is Type-1. If not the reference will issue a
451 diagnostic.
452
453 sort filter: relays RecordComposition including elementSet in use for
454 search.
455
456 http_client: better diagnostics
457
458 http_client: disables HTTP redirect handling by default.
459 It can be configured with max-redirects in configuration.
460
461 --- 1.3.58 2013/06/12
462
463 Fix loading of filters cql_rpn and sru_z3950 . Was broken by 1.3.57.
464
465 --- 1.3.57 2013/06/12
466
467 Make RouterChain and RouterXML part of public API (libmetaproxy).
468
469 http_client: honor X-Metaproxy-Proxy as an alternative to
470 the "proxy" configuration. Allows proxy to be set per HTTP request.
471
472 sru_z3950: For SRU requests recognize x-client prefixes as a way
473 to ingest "database parameters".. The suffix of x-client- serves
474 as database argument name. Multiple may be given. For example:
475   http://path/db/?operation=searchRetrieve&x-client-user=a&x-client-password=b
476 is turned into Z39.50 database
477   db,user=a&password=b
478
479 --- 1.3.56 2013/05/27
480
481 New filter present_chunk. This filter allows splitting of present requests into smaller chunks.
482
483 New filter sd_remove, which replaces surrogate diagnostics with
484 SUTRS records. This filter tries to deal with clients that breaks
485 when receiving surrogate diagnostics.
486
487 new filter http_client. Same role as z3950_client, but just for
488 HTTP. Allows Metaproxy to operate as a HTTP proxy.
489
490 New filter http_rewrite1, which serves as purpose on how to rewrite
491 HTTP content with Metaproxy.
492
493 Use libboost-system if available, because newer versions of libboost-threads
494 requires libboost-system.
495
496 Allow frontend_net to serve SSL/HTTPS, because we can specify a server
497 certificate now.
498
499 --- 1.3.55 2013/04/10
500
501 zoom: Torus setting: authenticationMode which may hold values "basic"
502 and "url".
503
504 --- 1.3.54 2013/03/27
505
506 configure: check for Libxslt support in YAZ and rely on definitions
507 from yaz-config, rather than doing own xslt/xml2 checks.
508
509 Allow timestamp format for log lines to be given with option -m
510 for metaproxy. Similar to yaz-ztest/GFS option -m.
511
512 Document log category 'line' for log filter.
513
514 Solr configuration example in etc/config-solr.xml
515
516 multi: do not mess with request package. For scan and search,
517 database-names were modified and the request package was left with
518 dangling pointers that caused a log filter to fail (request package
519 inspected after multi was invoked).
520
521 Documentation: fix id of metaproxy-config ref .
522
523 Documentation: update for USEMARCON support.
524
525 --- 1.3.53 2013/01/31
526
527 record_transform: allow OPACXML to OPAC conversion
528
529 zoom: document content-proxy
530
531 zoom: document db parm content-{user,password}, torus_url. Also
532 <torus auth_url="..> which makes zoom operate in authenticated mode
533 via Torus lookup.
534
535 --- 1.3.52 2012/11/30
536
537 zoom: fix http://-check. SRU search broken in 1.3.51.
538
539 --- 1.3.51 2012/11/15
540
541 zoom: only append http:// for SRU if not already given . Makes it
542 possible to use https-URLs.
543
544 Use yazpp 1.4 or later due to new ABI.
545
546 frontend_net: allow max package size to be specified. Controlled by
547 attribute 'max_recv_bytes' of element 'port'.
548
549 --- 1.3.50 2012/10/29
550
551 For most generated diagnostics by filters, typically temporary
552 system error, augment addinfo message with filter name.
553
554 Add support for CentOS 6 packages.
555
556 sru_z3950: interpret Z39.50 diagnostics part of Init Response.
557
558 Add man page for metaproxy-config.
559
560 --- 1.3.49 2012/10/18
561
562 zoom: new config element passthru. This defines an element set that is
563 passed verbatim to the backend in pz2 mode.
564
565 auth_simple: allow both idPass and open auth. Also fix SEGV that could
566 occur for open auth.
567
568 --- 1.3.48 2012/10/08
569
570 z3950_client: fix string handling for init diagnostics in the case where
571 addinfo was absent.
572
573 query_rewrite: no charset conversion for error queries. Avoid performing
574 charset conversion for query conversion errors. The resulting Type-1
575 query is invalid in this case.
576
577 --- 1.3.47 2012/10/04
578
579 For graceful stop (SIGUSR1), metaproxy will kill children processes.
580
581 Log when metaproxy is invoked in test mode (-t).
582
583 Log PID for each log message.
584
585 multi: combine both NSDs and multiple NSDs into one (diagnostics).
586
587 z3950_client: fixup multiple NSD's too. Like surrogate diagnostics,
588 a (backend=target) is appended for each diagnostic so that can be
589 determined the origin of error.
590
591 multi: hideerrors also in use for present response.
592
593 Solr example in zoom man page.
594
595 Fix typo in query_rewrite config example.
596
597 Log at least first non surrogate diagnostic. Instead of
598 "Z_Records_multipleNSD"
599
600 multi: Fix check for opt Records in present response. A SEGV could occur
601 if a target did not return records and no diagnostics.
602
603 --- 1.3.46 2012/09/24
604
605 Yet another fix for graceful stop.
606
607 --- 1.3.45 2012/09/12
608
609 sru_z3950: relay surrogate diagnostics.
610
611 --- 1.3.44 2012/09/10
612
613 zoom: Honor extraArgs, strip # in zurl.
614
615 multi: fix SEGV for scan. Reported by Rustam T. Usmanov.
616
617 zoom: url_recipe allow %{var[reg]} substitutions.
618 It's like ${var[reg]} but does URI component encoding as well.
619
620 --- 1.3.43 2012/08/22
621
622 RPM/Deb: require yazpp 1.3.2, because it fixes a missing close of
623 non-keepalive HTTP sessions.
624
625 http_file: allow zero size files (bug fix)
626
627 Fix zoom schema: auth_url is optional
628
629 --- 1.3.42 2012/08/20
630
631 zoom: fix un-init memory (could result in SEGV at session close)
632
633 frontend_net: handle X-Forwarded-For. This is stored in package.origin()
634 and may be used in filters as usual.
635
636 zoom: authentication via Torus lookup
637 Enabled by new configuration setting: auth_url . If this is defined,
638 the zoom module will contact Torus for auth/IP lookup and that will
639 define realm to be used in session.
640
641 --- 1.3.41 2012/08/10
642
643 virt_db: Fix database name - first character we removed by mistake.
644 Bug introduced in 1.3.40.
645
646 --- 1.3.40 2012/08/06
647
648 virt_db: Don't use "unix path" as database for Unix sockets.
649
650 --- 1.3.39 2012/08/02
651
652 z3950_client: Don't tamper with / in zurl - fixes problems
653 using Unix sockets for backends.
654
655 session_shared: fix integer overflow problem with hit count.
656
657 session_shared: avoid long usage of cached queries.
658
659 zoom: New database argument , torus_url to set URL of Torus
660 record to be fetched.
661
662 --- 1.3.38 2012/07/04
663
664 Fixes for 'metaproxy reload' for RPM/Debian packages. 
665
666 zoom: Allow rpn2cql conversion to be augmented with a properties file.
667 Element rpn2cql can be specified per-target for the zoom filter.
668
669 log: New category "line" which is a single-line log message with
670 most important parts of a HTTP/Z39.50 request/response.
671
672 --- 1.3.37 2012/06/01
673
674 frontend_net: add facility to report live statistics about response
675 times and current thread usage. The report is an XML document
676 and is triggered for a specific URL path. This is set by <stat-req>
677 in the configuration of frontend_net. By default this report is
678 disabled (same as empty value for <stat-req>).
679
680 Fix reload problem in init.d script for RPM/Debian. 
681 The '/etc/init.d/metaproxy reload' in some cases would stop but not
682 start metaproxy - effectively stopping the service.
683
684 Don't display start log message when config testing (-t).
685
686 zoom: avoid CCL message limit of 1K in ZOOM filter.
687
688 --- 1.3.36 2012/05/10
689
690 metaproxy init script reacts to reload which does graceful stop +
691 start and is used by logrorate script.
692
693 --- 1.3.35 2012/05/09
694
695 Fixes for Windows compilation.
696
697 Metaproxy daemon reacts to SIGUSR1 in which case it will leave
698 existing sessions running but terminate the monitor process that is
699 used in keepalive mode.
700
701 Change start log message to 'metaproxy start'. Was 'Metaproxy start'
702 before. Consistent with 'metaproxy stop' message.
703
704 zoom: document zoom's proxy_timeout
705
706 z3950_client: fixup addinfo for init response
707
708 virt_db: return other diagnostic if init is rejected. Diagnostic 236:
709 "Access to specified database denied" is returned, but only if init
710 response from backend does not carry diagnostics already.
711
712 multi: relays user info for first rejected target. The other-information
713 field for init response for first rejected target is in common init
714 response. This ensures that some backend init diagnostics are returned to
715 the frontend.
716
717 --- 1.3.34 2012/04/25
718
719 frontend_log: extend logging (when message is given in config).
720
721 --- 1.3.33 2012/04/25
722
723 zoom: Fix check for proxy. Use diagnostic 1074 for proxy failures.
724
725 --- 1.3.32 2012/04/24
726
727 sru_z3950 filter passes through incoming Z39.50 requests again. Was
728 not handled by mistake in Metaproxy versions 1.3.29, 1.3.30 and 1.3.31.
729
730 --- 1.3.31 2012/04/24
731
732 zoom: fixes for retry/proxy failover logic. More logging.
733
734 --- 1.3.30 2012/04/23
735
736 zoom: return addinfo="proxy failure" for proxy failures. This also
737 changes the scheme for dealing with proxies a bit.  zoom now always
738 do proxy check, even if there's no failover. Fortunately, that's not
739 very expensive.
740
741 zoom: Init rejected wo diagnostics maps to Bib-1:1014.
742 Bib-1 1014, "Init/AC: Authentication System error", seems pretty
743 generic. We don't know why the init would fail; IP, user, block IP, etc.
744 sru_z3950 filter maps this to SRU diagnostic 3: "Authentication error".
745
746 zoom: guess if invalid SRU response was an auth failure
747
748 session_shared: disable session retry by default . Can be enabled by
749 restart="true" in resultset section.
750
751 --- 1.3.29 2012/04/18
752
753 zoom: may read cf-proxy's config settings.
754 This reduces manual configuration of the content proxy server host.
755 The ZOOM module will use the old style session.proxyhost if "server"
756 is given (deprecated) and use the new style proxyhost/session if
757 "config_file" is in use.
758
759 frontend_net: remove incoming requests that can not be handled
760 Requests in queue for filter frontend_net are removed if client
761 closes connection for the session and request is not yet handled.
762
763 sru_z3950: serialize requests. This is to ensure that pipelined
764 HTTP requests are handled properly.
765
766 --- 1.3.28 2012/04/04
767
768 New class, wrbuf, that wraps YAZ' WRBUF.
769
770 --- 1.3.27 2012/03/30
771
772 Metaproxy daemon is now running as user "metaproxy". This user is
773 managed by package maintainer scripts. The user information is stored
774 in /etc/metaproxy/metaproxy.user . 
775
776 --- 1.3.26 2012/03/20
777
778 New filter, sort, that allows sorting of XML records via Z39.50
779 retrieval.
780
781 Filter record_transform: USEMarcon support. For example:
782   <retrieval syntax="usmarc">
783      <backend syntax="unimarc" name="F">
784        <usemarcon stage1="/etc/usemarcon/uni2us/uni2us.ini"/>
785      </backend>
786   </retrieval>
787
788 Filter multi: empty route pattern uses route as default.
789   That is
790    <target route="z3950.indexdata.com">z3950.indexdata.com</route>
791   may use the shorter notation
792    <target route="z3950.indexdata.com"/>
793
794 Filter query_rewrite: use config path to locate XSLT.
795
796 Filter frontend_net:  log statistics.
797 If a custom message element in frontend_net configuration it makes
798 the frontend_net filter produce a log entry whenever an operation
799 is completed. The log is always written using yaz_log with the
800 custom message given, the package ID (session ID) , the time
801 the operation has been active (end-to-end) , the threads currently
802 active/total and the size of the request input/output queues.
803
804 query_rewrite: charset conversion of query terms.
805 This is an optional feature. Enabled by element <charset> in
806 configuration with attribute 'from' and 'to' that specifies
807 from/to encodings. The default 'from' encoding is UTF-8.
808
809 Filter record_transform: honor piggyback searches.
810
811 Filter zoom: re-connect when database is reused.
812 Re-connect is necessary if a connection is lost or a timeout occurs.
813 If not, we'll be seeing zero hits, when we shouldn't.
814
815 --- 1.3.25 2012/02/29
816
817 zoom: Change scheme for dealing with content proxy URLs. The module
818 now has its own common XSL transform that is enabled by record_xsl
819 attribute in the configuration. This XSL gets parameter cproxyhost
820 that holds the host for the content proxy session . The genearted-url
821 is created only if urlRecipe is enabled. In previous version default
822 value of urlRecipe was ${md-electronic-url}; it is now empty and
823 disabled by default. Also generated-url no longer includes the content
824 proxy host. Content proxying URLs is supposed to the handle in the record_xsl
825 stylesheet.
826
827 zoom: new setting timeout that specifies timeout for outgoing Z39.50/SRU
828 connections. Default value is 40 (seconds).
829
830 zoom: tune CCL to Z39.50 diagnostics mapping. Throw Bib-1: 108
831 "Malformed query" for syntax errors and related ones; throw
832 Bib-1: 3 "Unsupported search" for everything else. Details from
833 the CCL parser is provided as additional-info.
834
835 multi: new setting hideerrors that makes multi only relay diagnostics
836 to a client if all backends fail.
837
838 --- 1.3.24 2012/02/23
839
840 zoom: empty ccl_map field-mappings disables CCL map.
841
842 zoom: fix Explain search that could return error if session was
843 re-used.
844
845 --- 1.3.23 2012/02/10
846
847 zoom: returns Explain records for database IR-Explain---1. The
848 target profile records are converted to Explain records via XSLT.
849
850 session_shared: make error recovery configurable. Whether a search
851 is restarted on errors or not, is configurable by attribute "restart"
852 in element "resultset" in configuration.
853
854 session_shared: only relay init for first request. session_shared, for
855 each backend class, now only relays first init request (rather than all).
856 The module only needs to save init response info once. This avoids the
857 need to check for session max.
858
859 --- 1.3.22 2012/02/02
860
861 zoom: fix memory leaks.
862
863 session_shared: maximum number of sessons is configurable. Default
864 value is 100. Result-sets for backends without named result sets are
865 only re-used if databases is identical for a search. This is under the
866 assumption that performance may suffer for those backends when
867 changing the database for each search.
868
869 multi: combines diagnostics from all backends. All diagnostics from
870 backends are combined into multiple non-surrogate diagnostics; rather
871 than just one diagnostic from first backend.
872
873 --- 1.3.21 2011/12/27
874
875 zoom: relay realm to cproxy parameter file.
876
877 Configuration: Allow filter collection element inside route. This
878 makes it possible to include multiple filters at once.
879
880 zoom: nocproxy also disables urlRecipe.
881
882 --- 1.3.20 2011/12/21
883
884 zoom: return diagnostic if CQL sortby conv fails.  Diagnostic Bib-1 214
885 "Illegal sort relation" is returned. Gets translated to SRU diagnostic
886 90: "Unsupported direction value".
887
888 zoom: honor database argument nocproxy. This disables creating a content
889 connector session (for non-CF targets, usually) and also relays nocproxy
890 as database argument to a CF target.
891
892 --- 1.3.19 2011/12/16
893
894 zoom: Multiple proxy hosts may be given for proxy rich database 
895 parameter. List is comma separated.
896
897 http_file: decodes URI paths properly. Does not return 404: not found
898 if no prefix are matches. Instead packages are passed on.
899
900 --- 1.3.18 2011/12/08
901
902 zoom: content-{user,password,proxy} are passed on to content proxy
903 system and takes precedence over user,password,proxy .
904
905 sru_z3950: SRU extra argument x-log-enable=1 enables a search response
906 with a log element including log material from children filters. At
907 this point, only the zoom filter uses this log facility. It will
908 eventually be used by other filters as well. In particular it might be
909 useful for this feature to track all filters in used during a search.
910
911 zoom: for x-log-enable=1, APDUs sent by ZOOM C, records as received
912 and queries as they are manipulated are logged.
913
914 zoom:  extend addinfo with native diagnostics. Diagnostics as received
915 by ZOOM C are put into addinfo - including ZOOM, HTTP, SRU and Bib-1
916 diagnostics. This indicates both a backend diagnostic and the original
917 form.
918
919 zoom: default urlRecipe value is ${md-electronic-url}
920
921 zoom: target profile setting sruVersion is recognized.
922
923 --- 1.3.17 2011/11/17
924
925 zoom: log target profile record fetched (AKA Torus).
926
927 --- 1.3.16 2011/11/17
928
929 Change target profile parameter CfSubDb to CfSubDB.
930
931 --- 1.3.15 2011/11/12
932
933 zoom: bug fix: realm was relayed to CF targets by mistake (realm only
934 makes sense to the zoom module itself).
935
936 --- 1.3.14 2011/11/11
937
938 zoom: realm may be given as part of database.
939
940 --- 1.3.13 2011/10/26
941
942 Fix Origin class assigment method; was removd by mistake in 1.3.12.
943
944 --- 1.3.12 2011/10/26
945
946 zoom: database args x-name=value are passed through to backend database.
947
948 SRU filter: user may specify session ID that is passed to log entries
949 that follows. It is specified by using x-session-id in the SRU arguments.
950
951 zoom: fix null pointer reference which would occur for bad url parameter
952 inside "torus" or if url was not given.
953
954 --- 1.3.11 2011/09/09
955 Fix bug in filter session_shared where sessions would not expire
956 properly (session ttl). This in turn could make the target close the
957 connection before expected and session_shared would return diagnostic
958 2: system temporarily available.
959
960 --- 1.3.10 2011/09/09
961
962 zoom: new target profile setting: sortmap_field. If sortmap_field is given
963 the field is mapped to the value for the sortmap. Values not matching
964 sortmap_field are passed verbatim.
965   
966 zoom: new target profile setting: sortStrategy. One of: "z3950", "type7",
967 "cql", "sru11" or "embed". The "embed" chooses type-7 or CQL sortby
968 depending on whether RPN or CQL is actually sent to the target.
969
970 --- 1.3.9 2011/08/25
971
972 zoom: urlRecipe result is stored in <pz:metadata type="generated-url">.
973
974 zoom: For content proxy authentication is stored in param name
975 "auth", instead of "authentication".
976
977 --- 1.3.8 2011/08/22
978
979 zoom: relay schema in SRU mode. Previously recordSchema was not affected
980 by elementSet.
981
982 --- 1.3.6 2011/08/22
983
984 zoom: new target profile element literalTransform that holds XSLT
985 (encoded as string) for target. Only if present and non-zero length it is
986 considered present. This takes precedence over transform.
987
988 Don't rely on trang anymore for Git checkout builds. Configuration in etc
989 will only be properly validated if trang is available. From now on only
990 relax NC files are bundled with the source dist.
991
992 Updates to check for Boost unit test (autoconf stuff). On MacOSX this
993 component was not detected when it should be.
994
995 --- 1.3.5 2011/08/12
996
997 z3950_client: mark non-surrogate diagnostics from backend.
998
999 zoom: a proxy may be specified for HTTP fetch of target profiles.
1000
1001 --- 1.3.4 2011/08/01
1002
1003 Honor piggyback. Makes some SRU targets behave that insist on
1004 maximumRecords > 0, but also increases performance.
1005
1006 --- 1.3.3 2011/08/01
1007
1008 Fix dlpath in installed metaproxy.xml for RPM/Deb package. The
1009 file was not update for libdir/metaproxy4 in version 1.3.2.
1010
1011 --- 1.3.2 2011/08/01
1012
1013 Change location of Metaproxy modules from libdir/metaproxy to
1014 libdir/metaproxy4. Directory libdir/metaproxy is also owned by 
1015 libmetaproxy3 and, thus, should not be used by libmetaproxy4.
1016
1017 New facility to dump APDUs from zoom filter. Enabled by 
1018 <log apdu="true"/> in the zoom filter configuation.
1019
1020 zoom filter bug fix: SRU diagnostics received from backend was
1021 not properly converted to Bib-1 diagnostics.
1022
1023 Package metaproxy depends on libmetaproxy4, same version.
1024
1025 --- 1.3.1 2011/07/28
1026
1027 zoom: fix a bug WRT passing authentication parameters to backends.
1028
1029 --- 1.3.0 2011/07/27
1030
1031 Fixes for windows Makefile.
1032
1033 --- 1.2.10 2011/07/25 
1034
1035 Change major version of metaproxy library from 3 to 4. This in turn
1036 makes new package names for Debian and RPM.
1037
1038 --- 1.2.9 2011/06/27
1039
1040 zoom: enable marc-8 encoding by default for usmarc and opac (in pz2
1041 transforn mode).
1042
1043 zoom: configurable element sets for record transforms.
1044     
1045 zoom: the target profile based transform is specified by element_transform
1046 in element torus of of the ZOOM filter configuration ; default value
1047 is "pz2". Target profile based retrieval is specified by element_raw
1048 in configuration. It will perform same steps, but omit the XSL transform.
1049 Default value is "raw".
1050
1051 zoom: element set is omitted if not set in profile. But only if pz2
1052 transform is in effect. Previously the default element set was to "F".
1053
1054 zoom: For non-CF targets database arguments are parsed. User may supply
1055 db,user=myuser&password=mypass for non-CF targets. These values override
1056 what's given the authentication from the target profile.
1057
1058 session_shared: fix reference to freed memory. Would occur if a search
1059 response had non-surrogate diagnostics.
1060
1061 --- 1.2.8 2011/06/22
1062
1063 Route may be given for each port in frontend_net.
1064
1065 --- 1.2.7 2011/06/22
1066
1067 Documentation for zoom filter. Local target profiles may be specified.
1068
1069 Fixes for zoom filter.
1070
1071 --- 1.2.6 2011/06/15
1072
1073 First version with zoom filter.
1074
1075 --- 1.2.5 2011/05/06
1076
1077 Filter z3950_client may be configured to always send a close APDU
1078 to backend target when connection/session is closed. This will only
1079 happen if close APDU is not already sent. Enabled by configuration
1080 for z3950_client (force_close).
1081
1082 Filter virt_db and multi: relay close APDU.
1083
1084 Filter virt_db and multi: relay init size parameters 
1085 preferredMessageSize and maximumRecordSize.
1086
1087 Filter sru_z3950: increase init sz parameters from 1MB to 10 MB.
1088
1089 --- 1.2.4 2011/01/27
1090
1091 RPM package for Metaproxy works for both SLES11 and Centos 5.5.
1092
1093 metaproxy-config: exec_prefix, libdir, includedir. Use these variables
1094 as determined by configure.
1095
1096 RPM: Release includes 'indexdata' name. Use indexdata in release name so
1097 this package can be distinguished from other vendors.
1098
1099 --- 1.2.3 2010/10/04
1100
1101 Fix filter multi: relay idAuthentication parameters.
1102
1103 --- 1.2.2 2010/09/15
1104
1105 Add metaproxy-config for returning compiler flags, libraries.
1106
1107 --- 1.2.1 2010/08/18
1108
1109 Fix --with-boost=PREFIX .
1110
1111 --- 1.2.0 2010/07/09
1112
1113 session_shared: fix use of maintenance thread.
1114
1115 Introduce 'start' method for filters and routers. It gets called after
1116 configure and after fork, but before processing. This changes API -
1117 from libmetaproxy2 to libmetaproxy3.
1118
1119 --- 1.1.7 2010/06/30
1120
1121 session_shared: ensure backend session is closed if init rejected
1122 is received.
1123
1124 z3950_client: fix NULL ptr reference that could occur if two clients
1125 connected concurrently and if max-sockets was in effect.
1126
1127 --- 1.1.6 2010/06/21
1128
1129 Fix bug 3497 - Metaproxy unstable while stopping.
1130
1131 Fix bug 3495 - SEGV in SRU filter.
1132
1133 --- 1.1.5 2010/06/15
1134
1135 Filter multi throws diagnostic 'Present Out of Range' when
1136 appropriate - rather than returning 0 records.
1137
1138 Filter virt_db: fix bad result reuse. Could happen if a result
1139 was overriden and a backend did not supported named result sets.
1140
1141 --- 1.1.4 2010/05/11
1142
1143 Filter log: category access logs diagnostics even if searchStatus
1144 or presentStatus is 'success'.
1145
1146 --- 1.1.3 2010/04/21
1147
1148 The SRU to Z39.50 filter does repeated Z39.50 present requests
1149 to fetch all records. Needed when a Z39.50 server returns partial
1150 results (due to message size limits).
1151
1152 --- 1.1.2 2010/03/18
1153
1154 Metaproxy now kills all child processes that are spawned by
1155 modules (in case of fork, exec).
1156
1157 --- 1.1.1 2010/01/28
1158
1159 Debian package now installs /etc/metaproxy/metaproxy.xml which
1160 includes all XML files /etc/metaproxy/filters-enabled .
1161 The include facility uses YAZ' yaz_xml_include_simple (YAZ 4.0.1).
1162
1163 --- 1.1.0 2010/01/20
1164
1165 Package based on YAZ version 4 and YAZ++ 1.2.0. It now includes a
1166 development package to facilitate 3rd party Metaproxy modules.
1167
1168 --- 1.0.23 2010/01/04
1169
1170 Filter virt_db: Close backend filter session when Init rejected is received
1171 from it (in which case it's not really closed yet). This will ensure we don't
1172 run out of resources such as FDs in this case.
1173
1174 sru_z3950 filter: Accept any database (including those not listed).
1175
1176 --- 1.0.22 2009/12/03
1177
1178 Prepare for 64-bit YAZ. yazproxy will still work with YAZ++ 1.1.4 or
1179 later which means YAZ 3.0.47 or later.
1180
1181 --- 1.0.20 2009/11/19
1182
1183 For filter virt_db, the database is a glob pattern and the virtual
1184 database sections are consulted in the order given.
1185
1186 --- 1.0.19 2009/07/08
1187
1188 For filter multi, the target (for routing) may be given as a glob-pattern.
1189
1190 More documentation for filters virt_db and multi.
1191
1192 Update schema to allow for no database in sru_z3950 filter.
1193
1194 --- 1.0.18 2009/06/30
1195
1196 Added limit filter to put sleep (penalty) for heavy use.
1197
1198 Filter frontend_net may be configured to limit the number of new connections
1199 from same IP to some value (connect-max).
1200
1201 Fixed the load_balance filter.
1202
1203 --- 1.0.17 2009/06/16
1204
1205 Fix path for metaproxy executable for Debian init.d script.
1206
1207 --- 1.0.16 2009/06/10
1208
1209 SRU to Z39.50 filter honors x-username and x-password. If only
1210 x-username is given that translates to open authentication (Z39.50v2). If
1211 both x-username and x-password is present that translates to idPass
1212 authentication (Z39.50v3).
1213
1214 New facility to change current working directory (-w).
1215
1216 Update to upstream skeleton of init.d script. Should fix bug #2619.
1217
1218 Filter session_shared now caches records (used to only cache connections
1219 and result sets).
1220
1221 Filter session_shared now invalidates a Z39.50 session if a server
1222 returns -1 hits. This facility was also part of yazproxy and gets around
1223 a bug in Voyager-based Z39.50 servers.
1224
1225 --- 1.0.15 2008/11/18
1226
1227 Fixed reference counting bug in Z39.50 client module (could cause SEGV).
1228
1229 --- 1.0.14 2008/06/09
1230
1231 Fixed the value of SRU record schema in searchRetrieve response. It was set
1232 to a fixed value of "dc" before.
1233
1234 Serialize identical SRU requests. This is useful if HTTP client software
1235 fires identical requests against metaproxy.
1236
1237 Allow Z39.50 target to be specified for SRU requests by using SRU extra
1238 parameter x-target. Allows SRU to contact arbitrary Z39.50 targets and
1239 avoid static configuration. This facility is handled by the sru_z3950 module
1240 and the z3950_client module.
1241
1242 Allow maximum number of sockets to be used for a Z39.50 client by the
1243 use of SRU extra parameter x-max-sockets. This facility is handled by the
1244 sru_z3950 module and the z3950_client module.
1245
1246 --- 1.0.13.1 2008/02/29
1247
1248 Simplified check for Boost libraries.
1249
1250 --- 1.0.13 2008/02/29
1251
1252 First Debian package.
1253
1254 The sru_z9350 filter now recognizes SRU parameter z-target as being
1255 a ZURL of the form host/database . 
1256
1257 Mergetype may be specified for filter 'multi'.
1258
1259 --- 1.0.12 2007/09/19
1260
1261 Fixed problem in Makefile WRT library specifictions. This could produce
1262 linker errors (when they should not happen).
1263
1264 Fixed bug #1341: MetaProxy returning different results. Problem was that
1265 fix-up of record database did not normalize the database name.
1266
1267 Documentation updates for Windows compilation.
1268
1269 --- 1.0.11 2007/06/14
1270
1271 Fixed problem with logfile being truncated.
1272
1273 --- 1.0.10 2007/05/23
1274
1275 Fixed bug #1136: Access rights not enforced.
1276
1277 Extension for log module. The log category 'access' logs more details.
1278 New category 'user-access' added which is simlar to 'access' but adds
1279 the Z39.50 user as for all entries in a session.
1280
1281 Switched to GPL v2.
1282
1283 Added support for configurable default/force target/vhost for module Z39.50
1284 client module.
1285
1286 --- 1.0.8 2007/01/25
1287
1288 Implemented filter, session_shared, which optimizes usage of Z39.50
1289 sessions and result sets.
1290
1291 New filter, record_transform, which converts MARC/XML records.
1292
1293 New filter, sru_z3950, which converts SRU to Z39.50 packages.
1294
1295 New filter, load_balance, in development.
1296
1297 New filter, zeerex_xplain.
1298
1299 XML framework for config files started.
1300
1301 Master RelaxNG Compact schema's are found in xml/schema/*.rnc,
1302 RelaxNG XML schemas and XML Schema's are generated from RNC syntax.
1303 XML config files are checked against RNG and XML Schema's.
1304
1305 XSLT transformation framework added in xml/xslt/*.xsl, consisting mainly of 
1306 LOC Marc21 stylesheets found at http://www.loc.gov/marcxml/xslt.
1307 Added stylesheet explain2cqlpqftxt.xsl which transforms a standard SRU ZeeReX 
1308 explain record to YAZ CQL-to-PQF text config file. 
1309
1310 --- 1.0.7 2006/11/07
1311
1312 Added 'timeout' setting for filter frontend_net which specifies the number
1313 of seconds a session is idle before it is closed. Default timeout is
1314 300 (5 minutes).
1315
1316 --- 1.0.6 2006/07/07
1317
1318 Database name in records returned set for virt_db/multi filters.
1319
1320 Filter session_shared now functional.
1321
1322 Log filter can be configured to write to a given file using 'filename'
1323 element. Also information category can be specified with 'category'. If
1324 filename is omitted, the log filter writes to stdout. See etc/config5.xml
1325 for example.
1326
1327 --- 1.0.5 2006/05/16
1328
1329 Fixed compilation on Windows.
1330
1331 --- 1.0.4 2006/05/16
1332
1333 Added documentation for the hidenavailable option for the multi filter.
1334
1335 --- 1.0.3 2006/05/16
1336
1337 Fixed bug #573: Hide errors for individual servers. If the element
1338 'hideunavailable' is given in the configuration, individual servers
1339 being unavailable are hidden (unless all are unavailable). 
1340
1341 Fixed bug #574: Database names are recognised case-sensitively.
1342
1343 Fixed bug #567: Fix up database name in Name-Plus-Record.
1344
1345 Fixed bug #568: Update win/makefile for VS 2005.
1346
1347 Fixed bug #569: Some options throws unknown exception.
1348
1349 --- 1.0.2 2006/04/28
1350
1351 More information about virtual hosts. The 'etc' directory is part of the
1352 distribution tar.
1353
1354 --- 1.0.1 2006/04/27
1355
1356 Build instructions for Windows. NMake makefile part of distribution tar.
1357
1358 --- 1.0.0 2006/04/24
1359
1360 More documentation.
1361
1362 Filters functional: auth_simple, backend_test, frontend_net, http_file,
1363  log, multi, query_rewrite, template, virt_db, z3950_client.
1364
1365 Filters in development: session_shared.
1366
1367 Pseudo-filters: template, dl
1368
1369 --- 0.9 2006/03/27