Updates to pz:authentication documentation
[pazpar2-moved-to-github.git] / NEWS
1 --- 1.12.3 2015/09/03
2
3 Make pazpar2_play part of Deb/RPM PAZ-1031
4
5 Allow predictable sessions (Option -R - for pazpar2) PAZ-1030
6
7 Fix pazpar2 recording broken PAZ-1029
8
9 At session destroy, log facet IDs in use
10
11 log level for http is http (not HTTP)
12
13 Fix 0 ptr reference for POST and no Content-Type PAZ-1028
14
15 Log levels http+iochan for tests. Wait longer time in valgrind mode.
16
17 --- 1.12.2 2015/08/31
18
19 Facility disable/logging of POSTed content PAZ-1027
20 Log level "post" controls whether POSTed content is logged. This
21 is enabled by default. To disable, use -v -post on the command line.
22
23 Explain the semantics of using option -d twice in pazpar2 man page.
24
25 Update ajaxdev.xml and make it part of the dist PAZ-1025
26
27 --- 1.12.1 2015/08/26
28
29 Fix pazpar2 crash when using pz:extendrecs PAZ-1024
30
31 --- 1.12.0 2015/08/17
32
33 Fix PAZPAR2_PPMUTEX_H incorrectly defined PAZ-1023
34
35 Fix windows: crash in xmlDocFormatDump PAZ-1021
36 Problem is the passed FILE*. We can not pass FILE pointers between
37 DLLs. So we just avoid dumping the XML config during start on Windows.
38
39 Use YAZ comstack features for IPv6 and non-blocking getaddrinfo. PAZ-927
40
41 Upgrade to debian DH version 9 PAZ-1020
42
43 Fix bytarget list not cleared for new search PAZ-1019
44
45 --- 1.11.3 2015/07/28
46
47 Do not re-search if facetlimit scan fails to find value PAZ-1013
48
49 Optimizie single-target sortmap - keep record order PAZ-1917
50
51 position rec-icd with leading zeros PAZ-1018
52
53 Fix Bad HTTP request causes a crash PAZ-1012
54
55 --- 1.11.2 2015/07/21
56
57 Fix Can not make doc on mochi PAZ-1015
58
59 --- 1.11.1 2015/07/21
60
61 Fix PAZ-1009: Do not create local facets when using facetmap:split
62
63 --- 1.11.0 2015/07/06
64
65 Facet ID term map PAZ-1008
66 New setting pz:facetmap:split:name (refer to documentation)
67
68 --- 1.10.0 2015/06/16
69
70 Sort by retrieval PAZ-1006
71 Allows sorting by order that records were retrieved from databases.
72
73 Response from bytarget command includes native query PAZ-1005
74
75 Use lx2.loc.gov:210/LCDB_MARC8 instd of z3950.loc.gov:7090/voyager PAZ-1003
76
77 --- 1.9.0 2015/05/23
78
79 New metadata facility "icurule" for normalizing metadata text PAZ-1002
80 This allows ICU normalization of text before in-cluster merging takes
81 place.
82
83 Heuristics to deal with Primo s/e/page PAZ-1001
84
85 Fix test_limit_limitmap fails PAZ-1000
86
87 --- 1.8.8 2015/04/20
88
89 Limitmap ccl: deal with quotes and backslash PAZ-999
90
91 Handle date range from a limit parameter PAZ-997
92 The CCL term is not quoted unless it includes blanks. This will ensure
93 that r=r is handled correctly. This changes behavior a bit. If term
94 should not be converted to @and, then instead of r=r one should use
95 r=o or r=3 instead.
96
97 Construct md-pages-number form page/endpage PAZ-998
98
99 --- 1.8.7 2015/03/27
100
101 solr-pz2.xsl: extend Solr transformation to emit license_name field PAZ-996
102
103 cf.xsl: forwards flat affiliation structure PAZ-992
104
105 parpar2: log YAZ version upon start PAZ-993
106
107 Update and fix documentation for preferred targets
108
109 Fix spelling of present_chunk in documentation
110
111 --- 1.8.6 2015/02/10
112
113 Increase facet limit PAZ-990
114 No longer a limit on facets.
115
116 Pazpar2-js no longer requires Apache2 PAZ-989
117 Package pazpar2-apache2 sets up everything WRT apache and only
118 package which requires it. pazpar2-apache depends on pazpar2-js.
119
120 --- 1.8.5 2014/12/17
121
122 Larger string buffer for forward address PAZ-987
123 Fixes buffer overflow that could occur if forward address is IPV6.
124
125 Updates to Windows NMAKE makefile for Visual Studio 2013.
126
127 --- 1.8.4 2014/11/26
128
129 Use YAZ backtrace facility PAZ-983. In case of crashes YAZ log may
130 include more details about the fault. Better install gdb and the
131 debug version of pazpar2 (pazpar2-dbg on Debian/Ubuntu).
132
133 Per target timeout PAZ-981
134 New setting pz:timeout which overrides z3950_operation timeout
135 in service.
136
137 --- 1.8.3 2014/11/20
138
139 Re-introduce journal-subpart PAZ-980
140 Both citation and journal-subpart have same value.
141
142 --- 1.8.2 2014/10/30
143
144 Add Ubuntu utopic 14.04 and Ubuntu saucy 13.10 to the list of packages
145 built. 
146
147 Remove from js/pz2.js the code that translates just two diagnostic
148 codes (1 and 2) into human-readable messages. This is no longer
149 necessary at all, as PazPar2 has been returning the message as well as
150 the code in its responses since December 2012. Fixes PAZ-978.
151
152 primo xsl produces citation rather than journal-subpart PAZ-972
153 (fix in 1.8.1 was incorrect)
154
155 Fix missing .url files PAZ-977
156 Add missing .url+.cfg and add proper check for it.
157
158 --- 1.8.1 2014/10/10
159
160 Turbomarc needs number check for date 903 map PAZ-973
161
162 primo-pz2.xsl creates citation rather than journal-subpart PAZ-972
163
164 pz2.js: on successful search, issue a "show" command only if a show
165 callback function has been installed. Fixes part of PAZ-975
166
167 --- 1.8.0 2014/09/30
168
169 New command=stop which stops further search&retrieval for active
170 databases.
171
172 CF/primo XSL generates {volume,issue,pages}-number that are defined
173 in default Pazpar2 service definition. PAZ-968 PAZ-970
174
175 --- 1.7.5 2014/09/11
176
177 Various fixes for threaded operation PAZ-960 thru PAZ-966
178
179 Dump main configuration file during start of Pazpar2 PAZ-957
180
181 --- 1.7.4 2014/09/02
182
183 Log ingest failures and record failures:
184
185 Clean up logging PAZ-942
186 Use session lead in more places. Log hits/records/filtered for each
187 target when fetching is complete. Log hit count when a search
188 (response) is received. Remove some less useful log messages.
189
190 Fix warning about about missing (internal) stylesheet PAZ-956
191
192 Report number of filtered records in bytarget PAZ-954
193
194 Cache XML documents as they appear after normalization. The key
195 for the cache is database+record offset. Cache is removed if query
196 is modified for search. This speeds up re-establishing a result set
197 for databases where new query is same previous query.
198
199 --- 1.7.3 2014/08/22
200
201 poll: add assert for number of FDs; abort on poll failure
202
203 --- 1.7.2 2014/08/18
204
205 Fix hang for 2nd use of target with unresolved DNS PAZ-949
206
207 --- 1.7.1 2014/08/14
208
209 Use poll rather than select for main event loop to overcome limit of
210 1024 file descriptors PAZ-947
211
212 Override setting with same name (do not append) PAZ-945
213
214 --- 1.7.0 2014/06/27
215
216 Separate package: pazpar2-xsl PAZ-932
217
218 --- 1.6.44 2014/06/27
219
220 Update OPAC stylesheets for availabilityDate PAZ-943
221
222 Fix too funny startrecs description
223
224 Fix broken ~ match if filter contains = PAZ-941
225
226 --- 1.6.43 2014/06/12
227
228 Add pz:redis option for ZOOM caching using redis. This is an alternative
229 to memcached. Requires YAZ 5.2.0 to work.
230
231 --- 1.6.42 2014/05/06
232
233 Re-ingest native facets PAZ-934
234
235 Fix medium override for solr-pz2.xsl.
236
237 --- 1.6.41 2014/04/23
238
239 Fix URL with leading http:// not working PAZ-933
240
241 Build packages for Ubuntu Trusty Tahr 14.04 LTS
242
243 cf.xsl: handle medium override AND md field
244
245 --- 1.6.40 2014/04/10
246
247 sortmap relevance always uses increasing=1. PAZ-930
248
249 solr-pz2.xsl: ensure medium is also applied if Solr record do not
250 have it. PAZ-929 
251
252 Fix leak in getaddrinfo usage for HTTP listener. Not a big deal because
253 this code is only executed once.
254
255 Fix typos is sortmap documentation.
256
257 Doc: fix misplaced variablelist tag.
258
259 --- 1.6.39 2014/02/19
260
261 Doc: update WRT ICU which is configured for YAZ; not Pazpar2.
262 It's been like that since version 1.1.1 from August 2009.
263
264 Add support for result-set caching via memcached. See description of
265 pz:memcached. Require that Pazpar2 is using YAZ 5.0.12 or later.
266
267 Add support for a <metadata> container tag. Patfh from Sven Porst.
268
269 Add support for XInclude in main configuarion file. Patch from Sven Porst.
270
271 Add client_{lock,unlock} before call to non_block_events in
272 connection_continue. Problem is that if non_block_events fire records,
273 then we will not unlock client at all. And as a result, a dead-lock
274 occurs.
275
276 --- 1.6.38 2014/01/07
277
278 Avoid removing slash and other characters for generic metadata that
279 looks like a URL (contains ://). PAZ-915
280
281 pz2.js: Only use XDR when doing CORS. Favor XHR in all other circumstances.
282
283 Cluster merge fixes. PAZ-901
284
285 Set client state to "working" when waiting for DNS resolver. PAZ-907
286
287 Log when session terminates. PAZ-905
288
289 Fix LSB/HS conformance for /etc/init.d/pazpar2 PAZ-904
290 Debian: add support for /etc/init.d/pazpar2 status
291
292 --- 1.6.37 2013/11/18
293
294 Fix 'Record Missing' for command=show PAZ-903
295
296 Preserve order of records within cluster PAZ-902
297
298 testing: use yaz-ztest -V if possible and use YAZ in sibling directory
299 if present.
300
301 Allow clustered records to be ingested during retrieval. PAZ-900
302
303 Fix void function error which cannot return a value.
304
305 --- 1.6.36 2013/11/11
306
307 SRU pz:authentication="a/b" may end up as x-username=a%2Fb PAZ-899
308
309 Upgrade to debhelper version 7 PAZ-898
310
311 Package with libyaz5 PAZ-897
312
313 Better error message for CCL parse errors PAZ-887
314
315 --- 1.6.35 2013/09/23
316
317 New target setting: pz:authentication_mode. PAZ-896
318
319 pazpar2 PRM: pazpar2 runs as user nobody. PAZ-893
320
321 Strip #-suffix for ZOOM URLs. PAZ-892
322
323 --- 1.6.34 2013/08/30
324
325 Fix issue with hanging show/bytarget. Could happen if new search was
326 fired with filter before show from previous show completed.
327
328 Add 'date' handling for solr-pz2.xsl.
329
330 --- 1.6.33 2013/08/13
331
332 pz:authentication may carry user group password. If pz:authentication
333 has at least one blank in it, that forces Pazpar2 to use idPass Z39.50
334 authentication. Two forms are allowed
335     user password
336     user group password
337 If no blanks are present, open authentication is in use (as before).
338
339 Fix {prev,next}recid elements that are returned by record
340 command. These were incorrect in versions 1.6.23 thru 1.6.32.
341
342 --- 1.6.32 2013/06/14
343
344 Experimental support for snippets. If argument snippets=1 is given
345 for command record or show, the text will include <match>-tags for
346 those area that matches.
347
348 Fix memory leak WRT client structures (incorrect inc ref count).
349
350 Log when a HTTP response is serialized and the time elapsed.
351
352 New command, service, which returns current service XML in use for
353 session.
354
355 --- 1.6.31 2013/05/24
356
357 Local limit for fields of type "generic" (ie text fields) are
358 now normalized by mergekey rule before comparison takes place.
359 Before, no normalization took place and comparsion was, thus, exact.
360
361 New facility: dynamic rank , which allows ranking to be changed
362 for an existing result set. The rank can be set for search or
363 show. This overrides the rank for metadata elements (which fields
364 to rank and weight).
365
366 New facility:dynamic mergekey , which allows mergekey to be changed
367 for an existing result set. The mergekey can be set for search or
368 show.
369
370 HTTP server: host=@ listens on IPV6 and IPV4 if possible.
371 Also, allow ports to be given as names (not just integers).
372 Fix @-notation on systems that don't support IPV6 sockets.
373
374 --- 1.6.30 2013/04/26
375
376 Add MasterKey Connect configuration. Refer to section "non-standard
377 databases" for more information.
378
379 Allow timeformat for log to be specified with option -m (as Metaproxy
380 and YAZ GFS).
381
382 New Debian package pazpar2-dbg.
383
384 Fix NULL ptr reference of se->relevance. If a new search is initiated
385 and a CCL query fails to parse, Pazpar2 could crash.
386
387 Fix problem with host/port mangling in Pazpar2 HTTP server. Problem
388 existed in 1.6.29 only.
389
390 --- 1.6.29 2013/04/05
391
392 IPV6 updates. Allow IPv6 addresses for database hosts and IPv6 address
393 for HTTP server. By default the HTTP server uses IPv4 only, but that can be
394 changed by setting "host" attribute for the "listen" element.
395
396 Change semantics of pz:extendrecs. Allow for repeated fetches .
397 pz:extendrecs is now the number of extra records to fetch (was total
398 count before).
399
400 --- 1.6.28 2013/03/21
401
402 Fix hang or memory violation if show occurred before a search. (not that
403 it makes much sense to perform a show before a search).
404
405 --- 1.6.27 2013/03/08
406
407 pz2.js: Element_parseChildNodes concatenates all Text/CDATA nodes, instead
408 of the first child.
409
410 --- 1.6.26 2013/03/08
411
412 New pz:metadata attribute, empty="empty-value" for Pazpar2's
413 internal representation. With this attribute, Pazpar2 treates an empty
414 pz:metadata type as having the value for "empty"  - if empty.
415
416 New setting, pz:extendrecs, which triggers extended fetch of records
417 for a database beyond pz:maxrecs for a show command.
418
419 Fix warning that was falsely issued for "missing limitmap".
420
421 Log message for Pazpart start/stop changed. Now using same style as
422 Metaproxy, ie Pazpar2 start SHA1 / Pazpar2 stop .
423
424 --- 1.6.25 2013/02/07
425
426 Fix hang of 2nd command=show with esn/syntax given.
427
428 --- 1.6.24 2013/01/18
429
430 New merge attribute type: 'first', which takes all metadata fields
431 from first target that returns the particular field.
432
433 --- 1.6.23 2013/01/02
434
435 Extend info command with hostname and YAZ SHA1
436 Indent results for both command stat and info.
437
438 Allow limit on merged content. The new configuration metadata
439 element, limitcluster, configures that a metadata element (name) be used
440 as limit name for search. Applies to the whole service (ie all targets),
441 unlike pz:limitmap which is configured per-target (database).
442
443 New feature: limitmap local:* matches against all metadata fields.
444
445 Allow repeated list in limitmap spec . Separated by comma. For
446 example: value="local:title,rpn:@attr 1=4".
447
448 New element <message> in bytarget response. Holds diagnostic message
449 of code (say 'Unsupported Use Attribute' for Bib-1 114).
450
451 Improved logging for record ingestion failures.
452
453 Avoid using struct icu_chain in non-YAZ_HAVE_ICU mode. In the rare case,
454 when YAZ is compiled without ICU support.
455
456 --- 1.6.22 2012/10/11
457
458 Requires YAZ-4.2.40 to support native solr support.
459
460 Fix and improve logic handling whether or not to re-do search on sort
461 order changes. A sort order with change in ascending/descending only
462 whould not trigger a new search, which is required for targets with
463 native sorting capabilities. Each client is now checked if instructions
464 (sortmap) exist for native sorting and only client that does requires
465 it is researched. Other clients is just re-ingesting the records,
466 they already have. The resultset is now cleared if any researching
467 is done.
468
469 Connection sharing between session has broken since version 1.6.8 with
470 introduction of logic that would minimize searching if pazpar2 could
471 detect this based on same query and limits and partly sort order.
472 This could lead to segementations violations.
473
474 Added a chapter in the manaul about relevance ranking.
475
476 --- 1.6.21 2012/09/24
477
478 Rank tweak: follow=number will increase mult by number if two terms
479 occur next to each other; number-1 if they are one term apart , .. 0
480 if they are number a part (all in order). Default is 0 (following
481 terms has no effect).
482
483 Rank tweak: lead=k will divide mult by 1 + log2(1+k*l) where k is
484 value given by lead and l is length from beginning of field where
485 term occurs (l=0 for first term, l=1 for second term, ..). Default
486 value of k is 0.0.
487
488 Rank tweak: length=strategy. length="linear" if mult is to be divided
489 by length (existing, default behavior), length="log" if mult is to be
490 divided by log2(1+length), length="none" if mult is not to be affected
491 by length.
492
493 --- 1.6.20 2012/09/21
494
495 Rank algorithm details may be printed as part of show response in
496 element <relevance_info>.. This is only printed if <rank debug="yes"/>
497 is used in service.
498
499 Record as returned by show/record command have a minimal indentation
500 which makes things human-readable.
501
502 New configuration of default sorting criteria (sort-default) in
503 service definition. If no criteria is defined it will be as before
504 'relevance'.
505
506 Search command now supports sort parameter just as the show command.
507 If no parameter is give, it will use the service sort-default value.
508
509 --- 1.6.19 2012/09/18
510
511 Rank algorithm skips strings that gets normalized to empty string.
512 For example, & and ! could map to the empty string. The weight for
513 those terms is now 0 (as if they were not part of the query).
514
515 Rank algorithm does not use CCL from limitmap; only from the query
516 parameter (user query).
517
518 Obey -w dir.
519
520 --- 1.6.18 2012/09/17
521
522 Rank algorithm configurable by 'rank' element inside service. So far
523 only, attribute 'cluster' is recognized. If cluster="yes", multiple
524 records inside a cluster boosts higher than single records. This
525 is default behavior and existing behavior. cluster="no" takes the
526 average score of each record in a cluster.
527
528 --- 1.6.17 2012/09/05
529
530 Fix bad re-use of connections (connections with changing proxy should not
531 be reused).
532
533 --- 1.6.16 2012/08/22
534
535 Fix a bug introduce in 1.6.15 around the position sorting. It resetted the
536 resultset and sorting when the sort order is position. However this will be done on
537 every client poll, which will make pazpar2 continuing reset and fetching.
538 It should only be done on FIRST request where the sort order change.
539
540 Fix an issue on suggestion option: Also disable suggestions on empty string.
541
542 Clean up in turbo marc stylesheet.
543
544 Remove the hardcoded size of termlists.
545
546 --- 1.6.15 2012/06/27
547
548 New facility: ccldirective may be given in service definition. Allows
549 CCL parsing to be customized a bit, such as defining names of operators
550 and, or, not.
551
552 New facility: raw record by checksum, rather than offset. The record
553 command optionally takes checksum which identifies certain record from
554 a database.
555
556 New facility: per field ranking. Rank may be given as M [F N] where
557 M is default rank and N is rank for CCL terms from field F.
558
559 --- 1.6.14 2012/06/04
560
561 Fix for IE7/8 in pz.js
562
563 Applied patch from Giannis Kosmas on keepAlive, which also adds keepAlive to init response.
564
565 Lower log level some places.
566
567 Remove some invalid test results.
568
569 --- 1.6.13 2012/05/23
570
571 Introducing a version=2 parameter for show, termlist and bytarget commands.
572 This enables pazpar2 to return approximation on hit and count count when
573 doing record filtering using the limit parameter on search and a
574 limitmap with a value of "local:"
575
576 Setting pz:xslt may embed local XSLT as an alternative to referring
577 to filenames.
578 Value is not CDATA but XML nodes embedded, so escaping is not necessary
579 but a root element *must* be present. For example:
580 <settings target="target="z3950.indexdata.com/marc">
581      <set name="pz:xslt">
582        <xsl:stylesheet
583           version="1.0"
584         ..
585        </xsl:stylesheet>
586      </set>
587     </settings>
588
589 Metadata field rank may given by XML internal document (pz:xslt
590 result). If rank is not given, the rank from service description is
591 used - as before.
592
593 Metadata field can now configured a default limitmap and facetmap.
594 Setting limitmap to "local:" would work for all kind of targets, but would
595 prob. not be the optimal solution. But at least better than the default behavior
596 of pazpar2 where no filtering is done.
597
598 A service definition can now also contains <set/> that defines service-wide
599 settings. These will override server-wide sets and will be overridded by
600 settings.
601
602 New setting, pz:present_chunk, that specifies number of records to fetch
603 at a time. Zero will disable chunkation; will fetch max_records at once.
604
605 --- 1.6.12 2012/03/14
606
607 Revert the format change in termlist response, that could break
608 some clients / UIs since they were expecting an (empty) element
609 if no facet values was found.
610
611 --- 1.6.11 2012/03/07
612
613 Revert the behavior of returning errors when unable to block
614 on termlist, bytarget and search, when unable to block due to
615 other block. The client will now receive a regular response,
616 but it will be logged in the server. A parameter (report) is
617 added to change behavior to return error response or WARNING
618 status message. Consider this "API" as private, as it is mostly
619 untested and could be changed in future releases.
620
621 Fix spell error in pz2.js fix in 1.6.10.
622
623 New Marc2TurboMarc.xsl (contribution from Sven Porst).
624 Can solve the missing marc21.xsl updates in some cases.
625
626 tmarc.xsl: Simplify the 6xx to subject-long and fix 1-based
627 substring (contribtion from Sven Porst)
628
629 marc21.xsl: fix 1-based substring call
630
631 tmarc.xsl and marc21.xsl: use 856$a as last option for electronic-text.
632
633 Add test_termlist_block to test suite
634
635 --- 1.6.10 2012/02/23
636
637 Fix SEGV for invalid PQFs and SRU/SOLR targets
638 Also refactor a bit the code that converts from PQF to SRU/SOLR queries.
639
640 Fix pz2.js: "null object" due to change in in bytarget result XML.
641
642 Fixes in tmarc.xsl: Subject-long shorten for extra commas only.
643 Added this normalization to the other subject-long fields (d6xx),
644 where it was missing.
645
646 Fixes in marc21.xsl: Updated with most of the new tmarc.xsl.
647 Still differences around medium and holdings. marc21.xsl is not
648 longer active used by Index Data, and should be considered unsupported.
649 Use tmarc.xsl instead.
650
651 --- 1.6.9 2012/01/19
652
653 Fix SEGV that could occur for failed connections.
654
655 --- 1.6.8 2012/01/17
656
657 Fix bug for command sort that could return no results for active clients
658 (from previous search). This bug was present in 1.6.6-1.6.7.
659
660 Fix bug in results that could include results that should have been
661 filtered out. This bug was present in 1.6.6-1.6.7.
662
663 --- 1.6.7 2011/12/23
664
665 Fix bug introduced in 1.6.6 where a connection re-use could stall
666 incoming requests.
667
668 Local filtering may now specify a local metadata field, eg.
669  pz:limitmap:somefield[t]=local:otherfield
670
671 --- 1.6.6 2011/11/25
672
673 For search, when limit and or filtering is in place and search
674 is identical to previous search, the result set is re-used and the
675 target is not searched.
676
677 Limits may work perform local filtering as well, by using "local:"
678 for a limitmap.
679
680 --- 1.6.5 2011/11/01
681
682 Updated bytarget command to contain a suggestions element with misspelled
683 words and suggestions to these. pz2.js has been updated to deliver this
684 onwards as well. Only target that currently delivers this is the solr
685 client in YAZ 4.2.18.
686
687 --- 1.6.4 2011/10/28
688
689 New service definition element, xslt, that allows an embedded stylesheet
690 to be defined. This can be referred to from pz:xslt as an alternative to
691 external files.
692
693 New pz:sortmap:field setting for specifying hints on how to make
694 a target natively sort on a field. This is used for command=show in
695 conjunction with sort.
696
697 New pz:url setting for specifying the actual URL for a target. When
698 this is used the target ID is not used as URL anymore and the target ID
699 may be almost any string (not including []).
700
701 command=termlist without name parameter returns all termlists/facets.
702 Previously if name parameter was omitted, only "subject" was returned.
703
704 --- 1.6.3 2011/09/22
705
706 Make termlist sorting stable. Terms with same frequency are now sorted by
707 their display name. This makes a pretty display and improves our
708 regression test because qsort is not a stable sort.
709
710 New sort parameter value 'position'. The 'position' sorts merged records
711 by their original position from the remote target. This is primarily useful
712 for debugging and may be used for targets that already perform some kind
713 of relevance ranking. Note that sort by default is decreasing; so to get
714 records in their original order sort=position:1 must be used.
715
716 --- 1.6.2 2011/09/15
717
718 tmarc.xsl: yet another 773$g fix. Was broken in 1.6.1 as well.
719
720 Facility to change working directory for pazpar2 daemon. Option -wdir
721 sets working directory to dir. This facility is useful if core dumps
722 must be saved. In this case, the current working directory must be
723 writable by the running user, such as "nobody".
724
725 --- 1.6.1 2011/09/14
726
727 New configuration element <icu_chain> for <server>/<service> which
728 allows a named ICU rule (chain) to be defined. The names relevance,
729 sort, mergekey and facet are used for those operations. The definition
730   <icu_chain id="sort" locale="en"> ..  </icu_chain>
731 is identical to
732   <sort> <icu_chain locale="en> ... </icu_chain> </sort>
733 And so on.. for relevance, mergekey and facet as well. The latter
734 style is deprecated. The facet terms are normalized by the facet
735 rule by default. This may be changed on a metadata field basis by
736 defining the new attribute 'facetrule' for the metadata element.
737 For example:
738   <icu_chain id="myrule" locale="en"> ... </icu_chain>
739   <metadata name="author" termlist="yes" facetrule="myrule"/>
740
741 Preserve rorder for merged metadata. Fixes issue as reported by Sven
742 Porst: http://lists.indexdata.dk/pipermail/yazlist/2011-July/003230.html
743
744 tmarc.xsl: set journal-subpart to 773$ only.
745
746 --- 1.6.0 2011/09/12
747
748 Modify the behavior for the limit parameter (first defined in 1.5.7).
749 Mapping of limit searches are now defined by the new configuration item
750 pz:limitmap. Fix a dead-lock problem with the limit parameter.
751
752 Extend tmarc.xsl to extract 773$g data (OpenURL).
753
754 --- 1.5.7 2011/08/19
755
756 ICU default maps remove backquote (`).
757
758 Command 'search' takes limit parameter (optional).  The limit parameter
759 allows a search to be limited one or more facets and the corresponding
760 values. This is for server side filtering.
761
762 Configure tweak: Use -lm for log(3) if needed
763
764 --- 1.5.6 2011/04/15
765
766 Fix a problem with skiparticle sortkey that could be completely
767 ignored (and reduced to "").
768
769 Fix dependency problem in pazpar2 RPM package (did not require
770 libyaz4 as it should).
771
772 --- 1.5.5 2011/03/28
773
774 Fix memory leak that occurred for command=termlist&name=xtargets .
775
776 Pazpar2 may save HTTP requests. Enabled by option -R.
777
778 --- 1.5.4 2011/03/08
779
780 Experimental support for DTIC DADS target. New dads-pz2.xsl.
781
782 Support for query_syntax (overrides the default for SRU | Z39.50)
783
784 Support for extraArgs (ZOOM "extraArgs" option) for targets
785
786 New commands: status-server and status-session
787
788 --- 1.5.3 2011/02/18
789
790 Fix for threaded runs: Client now have a copy of the database URL,
791 which can used after the database has been release from the client.
792 This makes the logging in the connection idle timeout of the client nicer (no NOURL) and should be thread-safe.
793
794 tmarc.xsl: Add journal-title-abbrev and full text.
795
796 cf.xsl: new fields: isbn, issn, journaltitle, volume, issue
797
798 Fix for cmd=record before search.
799
800 Session Logging clean up.
801
802 Fix wrong termlist factor when maxrecs is different from 100.
803
804 --- 1.5.2 2011/01/18
805
806 Fix missing pz:termlist_term_factor in settings.c messed up pz:preferred.
807 Term factor is default enabled but can be diseabled by
808 pz:termlist_term_factor=0
809
810 --- 1.5.1 2011/01/06
811
812 Add scaling of facet count. Currently always enabled, needs fixing.
813 Allow user-defined info for target suffix. This has no meaning in
814 Pazpar2 except to distinguish targets from each other. The suffix
815 data begins with #. For example z3950.indexdata.com/gils#Mydata
816
817 Added exact-match recordfilter; format name=value
818
819 --- 1.5.0 2010/10/05
820
821 SOLR support. Pazpar2 may operate as web service client for SOLR.
822
823 --- 1.4.4 2010/08/17
824
825 Fix for show command and block=1 (dead lock). Bug was introduced in
826 1.4.0.
827
828 --- 1.4.3 2010/07/02
829
830 New RPM packages: pazpar2, pazpar2-js, pazpar2-doc. These have been
831 tested on CentOS 5.5 only.
832
833 --- 1.4.2 2010/06/18
834
835 Fix problem with result sets being removed from a client session
836 if the connection for it was resused by another session. Bug #3489.
837
838 New iphone UI for Pazpar2 (www/iphone).
839
840 --- 1.4.1 2010/05/21
841
842 Fixes for threaded operation.
843
844 New stylesheets for TurboMARC: tmarc.xsl and opac_turbomarc.xsl.
845
846 New example services in etc/services in source. In the Debian packages
847 these are located in /etc/pazpar2/services-available
848
849 Threaded mode operational on Windows. Requires Windows 7 or Windows
850 Server 2008.
851
852 Default value of setting pz:max_connections is 0 which means that there
853 is no limit on number of connections.
854
855 --- 1.4.0 2010/03/29
856
857 Pazpar2 may operate in threaded mode. Enabled by element threads in
858 the configuration. See pazpar2_conf for details.
859
860 New setting setting: pz:max_connections. Setting pz:max_connections is
861 a limit of number of sockets to a host. When this limit is reached,
862 Pazpar2 will wait up to 5 seconds for a connection to becomes available.
863 The client will be marked Client_Error when it can not be searched
864 (other clients in a session may work). If pz:max_connections is not set
865 for a target, a value of 30 will be used. Note: the pz:max_connections
866 will only work in threaded mode.
867
868 pz2.js: JSON support for show.
869
870 Debian package: Enable default service, default.xml, before starting
871 Pazpar2 only if there is no service already in /etc/pazpar2/services-enabled.
872
873 --- 1.3.0 2010/01/25
874
875 Debian version depends on on libyaz4. Note that Pazpar2 will still
876 compile from source with YAZ 3.
877
878 Split services into separate files. The example configuration file
879 pazpar2.cfg.dist now includes a default service default.xml (part of
880 etc). And default.xml includes settings/edu.xml. The default.xml file,
881 not to be confused with settings/defaults.xml, is a template for jsdemo
882 and other services. The Debian package installs /etc/pazpar2/server.xml
883 which is now the main pazpar2 configuration (used to be called pazpar2.cfg).
884 server.xml includes services from /etc/pazpar2/services-enabled/*.xml .
885 The default.xml (from etc) is installed in /etc/pazpar2/services-available
886 and a symlink to it is created from services-enabled. The default.xml
887 service is unnamed and, thus, will be used by jsdemo and test1.
888
889 New setting pz:negotiation_charset. Patch from Andrei V. Toutoukine. The
890 new setting pz:negotiation_charset specifies character set for Z39.50 Init.
891
892 --- 1.2.4 2010/01/15
893
894 Support for additional fields in cf.xsl and pazpar2.conf.dist:
895 publisher, available, due, location (=locallocation), callno
896 (=callnumber), thumburl and score.
897
898 Describe pz:xslt and the auto setting.
899
900 Move mergekey definition away from the normalization stylesheets and
901 define a mergekey common for all target types in pazpar2.cfg.
902
903 Code update: Use the Odr_int type for hit counts. This is part of
904 YAZ 3.0.47 and later and so configure checks for that.
905
906 --- 1.2.3 2009/11/24
907
908 Metadata attribute 'skiparticle' also works for ICU based
909 normalization. (was only working for the non-ICU/ASCII before).
910
911 Command bytarget with argument settings=1 will show settings per
912 target.. This is to be able to verify correct settings and be able to
913 test that they are correct. The database settings array size is now
914 also stored..  Problems with database settings array is that if not
915 careful it will be too small (smaller than dictionary per-service
916 in settings).
917
918 Make record list sorting stable by comparing mergekey for records if
919 relevance/title or other sorting criteria all match. This is merely to
920 ensure that our regressions tests works (reproducible output).
921
922 Relevance calculation changes: use a different denominator (length) for
923 per-field relevance scoring.. Instead of length of all ranked fields we
924 now use length of individual fields (as if they were individual "free"
925 text fields). This will ensure that documents with a long field with no
926 match (say description) will not "hurt" a title match.
927
928 Diagnostic member was not set on connection error. Fixed
929
930 --- 1.2.2 2009/10/13
931
932 Command search takes two optional parameters, startecs and maxrecs,
933 that specifies the start offset (0, 1, ...) and maximum number of records
934 to fetch for each target.
935
936 XSLTs + MARC maps are cached within a session so we don't re-parse
937 them over and over again. Even for a session with a single search
938 there's much to be gained because many targets use the same
939 transformation.
940
941 The metadata attribute 'mergekey' now takes one of three values 'no',
942 'required', 'optional' .  And the resulting mergekey from metadata
943 is now ordered in the same way as metadata in the service definition.
944 Older Pazpar2 version use the order in which metadata appeared in a
945 record instance.
946
947 The search argument 'filter' now offers a new operator ~ which does a
948 substring match. The = operator works as before: string match for
949 anything but pz:id, or target match for pz:id.
950
951 New setting pz:recordfilter. The value of this setting takes the
952 form name[~value]. This setting makes Pazpar2 ignore all retrieved
953 records that do not have the metadata element name with value substring
954 (if given).
955
956 Pazpar2 allows YAZ log level to be set (option -v).
957
958 --- 1.2.1 2009/10/05
959
960 For WS responses Pazpar2 creates XML header. Exception: raw record.
961
962 Setting XML files are now stored in etc/settings instead of etc. This
963 reflects the layout with the Debian package layout.
964
965 Settings may be posted for command=settings. The POSTed settings must
966 have root element 'settings' like regular setting files. In order to be
967 recognized, the POST request must use Content-Type=text/xml.
968
969 A service may be posted for command=init. This service will be used
970 during the session. The service may have its own target settings,
971 ICU config, timeout, etc. In order to be recognized, the POST request
972 must use Content-Type=text/xml.
973
974 Timeout values may be given per-service. That's element 'timeout'
975 which takes three attribute values (a subset may be given): 'session',
976 'z3950_operation', 'z3950_session'. Option -T is no longer supported
977 - used to specify session timeout.
978
979 Option -t tests the Pazpar2 configuration and returns exit code
980 (0=success, non-zero=failure). In previous version of Pazpar2, -t
981 specified local settings.
982
983 In version 1.2.0 the configuration file - after include processing -
984 was dumped to stdout. Now, the configuration is only dumped to the
985 yaz log file if option -d is given.
986
987 --- 1.2.0 2009/09/10
988
989 Configuration may now have multiple server areas. This means that a
990 Pazpar2 instance may listen on multiple ports. Virtual hosting is not
991 yet supported - on a server basis. Configuration may also have multiple
992 services .. That is repeating service elements inside a server. Each
993 has an attribute 'id' which serves as service ID. This ID in turn may
994 be used in a Pazpar2 session, by specifying parameter service=ID for
995 command init. There can be at most one unnamed service inside a server
996 which can be referred to by not specifying an service ID for command
997 init (backwards compatible). In order to partition multiple servers and
998 services a new include directive has been added. This takes an attribute
999 'src' which specifies one or more sub-files. For example to include
1000 service files, one might use:
1001   <server >.. <include src=/"etc/pazpar2/conf.d/*.xml"/> .. </server>.
1002 It is the intention that that completely makes the settings directive
1003 redundant.
1004
1005 Fix problem where the record command would wait forever if there were
1006 no targets to wait for (activeclients == 0).
1007
1008 --- 1.1.1 2009/08/28
1009
1010 One result set is created per session (last search) rather than for
1011 each connection which happen to be shared (bug #3009).
1012
1013 marc21 stylesheets changed for efficiency.
1014
1015 --- 1.1.0 2009/08/19
1016
1017 Session timeout may be specified on the command-line as option -T.
1018
1019 Pazpar2 may now be operated in a no-merged mode for records.. All records
1020 will be considered unique. This mode is enabled if no mergekey is
1021 generated by the normalization stylesheet (pz:xslt).
1022
1023 Pazpar2 caches original records from each target and the 'record' command
1024 with offset returns the original record if 'syntax' and 'esn' are NOT
1025 specified. This speeds up retrieval of original records but also means
1026 that Pazpar2 uses more memory. The cached records will be freed when the
1027 session terminates or a new search is executed.
1028
1029 Pazpar2 no longer uses its own ICU wrapper. Instead the ICU wrapper
1030 library part of YAZ is used.
1031
1032 Added SRU client support.
1033
1034 Automatically computes pz:nativesyntax if not provided. Works for XML and
1035 MARC.
1036
1037 --- 1.0.13 2008/11/24
1038
1039 Command bytarget returns name of target (if defined).
1040
1041 --- 1.0.12 2008/11/04
1042
1043 Fixed bug #2021.. location now holds all brief elements.
1044
1045 --- 1.0.11 2008/10/15
1046
1047 Fixed check for application/x-www-form-urlencoded parameters.
1048
1049 --- 1.0.10 2008/10/14
1050
1051 Fixes for IE in pz2.js.
1052
1053 Fixed bug #2021: non-merged, brief meta data NOT included for command=show.
1054
1055 --- 1.0.9 2008/05/23
1056
1057 Changed the JS library pz2.js to use POST for long URL (+ params).
1058
1059 Added installation instructions for Windows. Note: NT services is
1060 NOT available until we make a new release of YAZ.
1061
1062 Preserve order of repeated metadata fields (they were reversed before).
1063
1064 More MARC21 information extracted for metadata.
1065
1066 --- 1.0.8 2008/04/22
1067
1068 Fixed bug #1162: HTML entities are not escaped properly.
1069
1070 Native Windows port of Pazpar2. Makefile for Visual Studio provided.
1071
1072 --- 1.0.7 2008/04/14
1073
1074 Marc21 stylesheet updated to reflect multiple full text fields
1075
1076 --- 1.0.6 2008/03/12
1077
1078 Fixed bug in pz2.js WRT DOMElement attributes on IE.
1079
1080 Fixed bug 2100: Database wildcards not working
1081
1082 --- 1.0.5 2007/11/09
1083
1084 Added support for retrieval of records in binary.
1085
1086 Fixed bug 1794: Pazpar2 does not return valid XML.
1087
1088 Deal with ICU not returning sortkey (resulted in SEGV before).
1089
1090 --- 1.0.4 2007/09/28
1091
1092 JavaScript library pzw2.js throws error if WS response (from Pazpar2 or
1093 other) is malformed (non-wellformed XML or missing Pazpar2 OK status).
1094
1095 Improved diagnostics when Pazpar2 HTTP decoding fails.
1096
1097 Pazpar2 requests may be POSTed as using Content-Type
1098 application/x-www-form-urlencoded.
1099
1100 Pazpar2 honors LF in HTTP headers.
1101
1102 Handle targets that handle negative hit counts (should not happen, but it
1103 does).
1104
1105 --- 1.0.3 2007/09/19
1106
1107 ICU is used for tokenization and normalization of the following: mergekey,
1108 sorting, relevance terms.
1109
1110 Debian package now enables ICU tokenization and normalization by default.
1111
1112 --- 1.0.2 2007/08/22
1113
1114 Exposed user setting values (i.e. non-pz: names) to the record systems in two
1115 ways: Either as parameters to the normalization stylesheets (which would allow the
1116 programmer to postprocess or use the values in any way) or after the normalization
1117 step, in which case values are made part of the normalized record (and available for
1118 sorting, termlists, display, or other interface-related use.
1119
1120 Implemented sorting by year.
1121
1122 Option -d dumps records to the current log file instead of stderr.
1123
1124 Fixes for compilation on cygwin.
1125
1126 Z39.50 client code uses pz:elements. pz:elements was recognized in
1127 earlier Pazpar2 versions but it was not used for anything.
1128
1129 icu_chain_test is using fgets instead of getline - fixes compilation
1130 on MacOSX .
1131
1132 Loosen the CCL query parsing so that Pazpar2 only returns error if _all_
1133 query conversions fail (rather than _any_). This means targets that do
1134 not support some fields are ignored in a search.
1135
1136 --- 1.0.1 2007/07/03
1137
1138 Improved handling of socket timeout for Z39.50 connections.
1139
1140 Misc documentation updates and spell fixes.
1141
1142 Debian package pazpar2 creates log rotate entry.
1143
1144 Debian package pazpar2-apache2 reloads Apache2.
1145
1146 jsdemo included in distribution. It illustrates the use of the js/pz2.js
1147 JavaScript library.
1148
1149 --- 1.0.0 2007/06/20
1150
1151 First public release.
1152