MARC8: keep existing behavior for control characters

But create a new name, MARC8c, that passes all control characters
through.

MARC-8: allow all characters 0x01-0x20 YAZ-650

Fix dup'ed identifers for MARC-8 encoding YAZ-650

The problem was that cdata_one_character did not fully flush the
output and so that would be carried over to the "real" output.

Version 4.2.52

Merge branch 'normal_cql'

yaz-ztest: Use hash rather for fake hit count

Before, random number was used. This is problematic for unit tests
using yaz-ztest. This patch also makes a hash for CQL queries.
For RPN, any term with a leading digit will be treated as pseudu
hit count (to force any particular hit count by a client).

yaz-ztest: return unique MARC dummy records

Beyond record offset 24, the author surname is patched
with offset to make all records unique.

Marcdump -c tries to make more readable strings

For chr values 32 - 126 the charcter is produced verbatim.

Update doc WRT @4, @6, @ notations

COMSTACK: fix resolving of non-passive addresses

Bug introduced in previous commit.

COMSTACK: make @ bind to IPV6+IPV4 consistenly YAZ-623

@4 binds to IPV4. @6 binds to IPV6.

Ignore local0.ent

Documentation rebuilt if local.ent changes

No prefix in local.ent

Merge branch 'master' into normal_cql

Update CQL API documentation a bit

Merge branch 'master' into normal_cql

Simplify make install

Remove HDCQL functionality

Update header about CQL grammar

CQL: accept relations "within", "encloses"

Delete trailing whitespace from .y files

Honor CQL unmasked modifier + tests

Add regexp/masked/unmasked to pqf.properties.

Delete old openbsd ports link. SunOS -> Solaris

Document ZOOM_query_{cql,ccl}2rpn

Rename handle_facet_list to ZOOM_handle_facet_list

Trying to use Solr name consistently

Document ZOOM_resultset_sort

Document ZOOM_query_sortby2

reindent of yaz-client-man.xml

Version 4.2.51

Update NEWS

Extra brace around it stmt to avoid warning

yaz-ztest: echo extra request data to response data

This is merely to test/illustrate how extra data works

GFS: scan handler gets extra_args from request

GFS: scan may return extra response data (SRU)

Remove unused local variable

White space reformat

Added support for scan of SOLR indexes. To enable support, add the following request handler to your solrconfig.xml file.

<!-- Terms Component http://wiki.apache.org/solr/TermsComponent A
component to return terms and document frequency of those terms
  -->
<searchComponent name="terms" class="solr.TermsComponent" />

<!-- A request handler for demonstrating the terms component -->
<requestHandler name="/terms" class="solr.SearchHandler"
startup="lazy">
<lst name="defaults">
<bool name="terms">true</bool>
</lst>
<arr name="components">
<str>terms</str>
</arr>
</requestHandler>

Add test case for iconv

Test conversion of Aring to marc-8 in both NFC and NFD forms.

Version 4.2.50

Update NEWS

Diagnostic for missing MARC rule for OPAC

Remove comment for non-existing function

yaz_xml_to_opac: OID for embedded MARC may be given

GFS: conversions between OPAC and XML

Complete XML to OPAC conversion

Sync spelling of availabilityDate in XML to that of Schema

The opacxml.xsd had the correct spelling of this member always.
The ASN.1 was mis-spelled and still is (API change) - we are
not changing this by this. However, the OPAC to XML conversion had yet
*another* typo. This is fixed by this commit.

Further work on yaz_xml_to_opac

Incomplete and not tested

record_conv: fix leaks (when configure fails)

Add test for yaz_record_conv_opac_record

Minor reformatting

New function: z_ext_record_oid_nmem

Is like z_ext_record_oid, but takes NMEM rather than ODR.

Beginnings of XML to OPAC conversion

Fix a few Doxygen warnings

Rename opacdisp.c to opac_to_xml.c

Handle numeric subfields correctly.

Doc: a example of #, ? chars in CCL queries

Version 4.2.49

Update NEWS

Call xmlCleanupParser to free Libxml2 memory

This is to better check for memory leaks for ICU test.

Remove yaz-client-commands.xml

Embed it in yaz-client-man.xml instead, because we no longer
it include it from main manual (instead all manual pages are
contained in Reference section).

Document join in yaz-icu man page

Simplify icu_buf_utf{8,16}_{create,resize}

Reformat some source for ICU

Add unit test for ICU rule join

ICU: better error handling of rule attribute (required)

New ICU chain rule, join, to join tokens

Remove useless assert

Simplification of initial call to icu_iter_invoke

version 4.2.48

Update NEWS

New GFS search member: present_number

This is a hint to the search handler how many records are going to be
fetched immediately following search. There's no guarantee that it's
going to be the case, since it depends on hit count (for Z39.50
piggyback) and whether errors turn up.

Make a few functions static (private)

The functions getbyte_stream, ungetbyte_stream and yaz_gets
are now private. They were never declared in a header file.

Bump year

Bump year

Simplify a few sort spec conversions

yaz-marcdump: exit(5) for serious decoding errors

ISO2709 decoding: be more picky WRT header

Reformat

odr_prepend: zero length prefix ignored

GFS: bail out of fetch if last_in_set is set

Until now, last_in_set, was only used as to indicate that
next-result-set-position should be set to zero.
http://www.loc.gov/z3950/agency/markup/04.html#Next-result-set-position
Based on patch from Ashley Sanders.

Rework search for anchor/mask CQL ops

Using expressions such as term[i] == some and term[i-1]=='\\'
does NOT work. term[i-2] could be '\\' and so on. String *must* be
searched from one end to anothor (due to the \\ case).

Add two more tests with anchoring

CQL: Don't treat \^ as anchor

Add CQL to PQF tests with anchoring

Make some functions static/private in PQF parsing

Those functions were never declared in a public header and so
should not be in use by applications based on YAZ.

Avoid mixed stmt/var declare

Check result of fread

Include config.h via <>s

Provide SSL libs for in-source yaz-config

Add Ubuntu quantal

Spelling fix in NEWS

Version 4.2.47

Doc reformat, adjust "still to document" list

Document new settings saveAPDU, APDU

Doc: strip-trailing-whitespace

GFS: replay implementation_version from backend

From 3.0.40 and later, implementation_version from backend was
not used in init response at all.

ZOOM: special options to control APDU logging

Using ZOOM_connection_option_set(c, "saveAPDU", "1") will enable
logging of APDUs until "saveAPDU" option is set again. If logging is
already enabled the effect is that current APDU buffer is cleared.
Using ZOOM_connection_option_set(c, "saveAPDU", "0") disables
logging (default behavior on new connection).
The APDUs sent/received can be obtained by using
Using ZOOM_connection_option_get(c, "APDU") or
ZOOM_connection_option_getl(c, "APDU", &l).

ZOOM C refactor. Make helper ZOOM_send_GDU