CCL: configurable masking character YAZ-661

Add YAZ_EXPORT to functions in matchstr.h

document parameter (Doxygen warning)

Define local strcasecmp funcs

and use them when appropriate.

HTTP encode. Remove Transfer-Encoding header

YAZ uses content_len and full response anyway, so a Transfer-Encoding
header will obstruct the response.

Version 4.2.57

COMSTACK: @ uses AF_UNSPEC

But we prefer AF_INET6 over others when picking a socket. Problem
is that some systems has IPV6 support, but we can't create sockets
for them, so we pick AF_UNSPEC first.

Add check for content_length stuff

HTTP encode. Proper Content-Length YAZ-660

For yaz_encode_http_response use content_len to determine
resulting Content-Length in HTTP response and NOT Content-Length
supplied in headers by user.

z_HTTP_header_add_basic_auth uses z_HTTP_header_set

rather than z_HTTP_header_add, to avoid having two Authorization
headers by mistake.

yaz_url_exec: mangle headers HOST/User-Agent

Host as returned by z_get_HTTP_Request_uri takes precedence
over user_headers. User-Agent from user_headers takes precedence
over User-Agent YAZ.

Make z_HTTP_header_set public and extend z_HTTP_errmsg

Utility z_HTTP_errmsg should now map all HTTP 1.1 diagnostic
codes.

Tweak trace messages (TRCs) of tcpip.c

Print only first 8K of HTTP pkgs

and cut off at any zero's - assuming binary content. Also
use odr_write2 in a number of places.

Add odr_write2 (improved odr_write)

Like odr_write but takes const char*, instead of unsigned char* .

yaz_url_exec: only one User-Agent

User-Agent in headers removes the default User-Agent: YAZ .

Fix problem with HTTP decoding

For HTTP 1XX, 204, 304 assume no content-length.

Fix yaz_base64decode to use proper signed var YAZ-656

Problem occurred on platforms with big endian and unsigned char (by
default).

New test: test_zgdu

Mostly to demonstrate how to decode HTTP response from a memory
buffer.

Version 4.2.56

yaz-client: fix crash on connect

Problem introduced by 7e90f2cc9a54 .

Versio 4.2.55

Update NEWS

yaz-client uses cs_create_host_proxy

Fix vhost problem YAZ-654

Problem was that COMSTACK type was determined by vhost when
proxy was given. Proxy overrides host, except for the determination
of protocol (oid_proto).

Debug package libyaz4-dbg. YAZ-653

Fix problem with cs_close hang/wait in SSL mode YAZ-652

Invoke gnutls_bye differently in tcpip_close

Version 4.2.54

Fix YAZ4J Description

Update NEWS

cql2pqf: option -S for strict mode

cql_parser_strict

cql_parser_strict with mode=1 puts CQL parser in a mode where
CQL parser is conforming to standard.

Merge branch 'master' of ssh://git.indexdata.com:222/home/git/pub/yaz

Bumdle yaz4j.{jar,dll} with YAZ

yaz-ztest: return OPACXML for syntax=XML, esn=OP

Purely for having a test server returns OPACXML.

Revert "CQL: accept relations "within", "encloses""

This reverts commit e4e5f0bfaa1fcb5eb12cc37df216352df226b01e.

Revert "Remove HDCQL functionality"

This reverts commit 9084e20f4c5ffad9cfea2087396206b75a3a6654.

Version 4.2.53

MARC8c allows encoding of control characters (except ESC)

MARC8 work as before.

MARC 8 encoding: never pass through ESC

as it is also uesd as escape for MARC-8 itself.

MARC8: keep existing behavior for control characters

But create a new name, MARC8c, that passes all control characters
through.

MARC-8: allow all characters 0x01-0x20 YAZ-650

Fix dup'ed identifers for MARC-8 encoding YAZ-650

The problem was that cdata_one_character did not fully flush the
output and so that would be carried over to the "real" output.

Version 4.2.52

Merge branch 'normal_cql'

yaz-ztest: Use hash rather for fake hit count

Before, random number was used. This is problematic for unit tests
using yaz-ztest. This patch also makes a hash for CQL queries.
For RPN, any term with a leading digit will be treated as pseudu
hit count (to force any particular hit count by a client).

yaz-ztest: return unique MARC dummy records

Beyond record offset 24, the author surname is patched
with offset to make all records unique.

Marcdump -c tries to make more readable strings

For chr values 32 - 126 the charcter is produced verbatim.

Update doc WRT @4, @6, @ notations

COMSTACK: fix resolving of non-passive addresses

Bug introduced in previous commit.

COMSTACK: make @ bind to IPV6+IPV4 consistenly YAZ-623

@4 binds to IPV4. @6 binds to IPV6.

Ignore local0.ent

Documentation rebuilt if local.ent changes

No prefix in local.ent

Merge branch 'master' into normal_cql

Update CQL API documentation a bit

Merge branch 'master' into normal_cql

Simplify make install

Remove HDCQL functionality

Update header about CQL grammar

CQL: accept relations "within", "encloses"

Delete trailing whitespace from .y files

Honor CQL unmasked modifier + tests

Add regexp/masked/unmasked to pqf.properties.

Delete old openbsd ports link. SunOS -> Solaris

Document ZOOM_query_{cql,ccl}2rpn

Rename handle_facet_list to ZOOM_handle_facet_list

Trying to use Solr name consistently

Document ZOOM_resultset_sort

Document ZOOM_query_sortby2

reindent of yaz-client-man.xml

Version 4.2.51

Update NEWS

Extra brace around it stmt to avoid warning

yaz-ztest: echo extra request data to response data

This is merely to test/illustrate how extra data works

GFS: scan handler gets extra_args from request

GFS: scan may return extra response data (SRU)

Remove unused local variable

White space reformat

Added support for scan of SOLR indexes. To enable support, add the following request handler to your solrconfig.xml file.

<!-- Terms Component http://wiki.apache.org/solr/TermsComponent A
component to return terms and document frequency of those terms
  -->
<searchComponent name="terms" class="solr.TermsComponent" />

<!-- A request handler for demonstrating the terms component -->
<requestHandler name="/terms" class="solr.SearchHandler"
startup="lazy">
<lst name="defaults">
<bool name="terms">true</bool>
</lst>
<arr name="components">
<str>terms</str>
</arr>
</requestHandler>

Add test case for iconv

Test conversion of Aring to marc-8 in both NFC and NFD forms.

Version 4.2.50

Update NEWS

Diagnostic for missing MARC rule for OPAC

Remove comment for non-existing function

yaz_xml_to_opac: OID for embedded MARC may be given

GFS: conversions between OPAC and XML

Complete XML to OPAC conversion

Sync spelling of availabilityDate in XML to that of Schema

The opacxml.xsd had the correct spelling of this member always.
The ASN.1 was mis-spelled and still is (API change) - we are
not changing this by this. However, the OPAC to XML conversion had yet
*another* typo. This is fixed by this commit.

Further work on yaz_xml_to_opac

Incomplete and not tested

record_conv: fix leaks (when configure fails)

Add test for yaz_record_conv_opac_record

Minor reformatting

New function: z_ext_record_oid_nmem

Is like z_ext_record_oid, but takes NMEM rather than ODR.

Beginnings of XML to OPAC conversion

Fix a few Doxygen warnings

Rename opacdisp.c to opac_to_xml.c

Handle numeric subfields correctly.

Doc: a example of #, ? chars in CCL queries

Version 4.2.49

Update NEWS