Add wrbuf_sha1_puts
[yaz-moved-to-github.git] / doc / comstack.xml
index 9ae8df0..436d84a 100644 (file)
@@ -1,54 +1,62 @@
-<!-- $Id: comstack.xml,v 1.4 2001-10-24 09:27:59 adam Exp $ -->
  <chapter id="comstack"><title>The COMSTACK Module</title>
 
   <sect1 id="comstack.synopsis"><title>Synopsis (blocking mode)</title>
 
-   <programlisting>
-
-COMSTACK *stack;
-char *buf = 0;
-int size = 0, length_incoming;
-char *protocol_package; 
-int protocol_package_length;
-char server_address[] = "myserver.com:2100";
-int status;
-
-stack = cs_create(tcpip_type, 1, PROTO_Z3950);
-if (!stack) {
-    perror("cs_create");  /* note use of perror() here since we have no stack yet */
-    exit(1);
-}
-
-status = cs_connect(stack, server_address);
-if (status != 0) {
-    cs_perror(stack, "cs_connect");
-    exit(1);
-}
-
-status = cs_put(stack, protocol_package, protocol_package_length);
-if (status) {
-    cs_perror(stack, "cs_put");
-    exit(1);
-}
-
-/* Now get a response */
-
-length_incoming = cs_get(stack, &amp;buf, &amp;size);
-if (!length_incoming) {
-    fprintf(stderr, "Connection closed\n");
-    exit(1);
-} else if (length_incoming < 0) {
-    cs_perror(stack, "cs_get");
-    exit(1);
-}
-
-/* Do stuff with buf here */
-
-/* clean up */
-cs_close(stack);
-if (buf)
-    free(buf);
-    
+   <programlisting><![CDATA[
+    COMSTACK stack;
+    char *buf = 0;
+    int size = 0, length_incoming;
+    char server_address_str[] = "localhost:9999";
+    void *server_address_ip;
+    int status;
+
+    char *protocol_package = "GET / HTTP/1.0\r\n\r\n";
+    int protocol_package_length = strlen(protocol_package);
+
+    stack = cs_create(tcpip_type, 1, PROTO_HTTP);
+    if (!stack) {
+        perror("cs_create");  /* use perror() here since we have no stack yet */
+        return -1;
+    }
+
+    server_address_ip = cs_straddr(stack, server_address_str);
+    if (!server_address_ip)
+    {
+        fprintf(stderr, "cs_straddr: address could not be resolved\n");
+        return -1;
+    }
+
+    status = cs_connect(stack, server_address_ip);
+    if (status != 0) {
+        fprintf(stderr, "cs_connect: %s\n", cs_strerror(stack));
+        return -1;
+    }
+
+    status = cs_put(stack, protocol_package, protocol_package_length);
+    if (status) {
+        fprintf(stderr, "cs_put: %s\n", cs_strerror(stack));
+        return -1;
+    }
+    /* Now get a response */
+
+    length_incoming = cs_get(stack, &buf, &size);
+    if (!length_incoming) {
+        fprintf(stderr, "Connection closed\n");
+        return -1;
+    } else if (length_incoming < 0) {
+        fprintf(stderr, "cs_get: %s\n", cs_strerror(stack));
+        return -1;
+    }
+
+    /* Print result */
+    fwrite(buf, length_incoming, 1, stdout);
+
+    /* clean up */
+    cs_close(stack);
+    if (buf)
+        free(buf);
+    return 0;
+]]>
    </programlisting>
 
   </sect1>
@@ -57,15 +65,23 @@ if (buf)
    <para>
     The &comstack;
     subsystem provides a transparent interface to different types of transport
-    stacks for the exchange of BER-encoded data. At present, the
-    RFC1729 method (BER over TCP/IP), and Peter Furniss' XTImOSI
-    stack are supported, but others may be added in time. The philosophy of the
+    stacks for the exchange of BER-encoded data and HTTP packets.
+    At present, the RFC1729 method (BER over TCP/IP), local UNIX socket and an
+    experimental SSL stack are supported, but others may be added in time.
+    The philosophy of the
     module is to provide a simple interface by hiding unused options and
     facilities of the underlying libraries. This is always done at the risk
     of losing generality, and it may prove that the interface will need
     extension later on.
    </para>
 
+   <note>
+    <para>
+     There hasn't been interest in the XTImOSI stack for some years.
+     Therefore, it is no longer supported.
+     </para>
+   </note>
+
    <para>
     The interface is implemented in such a fashion that only the
     sub-layers constructed to the transport methods that you wish to
@@ -77,11 +93,12 @@ if (buf)
     the interface is still orders of magnitudes more complex than the
     transport systems found in many other packages. One reason is that
     the interface needs to support the somewhat different requirements of
-    the different lower-layer communications stacks; another important reason is
-    that the interface seeks to provide a more or less industrial-strength
-    approach to asynchronous event-handling. When no function is allowed
-    to block, things get more complex - particularly on the server
-    side. We urge you to have a look at the demonstration client and server
+    the different lower-layer communications stacks; another important
+    reason is that the interface seeks to provide a more or less
+    industrial-strength approach to asynchronous event-handling.
+    When no function is allowed to block, things get more complex -
+    particularly on the server side.
+    We urge you to have a look at the demonstration client and server
     provided with the package. They are meant to be easily readable and
     instructive, while still being at least moderately useful.
    </para>
@@ -89,7 +106,7 @@ if (buf)
   </sect1>
   <sect1 id="comstack.common"><title>Common Functions</title>
 
-   <sect2><title>Managing Endpoints</title>
+   <sect2 id="comstack.managing.endpoints"><title>Managing Endpoints</title>
 
     <synopsis>
      COMSTACK cs_create(CS_TYPE type, int blocking, int protocol);
@@ -97,21 +114,41 @@ if (buf)
 
     <para>
      Creates an instance of the protocol stack - a communications endpoint.
-     The <literal>type</literal> parameter determines the mode of communication.
-     At present, the values
-     <literal>tcpip_type</literal>
-     and
-     <literal>mosi_type</literal>
-     are recognized. The function returns a null-pointer if a system error
-     occurs. The <literal>blocking</literal> parameter should be one if you wish
-     the association to operate in blocking mode, zero otherwise. The
-     <literal>protocol</literal> field should be one of
-     <literal>PROTO_SR</literal> or <literal>PROTO_Z3950</literal>.
+     The <literal>type</literal> parameter determines the mode
+     of communication. At present the following values are supported:
     </para>
 
+    <variablelist>
+     <varlistentry><term><literal>tcpip_type</literal></term>
+      <listitem><para>TCP/IP (BER over TCP/IP or HTTP over TCP/IP)
+       </para></listitem>
+     </varlistentry>
+     <varlistentry><term><literal>ssl_type</literal></term>
+      <listitem><para>Secure Socket Layer (SSL). This COMSTACK
+        is experimental and is not fully implemented. If
+        HTTP is used, this effectively is HTTPS.
+       </para></listitem>
+     </varlistentry>
+     <varlistentry><term><literal>unix_type</literal></term>
+      <listitem><para>Unix socket (unix only). Local Transfer via
+        file socket. See <citerefentry><refentrytitle>unix</refentrytitle>
+         <manvolnum>7</manvolnum></citerefentry>.
+       </para></listitem>
+      </varlistentry>
+     </variablelist>
+
+    <para>
+     The <function>cs_create</function> function returns a null-pointer
+     if a system error occurs.
+     The <literal>blocking</literal> parameter should be one if
+     you wish the association to operate in blocking mode, zero otherwise.
+     The <literal>protocol</literal> field should be
+     <literal>PROTO_Z3950</literal> or <literal>PROTO_HTTP</literal>.
+     Protocol <literal>PROTO_SR</literal> is no longer supported.
+    </para>
 
     <synopsis>
-     int cs_close(COMSTACK handle);
+     void cs_close(COMSTACK handle);
     </synopsis>
 
     <para>
@@ -130,7 +167,7 @@ if (buf)
     </note>
    </sect2>
 
-   <sect2><title>Data Exchange</title>
+   <sect2 id="comstack.data.exchange"><title>Data Exchange</title>
 
     <synopsis>
      int cs_put(COMSTACK handle, char *buf, int len);
@@ -155,8 +192,9 @@ if (buf)
     </synopsis>
 
     <para>
-     Receives a PDU from the peer. Returns the number of bytes
-     read. In nonblocking mode, it is possible that not all of the packet can be
+     Receives a PDU or HTTP Response from the peer. Returns the number of
+     bytes read.
+     In nonblocking mode, it is possible that not all of the packet can be
      read at once. In this case, the function returns 1. To simplify the
      interface, the function is
      responsible for managing the size of the buffer. It will be reallocated
@@ -227,7 +265,8 @@ if (buf)
 
     <variablelist>
      <varlistentry><term>CS_NONE</term><listitem><para>
-       No event is pending. The data found on the line was not a complete package.
+       No event is pending. The data found on the line was not a
+        complete package.
        </para></listitem></varlistentry>
 
      <varlistentry><term>CS_CONNECT</term><listitem><para>
@@ -239,17 +278,18 @@ if (buf)
      <varlistentry><term>CS_DISCON</term><listitem><para>
        The other side has closed the connection (or maybe sent a disconnect
        request - but do we care? Maybe later). Call
-       <function>cs_close</function> to close your end of the association as well.
+       <function>cs_close</function> to close your end of the association
+        as well.
        </para></listitem></varlistentry>
 
      <varlistentry><term>CS_LISTEN</term><listitem><para>
-       A connect request has been received. Call <function>cs_listen</function>
-       to process the event.
+       A connect request has been received.
+        Call <function>cs_listen</function> to process the event.
        </para></listitem></varlistentry>
 
      <varlistentry><term>CS_DATA</term><listitem><para>
-       There's data to be found on the line. Call <function>cs_get</function>
-       to get it.
+       There's data to be found on the line.
+        Call <function>cs_get</function> to get it.
        </para></listitem></varlistentry>
     </variablelist>
 
@@ -285,12 +325,12 @@ if (buf)
 
    <para>
     Initiate a connection with the target at <literal>address</literal>
-    (more onaddresses below). The function will return 0 on success, and 1 if
+    (more on addresses below). The function will return 0 on success, and 1 if
     the operation does not complete immediately (this will only
     happen on a nonblocking endpoint). In this case, use
     <function>cs_rcvconnect</function> to complete the operation,
-    when <function>select(2)</function> reports input pending on the
-    association.
+    when <function>select(2)</function> or <function>poll(2)</function>
+    reports input pending on the association.
    </para>
 
    <synopsis>
@@ -308,13 +348,13 @@ if (buf)
   <sect1 id="comstack.server"><title>Server Side</title>
 
    <para>
-    To establish a server under the <application>inetd</application> server, you
-    can use
+    To establish a server under the <application>inetd</application>
+    server, you can use
    </para>
 
    <synopsis>
     COMSTACK cs_createbysocket(int socket, CS_TYPE type, int blocking,
-    int protocol);
+                               int protocol);
    </synopsis>
 
    <para>
@@ -364,7 +404,7 @@ if (buf)
    </para>
 
    <synopsis>
-    char *cs_addrstr(COMSTACK);
+    const char *cs_addrstr(COMSTACK);
    </synopsis>
 
    <para>
@@ -388,80 +428,113 @@ if (buf)
    </para>
 
    <synopsis>
-    struct sockaddr_in *tcpip_strtoaddr(char *str);
-
-    struct netbuf *mosi_strtoaddr(char *str);
+    void *cs_straddr(COMSTACK handle, const char *str);
    </synopsis>
 
    <para>
-    The format for TCP/IP addresses is straightforward:
+    The format for TCP/IP and SSL addresses is:
    </para>
 
    <synopsis>
-    &lt;host> &lsqb; ':' &lt;portnum> &rsqb;
+    &lt;host> [ ':' &lt;portnum> ]
    </synopsis>
 
    <para>
-    The <literal>hostname</literal> can be either a domain name or an IP address.
-    The port number, if omitted, defaults to 210.
+    The <literal>hostname</literal> can be either a domain name or an
+    IP address. The port number, if omitted, defaults to 210.
+   </para>
+
+   <para>
+    For TCP/IP and SSL, the special hostnames <literal>@</literal>,
+    maps to <literal>IN6ADDR_ANY_INIT</literal> with
+    IPV4 binding as well (bindv6only=0),
+    The special hostname <literal>@4</literal> binds to
+    <literal>INADDR_ANY</literal> (IPV4 only listener).
+    The special hostname <literal>@6</literal> binds to
+    <literal>IN6ADDR_ANY_INIT</literal> with bindv6only=1 (IPV6 only listener).
    </para>
 
    <para>
-    For OSI, the format is
+    For UNIX sockets, the format of an address is the socket filename.
+   </para>
+
+   <para>
+    When a connection has been established, you can use
    </para>
 
    <synopsis>
-    &lsqb; &lt;t-selector> '/' &rsqb; &lt;host> &lsqb; ':' &lt;port> &rsqb;
+    const char *cs_addrstr(COMSTACK h);
    </synopsis>
 
    <para>
-    The transport selector is given as an even number of hex digits.
+    to retrieve the host name of the peer system. The function returns
+    a pointer to a static area, which is overwritten on the next call
+    to the function.
    </para>
 
    <para>
-    You'll note that the address format for the OSI mode are just a subset
-    of full presentation addresses. We use presentation addresses because
-    xtimosi doesn't, in itself, allow access to the X.500 Directory
-    service. We use a limited form, because we haven't yet come across an
-    implementation that used more of the elements of a full p-address. It
-    is a fairly simple matter to add the rest of the elements to the
-    address format as needed, however: Xtimosi <emphasis>does</emphasis>
-    support the full P-address structure.
+    A fairly recent addition to the &comstack; module is the utility
+    function
    </para>
-
+   <synopsis>
+    COMSTACK cs_create_host (const char *str, int blocking, void **vp);
+   </synopsis>
    <para>
-    In both transport modes, the special hostname &quot;@&quot; is mapped
-    to any local address (the manifest constant <literal>INADDR_ANY</literal>).
-    It is used to establish local listening endpoints in the server role.
+    which is just a wrapper for <function>cs_create</function> and
+    <function>cs_straddr</function>. The <parameter>str</parameter>
+    is similar to that described for <function>cs_straddr</function>
+    but with a prefix denoting the &comstack; type. Prefixes supported
+    are <literal>tcp:</literal>, <literal>unix:</literal> and
+    <literal>ssl:</literal> for TCP/IP, UNIX and SSL respectively.
+    If no prefix is given, then TCP/IP is used.
+    The <parameter>blocking</parameter> is passed to
+    function <function>cs_create</function>. The third parameter
+    <parameter>vp</parameter> is a pointer to &comstack; stack type
+    specific values.
+    Parameter <parameter>vp</parameter> is reserved for future use.
+    Set it to <literal>NULL</literal>.
    </para>
 
+  </sect1>
+
+  <sect1 id="comstack.ssl"><title>SSL</title>
    <para>
-    When a connection has been established, you can use
+    <synopsis>
+     void *cs_get_ssl(COMSTACK cs);
+    </synopsis>
+    Returns the SSL handle, <literal>SSL *</literal> for comstack. If comstack
+    is not of type SSL, NULL is returned.
    </para>
 
-   <synopsis>
-    char cs_addrstr(COMSTACK h);
-   </synopsis>
+   <para>
+    <synopsis>
+     int cs_set_ssl_ctx(COMSTACK cs, void *ctx);
+    </synopsis>
+    Sets SSL context for comstack. The parameter is expected to be of type
+    <literal>SSL_CTX *</literal>. This function should be called just
+    after comstack has been created (before connect, bind, etc).
+    This function returns 1 for success; 0 for failure.
+   </para>
 
    <para>
-    to retrieve the host name of the peer system. The function returns a pointer
-    to a static area, which is overwritten on the next call to the function.
+    <synopsis>
+     int cs_set_ssl_certificate_file(COMSTACK cs, const char *fname);
+    </synopsis>
+    Sets SSL certificate for comstack as a PEM file. This function
+    returns 1 for success; 0 for failure.
    </para>
 
-   <note>
-    <para>
-     We have left the issue of X.500 name-to-address mapping open, for the
-     moment. It would be a simple matter to provide a table-based mapping,
-     if desired. Alternately, we could use the X.500 client-function that
-     is provided with the ISODE (although this would defeat some of the
-     purpose of using ThinOSI in the first place. We have been told that it
-     should be within the realm of the possible to implement a lightweight
-     implementation of the necessary X.500 client capabilities on top of
-     ThinOSI. This would be the ideal solution, we feel. On the other hand, it
-     still remains to be seen just what role the Directory will play in a world
-     populated by ThinOSI and other pragmatic solutions.
-    </para>
-   </note>
+
+   <para>
+    <synopsis>
+     int cs_get_ssl_peer_certificate_x509(COMSTACK cs, char **buf, int *len);
+    </synopsis>
+    This function returns the peer certificate. If successful,
+    <literal>*buf</literal> and <literal>*len</literal> holds
+    X509 buffer and length respectively. Buffer should be freed
+    with <literal>xfree</literal>. This function returns 1 for success;
+    0 for failure.
+   </para>
 
   </sect1>
 
@@ -476,59 +549,59 @@ if (buf)
    </para>
 
    <para>
-    When a function (including the data exchange functions) reports an
-    error condition, use the function
-    <function>cs_errno()</function> to determine the cause of the
-    problem. The function
+    The error code for the COMSTACK can be retrieved using C macro
+    <function>cs_errno</function> which will return one
+    of the error codes <literal>CSYSERR</literal>,
+    <literal>CSOUTSTATE</literal>,
+    <literal>CSNODATA</literal>, ...
    </para>
 
    <synopsis>
-    void cs_perror(COMSTACK handle char *message);
+    int cs_errno(COMSTACK handle);
    </synopsis>
 
    <para>
-    works like <function>perror(2)</function> and prints the
-    <literal>message</literal> argument, along with a system message, to
-    <literal>stderr</literal>. Use the character array
+    You can the textual representation of the error code
+    by using <function>cs_errmsg</function> - which
+    works like <function>strerror(3)</function>
    </para>
 
    <synopsis>
-    extern const char *cs_errlist&lsqb;&rsqb;;
+    const char *cs_errmsg(int n);
    </synopsis>
 
    <para>
-    to get hold of the message, if you want to process it differently.
-    The function
+    It is also possible to get straight to the textual represenataion
+    without the error code by using
+    <function>cs_strerror</function>.
    </para>
 
    <synopsis>
-    const char *cs_stackerr(COMSTACK handle);
+    const char *cs_strerror(COMSTACK h);
    </synopsis>
 
-   <para>
-    Returns an error message from the lower layer, if one has been
-    provided.
-   </para>
   </sect1>
   <sect1 id="comstack.summary"><title>Summary and Synopsis</title>
 
-     <synopsis>
-    #include &lt;comstack.h>
-     
-    #include &lt;tcpip.h>      /* this is for TCP/IP support   */
-    #include &lt;xmosi.h>      /* and this is for mOSI support */
-     
+   <synopsis><![CDATA[
+    #include <yaz/comstack.h>
+
+    #include <yaz/tcpip.h>  /* this is for TCP/IP and SSL support */
+    #include <yaz/unix.h>   /* this is for UNIX socket support */
+
     COMSTACK cs_create(CS_TYPE type, int blocking, int protocol);
-     
+
     COMSTACK cs_createbysocket(int s, CS_TYPE type, int blocking,
                                int protocol);
-     
+    COMSTACK cs_create_host(const char *str, int blocking,
+                            void **vp);
+
     int cs_bind(COMSTACK handle, int mode);
-     
+
     int cs_connect(COMSTACK handle, void *address);
-     
+
     int cs_rcvconnect(COMSTACK handle);
-     
+
     int cs_listen(COMSTACK handle);
 
     COMSTACK cs_accept(COMSTACK handle);
@@ -539,21 +612,14 @@ if (buf)
 
     int cs_more(COMSTACK handle);
 
-    int cs_close(COMSTACK handle);
+    void cs_close(COMSTACK handle);
 
     int cs_look(COMSTACK handle);
 
-    struct sockaddr_in *tcpip_strtoaddr(char *str);
-
-    struct netbuf *mosi_strtoaddr(char *str);
-
-    extern int cs_errno;
-
-    void cs_perror(COMSTACK handle char *message);
-
-    const char *cs_stackerr(COMSTACK handle);
+    void *cs_straddr(COMSTACK handle, const char *str);
 
-    extern const char *cs_errlist[];
+    const char *cs_addrstr(COMSTACK h);
+]]>
    </synopsis>
   </sect1>
 
@@ -569,7 +635,7 @@ if (buf)
  sgml-indent-step:1
  sgml-indent-data:t
  sgml-parent-document: "yaz.xml"
- sgml-local-catalogs: "../../docbook/docbook.cat"
+ sgml-local-catalogs: nil
  sgml-namecase-general:t
  End:
  -->