Rephase description of sort order
[pazpar2-moved-to-github.git] / doc / pazpar2_protocol.xml
1 <?xml version="1.0" standalone="no"?>
2 <!DOCTYPE refentry PUBLIC "-//OASIS//DTD DocBook V4.4//EN"
3  "http://www.oasis-open.org/docbook/xml/4.4/docbookx.dtd"
4 [
5      <!ENTITY % local SYSTEM "local.ent">
6      %local;
7      <!ENTITY % entities SYSTEM "entities.ent">
8      %entities;
9      <!ENTITY % idcommon SYSTEM "common/common.ent">
10      %idcommon;
11 ]>
12 <refentry id="pazpar2_protocol">
13  <refentryinfo>
14   <productname>Pazpar2</productname>
15   <productnumber>&version;</productnumber>
16   <info><orgname>Index Data</orgname></info>
17  </refentryinfo>
18  <refmeta>
19   <refentrytitle>Pazpar2 protocol</refentrytitle>
20   <manvolnum>7</manvolnum>
21   <refmiscinfo class="manual">Conventions and miscellaneous</refmiscinfo>
22  </refmeta>
23
24  <refnamediv>
25   <refname>pazpar2_protocol</refname>
26   <refpurpose>The webservice protocol of Pazpar2</refpurpose>
27  </refnamediv>
28
29  <refsect1>
30   <title>DESCRIPTION</title>
31   <para>
32    Webservice requests are any that refer to filename "search.pz2". Arguments
33    are GET-style parameters. Argument 'command' is always required and specifies
34    the operation to perform. Any request not recognized as a webservice
35    request is forwarded to the HTTP server specified in the configuration
36    using the proxy setting.
37    This way, a regular webserver can host the user interface (itself dynamic
38    or static HTML), and Ajax-style calls can be used from JS (or any other
39    client-based scripting environment) to interact with the search logic
40    in Pazpar2. 
41   </para>
42   <para>
43    Each command is described in sub sections to follow.
44   </para>
45   <refsect2 id="command-init">
46    <title>init</title>
47    <para>
48     Initializes a session.
49     Returns session ID to be used in subsequent requests. If
50     a server ID is given in the Pazpar2 server section, then a
51     period (.) and the server ID is appended to the session ID.
52    </para>
53    <para>
54     Example:
55     <screen>
56      search.pz2?command=init
57     </screen>
58    </para>
59    <para>
60     Response:
61    </para>
62    <screen><![CDATA[
63     <init>
64      <status>OK</status>
65      <session>2044502273</session>
66     </init>
67 ]]></screen>
68    <para>
69     The init command may take a number of setting parameters, similar to
70     the 'settings' command described below. These settings are immediately
71     applied to the new session. Other parameters for init are:
72     <variablelist>
73      <varlistentry>
74       <term>clear</term>
75       <listitem>
76        <para>
77         If this is defined and the value is non-zero, the session will
78         not use the predefined databases in the configuration; only those
79         specified in the settings parameters (per session databases).
80         </para>
81       </listitem>
82      </varlistentry>
83
84      <varlistentry>
85       <term>service</term>
86       <listitem>
87        <para>
88         If this is defined it specifies a service ID. Makes the session use
89         the service with this ID. If this is setting is omitted, the
90         session will use the unnamed service in the Pazpar2 configuration.
91         </para>
92       </listitem>
93      </varlistentry>
94     </variablelist>
95    </para>
96   </refsect2>
97   
98   <refsect2 id="command-ping">
99    <title>ping</title>
100    <para>
101     Keeps a session alive. An idle session will time out after one minute.
102     The ping command can be used to keep the session alive absent other
103     activity.
104     It is suggested that any browser client have a simple alarm handler which
105     sends a ping every 50 seconds or so once a session has been initialized.
106    </para>
107    <para>
108     Example:
109     <screen><![CDATA[
110      search.pz?command=ping&session=2044502273
111 ]]>
112     </screen>
113     Response:
114    <screen><![CDATA[
115 <ping>
116   <status>OK</status>
117 </ping>
118 ]]></screen>
119    </para>
120   </refsect2>
121   <refsect2 id="command-settings">
122    <title>settings</title>
123    <para>
124     The settings command applies session-specific settings to one or more
125     databases. A typical function of this is to enable access to
126     restricted resources for registered users, or to set a user- or
127     library-specific username/password to use against a target. Each
128     setting parameter has the form name[target]=value, where name is the
129     name of the setting (e.g. pz:authentication), target is a target ID,
130     or possibly a wildcard, and value is the desired value for the
131     setting.
132    </para>
133    
134    <para>
135     Because the settings command manipulates potentially sensitive
136     information, it is possible to configure Pazpar2 to only allow access
137     to this command from a trusted site -- usually from server-side
138     scripting, which in turn is responsible for authenticating the user,
139     and possibly determining which resources he has access to, etc.
140    </para>
141    
142    <note>
143     <para>
144      As a shortcut, it is also possible to override settings directly in
145      the init command.
146     </para>
147    </note>
148    
149    <para>
150     Example:
151     <screen><![CDATA[
152 search.pz?command=settings&session=2044502273&pz:allow[search.com:210/db1]=1
153       ]]></screen>
154     Response:
155    <screen><![CDATA[
156 <settings>
157   <status>OK</status>
158 </settings>
159 ]]></screen>
160    </para>
161    
162   </refsect2>
163   <refsect2 id="command-search">
164    <title>search</title>
165    <para>
166     Launches a search, parameters:
167
168     <variablelist>
169      <varlistentry>
170       <term>session</term>
171       <listitem>
172        <para>
173         Session ID
174         </para>
175       </listitem>
176      </varlistentry>
177      <varlistentry>
178       <term>query</term>
179       <listitem>
180        <para>
181         CCL query
182         </para>
183       </listitem>
184      </varlistentry>
185      <varlistentry>
186       <term>filter</term>
187       <listitem>
188        <para>
189         Limits the search to a given set of targets specified by the
190         filter. The filter consists a comma separated list of
191         <emphasis>setting</emphasis>+<emphasis>operator</emphasis>+<emphasis>args</emphasis>
192         pairs. The <emphasis>setting</emphasis> is a Pazpar2 setting
193         (such as <literal>pz:id</literal>).
194         The <emphasis>operator</emphasis> is either
195         <literal>=</literal> (string match)
196         or <literal>~</literal> (substring match).
197         The <emphasis>args</emphasis> is a list of values separated
198         by <literal>|</literal> (or , one of the values).
199         The idea is that only targets with a setting matching one of
200         the values given will be included in the search.
201        </para>
202       </listitem>
203      </varlistentry>
204      <varlistentry>
205       <term>limit</term>
206       <listitem>
207        <para>
208         Narrows the search by one or more fields (typically facets).
209         The limit is sequence of one or more
210         <emphasis>name</emphasis>=<emphasis>args</emphasis> pairs separated
211         by comma. The <emphasis>args</emphasis> is a list of values
212         separated by vertical bar (<literal>|</literal>).
213         The meaning of <literal>|</literal> is alternative, ie OR .
214         A value that contains a comma (<literal>,</literal>),
215         a vertical bar (<literal>|</literal>) or
216         backslash itself must be preceded by backslash (<literal>\</literal>).
217         The <link linkend="limitmap">pz:limitmap</link> configuration
218         item defines how the searches are mapped to a database.
219        </para>
220       </listitem>
221      </varlistentry>
222      <varlistentry>
223       <term>startrecs</term>
224       <listitem>
225        <para>
226         Specifies the first record to retrieve from each target.
227         The first record in a result set for a target is numbered 0, next
228         record is numbered 2. By default maxrecs is 0.
229         </para>
230       </listitem>
231      </varlistentry>
232      <varlistentry>
233       <term>maxrecs</term>
234       <listitem>
235        <para>
236         Specifies the maximum number of records to retrieve from each
237         target. The default value is 100. This setting has same meaning
238         as per-target setting pz:maxrecs . If pz:maxrecs is set, it takes
239         precedence over argument maxrecs.
240         </para>
241       </listitem>
242      </varlistentry>
243     </variablelist>
244
245    </para>
246    <para>
247     Example:
248     <screen><![CDATA[
249 search.pz2?session=2044502273&command=search&query=computer+science
250 ]]>
251      </screen>
252     Response:
253    <screen><![CDATA[
254 <search>
255   <status>OK</status>
256 </search>
257      ]]></screen>
258    </para>
259   </refsect2>
260  
261   <refsect2 id="command-stat">
262    <title>stat</title>
263    <para>
264     Provides status information about an ongoing search. Parameters:
265
266     <variablelist>
267      <varlistentry>
268       <term>session</term>
269       <listitem>
270        <para>
271         Session ID
272         </para>
273       </listitem>
274      </varlistentry>
275     </variablelist>
276
277    </para>
278    <para>
279     Example:
280    <screen><![CDATA[
281 search.pz2?session=2044502273&command=stat
282     ]]></screen>
283     Output
284     <screen><![CDATA[
285 <stat>
286   <activeclients>3</activeclients>
287   <hits>7</hits>                   -- Total hitcount
288   <records>7</records>             -- Total number of records fetched in last query
289   <clients>1</clients>             -- Total number of associated clients
290   <unconnected>0</unconnected>     -- Number of disconnected clients
291   <connecting>0</connecting>       -- Number of clients in connecting state
292   <initializing>0</initializing>   -- Number of clients initializing
293   <searching>0</searching>         -- ... searching
294   <presenting>0</presenting>       -- ... presenting
295   <idle>1</idle>                   -- ... idle (not doing anything)
296   <failed>0</failed>               -- ... Connection failed
297   <error>0</error>                 -- ... Error was produced somewhere
298 </stat>
299      ]]></screen>
300   </para>
301   </refsect2>
302   
303   <refsect2 id="command-show">
304    <title>show</title>
305    <para>
306     Shows records retrieved. Parameters:
307     <variablelist>
308      <varlistentry>
309       <term>session</term>
310       <listitem>
311        <para>
312         Session ID
313        </para>
314       </listitem>
315      </varlistentry>
316      
317      <varlistentry>
318       <term>start</term>
319       <listitem>
320        <para>First record to show - 0-indexed.</para>
321       </listitem>
322      </varlistentry>
323      
324      <varlistentry>
325       <term>num</term>
326       <listitem>
327        <para>
328         Number of records to show If omitted, 20 is used.
329        </para>
330       </listitem>
331      </varlistentry>
332
333      <varlistentry>
334       <term>block</term>
335       <listitem>
336        <para>
337         If block is set to 1, the command will hang until there are records
338         ready to display. Use this to show first records rapidly without
339         requiring rapid polling.
340        </para>
341       </listitem>
342      </varlistentry>
343
344      <varlistentry>
345       <term>sort</term>
346       <listitem>
347        <para>
348         Specifies sort criteria. The argument is a comma-separated list
349         (no whitespace allowed) of sort fields, with the highest-priority
350         field first. A sort field may be followed by a colon followed by
351         the number '0' (decreasing) or '1' (increasing).  Default
352         sort order is decreasing.
353         Sort field names can be any field name designated as a sort field
354         in the pazpar2.cfg file, or the special names 'relevance' and
355         'position'.
356        </para>
357        <para>
358         For targets where If <link linkend="pz:sortmap">pz:sortmap</link>
359         is defined, a sort operation will be executed (possibly including
360         extending the search).
361        </para>
362       </listitem>
363      </varlistentry>
364      
365     </variablelist>
366    </para>
367    <para>
368     Example:
369     <screen><![CDATA[
370 search.pz2?session=2044502273&command=show&start=0&num=2&sort=title:1
371 ]]></screen>
372     Output:
373     <screen><![CDATA[
374 <show>
375   <status>OK</status>
376   <activeclients>3</activeclients>     -- How many clients are still working
377   <merged>6</merged>                   -- Number of merged records
378   <total>7</total>                     -- Total of all hitcounts
379   <start>0</start>                     -- The start number you requested
380   <num>2</num>                         -- Number of records retrieved
381   <hit>
382     <md-title>How to program a computer, by Jack Collins</md-title>
383     <count>2</count>                   -- Number of merged records 
384     <recid>6</recid>                   -- Record ID for this record
385   </hit>
386   <hit>
387     <md-title>
388   Computer processing of dynamic images from an Anger scintillation camera :
389   the proceedings of a workshop /
390     </md-title>
391     <recid>2</recid>
392   </hit>
393 </show>
394      ]]></screen>
395    </para>
396   </refsect2>
397
398   <refsect2 id="command-record">
399    <title>record</title>
400    <para>
401     Retrieves a detailed record. Unlike the 
402     <link linkend="command-show">show</link> command, this command 
403     returns metadata records before merging takes place. Parameters:
404     
405     <variablelist>
406      <varlistentry>
407       <term>session</term>
408       <listitem>
409        <para>
410         Session ID
411        </para>
412       </listitem>
413      </varlistentry>
414
415      <varlistentry>
416       <term>id</term>
417       <listitem>
418        <para>
419         record ID as provided by the
420         <link linkend="command-show">show</link> command.
421         </para>
422       </listitem>
423      </varlistentry>
424
425      <varlistentry>
426       <term>offset</term>
427       <listitem>
428        <para>
429         This optional parameter is an integer which, when given, makes
430         Pazpar2 return the original record for a specific target.
431         The record set from first target is numbered 0,
432         second record set is numbered 1, etc.
433         The nativesyntax setting, as usual, is used to determine how to
434         create XML from the original record - unless parameter
435         <literal>binary</literal> is given in which the record is
436         fetched as "raw" from ZOOM C (raw, original record).
437        </para>
438        <para>
439         When offset/checksum is not given, the Pazpar2 metadata for the record
440         is returned and with metadata for each targets' data specified
441         in a 'location' list.
442        </para>
443       </listitem>
444      </varlistentry>
445
446      <varlistentry>
447       <term>checksum</term>
448       <listitem>
449        <para>
450         This optional parameter is a string which, when given, makes
451         Pazpar2 return the original record for a specific target. The
452         checksum is returned as attribtue 'checksum' in element
453         'location' for show command and record command (when checksum
454         and offset is NOT given).
455         The nativesyntax setting, as usual, is used to determine how to
456         create XML from the original record - unless parameter
457         <literal>binary</literal> is given in which the record is
458         fetched as "raw" from ZOOM C (raw, original record).
459        </para>
460        <para>
461         When offset/checksum is not given, the Pazpar2 metadata for the record
462         is returned and with metadata for each targets' data specified
463         in a 'location' list.
464        </para>
465       </listitem>
466      </varlistentry>
467
468
469      <varlistentry>
470       <term>nativesyntax</term>
471       <listitem>
472        <para>
473         This optional parameter can be used to override pz:nativesyntax
474         as given for the target. This allow an alternative nativesyntax
475         to be used for original records (see parameteroffset above).
476        </para>
477       </listitem>
478      </varlistentry>
479
480      <varlistentry>
481       <term>syntax</term>
482       <listitem>
483        <para>
484         This optional parameter is the record syntax used for raw 
485         transfer (i.e. when offset is specified). If syntax is not given,
486         but offset is used, the value of pz:requestsyntax is used.
487        </para>
488       </listitem>
489      </varlistentry>
490
491      <varlistentry>
492       <term>esn</term>
493       <listitem>
494        <para>
495         This optional parameter is the element set name used to retrieval
496         of a raw record (i.e. when offset is specified).
497         If esn is not given, but offset is used, the value of pz:elements
498         is used.
499        </para>
500       </listitem>
501      </varlistentry>
502
503      <varlistentry>
504       <term>binary</term>
505       <listitem>
506        <para>
507         This optional parameter enables "binary" response for retrieval
508         of a original record (i.e. when offset is specified). For binary
509         response the record by default is fetched from ZOOM C using
510         the "raw" option or by parameter nativesyntax if given.
511        </para>
512       </listitem>
513      </varlistentry>
514
515     </variablelist>
516    </para>
517    <para> 
518     Example:
519     <screen><![CDATA[
520 search.pz2?session=605047297&command=record&id=3
521 ]]></screen>
522
523     Example output:
524     
525     <screen><![CDATA[
526 <record>
527   <md-title>
528         The Puget Sound Region : a portfolio of thematic computer maps /
529   </md-title>
530   <md-date>1974</md-date>
531   <md-author>Mairs, John W.</md-author>
532   <md-subject>Cartography</md-subject>
533 </record>
534 ]]></screen>
535    </para>
536   </refsect2>
537
538   <refsect2 id="command-termlist">
539    <title>termlist</title>
540    <para>
541     Retrieves term list(s). Parameters:
542     
543     <variablelist>
544      <varlistentry>
545       <term>session</term>
546       <listitem>
547        <para>
548         Session Id.
549        </para>
550       </listitem>
551      </varlistentry>
552      <varlistentry>
553       <term>name</term>
554       <listitem>
555        <para>
556         comma-separated list of termlist names. If omitted,
557         all termlists are returned.
558        </para>
559       </listitem>
560      </varlistentry>
561      <varlistentry>
562       <term>num</term>
563       <listitem>
564        <para>
565         maximum number of entries to return - default is 15.
566        </para>
567       </listitem>
568      </varlistentry>
569     </variablelist>
570    </para>
571    <para>
572     Example:
573     <screen><![CDATA[
574 search.pz2?session=2044502273&command=termlist&name=author,subject
575 ]]></screen>
576     Output:
577     <screen><![CDATA[
578 <termlist>
579   <activeclients>3</activeclients>
580   <list name="author">
581     <term>
582       <name>Donald Knuth</name>
583       <frequency>10</frequency>
584     </term>
585       <term>
586       <name>Robert Pirsig</name>
587       <frequency>2</frequency>
588     </term>
589   </list>
590   <list name="subject">
591     <term>
592       <name>Computer programming</name>
593       <frequency>10</frequency>
594     </term>
595   </list>
596 </termlist>
597 ]]></screen>
598    </para>
599    
600    <para>
601     For the special termlist name "xtargets", results
602     are returned about the targets which have returned the most hits.
603     The 'term' subtree has additional elements,
604     specifically a state and diagnostic field (in the example below, a
605     target ID is returned in place of 'name'.
606     This may or may not change later.
607    </para>
608    <para>
609     Example
610     <screen><![CDATA[
611 <term>
612   <name>library2.mcmaster.ca</name>
613   <frequency>11734</frequency>         -- Number of hits
614   <state>Client_Idle</state>           -- See the description of 'bytarget' below
615   <diagnostic>0</diagnostic>           -- Z39.50 diagnostic codes
616 </term>
617 ]]></screen>
618    </para>
619   </refsect2>
620   
621
622   <refsect2 id="command-bytarget">
623    <title>bytarget</title>
624    <para>
625     Returns information about the status of each active client. Parameters:
626
627     <variablelist>
628      <varlistentry>
629       <term>session</term>
630       <listitem>
631        <para>
632         Session Id.
633         </para>
634       </listitem>
635      </varlistentry>
636     </variablelist>
637    </para>
638    <para> 
639     Example:
640     <screen><![CDATA[
641 search.pz2?session=605047297&command=bytarget&id=3
642 ]]></screen>
643     
644     Example output:
645     
646     <screen><![CDATA[
647 <bytarget>
648   <status>OK</status>
649   <target>
650     <id>z3950.loc.gov/voyager/</id>
651     <hits>10000</hits>
652     <diagnostic>0</diagnostic>
653     <records>65</records>
654     <state>Client_Presenting</state>
655   </target>
656   <!-- ... more target nodes below as necessary -->
657 </bytarget>
658 ]]></screen>
659     
660     The following client states are defined: Client_Connecting,
661     Client_Connected, Client_Idle, Client_Initializing, Client_Searching,
662     Client_Searching, Client_Presenting, Client_Error, Client_Failed,
663     Client_Disconnected, Client_Stopped, Client_Continue.
664    </para>
665   </refsect2>
666
667  </refsect1>
668  <refsect1>
669   <title>SEE ALSO</title>
670   <para>
671    Pazpar2:
672    <citerefentry>
673     <refentrytitle>pazpar2</refentrytitle>
674     <manvolnum>8</manvolnum>
675    </citerefentry>
676   </para>
677   <para>
678    Pazpar2 Configuration:
679    <citerefentry>
680     <refentrytitle>pazpar2_conf</refentrytitle>
681     <manvolnum>5</manvolnum>
682    </citerefentry>
683   </para>
684  </refsect1>
685 </refentry>
686
687 <!-- Keep this comment at the end of the file
688 Local variables:
689 mode: nxml
690 nxml-child-indent: 1
691 End:
692 -->