Implemented numeric sorting (sort by year). Bug #820.
[pazpar2-moved-to-github.git] / src / http_command.c
1 /* $Id: http_command.c,v 1.57 2007-07-16 17:01:46 adam Exp $
2    Copyright (c) 2006-2007, Index Data.
3
4 This file is part of Pazpar2.
5
6 Pazpar2 is free software; you can redistribute it and/or modify it under
7 the terms of the GNU General Public License as published by the Free
8 Software Foundation; either version 2, or (at your option) any later
9 version.
10
11 Pazpar2 is distributed in the hope that it will be useful, but WITHOUT ANY
12 WARRANTY; without even the implied warranty of MERCHANTABILITY or
13 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
14 for more details.
15
16 You should have received a copy of the GNU General Public License
17 along with Pazpar2; see the file LICENSE.  If not, write to the
18 Free Software Foundation, 59 Temple Place - Suite 330, Boston, MA
19 02111-1307, USA.
20  */
21
22 /*
23  * $Id: http_command.c,v 1.57 2007-07-16 17:01:46 adam Exp $
24  */
25
26 #include <stdio.h>
27 #include <sys/types.h>
28 #include <sys/uio.h>
29 #include <unistd.h>
30 #include <stdlib.h>
31 #include <strings.h>
32 #include <ctype.h>
33 #include <sys/time.h>
34 #include <yaz/snprintf.h>
35 #if HAVE_CONFIG_H
36 #include <cconfig.h>
37 #endif
38
39 #include <yaz/yaz-util.h>
40
41 #include "config.h"
42 #include "util.h"
43 #include "eventl.h"
44 #include "pazpar2.h"
45 #include "http.h"
46 #include "http_command.h"
47 #include "settings.h"
48 #include "client.h"
49
50 // Update this when the protocol changes
51 #define PAZPAR2_PROTOCOL_VERSION "1"
52
53 struct http_session {
54     IOCHAN timeout_iochan;     // NOTE: This is NOT associated with a socket
55     struct session *psession;
56     unsigned int session_id;
57     int timestamp;
58     NMEM nmem;
59     struct http_session *next;
60 };
61
62 static struct http_session *session_list = 0;
63 void http_session_destroy(struct http_session *s);
64
65 static void session_timeout(IOCHAN i, int event)
66 {
67     struct http_session *s = iochan_getdata(i);
68     http_session_destroy(s);
69 }
70
71 struct http_session *http_session_create()
72 {
73     NMEM nmem = nmem_create();
74     struct http_session *r = nmem_malloc(nmem, sizeof(*r));
75
76     r->psession = new_session(nmem);
77     r->session_id = 0;
78     r->timestamp = 0;
79     r->nmem = nmem;
80     r->next = session_list;
81     session_list = r;
82     r->timeout_iochan = iochan_create(-1, session_timeout, 0);
83     iochan_setdata(r->timeout_iochan, r);
84     iochan_settimeout(r->timeout_iochan, global_parameters.session_timeout);
85
86     pazpar2_add_channel(r->timeout_iochan);
87     return r;
88 }
89
90 void http_session_destroy(struct http_session *s)
91 {
92     struct http_session **p;
93
94     for (p = &session_list; *p; p = &(*p)->next)
95         if (*p == s)
96         {
97             *p = (*p)->next;
98             break;
99         }
100     yaz_log(YLOG_LOG, "Destroying session %u", s->session_id);
101     iochan_destroy(s->timeout_iochan);
102     destroy_session(s->psession);
103     nmem_destroy(s->nmem);
104 }
105
106 static const char *get_msg(enum pazpar2_error_code code)
107 {
108     struct pazpar2_error_msg {
109         enum pazpar2_error_code code;
110         const char *msg;
111     };
112     static const struct pazpar2_error_msg ar[] = {
113         { PAZPAR2_NO_SESSION, "Session does not exist or it has expired"},
114         { PAZPAR2_MISSING_PARAMETER, "Missing parameter"},
115         { PAZPAR2_MALFORMED_PARAMETER_VALUE, "Malformed parameter value"},
116         { PAZPAR2_MALFORMED_PARAMETER_ENCODING, "Malformed parameter encoding"},
117         { PAZPAR2_MALFORMED_SETTING, "Malformed setting argument"},
118         { PAZPAR2_HITCOUNTS_FAILED, "Failed to retrieve hitcounts"},
119         { PAZPAR2_RECORD_MISSING, "Record missing"},
120         { PAZPAR2_NO_TARGETS, "No targets"},
121         { PAZPAR2_CONFIG_TARGET, "Target cannot be configured"},
122         { PAZPAR2_RECORD_FAIL, "Record command failed"},
123         { PAZPAR2_NOT_IMPLEMENTED, "Not implemented"},
124         { PAZPAR2_LAST_ERROR, "Last error"},
125         { 0, 0 }
126     };
127     int i = 0;
128     while (ar[i].msg)
129     {
130         if (code == ar[i].code)
131             return ar[i].msg;
132         i++;
133     }
134     return "No error";
135 }
136
137 static void error(struct http_response *rs, 
138                   enum pazpar2_error_code code,
139                   const char *addinfo)
140 {
141     struct http_channel *c = rs->channel;
142     char text[1024];
143     const char *http_status = "417";
144     const char *msg = get_msg(code);
145
146     rs->msg = nmem_strdup(c->nmem, msg);
147     strcpy(rs->code, http_status);
148
149     yaz_snprintf(text, sizeof(text),
150                  "<error code=\"%d\" msg=\"%s\">%s</error>", (int) code,
151                  msg, addinfo ? addinfo : "");
152
153     yaz_log(YLOG_WARN, "HTTP %s %s%s%s", http_status,
154             msg, addinfo ? ": " : "" , addinfo ? addinfo : "");
155     rs->payload = nmem_strdup(c->nmem, text);
156     http_send_response(c);
157 }
158
159 unsigned int make_sessionid()
160 {
161     static int seq = 0;
162     unsigned int res;
163
164     seq++;
165     if (global_parameters.debug_mode)
166         res = seq;
167     else
168     {
169         struct timeval t;
170
171         if (gettimeofday(&t, 0) < 0)
172         {
173             yaz_log(YLOG_WARN|YLOG_ERRNO, "gettimeofday");
174             exit(1);
175         }
176         /* at most 256 sessions per second .. 
177            (long long would be more appropriate)*/
178         res = t.tv_sec;
179         res = ((res << 8) | (seq & 0xff)) & ((1U << 31) - 1);
180     }
181     return res;
182 }
183
184 static struct http_session *locate_session(struct http_request *rq, struct http_response *rs)
185 {
186     struct http_session *p;
187     char *session = http_argbyname(rq, "session");
188     unsigned int id;
189
190     if (!session)
191     {
192         error(rs, PAZPAR2_MISSING_PARAMETER, "session");
193         return 0;
194     }
195     id = atoi(session);
196     for (p = session_list; p; p = p->next)
197         if (id == p->session_id)
198         {
199             iochan_activity(p->timeout_iochan);
200             return p;
201         }
202     error(rs, PAZPAR2_NO_SESSION, session);
203     return 0;
204 }
205
206 // Decode settings parameters and apply to session
207 // Syntax: setting[target]=value
208 static int process_settings(struct session *se, struct http_request *rq,
209         struct http_response *rs)
210 {
211     struct http_argument *a;
212
213     for (a = rq->arguments; a; a = a->next)
214         if (strchr(a->name, '['))
215         {
216             char **res;
217             int num;
218             char *dbname;
219             char *setting;
220
221             // Nmem_strsplit *rules*!!!
222             nmem_strsplit(se->session_nmem, "[]", a->name, &res, &num);
223             if (num != 2)
224             {
225                 error(rs, PAZPAR2_MALFORMED_SETTING, a->name);
226                 return -1;
227             }
228             setting = res[0];
229             dbname = res[1];
230             session_apply_setting(se, dbname, setting,
231                     nmem_strdup(se->session_nmem, a->value));
232         }
233     return 0;
234 }
235
236 static void cmd_exit(struct http_channel *c)
237 {
238     yaz_log(YLOG_WARN, "exit");
239     exit(0);
240 }
241
242 static void cmd_init(struct http_channel *c)
243 {
244     unsigned int sesid;
245     char buf[1024];
246     const char *clear = http_argbyname(c->request, "clear");
247     struct http_session *s = http_session_create();
248     struct http_response *rs = c->response;
249
250     yaz_log(YLOG_DEBUG, "HTTP Session init");
251     if (!clear || *clear == '0')
252         session_init_databases(s->psession);
253     else
254         yaz_log(YLOG_LOG, "No databases preloaded");
255     sesid = make_sessionid();
256     s->session_id = sesid;
257     if (process_settings(s->psession, c->request, c->response) < 0)
258         return;
259     sprintf(buf, "<init><status>OK</status><session>%u</session>"
260             "<protocol>" PAZPAR2_PROTOCOL_VERSION "</protocol></init>", sesid);
261     rs->payload = nmem_strdup(c->nmem, buf);
262     http_send_response(c);
263 }
264
265 static void cmd_settings(struct http_channel *c)
266 {
267     struct http_response *rs = c->response;
268     struct http_request *rq = c->request;
269     struct http_session *s = locate_session(rq, rs);
270
271     if (!s)
272         return;
273
274     if (process_settings(s->psession, rq, rs) < 0)
275         return;
276     rs->payload = "<settings><status>OK</status></settings>";
277     http_send_response(c);
278 }
279
280 // Compares two hitsbytarget nodes by hitcount
281 static int cmp_ht(const void *p1, const void *p2)
282 {
283     const struct hitsbytarget *h1 = p1;
284     const struct hitsbytarget *h2 = p2;
285     return h2->hits - h1->hits;
286 }
287
288 // This implements functionality somewhat similar to 'bytarget', but in a termlist form
289 static void targets_termlist(WRBUF wrbuf, struct session *se, int num)
290 {
291     struct hitsbytarget *ht;
292     int count, i;
293
294     if (!(ht = hitsbytarget(se, &count)))
295         return;
296     qsort(ht, count, sizeof(struct hitsbytarget), cmp_ht);
297     for (i = 0; i < count && i < num && ht[i].hits > 0; i++)
298     {
299
300         // do only print terms which have display names
301     
302         wrbuf_puts(wrbuf, "<term>\n");
303
304         wrbuf_puts(wrbuf, "<id>");
305         wrbuf_xmlputs(wrbuf, ht[i].id);
306         wrbuf_puts(wrbuf, "</id>\n");
307         
308         wrbuf_puts(wrbuf, "<name>");
309         if (!ht[i].name || !ht[i].name[0])
310             wrbuf_xmlputs(wrbuf, "NO TARGET NAME");
311         else
312             wrbuf_xmlputs(wrbuf, ht[i].name);
313         wrbuf_puts(wrbuf, "</name>\n");
314         
315         wrbuf_printf(wrbuf, "<frequency>%d</frequency>\n", ht[i].hits);
316         
317         wrbuf_puts(wrbuf, "<state>");
318         wrbuf_xmlputs(wrbuf, ht[i].state);
319         wrbuf_puts(wrbuf, "</state>\n");
320         
321         wrbuf_printf(wrbuf, "<diagnostic>%d</diagnostic>\n", 
322                      ht[i].diagnostic);
323         wrbuf_puts(wrbuf, "</term>\n");
324     }
325 }
326
327 static void cmd_termlist(struct http_channel *c)
328 {
329     struct http_response *rs = c->response;
330     struct http_request *rq = c->request;
331     struct http_session *s = locate_session(rq, rs);
332     struct termlist_score **p;
333     int len;
334     int i;
335     char *name = http_argbyname(rq, "name");
336     char *nums = http_argbyname(rq, "num");
337     int num = 15;
338     int status;
339
340     if (!s)
341         return;
342
343     status = session_active_clients(s->psession);
344
345     if (!name)
346         name = "subject";
347     if (strlen(name) > 255)
348         return;
349     if (nums)
350         num = atoi(nums);
351
352     wrbuf_rewind(c->wrbuf);
353
354     wrbuf_puts(c->wrbuf, "<termlist>\n");
355     wrbuf_printf(c->wrbuf, "<activeclients>%d</activeclients>\n", status);
356     while (*name)
357     {
358         char tname[256];
359         char *tp;
360
361         if (!(tp = strchr(name, ',')))
362             tp = name + strlen(name);
363         strncpy(tname, name, tp - name);
364         tname[tp - name] = '\0';
365
366         wrbuf_puts(c->wrbuf, "<list name=\"");
367         wrbuf_xmlputs(c->wrbuf, tname);
368         wrbuf_puts(c->wrbuf, "\">\n");
369         if (!strcmp(tname, "xtargets"))
370             targets_termlist(c->wrbuf, s->psession, num);
371         else
372         {
373             p = termlist(s->psession, tname, &len);
374             if (p)
375                 for (i = 0; i < len && i < num; i++){
376                     // prevnt sending empty term elements
377                     if (!p[i]->term || !p[i]->term[0])
378                         continue;
379
380                     wrbuf_puts(c->wrbuf, "<term>");
381                     wrbuf_puts(c->wrbuf, "<name>");
382                     wrbuf_xmlputs(c->wrbuf, p[i]->term);
383                     wrbuf_puts(c->wrbuf, "</name>");
384                         
385                     wrbuf_printf(c->wrbuf, 
386                                  "<frequency>%d</frequency>", 
387                                  p[i]->frequency);
388                     wrbuf_puts(c->wrbuf, "</term>\n");
389                }
390         }
391         wrbuf_puts(c->wrbuf, "</list>\n");
392         name = tp;
393         if (*name == ',')
394             name++;
395     }
396     wrbuf_puts(c->wrbuf, "</termlist>\n");
397     rs->payload = nmem_strdup(rq->channel->nmem, wrbuf_cstr(c->wrbuf));
398     http_send_response(c);
399 }
400
401
402 static void cmd_bytarget(struct http_channel *c)
403 {
404     struct http_response *rs = c->response;
405     struct http_request *rq = c->request;
406     struct http_session *s = locate_session(rq, rs);
407     struct hitsbytarget *ht;
408     int count, i;
409
410     if (!s)
411         return;
412     if (!(ht = hitsbytarget(s->psession, &count)))
413     {
414         error(rs, PAZPAR2_HITCOUNTS_FAILED, 0);
415         return;
416     }
417     wrbuf_rewind(c->wrbuf);
418     wrbuf_puts(c->wrbuf, "<bytarget><status>OK</status>");
419
420     for (i = 0; i < count; i++)
421     {
422         wrbuf_puts(c->wrbuf, "\n<target>");
423
424         wrbuf_puts(c->wrbuf, "<id>");
425         wrbuf_xmlputs(c->wrbuf, ht[i].id);
426         wrbuf_puts(c->wrbuf, "</id>\n");
427
428         wrbuf_printf(c->wrbuf, "<hits>%d</hits>\n", ht[i].hits);
429         wrbuf_printf(c->wrbuf, "<diagnostic>%d</diagnostic>\n", ht[i].diagnostic);
430         wrbuf_printf(c->wrbuf, "<records>%d</records>\n", ht[i].records);
431
432         wrbuf_puts(c->wrbuf, "<state>");
433         wrbuf_xmlputs(c->wrbuf, ht[i].state);
434         wrbuf_puts(c->wrbuf, "</state>\n");
435
436         wrbuf_puts(c->wrbuf, "</target>");
437     }
438
439     wrbuf_puts(c->wrbuf, "</bytarget>");
440     rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
441     http_send_response(c);
442 }
443
444 static void write_metadata(WRBUF w, struct conf_service *service,
445         struct record_metadata **ml, int full)
446 {
447     int imeta;
448
449     for (imeta = 0; imeta < service->num_metadata; imeta++)
450     {
451         struct conf_metadata *cmd = &service->metadata[imeta];
452         struct record_metadata *md;
453         if (!cmd->brief && !full)
454             continue;
455         for (md = ml[imeta]; md; md = md->next)
456         {
457             wrbuf_printf(w, "\n<md-%s>", cmd->name);
458
459             switch (cmd->type)
460             {
461                 case Metadata_type_generic:
462                     wrbuf_xmlputs(w, md->data.text);
463                     break;
464                 case Metadata_type_year:
465                     wrbuf_printf(w, "%d", md->data.number.min);
466                     if (md->data.number.min != md->data.number.max)
467                         wrbuf_printf(w, "-%d", md->data.number.max);
468                     break;
469                 default:
470                     wrbuf_puts(w, "[can't represent]");
471             }
472             wrbuf_printf(w, "</md-%s>", cmd->name);
473         }
474     }
475 }
476
477 static void write_subrecord(struct record *r, WRBUF w,
478         struct conf_service *service, int show_details)
479 {
480     char *name = session_setting_oneval(client_get_database(r->client), PZ_NAME);
481
482     wrbuf_puts(w, "<location id=\"");
483     wrbuf_xmlputs(w, client_get_database(r->client)->database->url);
484     wrbuf_puts(w, "\" ");
485
486     wrbuf_puts(w, "name=\"");
487     wrbuf_xmlputs(w,  *name ? name : "Unknown");
488     wrbuf_puts(w, "\">");
489
490     if (show_details)
491         write_metadata(w, service, r->metadata, 1);
492     wrbuf_puts(w, "</location>\n");
493 }
494
495 static void show_raw_record_error(void *data, const char *addinfo)
496 {
497     http_channel_observer_t obs = data;
498     struct http_channel *c = http_channel_observer_chan(obs);
499     struct http_response *rs = c->response;
500
501     http_remove_observer(obs);
502
503     error(rs, PAZPAR2_RECORD_FAIL, addinfo);
504 }
505
506 static void show_raw_record_ok(void *data, const char *buf, size_t sz)
507 {
508     http_channel_observer_t obs = data;
509     struct http_channel *c = http_channel_observer_chan(obs);
510     struct http_response *rs = c->response;
511
512     http_remove_observer(obs);
513
514     wrbuf_write(c->wrbuf, buf, sz);
515     rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
516     http_send_response(c);
517 }
518
519 void show_raw_reset(void *data, struct http_channel *c)
520 {
521     struct client *client = data;
522     client_show_raw_reset(client);
523 }
524
525 static void cmd_record(struct http_channel *c)
526 {
527     struct http_response *rs = c->response;
528     struct http_request *rq = c->request;
529     struct http_session *s = locate_session(rq, rs);
530     struct record_cluster *rec;
531     struct record *r;
532     struct conf_service *service = global_parameters.server->service;
533     const char *idstr = http_argbyname(rq, "id");
534     const char *offsetstr = http_argbyname(rq, "offset");
535     
536     if (!s)
537         return;
538     if (!idstr)
539     {
540         error(rs, PAZPAR2_MISSING_PARAMETER, "id");
541         return;
542     }
543     wrbuf_rewind(c->wrbuf);
544     if (!(rec = show_single(s->psession, idstr)))
545     {
546         error(rs, PAZPAR2_RECORD_MISSING, idstr);
547         return;
548     }
549     if (offsetstr)
550     {
551         int offset = atoi(offsetstr);
552         const char *syntax = http_argbyname(rq, "syntax");
553         const char *esn = http_argbyname(rq, "esn");
554         int i;
555         struct record*r = rec->records;
556
557         for (i = 0; i < offset && r; r = r->next, i++)
558             ;
559         if (!r)
560         {
561             error(rs, PAZPAR2_RECORD_FAIL, "no record at offset given");
562             return;
563         }
564         else
565         {
566             http_channel_observer_t obs =
567                 http_add_observer(c, r->client, show_raw_reset);
568             if (client_show_raw_begin(r->client, r->position, syntax, esn, 
569                                       obs /* data */,
570                                       show_raw_record_error,
571                                       show_raw_record_ok))
572             {
573                 http_remove_observer(obs);
574                 error(rs, PAZPAR2_RECORD_FAIL, "invalid parameters");
575                 return;
576             }
577         }
578     }
579     else
580     {
581         wrbuf_puts(c->wrbuf, "<record>\n");
582         wrbuf_printf(c->wrbuf, "<recid>%s</recid>\n", rec->recid);
583         write_metadata(c->wrbuf, service, rec->metadata, 1);
584         for (r = rec->records; r; r = r->next)
585             write_subrecord(r, c->wrbuf, service, 1);
586         wrbuf_puts(c->wrbuf, "</record>\n");
587         rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
588         http_send_response(c);
589     }
590 }
591
592 static void show_records(struct http_channel *c, int active)
593 {
594     struct http_request *rq = c->request;
595     struct http_response *rs = c->response;
596     struct http_session *s = locate_session(rq, rs);
597     struct record_cluster **rl;
598     struct reclist_sortparms *sp;
599     char *start = http_argbyname(rq, "start");
600     char *num = http_argbyname(rq, "num");
601     char *sort = http_argbyname(rq, "sort");
602     int startn = 0;
603     int numn = 20;
604     int total;
605     int total_hits;
606     int i;
607
608     if (!s)
609         return;
610
611     // We haven't counted clients yet if we're called on a block release
612     if (active < 0)
613         active = session_active_clients(s->psession);
614
615     if (start)
616         startn = atoi(start);
617     if (num)
618         numn = atoi(num);
619     if (!sort)
620         sort = "relevance";
621     if (!(sp = reclist_parse_sortparms(c->nmem, sort)))
622     {
623         error(rs, PAZPAR2_MALFORMED_PARAMETER_VALUE, "sort");
624         return;
625     }
626
627     rl = show(s->psession, sp, startn, &numn, &total, &total_hits, c->nmem);
628
629     wrbuf_rewind(c->wrbuf);
630     wrbuf_puts(c->wrbuf, "<show>\n<status>OK</status>\n");
631     wrbuf_printf(c->wrbuf, "<activeclients>%d</activeclients>\n", active);
632     wrbuf_printf(c->wrbuf, "<merged>%d</merged>\n", total);
633     wrbuf_printf(c->wrbuf, "<total>%d</total>\n", total_hits);
634     wrbuf_printf(c->wrbuf, "<start>%d</start>\n", startn);
635     wrbuf_printf(c->wrbuf, "<num>%d</num>\n", numn);
636
637     for (i = 0; i < numn; i++)
638     {
639         int ccount;
640         struct record *p;
641         struct record_cluster *rec = rl[i];
642         struct conf_service *service = global_parameters.server->service;
643
644         wrbuf_puts(c->wrbuf, "<hit>\n");
645         write_metadata(c->wrbuf, service, rec->metadata, 0);
646         for (ccount = 0, p = rl[i]->records; p;  p = p->next, ccount++)
647             write_subrecord(p, c->wrbuf, service, 0); // subrecs w/o details
648         if (ccount > 1)
649             wrbuf_printf(c->wrbuf, "<count>%d</count>\n", ccount);
650         wrbuf_printf(c->wrbuf, "<recid>%s</recid>\n", rec->recid);
651         wrbuf_puts(c->wrbuf, "</hit>\n");
652     }
653
654     wrbuf_puts(c->wrbuf, "</show>\n");
655     rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
656     http_send_response(c);
657 }
658
659 static void show_records_ready(void *data)
660 {
661     struct http_channel *c = (struct http_channel *) data;
662
663     show_records(c, -1);
664 }
665
666 static void cmd_show(struct http_channel *c)
667 {
668     struct http_request *rq = c->request;
669     struct http_response *rs = c->response;
670     struct http_session *s = locate_session(rq, rs);
671     char *block = http_argbyname(rq, "block");
672     int status;
673
674     if (!s)
675         return;
676
677     status = session_active_clients(s->psession);
678
679     if (block)
680     {
681         if (status && (!s->psession->reclist || !s->psession->reclist->num_records))
682         {
683             // if there is already a watch/block. we do not block this one
684             if (session_set_watch(s->psession,
685                                   SESSION_WATCH_RECORDS,
686                                   show_records_ready, c, c) == 0)
687             {
688                 yaz_log(YLOG_DEBUG, "Blocking on cmd_show");
689                 return;
690             }
691         }
692     }
693
694     show_records(c, status);
695 }
696
697 static void cmd_ping(struct http_channel *c)
698 {
699     struct http_request *rq = c->request;
700     struct http_response *rs = c->response;
701     struct http_session *s = locate_session(rq, rs);
702     if (!s)
703         return;
704     rs->payload = "<ping><status>OK</status></ping>";
705     http_send_response(c);
706 }
707
708 static int utf_8_valid(const char *str)
709 {
710     yaz_iconv_t cd = yaz_iconv_open("utf-8", "utf-8");
711     if (cd)
712     {
713         /* check that query is UTF-8 encoded */
714         char *inbuf = (char *) str; /* we know iconv does not alter this */
715         size_t inbytesleft = strlen(inbuf);
716
717         size_t outbytesleft = strlen(inbuf) + 10;
718         char *out = xmalloc(outbytesleft);
719         char *outbuf = out;
720         size_t r = yaz_iconv(cd, &inbuf, &inbytesleft, &outbuf, &outbytesleft);
721
722         /* if OK, try flushing the rest  */
723         if (r != (size_t) (-1))
724             r = yaz_iconv(cd, 0, 0, &outbuf, &outbytesleft);
725         yaz_iconv_close(cd);
726         xfree(out);
727         if (r == (size_t) (-1))
728             return 0;
729     }
730     return 1;
731 }
732
733 static void cmd_search(struct http_channel *c)
734 {
735     struct http_request *rq = c->request;
736     struct http_response *rs = c->response;
737     struct http_session *s = locate_session(rq, rs);
738     char *query = http_argbyname(rq, "query");
739     char *filter = http_argbyname(rq, "filter");
740     enum pazpar2_error_code code;
741     const char *addinfo = 0;
742
743     if (!s)
744         return;
745     if (!query)
746     {
747         error(rs, PAZPAR2_MISSING_PARAMETER, "query");
748         return;
749     }
750     if (!utf_8_valid(query))
751     {
752         error(rs, PAZPAR2_MALFORMED_PARAMETER_ENCODING, "query");
753         return;
754     }
755     code = search(s->psession, query, filter, &addinfo);
756     if (code)
757     {
758         error(rs, code, addinfo);
759         return;
760     }
761     rs->payload = "<search><status>OK</status></search>";
762     http_send_response(c);
763 }
764
765
766 static void cmd_stat(struct http_channel *c)
767 {
768     struct http_request *rq = c->request;
769     struct http_response *rs = c->response;
770     struct http_session *s = locate_session(rq, rs);
771     struct statistics stat;
772     int clients;
773
774     if (!s)
775         return;
776
777     clients = session_active_clients(s->psession);
778     statistics(s->psession, &stat);
779
780     wrbuf_rewind(c->wrbuf);
781     wrbuf_puts(c->wrbuf, "<stat>");
782     wrbuf_printf(c->wrbuf, "<activeclients>%d</activeclients>\n", clients);
783     wrbuf_printf(c->wrbuf, "<hits>%d</hits>\n", stat.num_hits);
784     wrbuf_printf(c->wrbuf, "<records>%d</records>\n", stat.num_records);
785     wrbuf_printf(c->wrbuf, "<clients>%d</clients>\n", stat.num_clients);
786     wrbuf_printf(c->wrbuf, "<unconnected>%d</unconnected>\n", stat.num_no_connection);
787     wrbuf_printf(c->wrbuf, "<connecting>%d</connecting>\n", stat.num_connecting);
788     wrbuf_printf(c->wrbuf, "<initializing>%d</initializing>\n", stat.num_initializing);
789     wrbuf_printf(c->wrbuf, "<searching>%d</searching>\n", stat.num_searching);
790     wrbuf_printf(c->wrbuf, "<presenting>%d</presenting>\n", stat.num_presenting);
791     wrbuf_printf(c->wrbuf, "<idle>%d</idle>\n", stat.num_idle);
792     wrbuf_printf(c->wrbuf, "<failed>%d</failed>\n", stat.num_failed);
793     wrbuf_printf(c->wrbuf, "<error>%d</error>\n", stat.num_error);
794     wrbuf_puts(c->wrbuf, "</stat>");
795     rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
796     http_send_response(c);
797 }
798
799 static void cmd_info(struct http_channel *c)
800 {
801     char yaz_version_str[20];
802     struct http_response *rs = c->response;
803
804     wrbuf_rewind(c->wrbuf);
805     wrbuf_puts(c->wrbuf, "<info>\n");
806     wrbuf_puts(c->wrbuf, " <version>\n");
807     wrbuf_puts(c->wrbuf, "<pazpar2>");
808     wrbuf_xmlputs(c->wrbuf, VERSION);
809     wrbuf_puts(c->wrbuf, "</pazpar2>");
810
811
812     yaz_version(yaz_version_str, 0);
813     wrbuf_puts(c->wrbuf, "  <yaz compiled=\"");
814     wrbuf_xmlputs(c->wrbuf, YAZ_VERSION);
815     wrbuf_puts(c->wrbuf, "\">");
816     wrbuf_xmlputs(c->wrbuf, yaz_version_str);
817     wrbuf_puts(c->wrbuf, "</yaz>\n");
818
819     wrbuf_puts(c->wrbuf, " </version>\n");
820     
821     wrbuf_puts(c->wrbuf, "</info>");
822     rs->payload = nmem_strdup(c->nmem, wrbuf_cstr(c->wrbuf));
823     http_send_response(c);
824 }
825
826 struct {
827     char *name;
828     void (*fun)(struct http_channel *c);
829 } commands[] = {
830     { "init", cmd_init },
831     { "settings", cmd_settings },
832     { "stat", cmd_stat },
833     { "bytarget", cmd_bytarget },
834     { "show", cmd_show },
835     { "search", cmd_search },
836     { "termlist", cmd_termlist },
837     { "exit", cmd_exit },
838     { "ping", cmd_ping },
839     { "record", cmd_record },
840     { "info", cmd_info },
841     {0,0}
842 };
843
844 void http_command(struct http_channel *c)
845 {
846     char *command = http_argbyname(c->request, "command");
847     struct http_response *rs = http_create_response(c);
848     int i;
849
850     c->response = rs;
851
852     http_addheader(rs, "Expires", "Thu, 19 Nov 1981 08:52:00 GMT");
853     http_addheader(rs, "Cache-Control", "no-store, no-cache, must-revalidate, post-check=0, pre-check=0");
854
855     if (!command)
856     {
857         error(rs, PAZPAR2_MISSING_PARAMETER, "command");
858         return;
859     }
860     for (i = 0; commands[i].name; i++)
861         if (!strcmp(commands[i].name, command))
862         {
863             (*commands[i].fun)(c);
864             break;
865         }
866     if (!commands[i].name)
867         error(rs, PAZPAR2_MALFORMED_PARAMETER_VALUE, "command");
868
869     return;
870 }
871
872 /*
873  * Local variables:
874  * c-basic-offset: 4
875  * indent-tabs-mode: nil
876  * End:
877  * vim: shiftwidth=4 tabstop=8 expandtab
878  */