Change proto of yaz_init_opt_decode.
[yaz-moved-to-github.git] / CHANGELOG
1 Possible compatibility problems with earlier versions marked with '*'.
2
3 Fixed a bug in Generic Frontend Server that could make it crash if a
4 client sets characterSetNegotation bit, but didn't pass negotiation stuff
5 in InitRequest.
6
7 New YAZ client command, zversion, that sets Z39.50 version (1,2,3..).
8 Must be issued before open, in order to be in effect.
9
10 --- 2.0.9-6 2004/01/12  Debian/Windows
11
12 Make the SRU server more picky WRT unknown params, etc.
13
14 Bug fix: ZOOM scan response didn't return displayTerm - when present.
15
16 New YAZ client command, options, that sets Z39.50 options.
17
18 New utility functions yaz_init_opt_{encode,decode} to encode/decode Z39.50
19 options from a string of tokens (one token for each option bit).
20
21 Update SRW diagnostic code messages.
22
23 --- 2.0.9-5 2004/01/07  Debian/Windows
24
25 Handle user defined stylesheet for SRW/SRU.
26
27 --- 2.0.9-4 2004/01/06  Debian/Windows
28
29 Fix bug in decoding of Content-Length.
30
31 --- 2.0.9-3 2004/01/06  Debian/Windows
32
33 Fix a bug with decoding of XML packed records.
34
35 --- 2.0.9-2 2004/01/05  Debian only
36
37 Allow empty ODR (NMEM=0) for odr_oiddup and odr_getoidbystr.
38
39 Fix bug in SRW/SRU diagnostics decoding.
40
41 --- 2.0.9 2004/01/05
42
43 Fixed bug in Generic Frontend Server which could drop records exceeding
44 preferred message size. Reported and fixed by Irina Dijour.
45
46 Fixed calculation of package size for structured records in Generic
47 Frontend Server. Reported and fixed by Irina Dijour.
48
49 Fixed namespace for SRW/SRU diagnostics.
50
51 Fixed SEGV in yaz-client that occured for HTTP connection errors.
52
53 --- 2.0.8 2003/12/22
54
55 * SRW/SRU 1.1. Since the Namespace has changed for SRW/SRU, it means that
56 this version is incompatible with version 1.0 and older YAZ SRW/SRU
57 implementations.
58
59 CQL changes to reflect recent changes to the specification:
60 * Documentation talks about context sets instead of index sets.
61 * Documentation talks about indexes instead of qualifiers.
62 * The CQL-to-PQF transformer's configuration file now uses
63         "index.set.name = <attributes>" instead of the old form
64         "qualifier.set.name = <attributes>".  (Both forms are still
65         understood but the latter is deprecated.)
66 * CQL terms with no explicit index specified are now interpreted as
67         cql.serverChoice instead of srw.serverChoice (which of course
68         behaves exactly the same.)
69
70 --- 2.0.7 2003/12/16
71
72 MARC conversion can now generate ISO2709 output in another
73 character set. yaz-marcdump uses this facility if you invoke it
74 with option -O.
75
76 Added missing C decl macros for include/yaz/{soap.h,srw.h,cql.h}, so that
77 functions from there can be used from C++.
78
79 --- 2.0.6 2003/12/04
80
81 Frontend server now transfers memory from decoded packages to stream
82 ODR for search.
83
84 NMEM now clears freed blocks with 'Y' (hex 59) to force bad memory
85 references to show up. 
86
87 ZOOM-C now supports standard ZOOM option names as described in v1.4 of
88 the ZOOM Abstract API.  The older names for the same options are still
89 also supported for the benefit of old applications.
90
91 ZOOM-C supports "implementationId" and "implementationVersion" options
92 to go along with "implementationName".  These allow the user code to
93 specify identification strings to be sent to servers.
94 Add OID for the new ExtLite attribute set.
95
96 Add OIDs for NACSIS-CATP, FINMARC2000 and MARC21-fin record-syntaxes,
97  as requested/supplid by Ere Maijala <ere@atp.fi>
98
99 For generic frontend server, reverse the order of
100 "toolkit-supplied / application-supplied" strings sent as implementationId,
101 Name and Version.  Also, remove the spaces around the slash.  This brings
102 the GFS in line with the behaviour of ZOOM-C on the client side.
103
104 Add function ZOOM_scanset_display_term.
105
106 yaz-client shows scan displayTerm if present.
107
108 Utility yaz-iconv is now installed by default along with the man page 
109 yaz-iconv.1.
110
111 Extend configure check for OpenSSL to use pkg-config where available (such
112 as RedHat 9).
113
114 Incorporate patch by Morten Bogeskov which allows a Unix file socket
115 server to specify uid/gid/mask for socket using the format
116  unix:[user=uid,][group=gid,][umask=mask,]file=path
117 If file= is omitted the existing format is assumed, e.g.
118  unix:path
119 in which case the mask is 0666 (rw for everybody).
120
121 Major restructure of YAZ source. All source in libyaz is in src directory.
122 Programs in client (yaz-client), ztest (yaz-ztest), zoom (zoom programs),
123 util (utility programs such as ASN.1 compiler, yaz-marcdump). 
124
125 Added man page for utility yaz-marcdump (used to be called marcdump).
126 yaz-marcdump is installed by 'make install'.
127
128 Fixed a memory leak in Generic Frontend Server that occurred when decoding
129 of incoming package failed.
130
131 Fixed a potential DOS attack vulnerability in COMSTACK/ODR.
132
133 Change prototype of odr_perror: add const to message string.
134
135 New function yaz_log_reopen which reopens log file (for log rotate, etc.)
136
137 * Blocking parameter for COMSTACK cs_create is now a bit mask rather
138 than a blocking flag. Bit 0 is set for blocking, reset for non-blocking.
139 Bit 1 is set if cs_addrstr should avoid DNS lookup; reset for full
140 DNS lookup. There should not be any compatibility problems with this
141 assuming that blocking=1 or 0 is used.
142
143 Fix bad reference in UNIX comstack in function cs_addrstr.
144
145 Fix for compilation on AIX.
146
147 The generic front-end server (server/seshigh.c) now supports returning
148 Init diagnostics to the client in User-information-field, in
149 accordance with Z35.90 Implementor Agreement 5 (Returning diagnostics
150 in an InitResponse)
151
152 --- 2.0.4 2003/09/04
153
154 Allow any CQL relation (not just all,any,exact,scr).
155
156 Fixes for OCLC UI ASN.1 to make it work with SilverPlatter targets
157 that features the same UI.
158
159 Implemented command update0 in YAZ client which is equivalent to
160 update but uses old of Ext Update ASN.1.
161
162 Use OID 1.2.840.10003.15.1000.81.1 for privately defined charsets
163 in charset negotiation. Added VAL_ID_CHARSET in oid.h.
164 Previously no OID was used for this info.
165
166 ZOOM uses smallSetUpperBound=1 instead of 0 for piggyback searches.
167 It apparantely upsets EBSCO Publishing IR Z39.50 Server which
168 returns 'malformed search term' otherwise.
169
170 SortResponse member resultCount now set to NULL in sort handler of
171 frontend server.
172
173 OPAC support ZOOM. ZOOM_record_get returns OPAC info (as XML) if
174 type is "opac".
175
176 Add three new utility functions for translating OIDs between various
177 formats -- symbolic name such as "Usmarc", minus-1-terminated int
178 arrays and dotted strings such as "1.2.840.10003.9.5.1":
179  int *oid_name_to_oid(oid_class oclass, const char *name, int *oid);
180  char *oid_to_dotstring(const int *oid, char *oidbuf);
181  char *oid_name_to_dotstring(oid_class oclass, const char *name, char *oidbuf);
182
183 Reverted modifications for ES Update definition for z_IU0Update 
184 (OID 1.2.840.10003.9.5.1 and 1.2.840.10003.9.5). The definition
185 is back to YAZ 2.0.2.
186
187 String value attributes for CCL parser.
188
189 Support for OCLC's locally registered "OCLC-UserInformation" PDU,
190 which their FirstSearch server returns in Init responses, sometimes
191 carrying useful diagnostic information when Init fails.  This has the
192 OID 1.2.840.10003.10.1000.17.1 and is defined in the file
193 "z39.50/oclcui.asn", where its definition is somewhat different from
194 what OCLC document on their web-site, as required to interoperate with
195 their servers.
196
197 Support for anonymous authentication in yaz-client.  Use the command
198 "auth -".
199
200 * Fix the OID of the Index Data-local "admin" Extended Service from 
201   1.2.840.10003.9.81.1 to 1.2.840.10003.9.1000.81.1.  The omission of
202   the 1000, which indicates a locally-defined OID, was a mistake.
203
204 --- 2.0.3 2003/06/20
205
206 Fix CCL directive @case handling so that it affects string match for
207 both CCL keywords and qualifiers.
208
209 * ESFormat-Update updates. Packages with OID 1.2.840.10003.9.5.1 and
210 1.2.840.10003.9.5 are now handled by the same decoder z_IU0Update .
211 Decoder has been updated with ASN.1 changes as listed in
212 http://lcweb.loc.gov/z3950/agency/defns/updateES.html
213 Note that the "latest" DB Update, OID 1.2.840.10003.9.5.1.1 , handler
214 z_IUUpdate, remains unchanged. 
215
216 ZOOM_record_get may now return a record in a specific character set.
217 For type use "form; charset=from[,to]" where form (render, xml, ..) ,
218 "from" is the character set of record as returned by target. "to" is
219 the character set to be returned. If omitted, "to" is UTF-8.
220
221 YAZ ASN.1 compiler renamed from yaz-comp to yaz-asncomp
222
223 New ODR utility, odr_getelement, which returns name of element for
224 which encoding/decoding failed.
225
226 Fixed ODR so that it returns error code OREQUIRED rather than ONONE
227 in cases where a required element was omitted.
228
229 Bug fix: some MARC8 sequences were not converted.
230
231 New ZOOM option "step" which specifies number of records to be
232 retrieved in one chunk. Used in conjunction with "start" and "count".
233
234 SRW support for yaz-client. Use scheme http: to use it, e.g.
235  http://host:port/db
236
237 yaz-client no longer does (un)intelligent character set conversions
238 by default. Can be enabled with charset and marc_charset commands.
239
240 xmalloc trace fix for 64-bit systems such as DEC alpha. 
241
242 Solaris 2.6 compile fix.
243
244 New function, cql_strerror() translates SRW error codes, as returned
245 by cql_transform_error(), into human-readable English strings.  Used
246 in yaz-client diagnostics when appropriate.
247
248 New CQL2RPN query-type for the command-line yaz-client, parses CQL and
249 converts it into a type-1 query which is sent to the server.  This
250 makes CQL available for use with all Z-servers, as opposed to the tiny
251 minority that can handle CQL queries themselves.
252
253 --- 2.0.2 2003/04/28
254
255 New Debian package layout similar to the Redhat Package layout.
256
257 New ZOOM events ZOOM_EVENT_RECV_{RECORD,SEARCH} for receiving a record
258 and search result respectively.
259
260 --- 2.0.1 2003/04/25
261
262 Redhat package is now several packages: libyaz (runtime libraries),
263 libyaz-devel (development and documentation, and yaz (utility programs).
264 Package spec file by Morten Bøgeskov.
265
266 New member 'schema' in struct bend_fetch_rr which the name of requested
267 schema (SRW/SRU) for record (or NULL if none was given). The fetch
268 handler MAY set this to reflect the schema of the returned record.
269
270 New member 'display_term' in struct scan_entry. GFS now sets member entries
271 and allocates scan entries to be filled by user scan handler. In previous
272 version, entries member was allocated by the scan handler. That still works,
273 but the GFS will ignore member display_term - assuming it was NOT set by
274 the handler. The fact that the GFS now allocates the entries both allows
275 for new members and makes a scan handler easier to write.
276
277 Fix CQL lex buffer overflow.
278
279 SRW/SRU recordPacking. For SRW default recordPacking is string. For
280 SRU default recordPacking is string.
281
282 SRU protocol support for frontend server.
283
284 Fix compile bug for systems that have nl_langinfo but CODESET undefined.
285
286 Added missing PQF transform rules for <= and >= . Thanks to Peter Popovics.
287
288 Added scan for the ZOOM shell (zoomsh).
289
290 --- 2.0 2003/02/23
291
292 * String Identifers for Schemas (Amendment 5).
293 http://lcweb.loc.gov/z3950/agency/amend/am5.html
294 Old definition for schema
295   Odr_oid *schema; /* OPT */
296 New:
297   int which;
298   union {
299      Odr_oid *oid;
300      Z_InternationalString *uri;
301   #define Z_Schema_oid 1
302   #define Z_Schema_uri 2
303   } schema; /* OPT */
304
305 * resultCount parameter to Sort Response (Amendment 1).
306 http://lcweb.loc.gov/z3950/agency/amend/am1.html
307
308 Support for SRW 1.0 over HTTP. This is an optional feature and
309 requires libxml2 to operate. Enable SOAP by specifying --with-xml2
310 for configure.
311
312 Generic frontend server supports HTTP/SOAP/SRW and Z39.50/BER
313 on the same port.  SRW SearchRetrieveRequests are mapped
314 to bend_init,bend_search,bend_fetch,bend_close. 
315
316 Z39.50 Query Type-104 added - to facilitate CQL within Z39.50.
317
318 CQL support. Source is directory 'cql'. CQL is supported in ZOOM
319 (both SRW and Z39.50) and the YAZ client (Z39.50 only).
320
321 ZOOM connections are SRW based if schem http is used for hostname
322 in connect, e.g.  z = ZOOM_connection_new("http://myserver");
323 ZOOM_query may be of type CQL, e.g. ZOOM_query_cql(q, "dc.title=x");
324
325 CCL proximity operators !n, %n converts to PQF @prox 0 n 1 2 k 2
326 and @prox 0 n 0 1 k 2 respectively, meaning: exlusion=false,
327 distance=n, order=true/false, relation=le, prox unit=word. If
328 n is omitted, distance 1 is used.
329
330 Fixed problem with C compiler include path in wrong order.
331
332 For TCP/IP COMSTACK, set recv buffer to an appropriate "large" value
333 on Solaris. Patch from Ko van der Sloot.
334
335 New MARC decode API. All new functions operate on a yaz_marc_t
336 handle. The most important new functions are: yaz_marc_create,
337 yaz_marc_decode_{buf,wrbuf}, yaz_marc_destroy, .. to create handler,
338 decode and destroy respectively. Decoder can produce formats
339 MARC line, simple XML, OAI MARC and MARC XML (LoC). See
340 include/yaz/marcdisp.h.
341
342 YAZ Iconv utility now supports MARC8 decoding (marc8.c). Converts
343 to UTF-8, UCS-32, wchar_t or Latin-1.
344
345 * Prototypes for yaz_iconv_-functions moved to separate header 
346 include/yaz/yaz-iconv.h.
347
348 Make a few private functions 'static' in unix.c. This prevents
349 duplicate unix_close in PHP with YAZ and imap. PHP Bug 20977.
350
351 For ZOOM connection, the options targetImplementation{Id,Name,Version}
352 are set when Init Response is received.
353
354 New function ZOOM_connection_error_x similar to ZOOM_connection_error
355 but returns diagnostic set as well.
356
357 New function yaz_strerror which is a portable wrapper for
358 strerror/strerror_r/GetLastMessage.
359
360 * ZOOM_record_get supports type "xml" in which case MARC XML (from LOC)
361 is returned for MARC. If type is "oai", then OAI MARC is returned.
362
363 Fix creation of lib/yaz-config so it works if srcdir != objdir. Patch
364 from Kang-Jin Lee.
365
366 --- 1.9.2 2002/11/26
367
368 yaz_marc_decode uses OAI MARC as XML format for ISO2709 records.
369
370 Fix bad race conditions on SIGTERM and terminate gracefully in
371 frontend server.
372
373 Move retrieval (data1) module to Zebra since nobody seems to be
374 using it.
375
376 Add GRS-1 render for ZOOM using same format as yaz-client.
377
378 --- 1.9.1 2002/10/05
379
380 Added man pages: yaz-client(1), yaz-ztest(8), yaz(7), zoomsh(1).
381
382 Fix broken ESpec handling in data1 module.
383
384 SGML reader parses comments and makes them part of the data1 tree.
385
386 Added several type casts so that YAZ compiles as C++ code.
387
388 ZOOM didn't handle PDU encoding failures properly.
389
390 Added more Bib-1 diagnostics (approved extensions).
391
392 GNU configure: better check for iconv.
393
394 More portable use of accept, getpeername. Check for socklen_t. Use
395 int/size_t if socklen_t is not defined.
396
397 --- 1.9 2002/09/06
398
399 PQF parser rejects bad queries - including those with extra
400 characters in them. PQF parser used to silently ignore that.
401 Cleaner API for PQF added, which allows you to get detailed
402 error information for bad queries (see yaz/pquery.h).
403
404 Fixed bug in ZOOM_record_get for type "database".
405
406 Implemented mini iconv library supporting conversions between
407 UTF-8, UCS4, UCS4LE and ISO-8859-1. Implemented in util/siconv.c.
408
409 * Removed XML reader (d1_expat.c). It's part of Zebra instead.
410
411 --- 1.8.9 2002/08/20
412
413 Fixed ZOOM C record cache so that preferredRecordSyntax and
414 elementSetName is used to check for already fetched records.
415
416 --- 1.8.8 2002/08/02
417
418 Added three members in bend_initrequest structure to facilitate
419 character set negotiation.
420
421 Fixed a bug in frontend server that could cause indefinite
422 loops under rare conditions. 
423
424 Revised character set utilities (charneg.h) so that encoding
425 UCS-4, UCSA-4, UTF-16 and UTF-8 are encoded non-privately.
426
427 For PQF, directive @term <type> sets term type for Scan/Search.
428 Here <type> is general, string, numeric, null. The term type
429 is inherited - just like @attr.
430
431 New call odr_set_charset that sets character set conversion for
432 international-strings on a ODR stream. Prototype is:
433  int odr_set_charset(ODR o, const char *to, const char *from);
434 The InternationalString is still represented as C string in YAZ 
435 so native strings of type UTF-8, ASCII, etc. will work (UTF-16
436 won't). On the protocol level, you can use any encoding.
437
438 Support for UNIX sockets in ZOOM.
439
440 Solaris recv sometimes returns errno == ENOENT. It is treated as
441 EINPROGRESS. COMSTACK patch by Ko van der Sloot.
442
443 New COMSTACK of type UNIX Socket. Use "unix:/path" as address for
444 both client and server. Code by Morten Bøgeskov.
445
446 --- 1.8.7 2002/05/22
447
448 On Windows ZOOM functions are of type __stdcall rather than __cdecl, so
449 that they can be used directly from Visual Basic. You must recompile
450 your windows APP if you're using ZOOM.
451
452 Character Set and Language Negotiation(3) for ZOOM API and YAZ client.
453 Commands "lang" and "charset" sets language and character set respectively.
454 Options "lang" and "charset" is interpreted by the ZOOM API. Note, these
455 are not part of the official ZOOM spec) All is due to Oleg Kolobov. 
456
457 Attributes from multiple CCL fields may be OR'ed rather than merged
458 using directive "@field or". Fields are still merged by default -
459 equivalent to "@field merge".
460
461 Fixed bug in ZOOM connect that occurred on OpenBSD (maybe others). Patch
462 by Oleg Kolobov.
463
464 Fixed bug in zget for parameter ExtendedServicesResponse.
465
466 Fix OID for ILL.
467
468 --- 1.8.6 2002/03/25
469
470 Added PQF feature: '@attr type=value' may be written as '@type=value'.
471
472 Client displays USR.1:SearchResult-1 (hits per term).
473
474 Additional Search Info for search in Generic Frontend Server.
475
476 Fixed CCL parsing of "field=s".
477
478 WIN32 installer - using the excellent NSIS software from nullsoft.
479
480 Fixed CCL parsing of "field = - <number>".
481
482 Added function yaz_marc_decode that decodes MARC for line mode
483 display or XML (similar to that used by JZKit).
484
485 Fixed BER decoding of OPTIONAL CHOICE. The bug didn't affect the
486 Z39.50. But ISO/ILL was, however.
487
488 Added patch by Rustam T. Usmanov that implements Z39.50 duplicate
489 detection service (Z39.50-1995 Amendment 2) and Language Negotiation (3).
490 See:
491  http://lcweb.loc.gov/z3950/agency/amend/am2.html
492  http://lcweb.loc.gov/z3950/agency/defns/charneg-3.html
493
494 --- 1.8.5 2002/02/03
495
496 New YAZ client features: Command completion and new commands:
497 push_command, set_apdufile, set_marcdump, set_cclfields, register_oid.
498 Code provided by Jacob Poulsen.
499
500 New call oid_trav, that visits all registered OIDs via callback.
501
502 Function ZOOM_record_get now returns const char pointer rather than
503 void pointer. It saves a lot of type casts.
504
505 For YAZ client, command "auth" now allows you to set authentication
506 in IdPass style. It is enabled when three tokens are given - order
507 is user, group and password.
508
509 Fix memory leaks in MARC record handling for ZOOM.
510
511 New option for YAZ client, -k <kilobytes> that sets
512 maximum record size. Similar to -k option for generic frontend
513 server and yaz-ztest.
514
515 More fixes for scan. Non-zero stepSize handled. OID's fixes.
516
517 Prefix query parser reports "fail" when bad attribute set is given.
518
519 Fix in MARC decoder. Proximity logging. Fix for attribute set
520 in scan handler for server. Patches by Shigeru Ishida.
521
522 SSL/COMSTACK updates. cs_rcvconnect completes SSL handshake. ZOOM
523 works with SSL.
524
525 Configure option --with-openssl=<dir> now works when a directory is
526 specified. Patch provided by Morten Bøgeskov.
527
528 New option for YAZ client, -u <auth>, that sets authentication.
529
530 ZOOM fix: error information was sometimes "missing", since error
531 was cleared/reset too when it shouldn't.
532
533 ZOOM_record_get returns ISO2709 buffer when "raw" is given.
534
535 --- 1.8.4 2002/01/04
536
537 Scan for ZOOM API. New object ZOOM_scanset. New functions
538 ZOOM_connection_scan, ZOOM_scanset_size, ZOOM_scanset_term and
539 ZOOM_scanset_destroy.
540
541 New ZOOM function, ZOOM_connection_last_event, that returns type
542 of last event (such as "receive data", "send data", "apdu received",
543 etc.
544
545 New ZOOM option, schema, that specifies schema for retrieval.
546
547 New CCL feature. Qualifiers can be aliases for one or more
548 other qualifiers (if more than one is given, OR is used).
549
550 ZOOM uses named result sets if target supports it.
551
552 Two new YAZ client commands: .  (dot, which sources a script of YAZ
553 client commands), and ! (to execute shell command.). Implemented
554 by Jacob Poulsen.
555
556 Working on Debian packages.
557
558 --- 1.8.3 2001/11/19
559
560 YAZ client enables named result sets only if target supports it.
561
562 *** ZOOM. Prefix for ZOOM definitions changed from Z3950_ to ZOOM_.
563
564 * ZOOM. Removed Z3950_connection_host. Use Z3950_connection_option_get
565 with key="host" to get same result.
566
567 * ZOOM. Added Z3950_record_clone and removed Z3950_resultset_get.
568 Function Z3950_resultset_record(s) returns references to records
569 "owned" by resultset. To become owner use Z3950_record_clone.
570
571 Function z_ext_record handles Extended Services. Thanks to
572 Irina Dijour.
573
574 --- 1.8.2 2001/11/12
575
576 CCL Parser fix: ignore token comma when dealing with and-lists.
577
578 Documentation updates for COMSTACK.
579
580 * ZOOM changes. Query object renamed from Z3950_search to Z3950_query.
581 Changed prototype Z3950_records. For some functions, int parameters
582 were changed to size_t.
583
584 TCP/IP COMSTACK no longer uses getprotobyname to avoid memory leak
585 on some Unices.
586
587 New MARC decode/display function, marc_display_exl, which properly rejects
588 non-ISO2709 records. YAZ client uses it.
589
590 --- 1.8.1 2001/10/29
591
592 Fix bug: local attribute set wasn't set correctly in PQF strings.
593
594 --- 1.8 2001/10/25
595
596 * Old Z39.50 codecs no longer supported. 
597
598 Added ZOOM C binding. See http://zoom.z3950.org/
599
600 Renamed states for COMSTACKs to avoid confusion with events.
601
602 Implemented cs_look and proper cs_rcvconnect.
603
604 Fixed COMSTACK error that occurred on HPUX. Fix by Giannis Kosmas.
605
606 Configure detects POSIX threads on OpenBSD.
607
608 When sort flag 'i' was specified in yaz-client the caseSensitivy flag
609 was set to a wrong value.  Thanks to Robert Sanderson for reporting this.
610
611 When error is returned from present handler, non-surrogate diagnostic
612 is returned in present response (and fetch handler is no longer called).
613
614 * Minor adjustments to pquery parser (PQF). Token characters may be
615 escaped by using backslash (C-style).
616
617 PQF parser allows string attribute values to be specified. For @attr,
618 non-numeric characters after the equal-sign are treated as strings
619 (e.g. @attr 9=title).
620
621 CCL trunction character may be defined (@truncation in file)
622
623 * function zget_ExtendedServicesRequest sets waitAction to
624   waitIfPossible (was wait).
625
626 Added cs_set_blocking to set change blocking mode of a COMSTACK. Thanks
627 to Matthew Carey.
628
629 CCL operator names may be set in field definition files (CCL_bibset).
630 See ccl/bib1 for an example.
631
632 Fixes in ASN.1 compiler for C++ compatibility.
633
634 * Renamed members "and" and "or" in struct Z_Operator to "op_and"
635 and "op_or" to avoid conflict with C++.
636
637 Fixed problem with GNU readline detection on Redhat 7.0.
638
639 Added step-size for Scan backend handler.
640
641 Fixed bug that made the frontend server crash when no attribute
642 set was specified for scan.
643
644 Front-end server automatically switches to original working directory
645 when installed as an NT service. Previously -w had to be specified to
646 make it work.
647
648 Added extended attributes for retrieval module (data1), so that data1
649 records carry d1_readXML/SGML attributes. d1_read also supports
650 null-data rules ( <tag/>)
651
652 On UNIX when POSIX threads are available, a separate library libyazthread
653 is created. Programmers should link with that library and the yaz library
654 when using threads. The reason for the split was that some applications
655 on Linux, such as Apache, doesn't work well when using shared objects that
656 relies on threads.
657
658 Added SSL support for the COMSTACK. You start yaz-client and yaz-ztest
659 (or any frontend server) in SSL mode by specifying ssl: followed by
660 address. Only tested on UNIX.
661
662 Added feature for CCL module. Virtual structure s=al or s=ol generates
663 and-list and or-list respectively instead of phrase search.
664
665 Added some OID's.
666
667 * Added prefix "yaz_" for the functions log_init.., log_file..  and
668 log_mask_str. This was done to avoid name conflicts with other libraries
669 (such as other PHP extensions).
670
671 Added raw OID member for preferred record syntax (request_format_raw)
672 and returned record syntax (output_format_raw) for backend fetch method.
673
674 Config file yaz-config now accepts options so that it returns specific
675 compile settings, etc. Thanks to Morten Bøgeskov <morten@bogeskov.dk>
676
677 Shared library support for UNIX using GNU libtool.
678
679 * Modified backend interface. Request/Response struct's replaced by
680 one read/write C struct. For example bend_fetchrequest and
681 bend_fetchresult have been replaced by single bend_fetch_rr struct.
682 Every handler - even search has to be registered in bend_init
683 handler. This means that the YAZ library no longer refers to
684 external functions and it makes it possible to make the whole
685 thing a single DLL/SO.
686
687 Added Segment handler for backend server.
688
689 Added Zmbol/Zebra administrative functions to YAZ client.
690
691 Threaded frontend server on UNIX (when POSIX Threads are available).
692 Starting the server with option -T enables multi-threading.
693
694 --- 1.6 2000/03/03
695
696 Added configure option --enable-comp/disable-comp to control use
697 of YAZ ASN.1 compiler. Use --disable-comp to use the old *coders
698 located in sub directory asn.
699
700 YAZ ASN.1 compiler renamed to yaz-comp in sub directory. It's installed
701 in ${exec_prefix}/bin along with the other programs yaz-client and
702 yaz-ztest.
703
704 GNU automake used to maintain makefiles.
705
706 Added several OID's.
707
708 Changed retrieval module so that we can load records with no abstract
709 syntax defined. Tagpaths in these records are fully composed of string
710 tags.
711
712 Implemented ISO ILL protocol. Refer to stuff in sub directory ill.
713
714 --- 1.5 1999/12/10
715
716 On UNIX, the generated makefile now supports a proper 'make install'.
717 The prefix can be set via GNU configure to set the install location
718 (default is /usr/local).
719
720 * YAZ programs client and ztest were renamed to yaz-client and
721 yaz-ztest to avoid conflicts when users install YAZ in "standard"
722 locations, such as /usr/bin,/usr/local/bin,etc.
723
724 * YAZ Header files were moved from include to include/yaz. YAZ Header
725 files are referred to as include <yaz/log.h> rather than <log.h>.
726 The YAZ include path (-I ..) is therefore the same as before. Programmers
727 should update their #include statements or use -Ipath/include/yaz
728 instead. The main motivation for doing this change is that YAZ header files
729 can be installed in "standard" locations /usr/include,/usr/local/include 
730 without introducing conflicts, since ALL YAZ header files are stored
731 in subdirectory yaz (under /usr/include for example).
732
733 Compilation of YAZ for WIN32 is now handled by an nmake-style makefile 
734 rather than project/workspace files. We switched because project files
735 are incompatible between Visual C++ 5 and 6. Refer to windows.txt for
736 details.
737
738 Changed name of logging function, logf, to yaz_log, to prevent name
739 clash with some math-log functions. The YAZ header log.h defines logf
740 to yaz_log (#define) so there should be no incompatibilities by this
741 modification.
742
743 Added bend_start/bend_stop handlers for server. These handler are
744 called on start/stop of server. For windows they are called whenever
745 a service is started/stopped.
746
747 * YAZ now auto-generates decoders/encoders for the Z39.50 protocol using
748 a fairly small ASN.1 compiler written in Tcl. The compiler is located
749 in util/yc.tcl. The auto-generated C code structures are, in a few
750 cases, incompatible with the old decoders. There are differences in the
751 following C structures Z_DiagRec, Z_External, Z_SortRequest, Z_SortResponse,
752 Z_AttributesPlusTerm, Z_ProximityOperator, Z_DefaultDiagFormat.
753 The preprocessor variable ASN_COMPILED is defined when the compiled
754 ASN.1 is being used. Encoder/decoder routines as well as the Z39.50
755 protocol ASN.1 is located sub directory <tt>z39.50</tt>. If you
756 wish to use the old encoders/decoders you can specify --disable-yc
757 for configure.
758
759 Assigned OID for old DB Update (VAL_DBUPDATE0). Updated YAZ compiled
760 version so that it supports both new - and old version of DB Update
761
762 * Added 'name' parameter to ODR encoder/decoder routines to facilitate
763 pretty ODR print. Updated whole Z39.50 encoder/decoder to reflect the
764 change. The name parameter can be set to 0 in which no name is specified
765 for the construction. The macros odr_implicit and odr_explicit sets name
766 parameter to zero for the construction involved. New macros
767 odr_implicit_tag and odr_explicit_tag are similar to the others,
768 except that a name parameter is added. For programmers' that don't use
769 ODR they probably only need to change the call to z_APDU and z_External.
770
771 Added access control facility by interfacing the TCP wrapper library.
772 YAZ automatically attempts to find the TCP wrapper Library (-lwrap) and
773 tcpd.h on Unix systems. For the server, option -d<daemon> specifies the
774 name of the daemon and enables the access control as specified in
775 hosts.allow/hosts.deny. Refer to man pages tcpd(8) and hosts_access(5).
776
777 Fixed memory leak in ccl_find_str and ccl_qual_rm. Thanks to Hans van
778 den Dool <H.M.vdnDool@kub.nl>.
779
780 Added reference ID parameter to most functions in server API - refer
781 to backend.h. Thanks to Hans van den Dool <H.M.vdnDool@kub.nl>.
782
783 Changed name of ccl library to libccl.a (was ccl.a).
784
785 Fixed bug in decoder for Explain (Category TargetInfo).
786
787 Added support for GNU readline in client. Thanks to Jacob Poulsen
788 <ja7@dbc.dk>. GNU configure attempts to detect if readline is available.
789
790 * CHANGED DEFINITION OF ES: UPDATE (INCLUDING THE OID) to reflect the
791 new definition from the ZIG. NOTE THIS IF YOU HAVE AN UPDATE
792 IMPLEMENTATION! This change was made to the development version before
793 the ZIG decided to retract the amendment. If any users MUST be
794 compatible with the original Update definition, PLEASE CONTACT US, and
795 we will include a separate definition corresponding to the old Update
796 ES. Note that because of the change to the ASN.1 of the
797 TaskPackageRecordStructure we cannot define a single structure that
798 will support both versions.
799
800 * Added const modifier to buffer parameter for some ODR/BER encoding
801 routines: ber_dectag, ber_declen, odp_more_chunks, completeBER,
802 completeWAIS, odr_dumpBER.
803
804 Fixed bug in client.c which caused a crash when a scanResponse didn't
805 contain positionOfTerm.
806
807 * Fixed inconsistency in the ScanResponse/ListEntries protocol. This
808 * will cause an error in a client if a non-YAZ target sends both a
809 * list of Scan entries and non-surrogate diagnostics.
810
811 Retrieval module enhancements. Tag sets may be typed in the reference
812 to it. From the .abs-file the "tagset" directive takes a third optional
813 integer type for the tag set referenced. From a .tag-file the "include"
814 directive takes a third optional type as well. The old "type" directive
815 in the tag set itself is still recognized but acts as the default type
816 for the tag set.
817
818 Backend interface change. Individual Scan terms returned from bend_scan
819 may also be tagged as Surrogate Diagnostics. Refer to struct scan_entry
820 in include/backend.h.
821
822 Retrieval module enhancements. Multiple tag sets and attribute sets may
823 be specified in abstract syntax specs. Revised the error/warning for
824 logging messages reported by the retrieval module when reading the
825 various spec files.
826
827 Object Identifier system (oid_..) changed. The API is backwards
828 compatible but the oid-routines now allocates new OID's when needed.
829 Raw OID's may be specified in oid_getvalbyname.
830
831 YAZ now uses GNU configure to generate Makefile(s).
832
833 * Minor changes in some of the member names of DeleteResultSetRequest and
834 DeleteResultSetResponse. See include/proto.h.
835
836 * Changed some C definitions regarding EXPLAIN record syntax (prt-exp.h)
837 and added member 'languages' in TargetInfo (which was missing).
838
839 Changed the way attribute sets are handled in the retrieval
840 module. These are now cached, just like the abstract syntaxes
841 (schemas).
842
843 Changed YAZ so that it links with compiled ASN.1.
844
845 Added Explain-schema definitions and mapping routines. The following
846 Explain categories have been implemented: AttributeDetails,
847 AttributeSetInfo, DatabaseInfo, CategoryList and TargetInfo.
848
849 Fixed minor bug in Windows version of Server Library.
850
851 --- 1.4pl2+ 1998/4/17 (Released with Zebra)
852
853 Added Extended Services to server (backend.h). Thanks to Charles Woodfield.
854
855 Added EXTERNAL: UNIverse Resource Report (non-standard).
856
857 Implemened odr_enum and odr_set_of functions to handle ASN.1 types
858 ENUMERATED and SET OF.
859
860 * Added 'const' to some of the char pointer arguments for the
861 functions, data1_read_node, data1_getelementbytagname,
862 data1_insert_taggeddata, data1_getesetbyname, data1_getelementbyname,
863 data1_get_absyn.
864
865 Fixed bug in data1_insert_taggeddata - the last_child member of
866 parent wasn't initialised.
867
868 * Changed data1_read_record and data1_read_node so that the supplied
869 "SGML"-buffer is read-only. In particular the resulting data1 - tree
870 doesn't refer to any parts of the "SGML"-buffer.
871
872 Fixed bug in server library (Windows version of statserv_remove).
873
874 * Changed code so that it compiles as C++. The type definition
875 of Odr_fun which is a member of Odr_arm was changed. The result is,
876 that an explicit typecast is needed for the fun pointer when
877 using Odr_arm - as in:
878     {1, -1, -1, Z_IdAuthentication_idPass, (Odr_fun)z_IdPass},
879
880 Updated TagSet-G and -M definitions (tagsetm.tag and tagsetg.tag).
881
882 Implemented the new structured date and time definition as approved
883 by the ZIG. Added schemaId element to the specificTag in Espec-1
884 (also approved at the last ZIG). Thanks to RVDM.
885
886 Added some Object identifiers (RVDM).
887
888 Changed the Update Extended Service (RVDM).
889
890 Added command "refid" to client which specifies referenceId for
891 the following requests.
892
893 Implemented extended service handling for server. See ztest.c
894 for an example as well as backend.h. New handlers are registerd
895 in the Init handler.
896
897 * Changed interface for sort in server.
898
899 Added new members to statserv_options_block. It allows a server
900 to read options from another source than just the command line. Thanks
901 to Charles Woodfield.
902
903 * Changed definition of Z_Triple in file prt-grs.h - member boolean
904 renamed to zboolean. Some C++ compilers complained about the name.
905
906 Minor changes to gils.abs. Added index 's' (sort) on title
907 and date/time-last-modified.
908
909 --- 1.4pl2 1998/1/30
910
911 Fixed bug in server library regarding inetd mode (-i). This bug
912 was introduced by release 1.4.
913
914 --- 1.4pl1 1998/1/29
915
916 Added sort facility in client and backend server interface.
917
918 Fixed problem with dependencies in Makefile(s).
919
920 Fixed bugs for encoders/decoders of extended services and 
921 SearchInfoReport.
922
923 Implemented sub-tree feature for schemas. Sub-trees are
924 referenced in *.abs-files. See explain.abs for an example
925 of the use of this feature.
926
927 Modified bib1.att; local attributes for ANY didn't include
928 ANY itself (only affects use of the retrieval module).
929
930 Fixed bug in plain SGML reader in function data1_read_node:
931 tags with prefix "var" was incorrectly interpreted as variants.
932
933 Added feature "sub-schemas" to enable references to - and definitions
934 of - group of elements.
935
936 * Removed member parent from type data1_element (in data1.h).
937
938 Implemented function odr_nullval() that returns the value of
939 ODR_NULLVAL.
940
941 * Removed member num_children from data1_node (in data1.h).
942
943 Made NT service interface part of the server library. The
944 function statserv_main uses the NT service when required and
945 calls the statserv_start / statserv_close routines.
946
947 Routine zget_SearchRequest and zget_PresentRequest fills
948 resultSetName/Id member with "default" instead of "Default".
949
950 Fixed memory leak in server. Request queue member wasn't freed.
951
952 Fixed nmem_exit so that memory is freed.
953
954 --- 1.4 1997/10/2
955
956 Revised the CCL parser utility to be thread safe.
957
958 Added function, oid_ent_to_oid, to replace the function 
959 oid_getoidbyent, which is not thread safe.
960
961 * Added nmem_init and nmem_exit to initialize and release
962 NMEM resources. Function nmem_init should be called once in the
963 initial thread before NMEM/ODR is used. statserv.c and client.c
964 have been changed accordingly. The change was necessary to make
965 NMEM thread safe. The NMEM memory pool is shared amongst threads
966 in a process. Unix-based applications will still work fine without
967 calling this.
968
969 Added NT Services interface for the the Z39.50 (statserv) Server. 
970 Refer to the ztest.c source on the usage.
971
972 Windows 95/NT port using MSVC5.0. Project files are included in the
973 distribution.
974
975 * Defined new 'global' handle for the retrieval (data1) system. The
976 new handled, data1_handle, describes the state of the data1 system.
977 This handle is passed as first argument to virtually all
978 data1 related routines. The functions data1_create and data1_destroy
979 creates and destroys a data1 handle respectively.
980
981 Added ODR encode stream member to all backend request structures
982 init, search, scan etc. This stream should be used to allocate all
983 memory used for the response when thread safe operation is needed.
984
985 Changed the comstack utility, cs_addstr, to be thread safe. The
986 returned hostname string returned by the function is now part the
987 COMSTACK instance.
988
989 Added comstack utility, cs_straddr, which replaces the tcpip_strtoaddr
990 function. The cs_straddr takes a COMSTACK handle as argument, so this
991 function must be used after cs_create and before bind/connect.
992 This function is thread safe.
993
994 Moved test server to 'ztest' directory - generic server code still
995 in 'server' directory.
996
997 Made prefix query (pquery.c) utility thread safe.
998
999 Added new function modifier YAZ_EXPORT to 'export' public DLL
1000 functions when using windows (see include/yconfig.h).
1001
1002 Added definitions to the OID database (util/oid.c) (RVDM).
1003
1004 Added new BIB-1 diagnostic messages to the handler diagbib1_str.
1005
1006 Added call to ccl_rpn_delete in client program.
1007
1008 Added ODR argument to ccl_rpn_query and ccl_scan_query to provide
1009 release of RPN structure.
1010
1011 Added support for C++, headers uses extern "C" for public definitions.
1012 With input from RVDM.
1013
1014 In handling of SEQUENCE OF: Counter set to zero when SEQUENCE OF is absent.
1015 Thanks to Ronald van der Meer (RVDM).
1016
1017 Added initializers (zget_ routines) for a number of PDUs. Thanks to RVDM.
1018
1019 Added support for private extensions to the OID database
1020 (oid_setprivateoids()). Thanks to RVDM.
1021     
1022 Added optional, physical ANY (key replication)
1023
1024 Fixed null-reference problem in GRS-1 output filter.
1025
1026 Proximity operator added to Prefix Query Format (PQF).
1027
1028 In test client command "base" accepts multiple databases.
1029
1030 Fixed bug in cs_close stack that caused trouble with WINSOCK.
1031
1032 --- 1.3 1996/10/11
1033
1034 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
1035
1036 Smallish bug-fixes in the new encoders/decoders (explain).
1037
1038 Bug fixed in DeleteRequest.
1039
1040 Fixed tagging bug of type 101 query in SearchRequest-Query PDU encoder/decoder.
1041
1042 Fixed tagging bug in ResourceReportResponse PDU encoder/decode.
1043
1044 Added SOIF syntax (using private OID for now) to retrieval module and client.
1045
1046 Added Update extended service.
1047
1048 Added SearchResult-1 additional info structure.
1049
1050 Added optional CCL (ISO8777) interpreter as separate module. Available
1051 in linemode client.
1052
1053 --- 1.2 1996/6/10 (1st anniversary release)
1054
1055 Added Summary record syntax. Lightly tested.
1056
1057 Added OPAC record syntax. Untested.
1058
1059 Added ResourceReport service encoders/decoders. Untested.
1060
1061 Fixed bug in z_Unit - wrong tagging on unitSystem.
1062
1063 Fixed bug in the DiagRecs decoder.
1064
1065 Added options for max PDU size and session timeout to frontend-server.
1066
1067 Added documentation of query-language parsers and other supporting utilities.
1068
1069 [frontend-server] Added Attribute set to the bend_scanrequest API.
1070
1071 [frontend-server] NextResultSetPosition was sometimes set incorrectly when
1072 surrogate diagnostics were generated.
1073
1074 [retrieval] Allow multiple local values for attribute.
1075
1076 [retrieval] Allow multiple attributes per element in .abs files. index type.
1077
1078 [retrieval] Added Summary tagset, abstract syntax, and d1-node/ASN filter.
1079
1080 --- 1.1pl2  1996/4/10
1081
1082 Minor changes, mostly specific to Zebra's requirements (retrieval)
1083
1084 --- 1.1  1996/2/20
1085
1086 Repaired bug in frontend server when running multiple listening
1087 endpoints in dynamic mode.
1088
1089 z_External() now won't break if a known, ASN.1 value comes encapsulated
1090 in an octet-string. The value will pass through unmodified in an Odr_oct.
1091
1092 Added a bit of code to the demo client to decode & display
1093 ASN.1-structured records represented in the octet-aligned branch of
1094 the EXTERNAL CHOICE. Thanks to CAS for prodding us to finally do this.
1095
1096 Added z_ext_getentbyref() to the ASN module. Doc updated.
1097
1098 * Completed the SCAN definition in the ASN module. This may break SCAN
1099 code based on older YAZ-versions at compile-time. The fix is easy -
1100 look in proto.h.
1101
1102 * Added 'displayTerm' and OtherInformation to the TermInfo structure
1103 under the SCAN definition. Remember to initialize this, server-people.
1104
1105 Comstack should now support the WAIS protocol in TCP/IP mode. Note
1106 that this does not extend to ODR and ASN.
1107
1108 Comstack allows insertion of established socket (primarily for
1109 inetd-operation of servers). Doc updated.
1110
1111 Front-end server can now start from the inetd in TCP mode. Doc
1112 updated.
1113
1114 --- 1.0pl4 1996/1/24
1115
1116 Added Sort PDU.
1117
1118 Fixed small problem in SUTRS-filter. A newline was sometimes inserted before
1119 the rank and record number.
1120
1121 Adjustments to the frontend server.
1122
1123 Fixed diagnostic BER dumper. It ignored the file argument.
1124
1125 --- 1.0pl3 1996/1/2
1126
1127 Various changes to retrieval module.
1128
1129 Changed the union discriminators of the protocol files from enums to
1130 ints paired with #defines.
1131
1132 *Changed oident.class to oident.oclass to avoid a reserved word in C++
1133  compilers.
1134
1135 *Changed operator in the RPN structure to 'roperator', again to avoid a
1136  conflict with C++.
1137
1138 Fixed problems in Explain decoders/encoders.
1139
1140 --- 1.0pl2 1995/12/6
1141
1142 Memory bug in log module fixed.
1143
1144 --- 1.0pl1 1995/12/5
1145
1146 Occasional malloc() of 0 bytes fixed in d1_espec.c.
1147
1148 Bug in Explain DatabaseInfo module fixed.
1149
1150 Some '\r' snuck into one or two of the ret'l config tables. A curse on Windows.
1151
1152 --- 1.0 1995/11/28
1153
1154 The shift to v1.0 signals that we now consider the *core* functionality
1155 of YAZ reasonably stable (the core being more or less equivalent to
1156 Z39.50-1992). Some of the really nifty v3 stuff is still not heavily
1157 tested (Explain not at all - though that will happen soonish).
1158
1159 Minor changes to code to support Windows port.
1160
1161 Various minor changes after we're getting to use GRS-1 & co. more.
1162
1163 Added Espec-1 format.
1164
1165 Added VisibleString field body type to GRS-1. It is illegal acc. to my copy
1166 of the protocol and it cannot be selected when encoding (maps into 'string'
1167 when decoding). Needed to talk to some servers.
1168
1169 Demo client can request simple element set names.
1170
1171 Added Diagnostic Format encoders/decoders.
1172
1173 Added simple Close handling to frontend server (no hooks for resource
1174 reporting yet), and demonstration client.
1175
1176 Added cs_addrstr() command to COMSTACK to retrieve peer hostname/address.
1177
1178 --- 1.0b3 1995/08/24
1179
1180 Fixed bug in the frontend-server. The numberOfRecordsReturned field was
1181 handled incorrectly when records were requested in the searchResponse. This
1182 will only affect you if you use the frontend-server.
1183
1184 Added GRS-1 encoders/decoders to the service-level API. Lightly tested.
1185 Test-client will ask for and print GRS1. Ztest will return dummy records
1186 on request.
1187
1188 Added Explain encoders/decoders to the service-level API. Untested.
1189
1190 Added Extended Services: Item Order encoders and decoders to the Service-
1191 level API. Untested. We could use a recent copy of the pertinent bits
1192 of the ILL protocol to add those bits.
1193
1194 Added diagnostic format 1 encoders/decoders to the service-level API.
1195 Untested.
1196
1197 Moved pretty-printing of structure-wrappers ({..}) from odr_seq.c to
1198 odr_cons.c, which causes a more correct output.
1199
1200 Fixed handling of searchRequest in frontend server. NextResultSetPosition
1201 was always set to 0 when no records were requested in the searchRequest.
1202
1203 * Added better external-handling. This shouldn't harm old code that
1204 *encodes* externals. It can break code that looks for a
1205 'single-ASN1-type' representation, since those types that are known
1206 are now decoded immediately. Look at the SUTRS sample code in
1207 seshigh.c and client.c. Documentation updated.
1208
1209 Handling of structured records in bend_fetchresponse. Length -1 marks
1210 structured record, type is deduced from format field.
1211
1212 --- 1.0b2 1995/06/27
1213 Fairly quick maintenance release to add SUTRS support.
1214
1215 Fixed handling of SUTRS records in the demonstration client.
1216
1217 * Added format field to the bend_fetchrequest and bend_fetchresponce
1218 structures of the backend API (frontend server). When the record is
1219 returned, the value of the format field is mapped to an OID. The
1220 value VAL_SUTRS will also cause a slightly different ASN.1 packaging
1221 of the record. The special value VAL_NONE in the bend_request means
1222 that no specific format was requested by the client. Documentation
1223 updated accordingly. Test server (ztest) will return a fixed dummy
1224 SUTRS record if your client requests SUTRS.
1225
1226 Documentation updated accordingly.
1227
1228 You can now set external libraries and RANLIB support in the top-level
1229 Makefile.
1230
1231 --- 1.0b 1995/06/19
1232 First public release.