Added

Make threading for index sort configurable.

Remove log msg

Split it_key stuff into it_key.c. For indexing, sort key chunks in a separate
thread (POSIX threads only).

Increase reckeys hash size from 1023 to 32767.

Remove obsolete SORT_EXTRA code (no longer in use).

Contact address for Zebra is zebra-help@indexdata.dk

updated docs to reflect change to 'zebra::index::' special elem set name

added tests fror wrong element set names which are not recognized

preventing later memory acess violation when one leaves retrieve.c:zebra_special_fetch by error condition before setting *rec_lenp by setting int len = 0; upon initialization.

removing unnecessary comments
not setting the  *rec_lenp = 0; at retrieve.c:127 to provoke test failure with segfault in the last unit test of test/api/t16.c , which is commented out. It seems like  *rec_lenp = wrbuf_len(wrbuf); at retrieve.c:247 leaves rec_lenp in an uninitialized state, which causes a segfault later. More investigation needed.

protected wrong buffer-length write by initializing to 0, but there is more debugging needed: there is still something fishy with the last out-commented test of test/api/t16.c.

added tests for zebra::data, zebra::meta::sysno and zebra::index::title:p element sets. Last one segfaults and need further debugging, it is commented out.

For alvis filter make XML pass-through if stylesheet is attribute
is omitted (not specified).

Added new test for check for zebra:: element set names.

Fix setting of recordAttr->recordSize in case of storeData method.

Output format = input for zebra::data fetch (raw fetch).

idzebra:: stuff functional.

Annotate zerbaExplain_lookup_attr_str

added suggestions for better workflow in comments

re-organized record retrieval such that special element set names
zebra::index           display all indexed terms from all indexes
zebra::index::title    display all terms from only title index
zebra::index::title:p  display all terms from only title index type p
zebra::meta::sysno     display only zebra internal record sysno
zebra::data            dislpay raw record binary data as SUTRS
all work
More testing with zebra:.data is needed
Sitll missing zebra::meta::filename, zebra::meta::count, etc ..
Better error messages would be an asset...

Added small test of mfile sub system

Avoid abort. EXTRA_CHECK defined and annotated

Use assert rather than abort

Changed test to pass for Libxml 2.6.16.

Fix mf_write call in cf_commit_flat.

Work on bug #550: Avoid exit. In particular the mfile/cfile/bfile has
been refactored quite a bit. Remaining exit uses zebra_exit.
Removed redundant apitest.c.

added section on special zebra:: elemset names, and updated docs to follow suit with changes alvis oai filter example

written XML formatting for new zebra-specific elem set 'zebra::' which lets you dump the exact content of indexed fields in records.
Using for example elemset 'zebra::dc_title' dumps only the physical string index 'dc_title' fields in the virtual, from indexes constructed, record. Usisn 'zebra::dc_title:w' dumps only te subset of those which are indexed as type 'w'.

Added test record for oai-alvis example with utf-8 sequences and nasty XML escapes. Testing works on GRS-1 filters, but yet not on 'Alvis' filters, the direct YAZ function    zebra_storekeys_fetch in index/retrieve.c seems not be called at all .. more debugging needed.

Parse element spec zebra::field,type to make Zebra return storekeys for
records.

Test for bug #730.

In tl_init_data check for return code from zebra_add_record.

Fixed bug #730: Bad XML for update with alvis filter does not fail as
it should. The Libxml2 function xmlReadIO does not report errors so
we use xml reader interface always for ALVIS filter.

Renamed function zebra_snippets_rec_keys to zebra_rec_keys_to_snippets.
Factor storedata retrieval out of zebra_record_fetch.

Change mfile_/cfile-functions to return error code(s) rather than exit.
Added bf_read2 / bf_write2 which does not call exit for errors.

Removed a few redundant comments.

Use blanks rather than NULs in block (bfile test)

Changed test to that bfs is reconstructed after bfs_reset.

Added test of bfile/cfile/mfile system

Filter 'text' loadable as most other filter types. 'grs.sgml' always
static.

Only enable ALVIS if Libxml2 2.6.15 or later is in use.

Fixed bug #723: Enable EXSLT for alvis. We use whatever YAZ
finds out for Unix confiugre (YAZ_HAVE_EXSLT & YAZ_HAVE_XSLT).

Log level -v indexdetails logs all terms indexed for each record.

Ignore another generated binary

Use f(void) instead of f()

Fixed bug #234: mbox filter hangs when seeing a non-mbox filter.
Also, again (!), fixed the way regx determines EOF; now EOF
is signalled if nore rules matches (except BEGIN which always matches).

Revert last change for extract.c, due to tests failing. We can't use
offset for determining whether a record stream indexing is finished
or not. Indeed filters, like ALVIS, reads large chunks at a time.
The grs.{regx,tcl} filter instead is modified to return the
"right thing", i.e. NULL data1 tree (signalling EOF / no more data).

For record file stream indexing, stop looping if offset is unmodified
by call to filter. This appears as bug #234, but really isn't.

Use f(void) rather than f()

Fixed several prototypes.. Most changes are f() to f(void).

Added -Wstrict-prototypes for buildconf.sh -d mode. Added -o mode which
uses -O3 plus warning options.

Removed unused function rpn_scan_ver1

Initialize variable which could be un-initialized

Change prototype for data1_absyn_getmarctab, data1_absyn_getelements.

Fixed bug #710: Duplicate keys for CDATA in xelm/melm rules. For X-Path
termlist indexing, the sequence number is updated to the maximum sequence
number generated.

Added a check to verify that private OIDs works

Removed no longer in use zebrazv.cfg

Towards 2.0.4

Build-Depends yaz > 2.1.36

More news items

Fixed bug #47: Commit needs to check for roll-back.

Fixed bug #696: Less than Date searches returns unexpected hit count.

Allow character ordinal 1 in [..] ranges to specify "raw" value.

Fix crash that occurred if mc-ldr rules was used in conjunction with
missing .mar file.

Added tstpass test

Fixed bug 672: Trailing characters in password are ignored. By
default htpasswd uses DES encryption of maximum key length 8. This
means that a password can only have 8 significant digits. Function
passwd_db_auth now returns -2 if password is greater than 8.

More on regular expressions in grs.regx filters.

Fixed bug #658: update docs on zebra.cfg settings.

Fixed 'make distcheck'. Failed due to html files not being removed by
uninstall. Added uinstall-hook for the doc directory.

Fixed bug #670: modulePath is not a path. Uses new utility
yaz_filepath_comp - available in YAZ 2.1.35 and later.

Use check for 'long long' to determine type for zint.

Removed unused local variables.

Ignore Zebra register files

Added extra presence check for tcl.h, because some systems have
tclConfig.sh installed even though Tcl C headers are missing.

Simplify and optimize commit clean operation

Quote various places in Windows makefile to deal with directories
with blanks in them.

More NEWS

Version 2.0.3.

More optimizations of the melm matching.

Do not use sync(2) after commit. The fsync on individual files suffices.

Fixed bug #685: Optimize xelm/melm matching. Indexing the Koha collection
is reduced from 6073 sec to 2578 sec (on Zebra 1.3.38 though).

Align query tests

Added more rules to verify bug #686

Fixed bug in ISAMB's utility function decode_ptr. With gcc -O3 on some
platforms the src argument was not updated.

Update for 2.0.2

Version 2.0.2

Fix FSF address

Updates for first-in-field support + alwaysmathces searches. Refer to native
query support as RPN rather than PQF.

Renamed main.c to zebraidx.c. Renamed zserver.c to zebrasrv.c.
Removed zserver.h.

Update news

Skip 0 hit counts in scan.

Split function rpn_scan in two.

Update for zrpn split.

Rename source files

Split zrpn.c

Avoid C++ style comments

Describe the use of "a" in permission strings.

Fixed bug #669: Numeric sorting does not work, but yields "random" order.
The numerical sort did not convert characters back to original form,
that is it would only work with 'charmap @'. Any charmap should now work
but results will look random if charmap does not include the digits [0-9].

Fix LFS check which on some systems, such as Solaris, reports LFS false -
when LFS is present. The sprintf+long double format check is gone and
replaced by a simple arithmetic expression which does the same thing.

Rename rec_rm to rec_free. Annotate the recindex.h file a bit.