Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

Describe pz:xslt and the auto setting

Fix RPN to CQL mappings, i.e use string attributes

Add citation element

Remove mergekey declaration

Move mergekey definition to pazpar2.cfg

Moves mergekey definition away from the normalization stylesheets and
defines a mergekey common for all target types in pazpar2.cfg.

Use Odr_int type for hit counts

Use the Odr_int type for hit counts. This is part of YAZ 3.0.47
and later and so configure checks for that.

Update test_normalize for skiparticle fix

Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

Win32 makefile: dist depends nsi

Bump version, update NEWS

Metadata 'skiparticle works for ICU normalization

The skiparticle handling was only working for the 7-bit ASCII
normalization code before.

Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

Added error-reporting for the case where a HTTP response is 200 OK but
it does not contain any XML (for example because it is a
human-readable HTML page explaining what went wrong).
Removed obsolete CVS Id.

Update test result WRT marcmap

marcmap no longer produces a mergekey so a unique mergekey is
generated instead in test.

explicitly state encoding as utf-8
that probably took long than it was worth, but we want the output the same as xsl!

put root element in pz namespace in marcmap output

I $ed where I should have *ed.

MARC XML also includes MARC generally

Avoid useless temp

Testing: align test no and line no (_urls)

Testing: use standard IFS for test URLs

Use standard IFS instead of new-line for testing. This allow us
to have multiple items on one line, thus ensuring that line #x is
test_#x in test result.

Deal with empty fields for ranking

Avoid division by length=0 in relevance_countwords.

Update test results for new ranking

Modify length calculation for ranking

Use a different denominator (length) for per-field relevance
scoring.. Instead of length of all ranked fields we now use
length of individual fields (as if they were individual "free" text
fields). This will ensure that documents with a long field with no
match (say description) will not "hurt" a title match.

Remove dead code for relevancy (trie stuff)

Fix bytarget requests being stopped (bug #3087)

Context global activeClients is set to 1 when a search is initiated
to ensure that if bytarget is executed it will be continued if
no response has been returned which would set activeClients (show,
stat).

Update test result for new mergekey (marcmap)

marcmap mergekey missed author.

Test return error if curl is not found

Update test results for diagnostic code

Diagnostic member was not set on connection error. Fixed

New setting: pz:pqf_strftime

This setting does all what pqf_prefix does but more. It uses strftime
conversions and reserves %% for the original PQF.

Add test for custom attribute (description@tag)

Preserve pz:metadata attributes

Pazpar2 now preserves pz:metadata attributes for non-merged
elements. This allows custom attributes to be passed through
to a user interface from records.

Const value for record_metadata_init

Fix double xmlFree - occurred for XSLT failure

Fix Host header for SRU/SRW - bug #3069

Fix update settings for wildcard zurls

Refactor database code

Filter handling now in database.c.

Addd test case for per-session setting

Sessions may be added per-session.

Settings system refactoring which allows settings to be defined
per-session (session_database and database).

Use PAZPAR2_USE_VALGRIND for test

If PAZPAR2_USE_VALGRIND=true, valgrind will be used for a test, eg
PAZPAR2_USE_VALGRIND=true ./test_http.sh .

Test case for setting overrides

Settings, bytarget + db out-of-range check

Command bytarget with argument settings=1 will show settings
per target.. This is to be able to verify correct settings and
be able to test that they are correct. The database settings
array size is now also stored..  Problems with database settings
array is that if not carefull it will be too small (smaller
than dictionary per-service in settings).

Fix nasty bug of overrides not working

Deal with relevance values round-off case

Sometimes it takes 2 sec for Pazpar2 to stop

Make reclist sorting stable

Make reclist sorting stable by comparing mergekey for records if
relevance/title or other sorting criteria all match. This is merely
to ensure that our regressions tests works (reproducible output).

Dont include start,number for show tests

Reformat

Fix type of mergekey

Update to host website

Version 1.2.2

Describe filter,maxrecs,startrecs

Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

Operator for pz:recordfilter is ~ (tilde).

The operator used to be = (equals), but since pz:recordfilter only
does substring match it seems more natural to harmonize with the
filter semantics (which has ~ for substring, = for string match).

Describe pz:recordfilter

Reformat

Set ZOOM option start always for 0-case.

For maxrecs=0 or maxrecs omitted, set ZOOM option "start".

Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

New optional argument, startrecs, for cmd=search

Enable apdulog for test server

Added two new fields

856$i gets into electronic-format-instruction
856$q gets into electronic-fortmat-type
Needed for LOT

New optional argument, maxrecs, for cmd=search

Make Pazpar2 work on Libxml2 2.4

Use curl for tests. No wget.

Search for curl in PATH and run test if present. wget is no longer used -
because it does not return "empty" result if HTTP server returns error
(e.g 417) - and because wget on older systems don't work with Pazpar2
at all.

Add test for pz:maxrecs

Adjust presentChunk for low value of pz:maxrecs

Set presentChunk to pz:maxrecs if that is lower than 20 (default value
of presentChunk).

Merge branch 'reclist_max_recs'

Fix dump_records for cluster==0

Fixed size hash for some structures.

Fixed size hash lists for termlists, reclists.. Remove global variable
parameters.toget.

Update sample cclmap for SRU test server

The cclmap settings now use the string use-attribute which is the
name of the CCL search field. This config uses cql_transform_rpn2cql
without the need for pqf.properties. See also bug #2978.

Log more for PQF to CQL conversion

Preserve order for insertion in reclist

Preserve for reclist insertion so that tests give same result.
Before this commit, results were correct but sorting would be
different for identical sortkeys (unstable sort).

Reclists work.

Remove unused code

Refactor: hide reclist structure

Substring for all setting types.

Change match_criterion so that substring (~) match uses strstr
always. The equal/string (=) uses match_zurl magic and strcmp as
before. This also ensure that v ptr is always set at end of routine
to prevent undefined behavior.

Two searches with filter args

Simplify again

Update test for other filter parsing

parse_filter: spelling and more readable

Fix filters parsing

Fix the filter parsing so that equal name=value is working again.
In parse_filter, the eq would be set to NULL after finding '='.

Update for relevence element in results

Added check for no transform steps

Merge branch 'master' of ssh://git/home/git/pub/pazpar2

Added relevance to return rec

Share similar XSLTs within session.

XSLTs + MARC maps are cached within a session so we don't re-parse
them over and over again. Even for a session with a single search
there's much to be gained because many targets use the same
transformation.

record_to_xml, normalize_record static

Other behavior misconfigured targets bug #2242

Pazpar2 will no longer return errors for individual targets .. such
as unknown stylesheets.. It will still be reported in the Pazpar2 log.
If all targets cannot be configured, it will return 'No targets'.

Factor out record normalization

Mergekey changes - order + required/optional.

The metadata attribute 'mergekey' now takes one of three values 'no',
'required', 'optional' .  And the resulting mergekey from metadata
is now ordered in the same way as metadata in the service definition.
Older Pazpar2 version use the order in which metadata appeared in a
record instance.

Revert -V desc to be correct

Extra parantheses to make GCC happy

Show option -v in usage

Merge branch 'master' of ssh://git.indexdata.com/home/git/pub/pazpar2

Log level may be set (option -v)

Substring matching for target selectiion.

Version 1.2.1