man: reference -S/--select in {vg,lv,pv}change, {vg,lv}remove, {vg,lv,pv}display and vg{import,export} man pages

toollib: select: issue an error message for failed VG/LV/PV selection

man: dumpconfig: mention LVM_COMMAND_PROFILE env var and add more references to --mergedconfig option

The LVM_COMMAND_PROFILE env var is new - mention it in dumpconfig's
man page.

Also, dumpconfig always displays the top of the config cascade.
To display all the config found in the cascade merged (just like
it's used during LVM command processing), --mergedconfig option
must be used - this one's already described in that man page,
just make sure it's clear and add reference for this option also
in --profile/--commandprofile/--metadataprofile description.

NIX: Drop Fedora 16 builds.

NIX: Adjust lists of extra RPMs to install.

test: Fix harness not building on RHEL5

select: initialize selection handle for process_each_* fns with initial report type

This is a followup patch for previous patchset that enables selection in
process_each_* fns to fix an issue where field prefixes are not
automatically used for fields in selection criteria.

Use initial report type that matches the intention of each process_each_* functions:
- _process_pvs_in_vg - PVS
- process_each_vg - VGS
- process_each_lv and process_each_lv_in_vg - LVS

This is not normally needed for the selection handle init, BUT we would
miss the field prefix matching, e.g.

lvchange -ay -S 'name=lvol0'

The "name" above would not work if we didn't initialize reporting with
the LVS type at its start. If we pass proper init type, reporting code
can deduce the prefix automatically ("lv_name" in this case).

This report type is then changed further based on what selection criteria we
have. When doing pure selection, not report output, the final report type
is purely based on combination of this initial report type and report types
of the fields used in selection criteria.

tools: allow -S|--select for vgexport and vgimport

tools: allow -S|--select for vgdisplay, lvdisplay and pvdisplay without -C

We already allowed -S|--select with {vg,lv,pv}display -C (which
was then equal to {vg,lv,pv}s command. Since we support selection
in toolib now, we can support -S also without using -C in *display
commands now.

tools: allow -S|--select for vgremove and lvremove

tools: allow -S|--select for vgchange, lvchange and pvchange

pvchange: use processing_handle when processing items for pvchange

pvchange is an exception that does not use toollib yet for iterating
over the list of PVs (process_each_pv) so intialize the
processing_handle and use just like it's used in toollib.

report: implement report_for_selection

We have 3 input report types:
  - LVS (representing "_select_match_lv")
  - VGS (representing "_select_match_vg")
  - PVS (representing "_select_match_pv")

The input report type is saved in struct selection_handle's "orig_report_type"
 variable.

However, users can use any combination of fields of different report types in
selection criteria - the resulting report type can thus differ. The struct
selection_handle's "report_type" variable stores this resulting report type.

The resulting report_type can end up as one of:
  - LVS
  - VGS
  - PVS
  - SEGS
  - PVSEGS

This patch adds logic to report_for_selection based on (sensible) combination
of orig_report_type and report_type and calls appropriate reporting functions
or iterates over multiple items that need reporting to determine the selection
result.

report: add report_for_selection and use it in select_match_{pv,vg,lv}

The report_for_selection does the actual "reporting for selection only".
The selection status will be saved in struct selection_handle's "selected"
variable.

refactor: report: factor out code to determine final report type

The code to determine final report type based on combination of input
report type (determined from fields used for reporting to output and selection)
can be reused for pure reporting for selection - factor out this code into
_get_final_report_type function.

toollib: select the whole structure if at least one of its items is selected

This applies to:
  - process_each_lv_in_vg - the VG is selected only if at least one of its LVs is selected
  - process_each_segment_in_lv - the LV is selected only if at least one of its LV segments is selected
  - process_each_pv_in_vg - the VG is selected only if at least one of its PVs is selected
  - process_each_segment_in_pv - the PV is selected only if at least one of its PV segments is selected

So this patch causes the selection result to be properly propagated up to callers.

toollib: initialize handles (including reporting for selection) for _select_match_* used in process_each_* fns

Call _init_processing_handle, _init_selection_handle and
_destroy_processing_handle in process_each_* and related functions to
set up and destroy handles used while processing items.

toollib: add init_processing_handle, init_selection_handle and destroy_processing_handle helper functions

The init_processing_handle, init_selection_handle and
destroy_processing_handle are helper functions that allocate and
initialize the handles used when processing items in process_each_*
and related functions.

toollib: pass struct processing_handle to _select_match_* functions

The "struct processing_handle" contains handles to drive the selection/matching
so pass it to the _select_match_* functions which are entry points to the
selection mechanism used in process_each_* and related functions.

This is revised and edited version of former Dave Teigland's patch which
provided starting point for all the select support in process_each_* fns.

report: add report_init_for_selection fn and modify report_object to support reporting for selection only

The new "report_init_for_selection" is just a wrapper over
dm_report_init_with_selection that initializes reporting for selection
only. This means we're not going to do the actual reporting to output
for display and as such we intialize reporting as if no fields are reported
or sorted. The only fields "reported" are taken from the selection criteria
string and all such fields are marked as hidden automatically (FLD_HIDDEN flag).
These fields are used solely for selection criteria matching.

Also, modify existing report_object function that was used for reporting to
output for display. Now, it can either cause reporting to output or reporting
for selection only. The selection result is stored in struct selection_handle's
"selected" variable which can be handled further by any report_object caller.

toollib: replace void *handle with struct processing_handle for use in processing functions (process_each_*/process_single_* and related)

This patch replaces "void *handle" with "struct processing_handle *handle"
in process_each_*, process_single_* and related functions.

The struct processing_handle consists of two handles inside now:

  - the "struct selection_handle *selection_handle" used for
    applying selection criteria while processing process_each_*,
    process_single_* and related functions (patches using this
    logic will follow)

  - the "void* custom_handle" (this is actually the original handle
    used before this patch - a pointer to custom data passed into
    process_each_*, process_single_* and related functions).

cleanup: make report type condition consistent with the rest of the code

It's just more readable this way (each condition resulting in a certain
report type is always on one line), just like it's used elsewhere in the
code.

toollib: prepare select_match_{pv,vg,lv} hooks

These hooks will check currently processed PV/VG/LV with current selection
criteria and the processing continues only if there's a match.

libdm: report: add dm_report_object_is_selected

The new dm_report_object_is_selected fn makes it possible to opt whether the
object reported should be displayed on output or not. Also, in addition to
that, it makes it possible to save the result of selection (either 0 or 1).

So dm_report_object_is_selected is simply  more general form of object
reporting fn - combinations now allow for:

  dm_report_object_is_selected(rh, object, 1, NULL):
  This is exactly the original dm_report_object fn and it's fully equal
  to it.

  dm_report_object_is_selected(rh, object, 0, selected):
  Do not display the result on output, but save info whether the object
  is selected or not in 'selected' variable.

  dm_report_object_is_selected(rh, object, 1, selected):
  Display the result on output (if it passes selection criteria) and save
  whether the object is selected or not in 'selected' variable.

  dm_report_object(rh, object, 0, NULL):
  This combination is not allowed - it will end up with internal error.
  We're either interested in selection status or we want to display the
  result on output or both, but never nothing of the two.

test: Fix a typo in shell/pvmove-restart.sh.

lvm: recognize LVM_COMMAND_PROFILE env var for default command profile to use in LVM commands

Once LVM_COMMAND_PROFILE environment variable is specified, the profile
referenced is used just like it was specified using "<lvm command> --commandprofile".
If both --commandprofile cmd line option and LVM_COMMAND_PROFILE env
var is used, the --commandprofile cmd line option gets preference.

reporter: properly check for _do_info_and_status return value and free the mempool if created within the fn

configure: Fix a warning about test/Makefile.in.

NIX: Request {fedora,centos}-release packages explicitly.

NIX: Adjust install_rpms (kernel rpm is now required).

NIX: We need to install lcov for ./configure now as well.

NIX: Move corosynclib-devel & valgrind-devel out of common.

NIX: Allow adding/overriding test configurations.

NIX: Set ulimit -c to unlimited, to get backtraces in logs.

NIX: Add a CentOS 7.0 64b build.

test: Fix a segfault in the test runner.

test: It is not an error for a test daemon to exit before teardown.

test: Remove spurious set -x in lvm-wrapper.

test: Properly detect warnings from testcases.

test: Only force an IO sync when the testcase has finished.

test: Allow a longer timeout for lvextend-snapshot-dmeventd.

test: Make dmsetup remove more robust in pvmove-restart.

test: Make killing local (test) daemons more robust.

test: Disable lvmetad debug log on another bunch of tests.

test: Call $VALGRIND directly in lvm-wrapper.

NIX: Add valgrind-devel to the build environment.

memlock: Do not check memory balance if RUNNING_ON_VALGRIND.

configure: Look for valgrind.h independently of VALGRIND_POOLS.

test: Add support for running LVM commands in tests through strace.

test: Make lvm-wrapper available in the installed testsuite, too.

NIX: Install valgrind, gdb and strace in the test environment.

NIX: Make timeout and test envvars configurable via --arg.

test: Fix prepare_scsi_debug_dev.

test: Avoid passing -c to flock.

test: Re-try with loopback if a backing device is too small.

NIX: Detect that the VM booted up more directly.

NIX: Avoid a spurious failure when all tests pass.

test: Fix failures due to undefined abs_top_builddir.

test: Avoid running 'dmsetup remove' with no devices.

test: Fix 100%FREE RAID tests since test device sizes changed slightly.

test: Update brick-shelltest (configurable timeout, better banner, exit code).

NIX: Mark builds with failed tests as such.

test: Do not rely on dev/mapper/* nodes in pvmove-restart.sh.

test: Fix implementation of check targets with new flavour system.

NIX: Update path to /xchg (was /tmp/xchg with older nixpkgs).

NIX: Do not fail aggregation when a sub-job fails to produce output.

NIX: Run each test flavour as a separate derivation.

NIX: Add --kmsg to lvm2-testsuite invocations.

test: Update brick-shelltest.h.

NIX: Keep the udev log out of tmpfs.

NIX: Some kernels need ide/ata modules (i.e. no builtin ata).

NIX: Use IDE drive emulation instead of virtio.

libdaemon: Use select to yield CPU on a blocked read or write.

test: Update brick-shelltest, adding timestamps to logs.

NIX: Use the new --heartbeat option on lvm2-testsuite.

test: Package up the test runner in a reusable C++ "brick".

NIX: Pass --fatal-timeouts to the testsuite.

test: Implement --fatal-timeouts to allow a timely VM restart.

test: Make the runner's heartbeat more reliable.

test: Disable lvmetad logging in lvconvert-{mirror,raid}*.

NIX: Re-work VM monitoring.

NIX: Add Fedora 20 jobs.

NIX: Existence of results list no longer indicates that the suite has finished.

NIX: Drop -h from rpm invocations as it messes up logs.

NIX: Use nixpkgs kernel for building, distro kernel for testing.

NIX: Adapt to the append-based test journal.

NIX: Implement a smarter VM monitoring loop.

NIX: Use --batch mode for running the testsuite.

NIX: Refactor around the new test runner.

- The RPM build and the tests are now executed in separate VMs.
- Run the testsuite by using the new lvm2-testsuite RPM.
- The VM running the tests is restarted from the outside if it hangs, and the
  runner keeps a journal to avoid running a bad test ad infinitum.
- TODO: lcov reports and more intelligent VM rebooting (track the journal)

spec: Add an (optional) lvm2-testsuite subpackage.

test: Implement --only option to runner.

test: Fix loading of an append-mode journal.

test: Add a missing copyright/licence notice to journal.h.

test: Fix a precedence bug in the runner.

test: Use append for journal maintenance instead of rename.

test: Implement specialised --batch output style w/ rusage stats.

test: Add time/rusage formatting to the runner.

test: Print a heartbeat file (every 20s) in the runner.

test: Avoid sleeps in the runner monitoring loop.

test: Run in /tmp if LVM_TEST_DIR is unset.