libdaemon: Use select to yield CPU on a blocked read or write.

test: Update brick-shelltest, adding timestamps to logs.

NIX: Use the new --heartbeat option on lvm2-testsuite.

test: Package up the test runner in a reusable C++ "brick".

NIX: Pass --fatal-timeouts to the testsuite.

test: Implement --fatal-timeouts to allow a timely VM restart.

test: Make the runner's heartbeat more reliable.

test: Disable lvmetad logging in lvconvert-{mirror,raid}*.

NIX: Re-work VM monitoring.

NIX: Add Fedora 20 jobs.

NIX: Existence of results list no longer indicates that the suite has finished.

NIX: Drop -h from rpm invocations as it messes up logs.

NIX: Use nixpkgs kernel for building, distro kernel for testing.

NIX: Adapt to the append-based test journal.

NIX: Implement a smarter VM monitoring loop.

NIX: Use --batch mode for running the testsuite.

NIX: Refactor around the new test runner.

- The RPM build and the tests are now executed in separate VMs.
- Run the testsuite by using the new lvm2-testsuite RPM.
- The VM running the tests is restarted from the outside if it hangs, and the
  runner keeps a journal to avoid running a bad test ad infinitum.
- TODO: lcov reports and more intelligent VM rebooting (track the journal)

spec: Add an (optional) lvm2-testsuite subpackage.

test: Implement --only option to runner.

test: Fix loading of an append-mode journal.

test: Add a missing copyright/licence notice to journal.h.

test: Fix a precedence bug in the runner.

test: Use append for journal maintenance instead of rename.

test: Implement specialised --batch output style w/ rusage stats.

test: Add time/rusage formatting to the runner.

test: Print a heartbeat file (every 20s) in the runner.

test: Avoid sleeps in the runner monitoring loop.

test: Run in /tmp if LVM_TEST_DIR is unset.

test: Rename the --quiet option to --batch.

test: Targets and sources can't have the same name if builddir == srcdir.

test: Run the testcases chdir'd into --testdir.

test: Improve IO handling in the runner.

test: Improve tracking of silence (stuck testcases) in the runner.

test: Make the runner's journal more reliable.

test: Implement flavours in the runner.

test: Fix handling of envvars in the runner.

test: Makefile updates.

- make check now uses the new test runner
- the testsuite can be installed (make -C test install)

test: Make it possible to run tests from an installed location.

test: Use the new flavour setup files in lib/inittest.

test: Fix IO sink destructors in the runner.

test: Add a buffer-backed IO sink (for interactive runs).

test: Implement a file-backed IO sink in the runner.

test: Make runner use bigger IO buffers, put them on stack.

test: Allow test devices backed by a permanent block device.

test: Add new flavour definition files.

test: Write a results/list at the end of a test run.

test: Clean up fds properly in the runner.

test: Implement journalling and --continue.

test: Split up the new runner into multiple files.

test: Use the new runner in make check.

test: Build the new test runner.

configure: Add libexecdir/datadir to make.tmpl.in.

configure: Allow C++ components.

test: Import first draft of a new test runner.

libdaemon: set CLOEXEC flag on systemd socket

all sockets opened by a daemon or handed over by systemd
have to have CLOEXEC flag set. Otherwise we get nasty
warnings about leaking descriptors in processes spawned by
daemon.

libdaemon: set CLOEXEC on client socket fd

post-release

pre-release

tests: add --force to sfdisk

Avoid udev sync troubles for now.

WHATS_NEW

For thin fix.

thin: fix upgrade regression

Older lvm2 tools where always providing linear mapping for thin pool.
Recent lvm2 version however support external usage of thin pool and
empty/unused pools are loaded without such external linear mapping.

So this patch covers 'upgrade' problem, where older tool has activated
thin-pool with 'linear' layer mapping, and newer tools didn't expected
such mapping to exist and were not able to deactivate such table.

So before checking for new layout in dm-table, check if there is not
an old one already there.

thin: report proper status for thin pool

After commit 158e9988768be344c0c97acdf52d1c020ab8c83e where we may
start to readlv_attr with a 'shared' ioctl call for a single lvs line
we where obtaing single status for thin pools.
However this is not properly reflecting lvm2 reality.

Correcting this by reading lv status from layered thin pool, but lv info
from non-layered (linear) mapped device which is maintained for proper
cluster locking.

cleanup: conf: auxiliary_device_status_source -> external_device_info_source

auxiliary_device_status_source was name used during development
of this feature, renamed later.

raid: check lock holding LV

Since raid could be used as stacked LV - check lock holding LV
for proper locking type for clustered usage.

WHATS_NEW

cleanup: add dev-ext-udev-constants.h with constants/names of the properties/values used from udev db

filters: add firmware RAID filter

Just like MD filtering that detects components of software RAID (md),
add detection for firmware RAID.

We're not adding any native code to detect this - there are lots of
firmware RAIDs out there which is just out of LVM scope. However,
with current changes with which we're able to get device info from
external sources (e.g. external_device_info_source="udev"), we can
do this easily if the external device status source has this kind
of information - which is the case of "udev" source where the results
of blkid scans are stored.

This detection should cover all firmware RAIDs that blkid can detect and
which are identified as:
  ID_FS_TYPE = {adaptec,ddf,hpt45x,hpt37x,isw,jmicron,lsi_mega,nvidia,promise_fasttrack,silicon_medley,via}_raid_member

filter-partitioned: use new 'udev' device status source to get partition status

Partitioned devices are marked in udev db as:
  ID_PART_TABLE="<partition table type name>"
and at the same time they are *not* marked with:
  ID_PART_ENTRY_DISK="<parent disk major:minor>"

Where partition table type name is dos/gpt/... But checking the presence
of this variable is enough for LVM here - it just needs to know whether
there's a partition table or not, not interested in the actual type.
The same applies for parent disk major:minor.

filter-usable: move check for pv_min_size from filter-partitioned to filter-usable and use new 'udev' external device info source for this check

The filter-partitioned code should contain only checks in "partition" domain.

The check for pv_min_size should actually be a part of filter-usable.
If the device size is less than pv_min_size, such device is not usable
as a PV so this check clearly belongs here logically.

With udev external info source, we can get device size via libudev's
sysfs reading interface and we can avoid opening the device this way
effectively.

filter-mpath: use new 'udev' external device info source to get mpath component status

mpath components are marked in udev db as:
  ID_FS_TYPE="mpath_member"
or
  DM_MULTIPATH_DEVICE_PATH="1"

(it depends on udev rule/blkid version used for handling mpath)

filter-md: use new 'udev' external device info source to get MD component status

MD components are marked in udev db as:
  ID_FS_TYPE="linux_raid_member"

conf: add devices/external_device_info_source to lvm.conf

filter-composite: add external device info hooks

Composite filter is a filter that can put several filters in one set.
This patch adds a switch when creating the composite filter which will
enable or disable external device info handles for all the filters
the composite filter encompasses.

We want to use this external device info for majority of the filters
which are in the "lvmetad filter chain" (or the respective part if
we're not using lvmetad).

Following patches will use the enabled external device handle in
concrete filters from the composite filter...

device: add infrastructure to support external device info

revert "cache: add pool deps for preload"

This reverts commit c3bb6d77dd6193755070c62c6f3adb93c1976f19.

Since we now have  for_each_sub_lv() scanning all sub LVs,
this commit could be safely reverted.

tests: test stacked raid

cleanup: indent tabs

lv_manip: add for_each_sub_lv_except_pools()

for_each_sub_lv() now scans in depth also pools, however for
rename we actually do want to skip pools.

So add a new for_each_sub_lv_except_pools() to be used by rename,
every other user of for_each_sub_lv() scans every sub LV with pools
included.

This is i.e. necessary for properly working preload of pools
that are using raid arrays.

WHATS_NEW: previous commit

properties: also recognize LVSINFO, LVSSTATUS and LVSINFOSTATUS as subtypes of LVS

LVSINFO, LVSSTATUS and LVSINFOSTATUS is the same as LVS, just with some
extra info/status decoration attached to it. Recognize this when looking
for properties for lvm2app. This fixes lvm_lv_get_property lvm2app call
for fields which already use LVS{INFO,STATUS,INFOSTATUS} - currently,
this is lv_attr field which was converted to LVSINFOSTATUS from
pure LVS type.

lvm2app: fix lvm_lv_get_attr regression causing unknown values

This is a regression from v115 where some of the fields/properties
were converted to using the common "struct lvinfo" and
"struct lv_seg_status" so we don't need to issue info and status
ioctl several times per one reported line. Not all fields are
converted yet, but one that *is* converted is the lv_attr field
with the lv_attr_dup counterpart used in lvm_lv_get_attr lvm2app fn.

These changes were introduced with e34b004422f0d51263e0d34f4064556cfc9148f6
and later - this patch introduced the "info_ok" field in the
lv_with_info_and_seg_status structure which encapsulates the lvinfo
and lv_seg_status struct.

For the lv_attr_dup, the lv_attr_dup code  missed the
assignment for the "info_ok" flag which saves the result of the
lv_info_with_seg_status call. Hence such info was marked
as unusable - unknown and it was returned as such via lvm_lv_get_attr
lvm2app fn.

cache: use writethrough cache_mode for older metadata

When cache_mode is undefined, the read of metadata will miss to
set a bit with mode and fails to process metadata on internal
error:

  Internal error: LV vg/lvol1 has uknown feature flags 0.

Fix it by setting it to writethrough mode.

raid: preload splitted LV only when active

Check splitted leg is active before preload.
(Since splitmirrors currently only does work active raid volumes
it's not a change for current code flow).

Minor optimization included - when already positively checked
for raid image don't check again for raid metadata.

cache: add pool deps for preload

for_each_sub_lv() normally does not put  pool_lv into deps.

So for now go around it in 'lv_preload()' and add explicit
call with pool.

TODO: think about a better way, we want pool_lv deps only in certain
moments, so maybe for_each_sub_lv() needs new arg for this.

thin: preserve chunksize with lvconvert

When repairing thin pool or swapping thin pool metadata,
preserve  chunk_size property and avoid to be automatically changed
later in the code to better match thin pool metadata size.

cleanup: use macro lv_is_visible()

raid: lock holder will skip visible raid LVs

RAID marks legs as VISIBLE with notion it's not longer
true raid leg - so skip tree scannig and take this LV
as top-level LV.

raid: fix raid image splitting

When raid leg is extracted, now the preload code handles this state
correctly and put proper new table entry into dm tree,
so the activation of extracted leg and removed metadata works
after commit.

raid: fix tree preload for splitting raid images

When raid is being splitted, extracted leg & metadata
is still floating in the table - and thus we need to
detect this case and properly preload their matching
table so consequent activation of extracted LVs properly
renames (and FREES) existing raid images, so ongoing
image name shifting will work.

devices: DASD doesn't need to be stackable.

devices: Do not support unpartitioned DASD.

lvm.conf: update error_when_full description

Relate it to the --errorwhenfull option.

lvmthin: update monitor and autoextend

and some more in data exhaustion

coverity: missing return value check

Reported by coverity for code added recently - _avoid_pvs_with_other_images_of_lv
which calls process_each_sub_lv and not checking return value.

lvmthin: update data space exhaustion

config: improve config validation to check if setting with string value can be empty.

For example, with dmeventd/executable set to "" which is not allowed for
this setting, the config validation now ends up with:

$ lvm dumpconfig --validate
  Configuration setting "dmeventd/executable" invalid. It cannot be set to an empty value.
  LVM configuration invalid.

This check for empty values for string config settings was not
done before (we only checked empty arrays, but not scalar strings).

post-release

pre-release

dmeventd: Reduce waitevent EINTR message severity.

libdevmapper: Improve incompatible version msg.