lvmlockd: enable lvcreate of new LV plus existing cache pool

In this command, lvcreate creates a new LV and then combines
it with an existing cache pool, producing a cache LV.  This
command was previously not allowed in in a shared VG.

tests: enable pvmove-restart with lvmlockd

tests: enable vg repair tests with lvmlockd

lvmlockd: enable repairing shared VG while reading it

When the lvmlockd lock is shared, upgrade it to ex
when repair (writing) is needed during vg_read.

Pass the lockd state through additional read-related
functions so the instances of repair scattered through
vg_read can be handled.

(Temporary solution until the ad hoc repairs can be
pulled out of vg_read into a top level, centralized
repair function.)

tests: add missing file

tests: process-each-duplicate-pvs update for lvmlockd

pvremove: skip lvmlockd locks for forced clearing

pvremove -ff to force clear a PV shouldn't care if
lvmlockd locks fail.

lvmlockd: fix vgimportclone of a shared VG

The new VG from the duplicate PV is imported
as a local VG.

tests: vgchange-usage update for lvmlockd

tests: vgcreate-usage update for lvmlockd

tests: enable lvmlockd for passing tests

lvmlockd: enable creation of cache pool with lvcreate

Previously, cache pools needed to be created with lvconvert.

lvmlockd: enable lvcreate of thin pool and thin lv in one command

Previously, thin pools and thin lvs need needed to be
created with separate commands, now the combined command
is permitted.

lvmlockd: enable mirror split and merge with dlm lock_type

config: revert to normal locking when no cluster

and suggest lvmlockd

lvmlockd: do not use an LV lock for some lvchange options

Some lvchange options can be used even if the LV is active.

tests: separate lvmlockd tests with or without lvmetad

lvmlockd: accept repeated global lock requests

It's not an error if a command requests the global lock
when it has already acquired it.  It shouldn't happen,
but there could be cases we've not found.

tests: some missed skip with lvmlockd

tests: fix skipping logic for lvmpolld and lvmlockd

scan: removed failed paths for devices

Drop a device path when the scan fails to open it.

radix-tree: fix some bugs in remove_prefix and iterate

These weren't working if the prefix key was part of a prefix_chain.

radix-tree: radix_tree_iterate()

radix-tree: radix_tree_remove_prefix()

radix-tree: call the value dtr when removing an entry.

Merge branch '2018-05-29-radix-tree-iterate' into 2018-05-23-radix-tree-remove

data-struct/radix-tree: pass the value dtr into create.

Rather than having to pass it into every method that removes items.

scan: refresh paths and retry open

If scanning fails to open any devices, refresh the
device paths in dev cache, and retry the opens.

format_text: Use versionsort to sort archive files

Ensure that vg_100000-* follows vg_99999-* so that the expiry logic
doesn't stop too early.

   https://bugzilla.redhat.com/1481085

Merge remote-tracking branch 'origin/master'

tests: improve usability on older systems

man: another missed typo for thin plugin

post-release

pre-release

release note: typos

release note: typo

release note: 2.02.178

tests: checking scanning correctness

tests: passthrough args with extend_filter_LVMTEST

Don't rebuild config twice.

tests: correcting symlink manipulation

Fix symlink and add 'verbose' pvs for a while for checking
scanning correctness.

tests: aux improve for mdadm support

Correcting some symlink handling.

man: make generate

man: fix cut and paste bug

Fixing missing 'META' in DMEVENTD_THIN_POOL_METADATA.

gitignore

radix_tree_t: knock out some debug

radix_tree: add remove method

Merge branch 'master' of git+ssh://sourceware.org/git/lvm2

filters: clarify some parts of md filter

Rename some functions to be consistent with the return values,
and add some comments about how it works.

WHATS_NEW: typo

scan: move warnings about duplicate devices

We have been warning about duplicate devices (and disabling lvmetad)
immediately when the dup was detected (during label_scan).  Move the
warnings (and the disabling) to happen later, after label_scan is
finished.

This lets us avoid an unwanted warning message about duplicates
in the special case were md components are eliminated during the
duplicate device resolution.

man vgexport: expand description

tests: disable symlink test

It's quite unclear what the test is meant to do - disable it just like
within python test.

tests: use 4K extent size

To work with for 4k backend devices.

lvmlockd: suppress error messages related to lvmetad

Log lvmetad related messages as debug, not as errors,
when using lvmlockd without lvmetad.

fullreport: fix with lvmetad and only orphan PVs are visible

The report uses process_each_vg() which populates lvmcache
based on a VG list from lvmetad.  If there are no VGs,
but only orphan PVs, the orphans are not shown.  Add an
explicit call to populate lvmcache with PV info from lvmetad.

fix id_write_format on non-uuid string

orphan vgs using the vgname "#orphans" as the vgid,
and valgrind complains about calling id_write_format
on that invalid uuid.

python: use // for integer division

tests: pick either python2 or python3 .so

Use matching PYTHON library implementation.

tests; make sure python_lvm_unit.py is executable

python: use python3 paths directly

Do not use /usr/bin/env for path of python3 as this is seen
as 'unwanted' and should be avoided.

build: set clean vars earlier

For better cleaning of test dirs.

liblvm2app: add a couple tests

trivial sanity-check programs using liblvm2app

liblvm2app: fix valgrind memory warning

tests: fix kernal_at_least argument in aux.sh

bcache: Don't call sysconf for every io

Merge branch 'master' of git://sourceware.org/git/lvm2

scripts/code-stats.rb: count files better, handle bad utf8

bcache: don't use PAGE_SIZE compile const

PAGE_SIZE is not a compile time constant. Use sysconf instead like
elsewhere in the code.

Signed-off-by: Alex Bennée <alex.bennee@linaro.org>

cleanup: fix grammar in output - less then -> less than

This minor patch fixes grammar in a few messages which get
printed to users. It also fixes the same grammar mistake in
several comments.

Signed-off-by: Rick Elrod <relrod@redhat.com>
--

scan: fix missing close in lib

lib was using dev_test_excl which wasn't closing the device.
Switch code to new io layer with excl open.
Also use exclusive open in some other places.

scripts: add a little scripts to show git history for the last 2 weeks.

unit-tests: remove a couple of debug printfs

Merge branch 'master' of git://sourceware.org/git/lvm2

bcache: nr_ios_pending wasn't being incremented

... but it was being decremented on completion.  Which meant
it wrapped, and no prefetches were ever issued after the
first completion.

doc: add some performance info

scan: use up to 1024 max bcache blocks

Create bcache with one block per device that
will be scanned up to 1024 max blocks.

lvmapp: do not unlock not locked VGs

After recent changes this seems to give some help, explore more...

tests: better check for python libpath

Find also python3 lvm.so name.

And ATM just run a single test, otherwise we get too many cores.

python: specify libdm path for linking

tests: aux fixes

Properly check for kernel version.
Also detect sysfs throttling support.

tests: time limit waiting on lvmetad kill

tests: drop junk

tests: move into generated file

Since python path is evaluated and we cannot use anymore /usr/bin/env
switch to generated file.

build: configure detect libaio

No point to start building lvm without this header file.

Although there could be 'some point' in supporting standalone build
of 'just' libdm  where the libaio might be avoided.

TODO: think about configure option for building libdm only.

WHATS_NEW: updates

conf: update conf

Matching patch 2eba7c77557655cfbd19f191ec5d1ad1025897b3

tests: fix size of COW

Needs to be changed to match 4K extent_size.

tests: dont try to use DAX based brd device

Unfortunatelly on kernels <4.16 lvm2 can't user brd ramdisks
for backend device as number of test is failing with this kernel
message:

device-mapper: ioctl: can't change device type after initial table load.

caused by DAX request-based handling, and lvm2 tries to replace device
with backend 'error' bio-based device and such table reload is being
rejected.

So ATM keep ramdisk only on most recent kernel to experiment a bit,
for older machines just stay safe and keep old slower loop backend.

clean-up: example.conf.in typo

lvmcache: fix loop freeing infos

valgrind was concerned about loop through vginfo->infos,
so grab info from dev.

scan: add some missing frees

some objects had been moved out of mem pools.

tests: old systems do not have even throttling

When even throttling is not available, skip or use  should
with particular test piece.

tests: swith to mkstemp

As mkostemp is only on newer systems, switch to more old version
which effectively does exactly the same thing for given list of
open flags.

tests: start to use 4k mkfs

While newer system can detect need for 4K mkfs, on older test machines
running test suite over 4k is reporting problems.
Some more generic solution is needed thought.

tests: fix check sysfs

Commit 810f856c2490eb1d5db858f26a26621c4a3477e0 missed to move
assign of P after setting maj & min.

tests: do not try to create 1K extents

tests: restore functionality

Forgotten revert of tracing patch. Restoring previous functinality.

tests: aux detecs supported segments

Replace previous compilation detection of present supported segtypes
with runtime check.

build: lcov reporting for unit tests

List also lcov for processed unit tests.

build: install unit-test