BZ998595, systemtap.spec fix disagreement between %file attrs and explicit chmods

Make pr13158.exp test results less random.

* testsuite/systemtap.base/pr13158.exp: Make test result less random, by
  making sure the first copy of the module is loaded before trying to load
  the second copy.

Make the 'systemtap-testsuite' rpm require 'nc' for ipaddr.exp.

Move %changelog pruning into diff check block

If there is no spec diff, then there's no need to even check for a
difference in the %changelog section.  Furthermore we should check
that there is even a %changelog section in the diff and only attempt
to prune accordingly

scripts/spin-rawhide - move pruning into file check statements

Tweak spin-rawhide script to stop overwriting the changelog

scripts/spin-rawhide - when merging an upstream diff, sometimes the
       changelog can be overwritten, which shouldn't happen
       trim the changelog diffs and their context lines

Testcase and documentation for minidebuginfo

man/warning::debuginfo.7stap - explain basics of minidebuginfo, note
       that it requires elfutils 0.156 and add
       a pointer to the fedora feature page
testsuite/systemtap.base/ files:
create-minidebuginfo.sh - script to create minidebuginfo
minidebug.c - simple c program with multiple function calls
minidebuginfo.exp  - compile minidebug.c and generate minidebuginfo,
  test that the functions are still listed with
  probefunc()
minidebuginfo.stp - script to probe process.function("*") and list
  probefunc()'s

Simplify the testsuite tests for uprobes and utrace

- Searching /proc/kallsyms is now standardized to grep_kallsyms.
- utrace and uprobes tests are broken into separate procs for the
  different variants, then a unified proc combines variants.

Fix PR15625 by making unprivileged_embedded_C.exp ignore stub functions.

* testsuite/systemtap.unprivileged/unprivileged_embedded_C.exp: Ignore
  stub functions in registers.stp.

Fix PR15881 by fixing unprivileged_myproc.exp failures.

* testsuite/systemtap.unprivileged/unprivileged_myproc.exp: KFAIL
  '.absolute' and '.absolute.return' probe tests when using inode uprobes,
  since inode uprobes don't support those probe types. For
  'library.plt.statement(NUMBER)' probe tests, use the address of the
  library function, instead of the address of the main program
  function. With the last problem fixed, remove the XFAILS for those probe
  tests (an update to PR13373).

Avoid problems for unprivileged users when getting MAXSTRINGLEN value.

* tapset/macros.stpm: New '@MAXSTRINGLEN' macro.
* tapset/linux/context-caller.stp: To avoid problems for unprivileged
  users, use new '@MAXSTRINGLEN' macro instead of '%{ MAXSTRINGLEN %}'.
* tapset/linux/context-symbols.stp: Ditto.
* tapset/linux/ucontext-symbols.stp: Ditto.
* tapset/linux/ucontext.stp: Ditto.

Actually add the i386 portions of the spec file fix

systemtap.spec - add the i386 portions of the arch symlink fix.

Fix BZ999585 where spec file symlinks don't match java directories

systemtap.spec - add clauses to catch cases (i386, ppc64) where the
         java directory we want to symlink to doesn't actually
 match the basename type

Fix PR15876 by making the ptridx.exp testcase more robust.

* testsuite/systemtap.base/ptridx.exp: Set up the timeout value to be 60
  seconds and kills stap if we do have a timeout.

PR15074 update: Relaxed pthread_stacks.exp debuginfo check.

* testsuite/systemtap.base/pthread_stacks.exp: Relaxed debuginfo check a
  bit, since we only need "native" glibc debuginfo installed on multilib
  systems like x86_64.

Fix PR15875 by making sure 'strace' is on a system before running ptrace.exp.

* testsuite/systemtap.base/ptrace.exp: If 'strace' doesn't exist on the
  system, quit early.
* systemtap.spec: Make 'systemtap-testsuite' require 'strace', since
  ptrace.exp needs it.

Fix PR15874 by making systemtap.base/onoffprobe.exp more robust.

* testsuite/systemtap.base/onoffprobe.exp: Make more robust.
* testsuite/systemtap.base/onoffprobe.stp: Call exit() when finished.

Few typos in langref and tutorial

Fix up 3 XPASS results in the semko.exp testcase.

* testsuite/systemtap.pass1-4/semko.exp: Mark the utrace.stp test as
  "untested" when using dyninst, since dyninst contains utrace-like
  functionality.
* testsuite/semko/badregex01.stp: Actually add an invalid regexp to the
  testcase.

Fix PR15866 by updating the signal.pending/signal.pending.return probe aliases.

* tapset/linux/signal.stp: Make the 'signal.pending' and
  'signal.pending.return' probe aliases use 'sys_rt_sigpending' and
  'compat_sys_rt_sigpending' if 'do_sigpending' is an inlined function.

Fixed PR15865 by updating nfs_proc.stp to handle removal of NFSv2.

* tapset/linux/nfs_proc.stp: Handle removal of NFSv2 functions from the
  kernel. Aliased all NFSv2 functions to 'never' if not present.

strace example: add a note re. PR6762

The reminder was motivated by coming across Jan Kratoch's much more
elaborate strace-in-systemtap prototype, which solves this problem:
http://git.jankratochvil.net/?p=staptrace.git

obsolete regex tests: drop re2c-migrate and old systemtap.base/regex.*

regex tests: add as pure systemtap script

While at it, introduce simple runok.exp test family.

new sample script: strace.stp; you'll never guess what it does

Update systemtap.examples/process/threadstacks.stp for rawhide.

* testsuite/systemtap.examples/process/threadstacks.stp: Updated for glibc
  2.17 changes to how pthread stacks are allocated.

Fix PR15805 by allocating map memory with vmalloc() instead of kmalloc().

* runtime/linux/map_runtime.h (_stp_map_del): Call _stp_vfree() to free
  all the node memory.
  (_stp_map_vzalloc): Renamed from _stp_map_kzalloc() and reworked to use
  vmalloc-based allocations instead of kmalloc-based allocations.
  (_stp_map_init): Allocate all the node memory in one big chunk using
  vmalloc(). Change all other allocations to use vmalloc().
* runtime/map.h: Add 'node_mem' variable to 'map_root' structure
  definition.
* runtime/linux/alloc.c (_stp_vzalloc): New function.
  (_stp_vzalloc_node): Ditto.

belated spring cleaning: ditch spurious TODOXXX

belated spring cleaning: imitate semantic_error chaining for macro feature

belated spring cleaning: clarify error behavior for macro feature

belated spring cleaning: missing i18n for macro feature

Minor update for publican bug workaound in systemtap.spec.

* systemtap.spec: Move the BZ920216 workaround into the 'with_publican'
  section, since that is what it is related to.

PR15757 Fix truncated 32bit backtraces on x86_64

runtime/unwind.c: Fix the variable size to be incremented by in the
  eh_frame and table_enc.

For xen kernels, handle cpufreq_register_notifier() failure.

* runtime/time.c (_stp_kill_time): If cpufreq_register_notifier()
  suceeded, unregister the notifier.
  (_stp_init_time): On xen kernels, cpufreq_register_notifier() can
  fail. Just ignore the error.

Make stap-stop-server wait (for up to 10 seconds) for the server to quit.

Fix reported tcl testsuite errors.

* testsuite/systemtap.base/implicitptr.exp: Fix misnamed variable.
* testsuite/systemtap.base/sdt_misc.exp: Change "/usr/bin/kill" to
  "/bin/kill" (for Debian systems).

belated NEWS entry re. user_string_quoted() and friends

Made systemtap.server/server.exp handle inode uprobes properly.

* testsuite/systemtap.server/server.exp: Handle systems with inode uprobes
  properly: don't try to use or look for uprobes.ko.

Made systemtap.server/server_locale.exp more robust.

* testsuite/systemtap.server/server_locale.exp: Updated tests for new
  warning/error messages. For French tests, made them more permissive - if
  we get anything in French, the test passes. This was done because we may
  not have a translation of a particular message.

PR15803: netfilter: tolerate absent context when collecting $verdict

It is possible to skip from the prologue epilogue through to the
prologue for reasons such as shortage of available stack space.
In these cases, the context* c; pointer could remain NULL, which
is considered generally inappropriate to dereference.

* tapset-netfilter.cxx (epilogue): Check for NULL c before extracting
  $verdict.

Made systemtap.server/client.exp more robust.

* testsuite/systemtap.server/client.exp: When this test is run right after
  another server test, sometimes the server from the previous test hasn't
  quite died. So, when getting the initial list of online servers, make
  sure we get the same result twice. Simplify code by using new
  'array_compare' procedure.

PR15793: numa addr_to_node(): protect __pa() call with virt_addr_valid()

Update test case to tolerate exception that may now be thrown by the
tapset function.

session.cxx: make string params const

And change colorize() to take in a token pointer rather than a ref. This
is more in line with other funcs that take in a token and also ensures
that we don't have undefined behaviour if we're called with a
dereferenced NULL pointer (which coverity complained about).

elaborate.cxx -- placate coverity (CTOR_DTOR_LEAK)

stapregex -- placate the gods of coverity (RESOURCE_LEAK)

stapregex -- placate the gods of coverity (INVALIDATE_ITERATOR)

stapregex -- placate the gods of coverity (UNINIT_CTOR)

session.cxx: add assert statement for benchmark opts

staprun/common.c: add assert statement for -C, -S, -r

systemtap.spec: prefer with_systemd on recent OS

version bump for 2.4 development

Revert "testsuite: set -B CONFIG_DEBUG_INFO=y in testsuite rc to help debug crashes"

This reverts commit 6bb6bf29ae.....
                and f1d4f4313.....

Revert "PR15782 cont'd: PR_Read_Complete should initialize vars more"

This reverts commit 59331ea0de1f10d0694b3389e0b4710db4da0798.

PR15782 cont'd: PR_Read_Complete should initialize vars more

Use a clearer looping/accumulation structure.

Implement PR_Read_Complete() in nsscommon.cxx.

A wrapper for PR_Read which ensures that all of the requested data
is read.
Updates callers of PR_Read() as appropriate.

regex: warning cleanup as per gcc 3.4.6 on i686

stapregex rewrite: appropriate NEWS items

stapregex rewrite: regenerate autoconf

stapregex rewrite -- prepare for rebase onto main branch for 2.3 release

stapregex REWRITE -- fixes for 100% (existing, non-subexpression) testsuite pass

stapregex REWRITE -- further bug fixes for engine (2 testsuite errors remaining)

stapregex REWRITE -- further bug fixes (esp. dealing with infinite loops)

stapregex REWRITE -- rudimentary emit implementation (no tags yet)

stapregex REWRITE -- bug fix progress (fix deallocation with ^, fix duplicate-state-check, ditch debug output)

stapregex REWRITE -- bug fix progress (failure alternative, ^ anchoring)

stapregex REWRITE -- bug fix progress (range creation off-by-one error)

stapregex REWRITE -- bug fix progress (get rid of infinite looping)

stapregex REWRITE -- bug fix progress in existing code (up to infinite-loop error)

stapregex REWRITE - rig test suite to work with new code

stapregex REWRITE PROGRESS -- Delete irrelevant pre-rewrite code

stapregex REWRITE PROGRESS: ADD PARTIAL stapregex-dfa.cxx & related (missing emit data, some tag-reordering stuff)

oops: add stapregex-tree.cxx mention to README.stapregex

stapregex REWRITE PROGRESS: ADD stapregex-tree.cxx & related

stapregex: fix guard clauses in stapregex.cxx for nontagged and standalone (testsuite) cases

stapregex: ADD /* pragma:tagged_dfa */ to make non-subexpression-using programs a bit more efficient

stapregex REWRITE PROGRESS: ADD stapregex.cxx & related

stapregex REWRITE PROGRESS: character class handling in stapregex-parse.cxx

stapregex REWRITE PROGRESS: ADD stapregex-parse.cxx & related

fix stapregex rewrite oops: vimline in translator-output.cxx

stapregex REWRITE PROGRESS: ADD stapregex.h

stapregex cleanup: check miscellaneous TODOXXX

Add dyninst kfail in systemtap.pass1-4/transok.exp.

Added "semok" test improvements.

* testsuite/systemtap.pass1-4/semok.exp (dyninst_kfails): Kfail more
  tests.
* testsuite/semok/kretprobe-data.stp: Update for newer kernels.

Update dyninst kfails in systemtap.pass1-4/parseok.exp.

Setup more kfails in buildok-dyninst.exp.

Added "buildok" test improvements.

* testsuite/systemtap.pass1-4/buildok.exp: Kfail twentyeightprime.stp if
  we're using inode uprobes, since absolute probes don't work there.
* testsuite/buildok/twenty.stp: Also probe 'iterate_dir', since
  'vfs_readdir' has been renamed.

NEWS update for coloring and function suggestion

PR15375: implement function suggestions

Added dwarf_builder::suggest_functions(), which builds a list of similar
functions from a given function. This is used in dwarf_builder::build()
to suggest functions to the user when the probe point could not be
derived.

PR15375: add visited_modules to dwarf_query struct

The visited_modules member of dwarf_query is used to keep track of all
the modules which have been visited during the query. This information
will be used in the function suggestion feature to know from which
modules to pull functions.

PR15375: add sym_seen to module_info struct

The sym_tab struct only caches non-inlined functions. The sym_seen set
includes all functions, and is also updated during update_symtab. This
will allow us to give better function suggestions.

PR15375: add levenshtein() function to calculate edit distance

The levenshtein() function added in util.cxx will be used in the new
upcoming function suggestion feature.

Kfail unsupported inode uprobes tests in unprivileged_probes.exp.

* testsuite/lib/systemtap.exp (inode_uprobes_p): New function.
* testsuite/systemtap.base/uprobes_filtering.exp: Use 'inode_uprobes_p',
  instead of private code, to know whether to test.
* testsuite/systemtap.unprivileged/unprivileged_probes.exp
  (test_unrestricted_probes): Kfail
  'process(number).statement(number).absolute*' tests if we're using inode
  uprobes, since absolute probes aren't supported.

Tweak systemtap.examples/process/psig.stp to compile on RHEL6.

* testsuite/systemtap.examples/process/psig.stp (translate_mask): Tweak
  function to lower stack usage. This avoids the dreaded "the frame size
  of XXX bytes is larger than 256 bytes" error messages.

Fix a bogus unprivileged_probes.exp perf probe test.

* testsuite/systemtap.unprivileged/unprivileged_probes.exp: Fix bogus
  'perf*.counter' probe test. Originally was testing
  "perf.type(number).config(number).sample(number).counter(string)" probe
  type, which doesn't exist.

Fix testsuite/semok/thirtysix.stp.

* testsuite/semok/thirtysix.stp: Since not all markers in "stap" have a
  '$arg' parameter, this test was failing (correctly). To fix this, only
  probe the "pass*__*" markers (which all have a '$arg' parameter).

AUTHORS bump

The testsuite now looks for systemtap java support before java testing.

* testsuite/lib/systemtap.exp (java_p): New function.
  (setup_systemtap_environment): Test for systemtap java functionality.
* testsuite/systemtap.apps/java.exp: Mark as untested if no stap java
  support.
* testsuite/systemtap.unprivileged/unprivileged_probes.exp
  (test_unrestricted_probes): Mark java probe tests as untested if no stap
  java support.

Improve the inode-uprobes check in systemtap.base/uprobes_filtering.exp.

Make the systemtap.base/proc_exec.exp test more robust.

Updated renaming module testcases to handle updated error messages.

* testsuite/systemtap.base/pr13158.exp: Updated testcase with new error
  messages.
* testsuite/systemtap.base/rename_module.exp: Ditto.

The rest of the PR15751 changes.