Fixed PR13745 by updating memory tracepoint examples.

* testsuite/systemtap.examples/memory/mmanonpage.stp: Updated tracepoints
  for RHEL6 and upstream kernels.
* testsuite/systemtap.examples/memory/mmanonpage.stp: Ditto.
* testsuite/systemtap.examples/memory/mmfilepage.stp: Ditto.
* testsuite/systemtap.examples/memory/mmwriteback.stp: Ditto.
* testsuite/systemtap.examples/memory/mmanonpage.meta: Updated script
  tracepoint dependencies in 'test_support' section.
* testsuite/systemtap.examples/memory/mmfilepage.meta: Ditto.
* testsuite/systemtap.examples/memory/mmwriteback.meta: Ditto.

test at_var_mark.exp requires uprobes

Fix compile problem by changing 'stp_for_each_cpu' to 'for_each_possible_cpu'.

* runtime/runtime.h: Removed stp_for_each_cpu() macro definition, since no
  longer needed (and 'cpu_possible_map' has been removed from the upstream
  kernel).
* runtime/map-stat.c: Replaced 'stp_for_each_cpu()' with
  'for_each_possible_cpu()'.
* runtime/map.c: Ditto.
* runtime/perf.c: Ditto.
* runtime/pmap-gen.c: Ditto.
* runtime/stat.c: Ditto.
* runtime/transport/procfs.c: Ditto.
* translate.cxx: Ditto.

Clarify that resource limits are imposed on stap-server requests and not on stap-server itself.

Don't compile csclient.cxx and cscommon.cxx when HAVE_NSS is false.

- Don't compile the files at all (Makefile.am)
- #if HAVE_NSS added to the files in case another distro compiles
  them anyway.
- Don't call functions in these files from elsewhere.

runtime/autoconf: compensate for missing <linux/wait.h> in some inode-uprobes versions

Improved nfsdtop.stp by using aggregates.

* testsuite/systemtap.examples/network/nfsdtop.stp: Use aggregates to
  optimize a bit and reduce the number of global variables.

Added meta file for nfsdtop.stp and regenerated example index files.

* testsuite/systemtap.examples/network/nfsdtop.meta: New file.
* testsuite/systemtap.examples/network/nfsdtop.stp: Made executable and
  added '#! /usr/bin/env stap' line at the top.
* testsuite/systemtap.examples/index.html: Regenerated.
* testsuite/systemtap.examples/index.txt: Ditto.
* testsuite/systemtap.examples/keyword-index.html: Ditto.
* testsuite/systemtap.examples/keyword-index.txt: Ditto.

Added new NFS server example script.

pf3.stp sample: and regenerate the examples index

Next up, one thousand commits to add then subtract
whitespace.

pf3.stp sample: fix index title

examples: add pf3.stp

* profiling/pf3.*: New example for combined kernel/user-space
  gross function profiling.

Move pf2.* sample script from process/ to profiling/ subdirectory

Fix module build problem on ARM.

* runtime/vma.c (_stp_vma_match_vdso): Call __access_process_vm_noflush()
  instead of __access_process_vm().  When reading user memory, the
  __access_process_vm_noflush() and __access_process_vm() functions are
  fairly equivalent and we're only reading here.  (The write side of
  __access_process_vm() calls non-exported functions on ia64, mips,
  and arm.)
* runtime/sym.c (_stp_build_id_check): Ditto.

Fix module build problem on RHEL5 ia64.

* runtime/sym.c (_stp_build_id_check): Only call __access_process_vm()
  when we're not using in-kernel utrace.  On RHEL5 ia64 calling
  __access_process_vm() doesn't work since it ends up calling
  flush_icache_range(), which isn't exported.
* runtime/vma.c (_stp_vma_match_vdso): Ditto.

Fix stapiu cleanup to not hold rcu lock while decrementing semaphores.

* runtime/uprobes-inode.c (stapiu_decrement_process_semaphores): Unlock
  rcu while writing semaphores.  Otherwise we're atomic and we can't be in
  atomic context while writing semaphores.

Update sdt_misc.exp testcase for ARM

* Omit -m64 switch for wildcard tests, as ARM does not implement this
switch
* Mark a subset of the V1 and V2 tests as XFAIL, as they are known to fail
due to broken operand parsing on ARM.  Note that this brokenness does
not affect V3.

Signed-off-by: Wade Farnsworth <wade_farnsworth@mentor.com>

PR13475: Fix ARM SDT_V3 operand parsing

* Include regular expressions to parse ARM operands
* Add ARM register data
* Allow for whitespace in ARM operands containing []'s

Signed-off-by: Wade Farnsworth <wade_farnsworth@mentor.com>

PR 13370: Complete IPv6 support in the compile-server and client.

PR13644: staprun -V (version) option

* common.c (parse_args): Add -V (version) support.  No long options
  already used, so --version is not immediately available.
  (usage): Document it.
* staprun.8: Ditto.
* Makefile.am: Build git_version.h.
* Makefile.in: Regenerated.

runtime i18n: disable nonfunctional _F / _NF macros

* staprun.h (_F, _NF): Disable them, noting why.

verbosify NEWS blurbage regarding -fdebug-types-section

Improve build-id checking when the task we're interested in isn't 'current'.

* translate.cxx (emit_module_init): Moved include files to
  runtime/runtime.h.
* runtime/runtime.h: Moved includes here from translate.cxx.  Rearranged
  order a bit, to allow use of __access_process_vm() earlier.
* runtime/sym.c (_stp_build_id_check): Instead of passing in a flag to
  indicate build-id checking a user module, instead pass a task_struct
  pointer in.  If the task_struct pointer isn't 'current', use
  __access_process_vm() to read data.
  (_stp_module_check): Update _stp_build_id_check() call.
  (_stp_kmodule_check): Ditto.
  (_stp_usermodule_check): Ditto.
* runtime/vma.c (_stp_vma_match_vdso): If the task we're trying to match
  isn't 'current', use __access_process_vm() to read data.

proc_mem.stp: Use PF_STARTING conditionally.

Use the PF_STARTING flag only conditionally on it being defined.
Kernel commit v3.3-rc6-27-g6e27f63 - vfork: kill PF_STARTING, removed it.

debugtypes.exp: Remove verbose debug output.

Depend on elfutils 0.148+, document debug_types support requires 0.154+.

Partial fix for PR12997 - support dwarf4 .debug_types

This fix does not solve the ET_REL case pointed out in the PR.
However, it does work ok for ordinary code.

    * dwflpp.cxx (dwflpp::iterate_over_cus): Add 'want_types' argument.
    Iterate over type units.
    (dwflpp::declaration_resolve_other_cus): Update.
    (dwflpp::iterate_single_function): Update.
    (dwflpp::iterate_over_globals): Also allow DW_TAG_type_unit.
    * dwflpp.h (module_tus_read_t): New typedef.
    (dwflpp::iterate_over_cus): Update.
    (dwflpp::module_tus_read): New member.
    * tapsets.cxx (dwarf_query::query_module_dwarf): Update.
    (tracepoint_query::handle_query_module): Update.
    * testsuite/systemtap.pass1-4/debugtypes.cxx: New file.
    * testsuite/systemtap.pass1-4/debugtypes.exp: New file.
    * testsuite/systemtap.pass1-4/debugtypes.stp: New file.

I built gdb with '-gdwarf-4 -fdebug-types-section'.
Then I tried this stap script:

probe process("/home/tromey/gnu/archer/build/gdb/gdb").function("dwarf2_attr") {
      println(@cast($dwarf2_per_objfile, "struct dwarf2_per_objfile")->objfile)
}

With Fedora 16 stap:

barimba. stap -p2 /tmp/q.stp
semantic error: type definition 'struct dwarf2_per_objfile' not found: identifier '@cast' at /tmp/q.stp:2:15
        source:       println(@cast($dwarf2_per_objfile, "struct dwarf2_per_objfile")->objfile)
                              ^
Pass 2: analysis failed.  Try again with another '--vp 01' option.

After the patch, this works.

PR13876: same another test case

* testsuite/semko/fifty.stp: Add /bin/sh shebang to guarantee -g propagation.

PR13876: another test case

* testsuite/semko/fifty.stp: Add test case from report.

PR13876: avoid miscompilation of duplicated tapset function

It was found that the translator got confused if the same function was
defined by the tapset and the end-user script.  The same problem can
also afflict global variables.  Along the way, clean up error
formatting.

* staptree.h (semantic_error): Drop msg2 field, which was only ever
  used for the perfunctory string "vs".
* elaborate.cxx (semantic_pass_symbols): Perform duplicate
  global-variable & function testing and rejection.
  (symresolution_info::find_function): Print an extra warning for
  the case of mismatched function callee/caller arities.
  (derive_probes): Prepare chained "while resolving
  probe point" semantic_error instead of msg2 based additions.
* session.cxx (register_library_aliases): Ditto.
  (print_error): Adjust to loss of msg2.  Print tok1 / tok2
  and source-context in a more readable way.
* tapsets.cxx (visit_target_symbol_context): Use const semantic_error*
  temps to adjust to chaining changes.
* testsuite/systemtap.base/statement.exp: Adjust to changed error message.
* translate.cxx (*): Adjust to loss of semantic_error msg2.

testsuite: current.exp should tolerate run-time WARNINGs

Pass -w to stap, so as to suppress kernel warnings, as per kprobes
-EINVAL registration errors.

testsuite: don't run client.exp tests without installcheck

This is since we wish to limit testsuite runs that use as_root to
installcheck/root runs.

testuite: fix server_args.exp in filtering stap -v output

Some of the help text contains ( ) chars, which need to be filtered
prior to them being accidentally passed to the regexp.

PR11441 stop testing deprecated kernel.function(number).inline

commit 440d9b00db23a1cb4b1 removed the code from the translator;
let's remove their tests from the testsuite.

testsuite: disable rlimits test for !installtest_p

PR13878: Mention the module in @cast "not found" message

To help understand when @cast fails to find a type, mention the module
that was searched.  This may already hinted by the e->tok source
location, but stating the module explicitly is a useful hint if the user
left the module field to be implicitly filled in.

Make uprobes_p() testsuite function find new inode-uprobes.

* testsuite/lib/systemtap.exp (uprobes_p): Handle change in inode-uprobes
  registration function name.

stap.1: Document - (read from stdin) and -e SCRIPT.

Move PERF probe family description before EXAMPLES section.

Fix PR13815 by fixing task_dentry_path() tapset function for RHEL5.

* tapset/dentry.stp (task_dentry_path): Fix for later RHEL5 kernels by
  handling 'struct path' renamed to 'struct vfs_path' (problem first
  noticed in kernel 2.6.18-308.el5).

PR13847: simplify compiled-printf functions

* translate.cxx (emit_compiled_printfs): Emit flatter code, with
  fewer { variables; } that a bad compiler can translate to a large
  call frame.  This appears to allow normal (non-noinline) functions.

PR13847: document CONFIG_DEBUG_INFO= default

PR13847: don't build debuginfo for stap modules

Suppressing the -g (by default) for stap_*.ko reduces compile time
and greatly reduces resulting .ko file size.  Since stap modules
are not usually probed themselves, this is a good default.

* buildrun.cxx (make_any_make_cmd): Prefix kbuildflags with CONFIG_DEBUG_INFO=.

PR13661 - Added test cases

Also added a proc in testsuite/lib/systemtap.exp
to run as_non_root.

Allow sysroot_sysenv.exp to run correct on machines without uprobes

If the kernel does not have uprobes support, the sysroot_sysenv test
is untested. The catch and wait statements are only needed for the
case where the test is actually run. Having the catch statment run
when the test does not run causes an error.

Test the .library modifier for RPATH awareness

* library.exp (globbing_test):  Created from main for rpath testing.

Make the .library modifier aware of RPATH

* tapsets.cxx (base_query): Treat .library("lib") as a wildcard if it
  isn't found in LD_LIBRARY_PATH
  (query_modue): Likewise.
  (query_one_library): Likewise.
  dwarf_builder::build): Likewise.

langref.tex: Document foreach (value = key in array) variant.

langref.tex: ref statement foreach subsection from arrays iteration section.

Adapt to the inode-uprobes name change in tip

We now have the functions register_uprobe -> uprobe_register and
unregister_uprobe -> uprobe_unregister.  The client API has otherwise
not changed.

I've made our code reflect the new names as much as possible, treating
the old names as the exceptional case, in case we ever want to remove
that compatibility.  For now, it should work in all cases, although I
don't have a full complement of old/new & exported/!exported kernels to
test with.

Merge branch 'master' of ssh://sourceware.org/git/systemtap

Document new @var construct in NEWS, langref, beginners and stapprobes.

Quietly wget upstream sources.

mysql.exp (wget): Add -q
postgres.exp (wget): Likewise
stap-tcl.sh (wget): Likewise
xulrunner.exp (wget): Likewise

tapset/guru-delay.stp (mdelay): Fix @us argument documentation typo.

tapset/dentry.stp (real_mount): Fix typo in @vfsmnt argument documentation.

global_var_kernel.exp: tz_minuteswest can be negative.

Preliminary SDT semaphores with inode-uprobes

This adds mmap tracking to our inode-uprobes client, so we may
manipulate SDT semaphores as modules come and go.  It seems to work ok,
though remaining sleepiness issues may need to be worked out in
task_finder2.

Global vars don't need (cannot use) frame base in location descriptor.

And so they also don't need cfa_ops (CFI) to calculate the frame base.

Update verbose log and semantic exception messages for local vs global vars.

Global @vars (with @cu/src_name.c) have a fixed scope/CU and don't depend
on location/PC. Make that clean in verbose log and semantic error messages.

Merge branch 'sysroot'

Conflicts:
cmdline.cxx
cmdline.h
session.cxx
(Reconciled with commit 372c6458, "Long options rework.")

PR12331: Add testcase for --sysroot and --sysenv

Signed-off-by: Wade Farnsworth <wade_farnsworth@mentor.com>

PR12331: Document --sysroot and --sysenv

Update stap.1 and NEWS to document the new options.

PR12331: Introduce stap options --sysroot and --sysenv

This adds new command-line options to facilitate different file locations at
compile-time versus run-time when generating stap kernel modules for a remote
system:

1. --sysroot=DIR
   Specifies a separate filesystem for the remote system on the local
   system.  The following stap functionalities will make use of this:

   a. When compiling process and library probes with a remote filesystem path
      (e.g. process("/bin/foo") with --sysroot=/bar/baz).  In this case symbols
      will be taken from the local filesystem (/bar/baz/bin/foo), but the
      resulting .ko will still contain paths on the remote filesystem
      (/bin/foo).

   b. When passing a kernel release with -r (not a full path), the kernel
      build directory will be expected in the sysroot.

   c. When DWARF debug info is contained in a separate file from the
      executable, the sysroot is used to find the debug info files.

   d. All calls to find_executable() search the path passed in the
      argument env_path relative to the sysroot.  For example if
      PATH=/bin/foo, and --sysroot=/bar/baz is provided, then
      find_executable() called with env_path == "PATH" will search
      /bar/baz/bin/foo.

   e. stap attempts to detect if a path in a probe would be outside of the
      sysroot and errors appropriately.  This situation may occur, for
      example, if the path contains several ".." directories.

2. --sysenv=VAR=VALUE
   Specifies a different environment variable for the remote system as opposed
   to the local one, and that the value on the remote system should be used.
   Currently only valid env_path arguments to find_executable() are handled
   (i.e. PATH, LD_LIBRARY_PATH).  If --sysroot is provided and --sysenv
   is omitted, then the local environment relative to the sysroot will
   be used.

These options are disabled for systemtap clients.

Signed-off-by: Wade Farnsworth <wade_farnsworth@mentor.com>

PR13819: avoid warning on CONFIG_DEBUG_PER_CPU_MAPS=y

* translate.cxx (c_unparser::emit_module_exit): Use
  for_each_possible_cpu instead of NR_CPU iteration, even
  though that should not matter.

Cannot use @var DWARF variables in tracepoints, warn, but don't crash.

Make sure @var works for process.mark probes.

guru-delay: add tapset documentation

new tapset: guru delays

Select most specific CU srcfile that matches @var("var@src") specification.

dwarf_var_expanding_visitor::getcuscope: If there is a perfect match
select that CU, otherwise, select the CU srcfile that is most specific
(matching path/src file lenght is shortest).

Merge branch 'at_var'

PR13784 Allow defining a diffent CU source in @var.

Add cu_name to struct target_symbol. Set it in parse_target_symbol
to the string after @ in @var("somevar@some/src/file.c"). Make
target_symbol::sym_name() aware of @cu_name postfix (don't return it).
Add dwarf_var_expanding_visitor::getcuscope() which figures out the
CU DIE to use as scope if target_symbol has cu_name part. Extend
global_var.exp test to show new capability.

Remove CONFIG_UTRACE use in testsuite and just depend on utrace_p/uprobes_p.

* testsuite/buildok/pretty.stp: Moved uprobes tests to pretty-uprobes.stp.
* testsuite/buildok/pretty-uprobes.stp: New test.
* testsuite/buildok/ucontext-symbols-embedded.stp: Remove CONFIG_UTRACE
  check and let buildok.exp kfail the test if no uprobes.
* testsuite/buildok/ucontext-unwind-embedded.stp: Ditto.
* testsuite/buildok/utrace.stp: Ditto.
* testsuite/semko/utrace.stp: Remove CONFIG_UTRACE check and let semko.exp
  handle it.
* testsuite/semok/pretty.stp: Move uprobes tests to pretty-uprobes.stp.
* testsuite/semok/pretty-uprobes.stp: New test.
* testsuite/semok/thirtysix.stp: Move utrace tests to thirtysix-utrace.stp.
* testsuite/semok/thirtysix-utrace.stp: New test.
* testsuite/semok/utrace01.stp: Remove CONFIG_UTRACE check and let
  semok.exp handle it.
* testsuite/systemtap.base/bz10294.stp: Remove CONFIG_UTRACE check and let
  statement.exp handle it.
* testsuite/systemtap.base/bz6905.stp: Ditto.
* testsuite/systemtap.base/statement.exp: Handle no utrace by marking
  tests as untested.
* testsuite/systemtap.base/func_alias.exp: If no utrace, mark test as
  untested.
* testsuite/systemtap.pass1-4/buildok.exp: Kfail more utrace/uprobes tests.
* testsuite/systemtap.pass1-4/semko.exp: Ditto.
* testsuite/systemtap.pass1-4/semok.exp: Ditto.

PR13661: Rewrote test cases to be more stable

Introduce @var("varname") as alternative syntax for $varname.

Adds a field target_name and a method sym_name() to struct target_symbol
to be used by the parser and tapsets translator so $name and @var("name")
can be used interchanably. Adds a testcase at_var.exp to test this for
various combinations of uprobes, kprobes, parameters, variables, arrays,
fields access, pretty printing and taking addresses.

Fix kallsyms_expand_symbol.exp regression after commit 4d51e8.

In dwflpp::find_variable_and_frame_base() when we do a search for a search
for an alternative vardie we need to saved the actual vardie content in
case we fail, no just copy the pointer to the vardie data...

PR10622. Better workaround for GCC PR51410. Find external var DIE location.

Some GCC versions would output duplicate external variables, one
without a location attribute. If so, try to find the other if it
exists in the same scope. This is a better solution than the previous
fallback solution of just trying to get the address in the symbol table.
That could result in picking the wrong external variable with the same
name (but from a different CU). Add test case to show this works better.

Correct uninitialized-var compiler warnings in uprobes.c

PR13661: Suppress core dumps for RLIMIT_AS and RLIMIT_STACK

Do this since we don't want core dumps accumulating on a server.

PR13661: Set both max and current rlimits

Now the --rlimit-* options can only be used to lower the rlimits
when not run as root.

Merge branch 'master' of ssh://sources.redhat.com/git/systemtap

More updates to client_args.exp test suite.

Merge branch 'master' of ssh://sources.redhat.com/git/systemtap

Conflicts:
cmdline.cxx
cmdline.h
session.cxx

PR13661: Added test cases

Long options rework.

- Don't rely on the order of stap_long_options for indexing
  - getopt_long now returns all option ids
- Same for options processing in stap-serverd
- Update client_args test suite

PR13609: Kill sub-processes with SIGTERM, regardless of last incoming signal.

PR13661: Added NEWS and man page entries

PR13661: Relax Server Rlimits (move to stap)

  Added rlimit options to stap:
    --rlimit-as=NUM
    --rlimit-cpu=NUM
    --rlimit-nproc=NUM
    --rlimit-stack=NUM
    --rlimit-fsize=NUM
  These options will set the appropriate rlimits to whatever is
  provided.
  Removed all rlimit handling from stap-serverd.cxx. These values
  can be specified in ~stap-server/.systemtap/rc.
  Default values are added to ~stap-server/.systemtap/rc on install.

Mark inline embedded-C expressions returning AF_INET/AF_INET6 as unprivileged.

* tapset/inet_sock.stp: Marked inline embedded-C expressions returning
  AF_INET/AF_INET6 in functions as unprivileged.
* tapset/ip.stp: Ditto.
* tapset/nfs_proc.stp: Ditto.
* tapset/rpc.stp: Ditto.

Initial changes for supporting IPv6 in the compile server and client.

testsuite.apps: similar changes for other TESTAPPS=<onetest> case

testsuite python: be sensitive to TESTAPPS=python rather than TESTAPPS=tcl

* testsuite/systemtap.apps/python.exp: Fix typo in applicability test.

Revert "work in progress" that zapped AUTHORS

This reverts commit d112b4e178fe21a82f55390305e99dc491922cb8.

Add new systemtap.apps for python

* python.exp: New.  Test python sdt markers.
* python2.stp python3.stp:  New.  Backtracing and variable display tapset.

work in progress

Clean out tracking for blocks that are merged into other blocks

The IO system in linux often merges blocks together to reduce the number of
IO operations sent to IO devices. If nothing is done the tracking for
merged IO operations can fill up the associative arrays, causing the script
to fail.  This problem was reported in rhbz743591. This commit resolves
this problem.

Revert "Clean out tracking for blocks that are merged into other blocks"

This reverts commit 0102305e3573868b852faf5183451676beaedbe6.

Clean out tracking for blocks that are merged into other blocks

The IO system in linux often merges blocks together to reduce the number of
IO operations sent to IO devices. If nothing is done the tracking for
merged IO operations can fill up the associative arrays, causing the script
to fail.  This problem was reported in rhbz743591. This commit resolves
this problem.

Match Requires to existing package layout.

* systemtap.spec (main): Only BuildRequires gcc-c++
(devel): Requires gcc make
(testsuite): Requires gcc gcc-c++ make glibc-devel and possibly glibc-devel.i386

Regenerate systemtap.examples indexes.

BZ613992: new enospc.stp sample script