Add __label__ for each deref_fault in tapsets

When adding our own error handling, privatize the label.

followup to 5cdaa947cbb, avoid using _a symbols

Just superstition perhaps, but restore earlier version's use of
'addr' identifier in the *deref macros.

testing-only patch to track down why $argv[0] read-faults

loc2c-runtime.h: in deref calls, tolerate nested calling

With the loc2stap code, it is possible to see constructs like
deref(8, deref(8, deref(8, deref(8, fetch_register(4))))
so the addr field is itself a deref.  This blows up if the deref
macro copies the addr parameter multiple times, with a glorious
exponential fanout!  So now we use a temporary variable within
the macro, to hold the address value, then reuse that.

translator for embeddedcode: don't emit deref_fault pseudo-labels

We will aim to rely on the single solitary deref_fault: label
emitted at the tail of functions / probes boilerplate, rather
than labels that may be nested within generated code.  This
also needs the old-fashioned CATCH_DEREF_FAULT macro for
embedded-C code to no longer define the label.

implicptr.c test case: defeat more compiler optimizations

Force the compiler to not optimize away a few more locals.

semantic analysis: functions: process them all in semantic_pass_symbols()

With a number of synthetic script functions being generated
during the probe-derivation process, we need to ensure that
all of them go through the full symbol-resolution process.
Previously, only the dome->functions[] array was dealt with
in this early part of pass-2, which was probably OK because
only embedded-C functions tended to be synthetically generated.
Not any more!

staptree loc2stap: de-duplicate ctx target_symbol nodes

For symbol-resolution purposes, it's important that different
probes'/functions' staptrees are -trees-, not DAGs, so their
nodes are not reused (and thus ->referent fields not possibly mis-set).

tapset loc2c: don't set symbol/functioncall->referent; that's for symresolution pass

Also, get the symresolve stuff to trace more verbosely.

const_folder update tracing

Same as previous commit, for const-folder this time.

staptree update_visitor: include a verbosity member for tracing replacements

With verbosity >= 4, the update_visitor will now print a trace message
whenever a staptree node is rewritten through its require/provide
machinery.  This includes the piecemeal processing of $context vars,
simplifications, optimizations, much of the whole shebang.

Fix array indexing

Mixed results overall: -6 , +11 failures.
But is clearly now more correct.

Fix at_var.exp

Fix systemtap.base/const_value.stp

Fix translation of lvalue store to register

Fix buildok/pretty-uprobes.stp

Fix buildok/twentynine.stp

Fix buildok/nfs_proc-detailed.stp

Fix buildok/logging-embedded.stp

Fix bz1269062.exp

Fix lvalue deref function syntax

Adjust when to signal "value in register"

It's a hacky solution, but it more or less matches the previous hacky
solution.  I had hoped to track this property properly, on the evaluation
stack, but that turns out to be tedious and error prone.

Handle target_deref as lvalue

Make sure pointers are dereferenced when required

Add function to dump expressions from gdb

Examine embedded_expr for pragmas

Re-add address relocation

Always limit the scope of deref_fault label

While it might be better to change tapset/* to use CATCH_DEREF_FAULT,
it doesn't hurt to always limit the label.

Revert "Revert all bpf patches"

This reverts commit 3414d598ff94362eb27d26024aabbe6a51368843.

Revert all bpf patches

This reverts commits:
02a3ce26f69233fce8d175fbf248a6b9b1f4a654
ceac2b1bcf5170848e0aca7595e6b8222e122e7b
24a49c47f3a76a8058cf6545de5968fe8a036d5b
7f1e56e9fe2f94ab181481396068d09ab8c42ce8
009ff1576c6990db63f48a57234f2d5454f63bf5
8e39930950bfd916971e1df132b6abf269fbe314
03629ed30d3334aebe0ebe2c57ae9b2fb90eab4d
7ca1ffe6e431e4818a9a479935d75a428d2aaf57
0603c3e9f86c47f3b5096a8060bed35f71d1d6e4
cbceaaecb14cfb81ae4d6e88e3495edc02e6efbf
567e36b73db7ce7c293d2e8f5378d3968f5838af
ee54f2bab5265d044955d1d29a8564b778c21416
51be46c30ade0a9b0dc1fe0b96f00922f9ae5a78
7e2cd9f56293f69718df015c96cab37960e0e032

Fix my typo in systemtap.spec.

Add support for the httpd code to systemtap.spec, defaulting to "off".

Emit deref_fault labels

We used to emit these during dwflpp::express_as_string, after we'd
generated the rest of the body of the embeddedcode node.  Emitting
these unconditionally is, for now at least, easier than walking the
tree to figure out if they're needed.

The __attribute__ syntax for labels dates from gcc 4.2.

Fix some errors in the loc2stap rewrite

The old code had some hidden side effects within translate_location,
wherein we failed to save the result of the dereference.

Remove duplication in deprecated tapset functions

* Removed systemtap version compile conditions on
deprecated functions.  Deprecated functions now refer to their
replacements rather than being a direct copy.

man stapprobes: mention that process.begin enumerates

Make changes for RHEL6 in the http web service server code.

* configure.ac: Accept version 2.17.0 of the uuid library (for RHEL6).
* httpd/Makefile.am: Add ../util.cxx for regexp support that works on
  RHEL6.
* httpd/main.cxx: Ditto.
* httpd/server.cxx: Ditto.
* httpd/server.h: Ditto.
* configure: Regenerated.
* httpd/Makefile.in: Ditto.

Added initial http web service server code.

* httpd/Makefile.am
* httpd/Makefile.in: Generated.
* httpd/main.cxx: httpd main program source.
* httpd/server.cxx: httpd server framework
* httpd/server.h: httpd server include file
* configure.ac: Make sure we have the microhttpd and uuid libraries before
  trying to build the httpd code.
* Makefile.am: Added 'httpd' subdirectory.
* Makefile.in: Regenerated.
* config.in: Ditto.
* configure: Ditto.

PR20988: New strpos() tapset function

* tapset/string.stp: New strpos() tapset function
* testsuite/systemtap.string/strpos.{stp,exp}: New testcase

PR21435: Convenience groupadd for the make install target

Add S390 DWARF register names

Give bpf-translate.cxx mappings for the DWARF register names for S390.

Add PPC DWARF register names

Give bpf-translate.cxx mappings for the DWARF register names for PPC.

Avoid server test failures by fixing test server startup/shutdown.

* testsuite/lib/systemtap.exp: Avoid 'output: can't read "logfile": no
  such variable' tcl errors when starting systemtap server by properly
  handling server logfile.

Merge remaining compat and nd_compat syscalls per PR20333.

Get loc2stap.cxx working with the gcc 4.4 compiler (RHEL6-era).

* loc2stap.cxx: Change some std::to_string() calls to lex_cast() calls to
  make the RHEL6 compiler happy. Also adjust a structure initialization.

Add aarch64 DWARF register names

To allow systemtap to compile on aarch64 machines with kernels that
supports BPF bpf-translate.cxx needs to have mappings for the DWARF
register names for aarch64.

Add ARM DWARF register names

To allow systemtap to compile on 32-bit ARM machines with kernels that
supports BPF bpf-translate.cxx needs to have mappings for the DWARF
register names for ARM.

configure: Check for linux/bpf.h header.

Don't build bpf backend support if there is no bpf.h header.
Skip translate_bpf_pass if there is no bpf support.
Regenerate configure and Makefile.in.

stapbpf/libbpf.c: Define __NR_bpf and initialize anonymous bpf_attr union.

__NR_bpf might not be defined in older headers, if so define it ourselves.
Older GCC have trouble initializing anonymous struct fields in a union
directly. Initialize them more explicitly.

stapbpf/stapbpf.cxx: Define PERF_EVENT_IOC_SET_BPF.

PERF_EVENT_IOC_SET_BPF was introduced in 4.1, define it if unknown.

bpf-translate.cxx: Include elfutils/version.h and check Strent exists.

Before elfutils 0.167 the strtab functions were only available through
the unsupported libebl library.

loc2stap.cxx (location_context::translate): Initialize implicit_value.

Prevent a error with GCC -Werror=missing-field-initializers.
Explicit set length and data.

Fix -Wimplicit-fallthrough build errors for bpf code

GCC7 will now error implicit fallthrough's as per sourceware.org/PR7652

Squashed commit of the eBPF backend for stap

stap-report: also collect kbuild gcc command lines

Fix PR21363 by getting _struct_sched_attr_u() working on rawhide.

* buildrun.cxx (compile_pass): Add autoconf test to check for the
  existence of <uapi/linux/sched/types.h>
* tapset/linux/aux_syscalls.stp: Include <uapi/linux/sched/types.h> if
  STAPCONF_UAPI_LINUX_SCHED_TYPES is defined.
* runtime/linux/autoconf-uapi-linux-sched-types.c: New autoconf test.

Update tracepoint finding logic for the 'swiotlb' tracepoint group.

* tapsets.cxx (tracepoint_extra_decls): Add support for the 'swiotlb'
  tracepoint group.

Add a new tracepoint test to check compile requirements for each group.

* testsuite/systemtap.base/tracepoints_list.exp: Add a new test where we
  make sure that each tracepoint group's compile tweaks are sufficient in
  itself.

Fix several small items found by a coverty code scan.

* tapsets.cxx (uprobe_derived_probe_group): Add constructor to initialize
  'max_perf_counters'.
* session.cxx (parse_cmdline): Be sure check 'optarg' is NULL before
  trying to use it.
* elaborate.cxx (stat_decl_collector::visit_stat_op): Make sure that if
  iterator is at the end, we don't try to access it anyway.

Fix PR21353 by correctly handling the compat arch fcntl syscall

man: add a note about direct pointer dereferencing

It is currently not very clear how to dereference a pointer to
a basic type, so lets add two notes about it to man pages.

Signed-off-by: Ruslan Kuprieiev <rkuprieiev@cloudlinux.com>

PR21297 Add support for new statx syscall

tapset/linux/aux_syscalls.stp: Add _statx_mask_str()
tapset/linux/i386/syscall_num.stp: Add statx syscall info
tapset/linux/x86_64/syscall_num.stp: Ditto
tapset/linux/sysc_statx.stp: New syscall tapset
testsuite/buildok/nd_syscalls2-detailed.stp: New buildok test
testsuite/buildok/syscalls2-detailed.stp: Ditto
testsuite/systemtap.syscall/stat.c: New statx syscall subtest

Add a minor tweak to syscall_consistency.exp.

* testsuite/systemtap.syscall/syscall_consistency.exp (get_syscalls):
  Provide a default value for the 'scname' variable.

Tweak elfutils version discovery in the testsuite.

* testsuite/lib/systemtap.exp (get_system_info): If we're running a
  version of systemtap compiled with version X of elfutils, but running
  with version Y of elfutils (where Y > X), the elfutils version gets
  reported as 'Y/X'. Make sure to parse this correctly.

Comment in session.cxx to explain elfutils build/run version strings.

No longer kfail semok/autocast14.stp.

* testsuite/systemtap.pass1-4/semok.exp: Since code to fix PR18079 has
  been committed, remove the kfail for semok/autocast14.stp.

Workaround parser issue in nfs_proc.stp.

* tapset/linux/nfs_proc.stp (nfs.proc3.read_done): To avoid parser issues,
  split up @choose_defined() code into two separate if statements. Note
  that this is a workaround until we can fix the parser issue.
  (nfs.proc4.read_done): Ditto.

Adapt stapdyn to the dyninst 9.3.1 library search model.

stapdyn/dynutil.cxx (check_dyninst_rt): Use DYNINST_REWRITER_PATHS
and appendenv

util.c, util.h:  New: appendenv.

Fix BZ1431263 commit by removing unused arg.

* tapsets.cxx (enroll): Remove unused systemtap_session argument.

BZ1431263: Remove "too many hardware breakpoint probes" warning.

* tapsets.cxx (hwbkpt_derived_probe_group::enroll): Remove warning about
  too many hardware breakpoint probes, since we can't really know how many
  this system supports until we try to register them.

BZ1431263: Add hardware breakpoint functional test.

* testsuite/systemtap.base/hw_breakpoint.exp: New hardware breakpoint
  test.
* testsuite/systemtap.base/stap_hwbkpt_kmod.Makefile: Ditto.
* testsuite/systemtap.base/stap_hwbkpt_kmod.c: Ditto.

BZ1431263: Always use HW_BREAKPOINT_LEN_* macros.

* tapsets.cxx (hwbkpt_derived_probe_group::emit_module_init): Always use
  HW_BREAKPOINT_LEN_* macros, not just on x86_64.

BZ1431263: Expect hardware breakpoint scripts compile failures.

* testsuite/systemtap.pass1-4/buildok.exp: Expect hwbkpt.stp compilation
  to fail on systems (like arm64) where hwbkpt_probes_p returns false.
* testsuite/systemtap.pass1-4/buildok-interactive.exp: Ditto.

BZ1431263: Disable kernel.data probes on arm64.

* tapsets.cxx (hwbkpt_builder::build): On arm64, hardware breakpoint
  probes continually get triggered. So, disable them.

Fix PR21238 by printing better inode uprobes registration errors.

* runtime/linux/uprobes-inode.c (stapiu_target_reg): Print correct error
  code if registration fails.

Fixed BZ1430828 by replacing task_exe_file() with current_exe_file().

* tapset/linux/task.stp (current_exe_file): New function.
  (task_exe_file): Deprecate and rewrite in terms of
  current_exe_file(). This keeps us from potentially accessing task->mm in
  an unsafe manner.
* testsuite/buildok/task-embedded.stp: Updated.
* testsuite/systemtap.base/task_paths.exp: Ditto.
* testsuite/systemtap.base/task_paths.stp: Ditto.
* NEWS: Add deprecation comment.
* doc/SystemTap_Tapset_Reference/man3/function::task_exe_file.3stap:
  Ditto.
* doc/SystemTap_Tapset_Reference/man3/function::current_exe_file.3stap:
  New file.

gcc PR80115: sys/sdt.h: tweak i386 argument passing

Use %w[arg] to request that widened forms of register names be passed
to the sys/sdt.h macro operand strings, so as to avoid nominating
sub-registers such as %sil within -m32 code, which gcc <= 6 sometimes
buggily did.

BZ1431263: Fix hardware breakpoint probe handler return types.

* tapsets.cxx (hwbkpt_derived_probe_group::emit_module_decls): Fix
  hardware breakpoint probe handler return type - changed from 'int' to
  'void' to match the kernel.
  (hwbkpt_derived_probe_group::emit_module_init): Ditto.

PR21255: Fix missing __set_task_state() definition.

* runtime/stp_utrace.c: Fix missing __set_task_state() definition. If we
  can't find a __set_task_state() definition, define our own.

PR21255: Fix missing get_task_mm() declaration.

* buildrun.cxx (compile_pass): Add <linux/sched/mm.h> autoconf test. This
  was caused by the following kernel commit:

    commit 6e84f31522f931027bf695752087ece278c10d3f
    Author: Ingo Molnar <mingo@kernel.org>
    Date:   Wed Feb 8 18:51:29 2017 +0100

        sched/headers: Prepare for new header dependencies before moving
        code to <linux/sched/mm.h>
* runtime/linux/access_process_vm.h: Include <linux/sched.h> and, if it
  exists, <linux/sched/mm.h>.
* runtime/linux/autoconf-sched-mm.c: New file.

Fix BZ1425568 by updating task_dentry_path() to handle chroot().

* tapset/linux/dentry.stp (task_dentry_path): Fix task_dentry_path when
  called on a target executable that has run chroot().
* testsuite/systemtap.base/task_dentry_path.exp: Add test for chroot'ed
  executable.
* testsuite/systemtap.base/task_dentry_path3.stp: New test.

Add PR19021 test case to task_dentry_path.exp.

For custom built upstream kernels on Debian, fix version detection

Debian Bug: 856461

rrs@learner:~$ stap-prep
dpkg: warning: version '(gcc' has bad syntax: version number does not start with digit
Package linux-image-4.10.1+ version 4.10.1+-20 does not match version of currently running kernel: (gcc
 Consider apt-get upgrade && reboot
dpkg: warning: version '(gcc' has bad syntax: version number does not start with digit
Package linux-headers-4.10.1+ version 4.10.1+-20 does not match version of currently running kernel: (gcc
 Consider apt-get upgrade && reboot
You need package linux-image-4.10.1+-dbgsym but it does not seem to be available
 Debian -dbgsym packages are typically in a separate repository
 Follow https://wiki.debian.org/AutomaticDebugPackages to add this repository
2017-03-02 / 23:32:37 ♒♒♒  ☺

Signed-off-by: Ritesh Raj Sarraf <rrs@debian.org>

Set correct updated message for Debian

Debian now provides debug symbol packages for all its packages,
including for the Linux kernel.
There is a separate repository for debug symbol packages.

This patch updates those details.
Thanks to Jack Henschel for reporting the bug and the fix

Signed-off-by: Ritesh Raj Sarraf <rrs@debian.org>

Improve syscall test case results on newer powerpc kernels.

* testsuite/systemtap.syscall/getrandom.c: Improved.
* testsuite/systemtap.syscall/kexec_load.c: Add support for
  kexec_file_load() to be unimplemented.
* testsuite/systemtap.syscall/tapset/syscall.stp: Mark kexec_file_load()
  as unimplemented on powerpc.

Regenerated tapset/linux/ARCH/syscall_num.stp files.

* scripts/dump-syscalls.sh: Added comment about how to obtain strace
  source.
* tapset/linux/arm/syscall_num.stp: Regenerated from the v4.16-27-gdb316ec
  version of strace.
* tapset/linux/arm64/syscall_num.stp: Ditto.
* tapset/linux/i386/syscall_num.stp: Ditto.
* tapset/linux/mips/syscall_num.stp: Ditto.
* tapset/linux/powerpc/syscall_num.stp: Ditto.
* tapset/linux/x86_64/syscall_num.stp: Ditto.

Fix s390x-specific syscall tests.

* testsuite/buildok/syscalls-arch-detailed.stp: Made s390x probe tests
  optional, since the underlying probes don't exist on the 4.10 kernel.
* testsuite/buildok/nd_syscalls-arch-detailed.stp: Ditto.

Fix s390x compile error in runtime/stack-s390.c.

* runtime/stack-s390.c (__stp_stack_print): Update code to let it compile
  on the 4.10 kernel. Kernel commit d5c352c moved 'thread_info' into
  task_struct.

PR20600: Don't use 'time' uninitialized in __stp_time_local_update().

* runtime/time.c (__stp_time_local_update): Make sure to initialize 'time'
  before use.

Update lookup_bad_addr() for platforms where user_addr_max() doesn't exist.

* runtime/linux/addr-map.c (lookup_bad_addr): Handle platforms (like
  s390x) where in_task() exists, but user_addr_max() doesn't.

Fix PR20600 by updating __stp_time_local_update().

* runtime/time.c (__stp_time_local_update): Fix PR20600 by changing the
  way we disable/reenable interrupts.

dummy commit to test git fsckObjects

Update the vfs.stp tapset for newer kernels.

* tapset/linux/vfs.stp: Since the __block_write_begin() function can be
  inlined on newer kernels, we'll also probe
  __block_write_begin_int(). Also, check to see if '$file' is defined
  before using it in _vfs.block_write_begin.return.

samples: add cve-2017-6074 security band-aid

PR21190: Only build with --enable-sqlite on fedora17+ and rhel7+.

Build with --enable-sqlite on systems having at least sqlite-3.7.

Autoreconf after version update (3.1 -> 3.2).

This fixes the `make rpm` target, so that it works out of the box.

Begin next release cycle

* NEWS: Add section for version 3.2
* configure.ac: Bump version to 3.2
* doc/SystemTap_Beginners_Guide/en-US/Book_Info.xml: same
* systemtap.spec: same
* testsuite/configure.ac: same

systemtap.spec: changelog date for release

NEWS: release date set

Prerelease updates

* .../SystemTap_Beginners_Guide: Update docs using ./scripts/update-docs
* .../syscalls.3stap: same
* .../syscalls.xmlpart: same
* session.cxx: Update copyright year
* stapdyn/stapdyn.cxx: same
* staprun/common.c: same