Увидел свет релиз системы динамической трассировки SystemTap 2.5, предоставляющий для платформы Linux средства похожие на технологию DTrace. SystemTap позволяет организовать доскональное наблюдение за работающей Linux системой, производить сбор статистики о работе приложений, профилирование и контроль системных вызовов. Управление производится через интерфейс командной строки и специальный Си-подобный язык сценариев. Система протестирована с ядрами Linux начиная с версии 2.6.18 и заканчивая 3.15-rc2.

В развитии проекта участвуют такие компании как Red Hat, IBM, Intel, Hitachi и Oracle. В каталоге примеров представлено более 100 скриптов на все случаи жизни, подходящие для слежения за распределением памяти, вводом/выводом, дисковыми операциями, сетевым трафиком (например, анализ работы NFS), работой планировщика задач, обработкой прерываний, использованием системных буферов, установкой блокировок, выполнением системных вызовов, обработкой сигналов и т.п.

Основные улучшения в версии 2.5:

• Изменения во фронтэнде (утилите stap):
  • Поддержка работы на системах с UEFI SecureBoot с поддержанием ключей верификации силами размещённого в сети доверительного SystemTap-сервера;
  • Возможность выполнения контрольных проверок во время загрузки, благодаря подстановке проверочных модулей на раннем этапе загрузки (поддерживаются системы с dracut). Для выполнения проверок во время загрузки представлена команда onboot;
  • При выполнении DWARF-проверок обеспечена возможность использования '.callee[s]' для более точного исследования функций. Например, если конструкция process("myproc").function("foo").callee("bar") сработает только при вызове функции bar() из foo(), то process("myproc").function("foo").callees сработает для всех вызовов;
  • Новые опции для инспектирования содержимого установленных библиотек: "stap --dump-functions" выведет весь список функций и их аргументы, "stap --dump-probe-aliases" покажет все псевдонимы контрольных проверок для библиотеки;
  • Увеличена скорость и точность выполнения контрольных проверок выражений (process.statement) для развёрнутых (inline) функций;
  • Улучшены эвристические алгоритмы, используемые для поиска завершения пролога функции;
  • В случае недоступности debuginfo проверка функций в процессах теперь откатывается на использование символьных таблиц;
  • Увеличена точность и лаконичность сообщений об ошибках несоответствия типов;
  • При отсутствии указанных меток обеспечен вывод подсказок с уточнением наиболее вероятного варианта, например, при указании process("stap").mark("benchmart") предлагается использовать метку 'benchmark';
• Улучшения в языке сценариев:
  • Поддержка условного выражения "%( guru_mode == 0 %)" или "%( guru_mode == 1 %)" для организации двойного использования скриптов;
  • Во встроенных функциях на Си можно использовать STAP_RETURN(value) вместо перехода "goto out" и назначения STAP_RETVALUE;
  • Функции [s]println() теперь могут быть вызваны без аргументов, что приведёт к выводу символа новой строки;
• Новые примеры использования SystemTap:
  • python2.stp - пример тапсета для Python 2;
  • python3.stp - пример тапсета для Python 3;
  • pyexample.stp - использование python-тапсета для вывода обратных трассировок и значений переменных;
  • connect_stat.stp - вывод инициатора задачи при попытке установить соединение с определённым IP;
  • nfsd-recent.stp - отслеживание всех операций NFS-сервера и вывод списка клиентов, совершивших запросы;
  • procmod_watcher.stp - мониторинг всех вызовов fork(), exec(), exit(), init_module() и delete_module();
  • pstree.stp - вывод списка процессов в формате .DOT (для построения дерева в GraphVis);
  • rlimit_nofile.stp - слежение за процессами, в которых наблюдаются проблемы с выделением файловых дескрипторов;
  • 2048.stp - реализация игры 2048, выполняемая в пространстве ядра;
• Добавлена поддержка обратной трассировки (backtracing) через задействование специального модуля;
• Добавлен новый псевдоним проверки "oneshot" для быстрого выполнения фрагмента скрипта и выхода;