Утилиты AIX Advanced Accounting: Часть 1.Учет процессов и LPAR

Опции документа Опции документа, требующие включения JavaScript, не отображаются Обсудить Выскажите мнение об этой странице Помогите нам улучшить содержание

Уровень сложности: средний

Эрик Ву, исследовательская группа, IBM

18.04.2008

В статье описаны, дополнительные возможности, предоставляемые AIX® Advanced Accounting для IBM® eServer™ pSeries® для учета работы процессов, логических разделов (LPAR) и транзакций. Исследователь из IBM Эрик Ву рассказывает о дополнительных утилитах AIX для ведения учета, которые можно скачать с сайта IBM alphaWorks® . Утилиты Advanced Accounting для AIX включают в себя два Web-сервиса и одно Web-приложение. Один Web-сервис предназначен для создания отчетов, а другой - для управления функциями учета. Web-приложение действует как клиент Web-сервисов и включает в себя Java™-сервлет, который обрабатывает Web-запросы. Web-приложение также содержит JSP-страницы для представления данных и интерактивного взаимодействия с пользователем.

Введение

Сервисы на базе информационных технологий (ИТ-сервисы) обычно являются критичными для компаний и организаций. Увеличение количества пользователей, потребность в новых технологиях и усложнения в клиент-серверных системах и системах "по требованию" приводят к тому, что затраты на организацию ИТ-сервисов растут быстрее, чем другие затраты. Чтобы понять, насколько хорошо выстроено управление, необходимо понимать реальные затраты на предоставление ИТ-сервисов и управлять этими затратами профессионально. Это, в свою очередь, требует учета вычислительных ресурсов.

Большинство современных систем UNIX и Linux предоставляет в различных формах средства учета активности процессов, собирающие в файл записи о каждом завершившемся процессе, выполнявшемся на уровне ядра. Системный заголовочный файл определяет перечень собираемой информации, который включает в себя:

• ID (уникальный идентификатор) пользователя;
• ID группы;
• системное время;
• пользовательское время;
• использование памяти.

Можно улучшить учет статистики работы процессов, используя интервальный учет и учет проектов. Интервальный учет улучшает учет статистики процессов за счет периодического предоставления отчетов. Это приводит к уменьшению задержек между записями, т.к. работающие в течение долгого времени процессы приложений, например, баз данных и Web-серверов, могут работать в течение месяцев без остановки. Интервальный учет позволяет собирать промежуточные данные через определенные периоды времени. Вдобавок к созданию записи учета по завершению процесса при интервальном учете периодически создаются новые записи учета статистики до самого завершения процесса. Учет проекта - это возможность записать идентификатор проекта в данные учета работы процессов. Идентификатор проекта - это поле, определяемое системным администратором и ассоциированное с процессами с использованием политики назначения для проекта. Несколько групп и пользователей могут использовать одну учетную запись, а один пользователь может использовать различные учетные записи для различных приложений. AIX® Advanced Accounting поддерживает как интервальный учет, так и учет проекта (см. первую ссылку в разделе ).

Недавние улучшения в динамических логических разделах (dynamic logical partitions, DLPAR) позволяют нескольким независимым операционным системам работать на одном сервере (см. вторую ссылку в разделе Ресурсы). Каждая операционная система работает на одном LPAR, который может иметь несколько выделенных ему физических процессоров. При изменении загрузки операционной системы объем выделенных ресурсов, включая процессоры и память, в динамическом LPAR может увеличиваться или уменьшаться без необходимости перезагрузки операционной системы. Если сервис-провайдер предоставляет каждому клиенту отдельный LPAR, то AIX® Advanced Accounting должен обеспечить учет работы LPAR для записи увеличения и уменьшения вычислительных ресурсов в процессе использования.

Когда приложение обрабатывает транзакции нескольких учетных записей, использующих разделяемый ресурс, то недостаток информации об учетной записи не позволяет операционной системе или даже приложению предоставлять точные данные об использовании ресурсов. Например, ID пользователя, обращающегося к базе данных, может использоваться всеми Web-запросами от сервера приложения. В этом случае Web-сервер или сервер приложения может определить имя и, следовательно, класс учетной записи. Класс учетной записи требуется передать во время транзакции (и ее подтранзакций) через приложения и системы по сети, и каждая запись учета транзакции, созданная с использованием возможностей дополнительного учета статистики, требует захвата класса учетной записи для обеспечения учета транзакций.

Пакет дополнительных утилит учета статистики Advanced Accounting для AIX включает в себя утилиту командной строки для вывода записей учета и создания отчетов, а также приложение на платформе Java™ 2 Enterprise Edition (J2EE), которое состоит из двух Web-сервисов и Web-приложения. Java-утилита командной строки для чтения/создания отчетов может быть запущена на любой операционной системе, которая поддерживает Java 1.4 или более новую версию, включая платформы Windows®, Linux и AIX. В последующих разделах будет описано использование утилит создания отчетов и показано, как применять приложения для учета транзакций.

В начало

Утилиты Advanced Accounting для AIX

Утилиты Advanced Accounting для AIX используют отображаемые файлы Java NIO для высокопроизводительного доступа к файлам. Например, порядок байтов (big-endian и little-endian) может быть определен, основываясь на архитектуре компьютера в отображаемых файлах Java NIO. Так как файлы учета, созданные в IBM® eServer™ pSeries®, используют порядок байтов big-endian, то и в пакете разработчика используется порядок big-endian, когда осуществляется доступ к файлам дополнительного учета в пакете.

В таблице 1 показана часть списка файлов пакета. Для J2EE-приложения учета статистики требуется разделяемая библиотека libaaa.so для конвертации идентификатора пользователя/группы в имя пользователя/группы. Детальные инструкции по установке J2EE-приложения учета статистики можно найти в файле README. Подкаталог aaa содержит несколько файлов с исходными кодами на Java для обработки записей учета.

Таблица 1. Часть списка файлов пакета

Для запуска из командной строки приложения Java для чтения/создания отчетов, нужно использовать следующую команду: java -cp aaa.jar aaa.Aacct [-h] [-t <tran_id>] [-s <summary_id>] [-b begin_time] [-e end_time] [-F <file_name>]. В файле README указаны tran_id и summary_id. В листинге 1 показаны команды для обработки списка записей и создания итогового отчета по пользователям. Если не указана опция -F, то по умолчанию используется файл отчета /var/aacct/acctdata. Заметим, что пакет установки содержит файл отчета sampleData. Дополнительную информацию по опциям выполнения утилиты командной строки можно найти в файле README.

                
# java -cp aaa.jar aaa.Aacct -t1 -F sampleData

# java -cp aaa.jar aaa.Aacct -s0 -F sampleData

В начало

J2EE-приложение учета

J2EE-приложение учета включает в себя два Web-сервиса и Web-приложение, которое работает как клиент Web-сервиса. Инструкции по установке в системе AIX можно найти в файле README. Так как Web-приложение и Web-сервисы связаны отношениями "клиент - сервер", то их можно установить на различных системах. Например, можно установить Web-сервисы в системе AIX, а Web-приложение - на отличной от AIX системе. Установив J2EE-приложение, загрузите в своем Web-браузере страницу http://<machine_address>/AdvancedAccounting. Будет отображена домашняя страница J2EE-приложения учета, показанная на рисунке 1.

J2EE-приложение способно создавать отчеты по статистике работы процессов, LPAR и проведения транзакций. Для этого в левой панели домашней страницы имеются специальные ссылки. Также там имеется ссылка для управления возможностями учета, такими как остановка и запуск утилит учета, а также создание проектов. Поэтому пользователи, которые имеют мало опыта работы с утилитами Advanced Accounting в AIX, могут использовать это J2EE-приложение для управления и генерации отчетов. Программа имеет доступ к каталогу Web-сервисов, и пользователь может использовать Web-браузер, следуя ссылкам для учета процессов, взаимодействуя с Web-сервисом и посылая запросы. Каждая JSP-страница учета выводит список доступных файлов учета, а пользователь в интерактивном режиме выбирает из них необходимые для направления запросов.

Учет процессов Process Accounting

Для учета процессов можно создавать отчеты по:

• проектам;
• группам;
• пользователям;
• командам;
• комбинациям предыдущих четырех пунктов.

На рисунке 2 показана JSP-страница для учета процессов. JSP-страницы учета процессов отображают файлы учета, доступные на текущий момент в дополнительных возможностях учета. Также можно выбрать один или несколько файлов учета. По умолчанию отчеты создаются по всем файлам учета. В верхней половине можно выбрать предопределенные отчеты, которые могут быть созданы по проекту, группе или пользователю. В нижней половине можно выбрать комбинирование отчетов по проекту, группе, пользователю и команде. Вдобавок, каждый отчет отображает информацию о файлах учета, включая:

• время первой и последней записей;
• имя хоста;
• номер раздела;
• модель компьютера;
• серийный номер.

Таблица 2. Отчет о процессах по пользователям

В таблице 2 показан отчет по статистике работы процессов, сделанный по пользователям; в отчет не включена информация о файле учета. Отчет по пользователю включает в себя:

• общее время;
• время потока;
• время CPU;
• локальный и общий файловый ввод/вывод;
• страницы на диске;
• всего страниц.

Учет LPAR

Advanced Accounting в AIX поддерживает возможности учета LPAR, периодически создавая записи о компьютерных ресурсах, включающие:

• CPU и оперативную память;
• файловые системы;
• диски;
• сетевые интерфейсы.

На рисунке 3 показана JSP-страница для учета LPAR. Как и на JSP-странице для учета процессоров, для выбора доступны файлы учета и можно выбрать ресурсы в LPAR перед генерацией отчета. По умолчанию отчет составляется по всем ресурсам.

Таблица 3. Учет LPAR для CPU, оперативной памяти и файловых систем

Процессор (CPU) и оперативная память

Файловые системы

В таблице 3 показан отчет по статистике работы LPAR для CPU и оперативной памяти, а также - вследствие недостатка места лишь часть отчета - по файловой системе. Отчет по CPU и оперативной памяти включает в себя загруженность CPU в секундах и выделение оперативной памяти в MБ/сек для учета суммарного объема ресурсов, затраченных в течение некоторого времени. Если в LPAR выделяется 1000 Мбайт памяти в течение первой минуты и 2000 байтов в течение второй минуты, то выделение памяти будет составлять 180000 байтов в секунду. Другие значения отчета включают в себя:

• среднюю загруженность пула больших страниц;
• обмен страницами (входящий и выходящий потоки);
• средний коэффициент страниц;
• общее системное время;
• пользовательское время.

• имена устройств;
• точки монтирования;
• количество переданных байтов;
• число операций чтения/записи;
• число операций открытия, создания и блокировки файлов.

Для экономии места в таблице 3 не показаны таблицы для дисков и сетевых интерфейсов. Шаблон включает в себя общее число передач данных на диск, общее число прочитанных и записанных блоков и размер блока для каждого диска и раздела. Последнее включает в себя общее число операций ввода/вывода и количество переданных байтов. Для создания собственных отчетов необходимо установить пакет утилит.

В начало

Средства управления

Назначение Web-страниц управления - управление Advanced Accounting, включая такие операции, как создание файлов учета, запуск и остановка сбора статистики, создание новых проектов. Они экспортируют интерфейсы командной строки и управления проектом через операции Web-сервиса. Критические функции, такие как createFile(), реализованы как отдельные операции Web-сервисов.

Web-сервисы помогают объединить множество шагов в единый сервис. Например, операция defineProj4App() используется для назначения приложения определенному проекту для заданного пользователя или группы. Операция включает в себя шесть шагов. Сначала открывается существующий файл администрирования в определенном каталоге, затем создается временный файл, в который UNIX sed добавляет сохраняемые команды. При запуске команды sed при наличии существующего административного файла создается новый административный файл. При успешном окончании выполнения старый файл переименовывается и сохраняется как резервная копия, а новый файл получает его имя. Также требуется удалить временный файл по окончании работы. В результате операции Web-сервиса скрывают детали и позволяют эффективно изучать и использовать возможности Advanced Accounting .

На рисунке 4 показана Web-страница управления Advanced Accounting для выполнения таких операций, как проверка статуса, начало учета, завершение учета и создание файла учета заданного размера.

На рисунке 5 показана Web-страница для управления проектом. Она похожа на страницу управления Advanced Accounting и использует тот же Web-сервис для экспорта управления проектом. Вдобавок к привязке приложения к существующему проекту здесь предлагаются такие операции, как:

• добавление нового проекта;
• получение определенных проектов;
• получение загруженных проектов;
• загрузка определенных проектов;
• запрос к определенным проектам.

В начало

Заключение

В этой статье обсуждалось три типа учета: учет работы процессов, LPAR и учет проведения транзакций. С использованием пакета дополнительных утилит учета в AIX показано, как создавать отчеты по учету процессов и LPAR. Следующая статья этой серии будет посвящена более детальному рассказу об учете транзакций и демонстрации инструментов мониторинга приложений.

Ресурсы

• Примите участие в обсуждении материала на форуме.
  
  
• Advanced Accounting Utilities for AIX, Part 1: Process accounting and LPAR accounting (EN): оригинал статьи.
  
  
• Advanced Accounting for AIX 5L Version 5.3 (EN), (IBM White Paper, июль 2004 г.): эта статья представляет обзор Advanced Accounting в AIX.
  
  
• The article Dynamic Logical Partitioning in IBM eServer pSeries (EN), (IBM White Paper, октябрь 2002 г.): эта статья представляет обзор динамических логических разделов.
  
  
• Advanced Accounting Utilities for AIXможно скачать с сайта IBM alphaWorks®
  
  
• Advanced Accounting Utilities for AIX: Application instrumentation and transaction Accounting (EN), (developerWorks, январь 2005 г.): вторая часть этой серии статей.
  
  
• Форум обсуждения Advanced Accounting Utilities for AIX (EN).
  
  
• Раздел developerWorks AIX и UNIX содержит сотни информативных статей для читателей начальной, средней и высокой квалификации.
  
  
• Блоги developerWorks.(EN)
  
  
• Команда IBM developerWorks проводит по всему миру сотни бесплатных технических консультаций.(EN)
  

Об авторе

		Эрик Ву (C. Eric Wu) - член команды исследователей центра IBM T.J. Watson Research center. Он получил степени M.S. И Ph.D. в Department of Computer Science and Engineering в университете штата Мичиган. Эрик написал несколько статей для IBM DeveloperWorks, с ним можно связаться по адресу cwu@us.ibm.com.

Выскажите мнение об этой странице

Пожалуйста, найдите минутку и заполните форму, чтобы повысить уровень сервиса. Помогла ли данная информация достичь Вашей цели? Да Нет Не знаю   Пожалуйста, напишите комментарий, чтобы мы могли улучшить данную страницу:   Насколько полезна эта информация? (1 = Бесполезна, 5 = Очень полезна) 1 2 3 4 5

Поделиться этой статьей: забобрить сохранить в memori

В начало