[phpBB Debug] PHP Notice: in file /includes/functions_genders.php on line 46: Undefined index: GENDER_X
[phpBB Debug] PHP Notice: in file /includes/functions_genders.php on line 46: Undefined index: GENDER_X
[phpBB Debug] PHP Notice: in file /includes/functions_genders.php on line 46: Undefined index: GENDER_X
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: Array to string conversion
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: preg_replace(): The /e modifier is no longer supported, use preg_replace_callback instead
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: Array to string conversion
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: preg_replace(): The /e modifier is no longer supported, use preg_replace_callback instead
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: Array to string conversion
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: Array to string conversion
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: preg_replace(): The /e modifier is no longer supported, use preg_replace_callback instead
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: Array to string conversion
[phpBB Debug] PHP Notice: in file /includes/replacer.php on line 22: preg_replace(): The /e modifier is no longer supported, use preg_replace_callback instead
SAPфорум.RU • Просмотр темы - обработка alerts и мониторинг SAP HANA
Текущее время: Вт, янв 23 2018, 02:09

Часовой пояс: UTC + 4 часа




Начать новую тему Ответить на тему  [ Сообщений: 11 ] 
Автор Сообщение
 Заголовок сообщения: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Чт, май 25 2017, 21:00 
Начинающий
Начинающий

Зарегистрирован:
Пт, май 19 2017, 10:57
Сообщения: 7
Добрый день.

Есть у меня задача - реагировать на алерты, возникающие в базе HANA и впоследствии вывести информацию по алертам во внешнюю систему мониторинга 24\7.

Что могу я и система мониторинга: а) парсить логи и выводить нужные сообщения
б) отслеживать на операционке заполнение файловых систем и живы\умерли процессы indexserver, nameserver и прочие.
в) делать селекты к STATISTICS_ALERTS и прочим интересным вьюшкам и выводить нужные сообщения.

Возникли следующие вопросы:
1) если хочу отработать все алерты, то беру список из Sap Note 1969700 и иду по alert_id ? или что-то упускаю ?
2) какой алерт критически важный, а какой может подождать ? как их классифицировать ? ну например alert_id=28 (Open connections) на это надо реагировать незамедлительно и выяснять причину увеличения коннектов до предельных величин, а например alert_id=22 можно и вообще не отрабатывать. тащить вообще все критические и мажорные алерты из HANA во внешний мониторинг - не вариант, надо выбрать. Как выбрать ? Основной параметр отбора "чтобы база жила ближайшие время и не проседала производительность".

Пока в голове крутятся первые несколько мыслей.
1) мониторинг ФС, CPU usage, Memory usage - это critical severity, однозначно мониторить нонстоп.
2) alert_id=65 и 36 и 38 - major severity, мониторить раз в час

Интересны Ваши мысли, что ещё добавить в отделы critical minor major, какие alertы внезапно могут доставить проблем.
Сам буду добавлять свои решения в эту тему по мере реализации.


Принять этот ответ
Вернуться к началу
 Профиль Отправить email  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, май 26 2017, 12:26 
Почетный гуру
Почетный гуру
Аватара пользователя

Зарегистрирован:
Чт, дек 20 2007, 19:21
Сообщения: 973
У нас из критических алертов пока только полное падедение ноды (баг в хане) и ООМ дампы процессов. Остальное даже не смотрим. Я думаю начать надо с анализа того что сейчас у вас в логах и что реально доставляет проблемы при этом.

Какую используете систему мониторинга?

_________________
я твой сап эфай внедрял


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, май 26 2017, 19:36 
Ассистент
Ассистент

Зарегистрирован:
Сб, окт 17 2015, 14:11
Сообщения: 44


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, май 26 2017, 20:30 
Начинающий
Начинающий

Зарегистрирован:
Пт, май 19 2017, 10:57
Сообщения: 7
Спасибо за советы.

1) Посмотрел в логи (trc), составил список часто встречающихся ошибок. Их буду обрабатывать в первую очередь.
Одна из самых интересных и, на мой взгляд, опасных - "Cursor open for XXX minutes found", добавил поиск по логу этой конструкции в систему мониторинга. Это alert_id=42. Буду звонить и ругаццо, почему приклад курсор не закрывает.

2) Сделал селект к вьюхам, составил список часто встречающихся ошибок. Как я уже писал, чаще встречаются 65 и 36 и 38, в ближайшее время добавлю обработку 1,3,4,30,36,38,47-49,52,54,61,73,74

3) мониторинг ФС средствами ОС работает.

Возник такой вопрос, насколько полно информация об алертах продублирована в трейсах и вьюшках ? где полнее ? Пока что я видел, что алерты можно достать и из вьюх и из трейсов. А какие, по вашему опыту есть ошибки, которые можно найти только в одном местоположении ?


Принять этот ответ
Вернуться к началу
 Профиль Отправить email  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Сб, май 27 2017, 12:34 
Ассистент
Ассистент

Зарегистрирован:
Сб, окт 17 2015, 14:11
Сообщения: 44
Первичны трейсы и вьюхи. Алерты есть ни что иное, как результат работы статистиксервиса, который на периолической основе в эти трейсы и вьюхи смотрит хранимой процедурой.
Если уровень трассировки поднять до DEBUG, то можно обеспечить себя увлекательным чтением низкоуровневой информации на выходные (Administration-Trace Configuration- User-Specific Trace). Только избегайте этого делать на продуктиве без прямого указания саппорта.
Если HANA перегружена так, что статистиксервис вообще не имеет возможности запуститься, то и алертов сгенерировано не будет. При этом в трейсах концы все же можно найти. Во вьюхах тоже все будет, но не факт, что SQL к ним отработает, он может просто подвиснуть в ожидании свободных процессорных мощностей. Но это в ситуациях критического падения производительности, которые достаточно редки, а при настроенном workload management'e вообщ практически не встречаются.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Чт, июн 08 2017, 15:07 
Начинающий
Начинающий

Зарегистрирован:
Пт, май 19 2017, 10:57
Сообщения: 7
Возник ещё один вопрос про мониторинг.
Количество строк в таблице ограничено 2 млрд строк.

Как лучше мониторить топ10 таблиц с самым большим количеством строк ?
Или есть какая-то специальная вьюха ? Или сап-нота, в которой есть запрос ?

Подскажите направление, куда копать :D


Принять этот ответ
Вернуться к началу
 Профиль Отправить email  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, июн 09 2017, 18:59 
Ассистент
Ассистент

Зарегистрирован:
Сб, окт 17 2015, 14:11
Сообщения: 44


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пн, июн 19 2017, 19:29 
Начинающий
Начинающий

Зарегистрирован:
Пт, май 19 2017, 10:57
Сообщения: 7
Array...

2) Сделал селект к вьюхам, составил список часто встречающихся ошибок. Как я уже писал, чаще встречаются 65 и 36 и 38, в ближайшее время добавлю обработку 1,3,4,30,36,38,47-49,52,54,61,73,74 .....


Добрый день. Взял свою цитату, чтобы сравнить, что добавил.
Итак, добавил обработку сообщений с alert_id 1,2,3,4,5,30,31,36,38,42,47,48,49,52,54,61,65,73,74 с разной периодичностью вывода в круглосуточный мониторинг. Считаю, что для первичной настройки мониторинга этот список можно считать базовым. Остальные алерты просматриваю по утрам :D

Теперь возник вопрос, а какие базовые синтетические метрики добавить ? ну из разряда "взять поле из этой таблицы, соотвествующее ему поле из той таблицы, помножить на коэффицент из третьей таблицы и если значение больше, чем в четвёртой таблице - вывести текстовое сообщение об этом ?

Принять этот ответ
Вернуться к началу
 Профиль Отправить email  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, июн 30 2017, 19:42 
Ассистент
Ассистент

Зарегистрирован:
Сб, окт 17 2015, 14:11
Сообщения: 44


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Пт, июл 07 2017, 13:00 
Начинающий
Начинающий

Зарегистрирован:
Пт, май 19 2017, 10:57
Сообщения: 7
Добрый день. Спасибо за ответы.
Столкнулся с такой особенностью при обработке алертов, но пока даже не знаю, в какую сторону копать.

Итак, alert_id=4 (restarted services)
1-2 раза в неделю от HANA прилетают алерты, что либо один, либо все процессы базы рестартовали.
но на самом деле этого не было.
Пока что временно добавил скрипт, который при поступлении таких сообщений проверяет наличие и время старта процессов в операционке, дабы исключить из мониторинга ложные сообщения.

Вот что это такое ? откуда в statistics_alerts появляются эти сообщения, если ни в операционке, ни во вкладке Studio\Landscape ничего про рестарты не видно, да и пользователи не жалуются ?

Версия HANA 1.00.122.01


Принять этот ответ
Вернуться к началу
 Профиль Отправить email  
 
 Заголовок сообщения: Re: обработка alerts и мониторинг SAP HANA
СообщениеДобавлено: Сб, июл 22 2017, 18:28 
Ассистент
Ассистент

Зарегистрирован:
Сб, окт 17 2015, 14:11
Сообщения: 44


Принять этот ответ
Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 11 ] 

Часовой пояс: UTC + 4 часа


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Русская поддержка phpBB
[ Time : 0.102s | 17 Queries | GZIP : Off ]