Коллеги, доброго!

Помогите разобраться. Система начала беспричинно зависать с 11.20 - до 11.24. Безобразие началось на этой недели. Отловить в чем причина не могу. Зависает WEB, GUI и консоль. Система CRM 6.0, базис 700, ядро 254. sunos 5.10, oracle 10.2.

В логе sm21 есть вот такое:
Details Page 2 Line 8 System Log: Local Analysis of sapcrm 1
Time Type Nr Clt User TCode Grp N Text
11:24:14 DP Q0 G Request (type DIA) cannot be processed
Request (type DIA) cannot be processed
Details
Recording at local and central time........................ 19.10.2010 11:24:14
Task...... Process User...... Terminal Session TCode Program Cl Problem cl Package
01638 Dispatcher K SAP Web AS Problem STSK
Further details for this message type
Module nam Line Error text Caller.... Reason/cal
dpxxdisp 5698 DIA DpRqBad bad_req
Documentation for system log message Q0 G :
The dispatcher is unable to process a request. The preceding system
log or trace entries should contain more detailed information about
the reason.
The work process type of the request is given:
DIA: Dialog work process
UPD, UP2 Update work process
SPO: Spool work process
ENQ: Enqueue work process
BTC: Background work process
Technical details
File Offset RecFm System log type Grp N variable message data
29 77940 m Error (Function,Module,Row) Q0 G DIA DpRqBadbad_reqdpxxdisp5698

В dev_disp есть такое:
Wed Oct 20 10:10:11 2010
SoftCancel request for T84 U26173 M0 received from IC_MAN
Wed Oct 20 10:46:54 2010
***LOG Q0I=> NiIRead: recv (131: Connection reset by peer) [nixxi.cpp 4424]
*** ERROR => NiIRead: SiRecv failed for hdl 7 / sock 20
(SI_ECONN_BROKEN/131; I4; ST; 172.17.64.220:1348) [nixxi.cpp 4424]
Network error of client T46, NiBufReceive (-6: NIECONN_BROKEN), dp_tm_status=3
Client address of T46 is 172.17.64.220(USER в домене)
***LOG Q04=> DpRTmPrep, NiBufReceive (9382 USER_SAP 46 USER в домене) [dpxxdisp.c 12364]
RM-T46, U9382, 010 USER_SAP, USER в домене), 10:41:34, M0, W13, SM04, 2/1
Wed Oct 20 11:24:13 2010
SoftCancel request for T52 U26411 M0 received from IC_MAN
SoftCancel request for T44 U26413 M0 received from IC_MAN
Wed Oct 20 11:29:28 2010

Было подозрение на проблемы с сетью, но пинги сервер->клиентская машина и клиентская машина->сервер во время зависания прошли без потерь. Может есть еще куда копать?

Заранее спасибо.

если система виснет изо дня в день в одно и то же время - начните с анализа фоновых заданий

В sm37 заданий стартующих с 11.20 - 11.25 нет.

Есть задание "ACE_DISPATCHER(программа CRM_ACE_DISPATCHER)" старт 11.19, окончание 11.24. Задание выполнено без ошибок.

Что еще можно посмотреть?

А что значит - зависает консоль?

проверьте cron и top. может дело вшвсе не в sap

Это значит, что не реагирует вообще. Сегодня, кстати, консоль была доступна. А система в висит.



Вчера просил серверных админов посмотреть. Утверждают, что в это время в crone ничего не запускается.
Команды top в системе нету. Но по мониторингу в iostat и vmstat ничего криминального не увидел. Загрузка ЦП от 0% до 20%.

Куда еще копнуть?

Спасибо.

обращение к дискам (сбойным секторам), сеть (может в бухгалтерии обед начинается и они из розетки свич выдергивают, чтоб чайник согреть)

курите пристально логи work-процессов, логи СУБД....
очень похоже на регулярное стучание куда на удаленку и выпадение по тайм-ауту...

ну и отсюда можно направление копания почерпнуть

тр st03n, смотрите нагрузку за заданный период

Привет!

Подскажи куда конкретно смотреть? Я не очень разбираюсь в данной транзакции.
Смотреть "Системная нагрузка" за сегодня? На какие показатели обращать внимание?

Спасибо

Привет!
Логи вида "dev_w"? Или это что-то другое? Прошу прошения за глупые вопросы, но просто не очень хорошо разбираюсь.
В Alert_SID.log ничего страшного не вижу. Только переключения логов. Какой еще лог базы можно посмотреть?


Изучая в транзакции st11 файлы трассировок наткнулся на такую ошибку:
M Mon Oct 25 11:21:24 2010
M *** ERROR => ThICMSubHdlOp: ThPlgGetInbuf failed (rc=15) [thxxinfo.c 8108]

Еще в dev_icm увидел вот такое:

Так понимаю в кому впадает вся ОС (консоль не шевелится)? При этом серв отменно пингуется?
CPU не показатель, дело может быть и в памяти... Было такое на HP-UX. Процы серьезно проседали, потом бах! и кома всего серва, при этом в топе CPU 0-10... Оказалось RAM съедена до последней крошки (дальше по-цепочке пошли искать первопричину)... А переодичность может быть и сетью вызвана, и job'ами, загрузкой данных...

посмотрите st02

В HP-UX-е если съедается вся память, само оно потом не оживает...