Текущее время: Пт, июл 18 2025, 19:54

Часовой пояс: UTC + 3 часа




Начать новую тему Ответить на тему  [ Сообщений: 15 ] 
Автор Сообщение
 Заголовок сообщения: Объемы данных
СообщениеДобавлено: Ср, сен 24 2008, 11:49 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Добрый день!
Столкнулась с такой проблемой: решили прогнать решение на реальных данных. Загрузила в куб 3,5-4 млн. записей. Расчет производится в BPS на FOX с применением программок на ABAP. На нужном уровне где-то 600 тыс - 1 млн. записей. Форму открыть не могу. Возникает сообщение о нехватке памяти.
Вопрос: у меня проблемы с сервером (сервер действительно старый, новым, выделенным под BW сервером, пока обеспечить не могут) или это глобальная проблема, форма не откроется никогда и обрабатывать такие объемы надо в другом месте (например в APD на ABAP).


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 13:38 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Простите за любопытство, но зачем в форме 1 млн. записей? Кто будет смотреть такую форму!?Расчеты вываливаются в дамп или только формат?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 13:59 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Смотреть её никто не будет. На ней ведется расчет данных в заданных ограничениях. Данные максимально возможно ужаты для обработки, т.е. кол-во признаков только то, которое должно быть обработано и отфильтровано.
Вываливается сам формат, вываливаются подпрограммки, когда их пытаешься запустить в тестовом режиме из SE37 или SE80. Даже простой просмотр данных в кубе в RSA1 и тот виснет при выборе всего лишь 200 совпадений по заданным параметрам.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:06 
Старший специалист
Старший специалист

Зарегистрирован:
Ср, авг 29 2007, 13:53
Сообщения: 251
По крайней мере в BW3.5 для ручного планирования есть ограничение: не более 9999 строк.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:24 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Насколько я понял, Вы пытаетесь сделать папку планирования для того, чтобы запустить расчет. При этом в папке формат с данными, которые расчитываются?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:42 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Сделан уровень и пакет планирования. Да, он используется в папке планирования. Форматы вообще делаются на на папках, а на уровнях планирования. В самой папке планирования как таковой формат не используется. Формат нужен для считывания данных с помощью программы на ABAP 'API_SEMBPS_GETDATA'.
Формат с кол-вом записей 68000 выводится. Правда долго, почти 5 минут.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:02 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Коллега!
1. Что вы понимаете под форматом? Я под форматом понимаю ManualPlanning (он, есстественно, создается не в папке планирования).
2. BPS работает с буффером (его размер ограничен сервером) + возможно, в самом BPS есть ограничения. Поэтому могу предложить следующее решение: разбейте ваши расчеты на несколько частей (например, пакетами по месяцам, БЕ и т.д.). После завершения каждой логической части, запускайте user-exit с сохранением данных (функция API_SEMBPS_POST).

[/quote][/code]


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:11 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
1. да
2. разбито максимально. Дальше бить бесмысленно. Это будет совершенно никому не нужный вариант.

Спасибо.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:33 
Старший специалист
Старший специалист
Аватара пользователя

Зарегистрирован:
Вт, янв 30 2007, 17:10
Сообщения: 488
А после каждого API_SEMBPS_POST запускаете API_SEMBPS_REFRESH ???

_________________
Карма - это суперпозиция граблей, на которые мы уже успели наступить, но которые еще не долетели...


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:36 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Если вопрос ко мне, то я не запускаю ни API_SEMBPS_POST, ни API_SEMBPS_REFRESH.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:39 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Что-бы было понятнее: из формулы на FOX запускается ФМ, который использует 'API_SEMBPS_GETDATA'. Сохранение изменений происходит на пакете.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 10:47 
Ассистент
Ассистент

Зарегистрирован:
Вс, май 25 2008, 18:19
Сообщения: 28
BIGI написал(а):
Если вопрос ко мне, то я не запускаю ни API_SEMBPS_POST, ни API_SEMBPS_REFRESH.


Ну так запускайте и будет вам счастие


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 11:35 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
А при чем здесь это? Я говорю, что у меня всё подвисает ещё на стадии элементарного просмотра данных в RSA1.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 12:35 
Менеджер
Менеджер
Аватара пользователя

Зарегистрирован:
Чт, май 26 2005, 11:36
Сообщения: 651
Откуда: Киев-Москва
BIGI написал(а):
А при чем здесь это? Я говорю, что у меня всё подвисает ещё на стадии элементарного просмотра данных в RSA1.
Ну так надо решить с начала эту проблему. Ядро BW должно работать нормально. Трассируйте, пинайте базис, проверьте все объекты в rsrv.

_________________
Рисую потоки данных.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 13:06 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Спасибо! Собственно говоря в этом и вопрос: как решить эту ситуацию, куды бечь.


Принять этот ответ
Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 15 ] 

Часовой пояс: UTC + 3 часа


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Русская поддержка phpBB