Текущее время: Пт, июл 18 2025, 10:56

Часовой пояс: UTC + 3 часа




Начать новую тему Ответить на тему  [ Сообщений: 15 ] 
Автор Сообщение
 Заголовок сообщения: Объемы данных
СообщениеДобавлено: Ср, сен 24 2008, 11:49 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Добрый день!
Столкнулась с такой проблемой: решили прогнать решение на реальных данных. Загрузила в куб 3,5-4 млн. записей. Расчет производится в BPS на FOX с применением программок на ABAP. На нужном уровне где-то 600 тыс - 1 млн. записей. Форму открыть не могу. Возникает сообщение о нехватке памяти.
Вопрос: у меня проблемы с сервером (сервер действительно старый, новым, выделенным под BW сервером, пока обеспечить не могут) или это глобальная проблема, форма не откроется никогда и обрабатывать такие объемы надо в другом месте (например в APD на ABAP).


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 13:38 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Простите за любопытство, но зачем в форме 1 млн. записей? Кто будет смотреть такую форму!?Расчеты вываливаются в дамп или только формат?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 13:59 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Смотреть её никто не будет. На ней ведется расчет данных в заданных ограничениях. Данные максимально возможно ужаты для обработки, т.е. кол-во признаков только то, которое должно быть обработано и отфильтровано.
Вываливается сам формат, вываливаются подпрограммки, когда их пытаешься запустить в тестовом режиме из SE37 или SE80. Даже простой просмотр данных в кубе в RSA1 и тот виснет при выборе всего лишь 200 совпадений по заданным параметрам.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:06 
Старший специалист
Старший специалист

Зарегистрирован:
Ср, авг 29 2007, 13:53
Сообщения: 251
По крайней мере в BW3.5 для ручного планирования есть ограничение: не более 9999 строк.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:24 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Насколько я понял, Вы пытаетесь сделать папку планирования для того, чтобы запустить расчет. При этом в папке формат с данными, которые расчитываются?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 15:42 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Сделан уровень и пакет планирования. Да, он используется в папке планирования. Форматы вообще делаются на на папках, а на уровнях планирования. В самой папке планирования как таковой формат не используется. Формат нужен для считывания данных с помощью программы на ABAP 'API_SEMBPS_GETDATA'.
Формат с кол-вом записей 68000 выводится. Правда долго, почти 5 минут.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:02 
Ассистент
Ассистент

Зарегистрирован:
Ср, окт 03 2007, 18:16
Сообщения: 27
Коллега!
1. Что вы понимаете под форматом? Я под форматом понимаю ManualPlanning (он, есстественно, создается не в папке планирования).
2. BPS работает с буффером (его размер ограничен сервером) + возможно, в самом BPS есть ограничения. Поэтому могу предложить следующее решение: разбейте ваши расчеты на несколько частей (например, пакетами по месяцам, БЕ и т.д.). После завершения каждой логической части, запускайте user-exit с сохранением данных (функция API_SEMBPS_POST).

[/quote][/code]


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:11 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
1. да
2. разбито максимально. Дальше бить бесмысленно. Это будет совершенно никому не нужный вариант.

Спасибо.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:33 
Старший специалист
Старший специалист
Аватара пользователя

Зарегистрирован:
Вт, янв 30 2007, 17:10
Сообщения: 488
А после каждого API_SEMBPS_POST запускаете API_SEMBPS_REFRESH ???

_________________
Карма - это суперпозиция граблей, на которые мы уже успели наступить, но которые еще не долетели...


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:36 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Если вопрос ко мне, то я не запускаю ни API_SEMBPS_POST, ни API_SEMBPS_REFRESH.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Ср, сен 24 2008, 16:39 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Что-бы было понятнее: из формулы на FOX запускается ФМ, который использует 'API_SEMBPS_GETDATA'. Сохранение изменений происходит на пакете.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 10:47 
Ассистент
Ассистент

Зарегистрирован:
Вс, май 25 2008, 18:19
Сообщения: 28
BIGI написал(а):
Если вопрос ко мне, то я не запускаю ни API_SEMBPS_POST, ни API_SEMBPS_REFRESH.


Ну так запускайте и будет вам счастие


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 11:35 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
А при чем здесь это? Я говорю, что у меня всё подвисает ещё на стадии элементарного просмотра данных в RSA1.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 12:35 
Менеджер
Менеджер
Аватара пользователя

Зарегистрирован:
Чт, май 26 2005, 11:36
Сообщения: 651
Откуда: Киев-Москва
BIGI написал(а):
А при чем здесь это? Я говорю, что у меня всё подвисает ещё на стадии элементарного просмотра данных в RSA1.
Ну так надо решить с начала эту проблему. Ядро BW должно работать нормально. Трассируйте, пинайте базис, проверьте все объекты в rsrv.

_________________
Рисую потоки данных.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Чт, сен 25 2008, 13:06 
Ассистент
Ассистент

Зарегистрирован:
Ср, авг 29 2007, 10:46
Сообщения: 43
Спасибо! Собственно говоря в этом и вопрос: как решить эту ситуацию, куды бечь.


Принять этот ответ
Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 15 ] 

Часовой пояс: UTC + 3 часа


Кто сейчас на конференции

Сейчас этот форум просматривают: Ahrefs [Bot]


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Русская поддержка phpBB