Joined: 21 Nov 2008 Posts: 25 Location: СПб - Валлдорф
Posted: Mon Mar 02, 2009 3:19 pm Post subject: Расспараллеливание массовой обработки данных
Предпосылки:
Есть громадный набор данных. С целью ускорения его обработки делается расспаралеливание обработки блоками. Получается блок и делается ассинхронный RFC вызов, передавая блок на обработку. При получении результата, блок удаляется из источника. И тд пока источник не опустеет.
Проблема:
При возникновении ошибки (например communication error), надо как-то узнать для какого блока она случилась, чтобы вернуть этот блок данных на повторную обработку.
Вопрос:
Как узнать контекст вызова: либо входные параметры, либо имя задачи, либо еще какую-нибудь информацию дающую возможность вычислить блок.
Может кто-нибудь сталкивался с подобной задачей и уже придумал подходящий workaround?
Age: 48 Joined: 25 Jan 2008 Posts: 580 Location: Москва
Posted: Mon Mar 02, 2009 4:32 pm Post subject:
Если исходные данные хранятся в одной таблице, то:
1.формировать таблицу блоков со структурой
-Имя задачи
-стартовый номер записи
-количество записей в блоке
-статус (успешно/с ошибкой)
2.обработку запускать по этой таблице, sy-subrc после вызова в таблице можно менять так:
0 - передано в обработку
4 - communication error
9 - завершено успешно (в процедуре ...performing ... on end of task)
3.После завершения цикла сортировать таблицу блоков по стартовому номеру (descending), удалить обработанные записи
4.Удалить все записи со статусом 9.
Если таблица блоков не пустая, перейти к п.2
2 вариант: вместо отдельной таблицы создать в исходной таблице с данными поле "Имя задачи" и перед запуском в обработку заполнять его. _________________ С уважением,
Удав.
Joined: 21 Nov 2008 Posts: 25 Location: СПб - Валлдорф
Posted: Mon Mar 02, 2009 5:20 pm Post subject:
@vga: К сожалению проверить работу нельзя. Вернее можно, но это по сути сведен на нет всю выгоду от распараллеливания.
@Удав: вообщем-то сейчас я именно так и делаю. Но проблема возникает если ошибка случится не сразу в месте вызова FM, а в форме, которая повешена на end of task. Там я не знаю никакой информации о вызове, ни имени таска, ни передаваемого блока. Меня волнует вот как раз то место.
Age: 48 Joined: 25 Jan 2008 Posts: 580 Location: Москва
Posted: Mon Mar 02, 2009 6:00 pm Post subject:
menx wrote:
Там я не знаю никакой информации о вызове, ни имени таска, ни передаваемого блока. Меня волнует вот как раз то место.
Как это не знаешь? По первому методу статус 0 будет
Да и в каком случае perform end of task не выполнится, если call function прошел без ошибок?
Кстати, в форме, вызываемой по end of task есть параметр taskname. _________________ С уважением,
Удав.
You cannot post new topics in this forum You cannot reply to topics in this forum You cannot edit your posts in this forum You cannot delete your posts in this forum You cannot vote in polls in this forum You cannot attach files in this forum You can download files in this forum
All product names are trademarks of their respective companies. SAPNET.RU websites are in no way affiliated with SAP AG. SAP, SAP R/3, R/3 software, mySAP, ABAP, BAPI, xApps, SAP NetWeaver and any other are registered trademarks of SAP AG. Every effort is made to ensure content integrity. Use information on this site at your own risk.
