Odpalanie jobem paczek z SSIS Catalog - dłuższe czasy pracy

Odpalanie jobem paczek z SSIS Catalog - dłuższe czasy pracy
BlackBad
  • Rejestracja: dni
  • Ostatnio: dni
  • Postów: 454
0

Witam,

w związku z tym że mamy migrację serwerów w firmie to przy okazji tego ruchu postanowiliśmy, że przebudujemy nasze rozwiązania ETL by łatwiej było nimi zarządzać.
Aktualnie za pomocą SQL Server Agent - i kilku jobów tam stworzonych odpalamy paczki z SQL Server Integration Services - gdzie źródłem jest "File system". Wszystko działa piknie i jak trzeba (to generalnie raczej nic nie wnosi do tematu ale na wszelki - każda paczka czyści lokalną tablicę i kopiuje dane z systemu ERP - czasem z lekkimi modyfikacjami - taki magazyn danych do tworzenia później ostatecznych raportów/analiz itp.) .

Problem pojawia się gdy dokładnie tą samą operację próbujemy uzyskać zmieniając źródło danych w jobie na SSIS Catalog. Paczki się odpalają, a jakże ale czas działania jest nie porównywalnie dłuższy. Mała tablicę która paczka odpalona bezpośrednio wypełnia w 1 sekundę - job przez catalog wypełni w 6 - "większą" tablice gdzie paczka odpalona bezpośrednio w VS trwa 32s przez job i catalog twa 55 sec itp. itd.
Zaznaczam, że te same paczki odpalone przez job ale gdzie źródłem jest "File system" także odpalają się szybko (porównywalnie czy tak samo) jak odpalone bezpośrednio w VS.

Nie mogę znaleźć co może być przyczyną - spotkał się ktoś z podobnym przypadkiem ?

Pozdrawiam,
BB

PA
  • Rejestracja: dni
  • Ostatnio: dni
  • Postów: 3902
BlackBad
  • Rejestracja: dni
  • Ostatnio: dni
  • Postów: 454
0

Niestety @Panczo to nie to. Chociaż też na początku celowałem w ustawienia konta SQL Agent. Mam wrażenie, że to coś po przesiadce z 2014 na 2017. Nie wiem :| ciągle szukam ...

Zarejestruj się i dołącz do największej społeczności programistów w Polsce.

Otrzymaj wsparcie, dziel się wiedzą i rozwijaj swoje umiejętności z najlepszymi.