Dzisiaj stajemy przed problemem zasilenia bazy otrzymanymi plikami, przetwarzanie każdego osobno jest jak najbardziej możliwe, jednakże co zrobimy gdy mamy do czynienia już nie z jednym a z wieloma plikami? Jedni odpowiedzą, że 10 – 20 to nie problem, drudzy że tak nie powinno być i trzeba to jakoś inaczej ugrać. Oczywiście jedni i drudzy […]
SSIS – Jak utworzyć zmienną?
Tworząc coraz bardziej zaawansowane rozwiązania w końcu przyjdzie moment, w którym będziemy musieli skorzystać ze zmiennych. Pozwalają nam one deklarować dowolnie wartości np. poprzez kategoryzację obiektów czy przyjmowanie wartości listy (w przypadku wielu plików). Uruchomiamy projekt, dodajemy nową paczkę i w prawym górnym rogu mamy dwie ikony: Variables (zmienne) oraz SSIS Toolbox (narzędzia), jak też […]
Jak wykryć niewidzialne znaki ASCII?
Nie możesz wyszukać danej nazwy, pomimo że prawidłowo wprowadzasz jej wartość? Po raz kolejny natrafiasz na krzaczki, kwadraty lub nie widoczne białe znaki w tekstach? Czas najwyższy by wprowadzić obsługę tychże nikczemnych znaków i pozbyć się niezręcznych sytuacji. Problemem tutaj są znaki specjalne, które często nie są widoczne na pierwszy rzut oka. Często pojawiają się […]
Integration Services – jak zacząć przygodę?
Zacznijmy od utworzenia plików tekstowych na potrzeby naszego poradnika, jeden będzie zawierał dane wejściowe, drugi zaś będzie plikiem docelowym przyjmującym dane. Po utworzeniu obu plików i zasileniu jednego z nich wartościami przejdźmy do pierwszego kroku, w tym celu wybieramy Data Flow Task z lewego menu narzędzi (SSIS ToolBox) i przerzucamy go na główne okno Control […]
AIRFLOW – pierwsze kroki (artykuł w budowie)
Czym jest zatem jest Airflow? W skrócie jest to nic innego jak orkiestrator z interfejsem graficznym. Składa się on z deklaracji zmiennych, kodu zawierającego całą zaprojektowaną logikę umieszczoną w DAG a na końcu odnajdziemy operatory pozwalające na uruchomienie poszczególnych części kodu czy poleceń. Całość wieńczy nam prosta ścieżka przepływu. W skrócie DAG to potok danych, […]
AIRFLOW – pobieranie kursów walut (stara wersja)
Zapoznaliśmy się z narzędziem jakim jest airflow, zatem czas by sprawdzić dalsze jego możliwości, a zatem zacznijmy od czegoś powiedzmy sobie „klasycznego”, czyli od pobrania kursów walut. Jest to jedno z lepszych ćwiczeń dla początkujących, by sprawdzić różne wersje metod i połączeń do stron. Mamy bowiem tutaj dwa wyjścia, pierwsze to połączenie się do strony […]