Kierownik Zespołu Inżynierii Danych
Departament Analityki Danych/Zespół Inżynierii Danych
Miejsce pracy: Warszawa
Nr ref.: CEN/BC/038/2018
Do nowo utworzonego Zespołu Inżynierii Danych poszukujemy osoby, która przygotuje koncepcję ekosystemu przetwarzania dużych wolumenów danych oraz wraz z zespołem sukcesywnie wdroży ją w Banku.
Bazując na swojej wiedzy i doświadczeniu doskonale wiesz:
- jakie narzędzia zaczytywania danych użyć dla danych dostępnych on-line a jakich dostępnych w trybie batch
- jaki model składowania danych wybrać - relacyjny czy rozproszony w obrębie klastrów
- jak równolegle przetwarzać dane i optymalizować zapytania w środowisku rozproszonym
- jak przetwarzać dane, aby nie doprowadzić do wysycenia zasobów (CPU, pamięć, IO, sieć)
- jak wygląda cykl wdrożenia zmian na środowiska produkcyjne
- jak ważna jest automatyzacja procesów wraz z ich monitoringiem
Jako lider zespołu oprócz znajomości aspektów technicznych stanowisz wsparcie biznesowe dla Zespołu Modeli Predykcyjnych w tym:
- dbasz o pozyskiwanie nowych danych (zarówno z wewnętrznych jak i zewnętrznych źródeł np. poprzez skanowanie stron/danych ogólno dostępnych w internecie)
- jako zespół dostarczacie dane w postaci agregatów, które w kolejnych fazach weryfikuje zespół modelarski
- dbasz o jakość danych wykorzystywanych w procesach przygotowania modeli
- automatyzujesz wszystkie dostarczane procesy
Ta oferta jest dla Ciebie, jeśli posiadasz:
- doświadczenie w kierowaniu Zespołem oraz w pracy w zakresie zadań realizowanych przez Zespół
- doświadczenie w pracy na dużych zbiorach danych
- doświadczenie w pracy z przynajmniej jedną z baz: ORACLE, TERADATA, DB2, MS SQL SERVER (bardzo dobra znajomość SQL)
- doświadczenie w pracy z przynajmniej jednym repozytorium rozproszonym (Hortonworks, Cloudera)
- doświadczenie w przynajmniej 2 obszarach (pozyskiwanie danych - kafka, Flume, Nifi, Sqoop, przetwarzania danych: Spark, Hive, Pig, zarządzanie workflow: Oozie, zarządzanie platformą: Ambari, Zookeeper)
- znajomość przynajmniej jednego z języków (Python, R, Spark, Scala, Java)
- wykształcenie wyższe matematyczne, techniczne, ekonomiczne
- jesteś samodzielny, dokładny i potrafisz pracować pod presją czasu
- mile widziane będzie doświadczenie z aplikacjami SAS (np. SAS Base, SAS Data Integration Studio, SAS Enterprise Guide)
Co od nas otrzymasz:
- możliwość współtworzenia rozwiązań technologicznych w branży finansowej
- elastyczny pakiet benefitów: od kultury, sportu i wypoczynku po fundusz emerytalny
- prywatną opiekę zdrowotną
- profesjonalny systemem szkoleń
pko, bank, bp