Starszy inżynier danych

W imieniu naszego klienta, firmy budującej platformę, która umożliwia użytkownikom szybkie dostarczanie funkcji klientom, poszukujemy kandydatów na stanowisko: Starszy inżynier danych.

Poszukujemy doświadczonego inżyniera danych, który dołączy do naszego rozwijającego się zespołu. Zatrudnienie będzie odpowiedzialne za rozbudowę i optymalizację naszej architektury danych i potoku danych, a także optymalizację przepływu danych. Idealnym kandydatem jest doświadczony twórca potoku danych i administrator danych, który lubi optymalizować systemy danych i budować je od podstaw. Właściwy kandydat będzie podekscytowany perspektywą optymalizacji, a nawet przeprojektowania architektury danych naszej firmy, aby wspierać naszą następną generację produktów i inicjatyw związanych z danymi.
Role i obowiązki

Twórz i utrzymuj optymalną architekturę potoku danych
Twórz i utrzymuj wydarzenia/architekturę opartą na streamingu/projekt
Identyfikuj, projektuj i wdrażaj ulepszenia procesów wewnętrznych: automatyzacja procesów ręcznych, optymalizacja dostarczania danych, przeprojektowanie infrastruktury w celu zwiększenia skalowalności itp.
Zbuduj infrastrukturę wymaganą do optymalnej ekstrakcji, transformacji i ładowania danych z szerokiej gamy źródeł danych, korzystając z technologii „big data” SQL i AWS.
Twórz narzędzia danych dla członków zespołów analityków i naukowców zajmujących się danymi, które pomogą im zbudować i zoptymalizować nasz produkt do pozycji lidera innowacyjnej branży.
Współpracuj z analitykami danych, aby dążyć do większej funkcjonalności naszych systemów danych.

Oczekujemy:

Doświadczenie z narzędziami Big Data: HDFS/S3, Spark/Flink, Hive, Hbase, Kafka/kinesis itp.
Doświadczenie z relacyjnymi bazami danych SQL (MySQL/Postgres) i NoSQL (Cassandra, MongoDB, DynamoDB, HBase)
Doświadczenie ze sklepami typu klucz/wartość, takimi jak Redis i wyszukiwarkami, takimi jak Elasticsearch.
Doświadczenie z potokiem danych i narzędziami do zarządzania przepływem pracy, takimi jak Airflow itp.
Doświadczenie z dowolną chmurą publiczną, taką jak usługi AWS
Doświadczenie z systemami przetwarzania strumieniowego: Spark-Streaming/Flink itp.
Doświadczenie z językami skryptowymi zorientowanymi obiektowo/funkcjami obiektowymi: Java, Scala, Pyspark itp.

Praca odbywa się w charakterze zdalnym i stacjonarnym.



Zapraszamy do wysyłanie CV tylko i wyłącznie w języku angielskim.

Administratorem danych osobowych jest Business Line Support z siedzibą w Warszawie. Udostępnienie danych osobowych przez osobę aplikującą o pracę i wyrażenie zgody na ich przetwarzanie jest dobrowolne, ale jednocześnie niezbędne dla realizacji procesu rekrutacji.
Informujemy, że ma Pani/Pan prawo dostępu do swoich danych osobowych, ich sprostowania, usunięcia, ograniczenia przetwarzania, przeniesienia, wyrażenia sprzeciwu wobec ich przetwarzania oraz prawo do wniesienia skargi do organu nadzorczego. Uprawnienia te przysługują również w przypadku prawidłowego przetwarzania danych przez Administratora.
Szczegółowe informacje dotyczące przetwarzania danych osobowych przez Business Line Support zawarte są w Polityce prywatności, dostępnej na stronie www.bls-group.pl