budować i projektować rozwiązania Data Lake w oparciu o środowisko Microsoft Azure ( w tym Azure Data Factory, Azure Databricks, Azure Data Lake)
budować i rozwijać procesy ETL / ELT
implementować procesy przetwarzające duże i nieustrukturyzowane zbiory danych (noSQL, Data Lake Architecture)
tworzyć integrację danych z wielu źródeł (np. API, files, batch, real-time, DBs)
planować, tworzyć i administrować CI/CD
analizować istniejące rozwiązania i proponować ulepszenia
tworzyć i aktualizować dokumentację techniczną
współpracować z wewnętrznym zespołem oraz dostawcami zewnętrznymi w zakresie budowy rozwiązań Data Lake House i BIG DATA
rozwijać umiejętności, poznawć nowe technologie chmurowe, BI, oraz integrować systemy
Szukamy osób, które:
posiadają min. 3 lata doświadczenie w realizacji zadań jako Data Engineer / BIG DATA Developer
mają praktyczne doświadczenie w zakresie technologii BI i Big Data ( w szczególności T-SQL, Power BI, Azure Data Lake) oraz we wdrażaniu procesów ETL / ELT
bardzo dobrze znają SQL i NoSQL oraz są doświadczone w pracy z bazami danych typu OLAP
biegle znają platformy Azure w zakresie Data Platform i Python oraz narzędzia do budowy data pipeline"ów
są zaznajomione z technologią wymiany danych za pomocą kolejek (np. RabbitMQ, Kafka, Azure Service Bus)
bardzo dobrze znają zagadnienia związane z systemami hurtowni danych
posiadają teoretyczną wiedzę na temat nowoczesnych hurtowni danych w chmurze i przetwarzania danych
mają wysokie umiejętności rozwiązywania problemów i komunikacji i umiejętność pracy samodzielnej i w zespole
znają z praktyki zagadnienia z zakresu AI, ML i języki programowania: .NET, Java
posiadają doświadczenie w projektach z obszaru Data Engineering, Big Data i/lub Cloud z wykorzystaniem technologii Spark, Synapse, Databricks, Big Query, Snowflake
Oferujemy:
możliwość pracy zdalnej, hybrydowo lub w jednym z naszych biur,
zatrudnienie w oparciu o umowę o pracę lub B2B,
pracę w zespole #TechCCC w międzynarodowej, dynamicznie rozwijającej się firmie,
możliwość wprowadzania własnych rozwiązań,
prywatną opiekę medyczną,
możliwość przystąpienia do grupowego ubezpieczenia na życie oraz programu sportowego Multisport/OK System,
dodatek stażowy i frekwencyjny
możliwość zdobywania nowej wiedzy i poszerzania doświadczeń zawodowych,
dodatkowe benefity w postaci kart rabatowych na zakupy w sieci CCC, sklepie internetowym eobuwie.pl oraz MODIVO