Starszy inżynier danych

Level Access to wiodąca firma oferująca rozwiązania w zakresie dostępności cyfrowej, pomagająca organizacjom tworzyć produkty, które będą działać dla wszystkich. Konsolidujemy nasze systemy biznesowe w jedną, ujednoliconą platformę danych, aby wspierać inicjatywy analityczne i sztuczną inteligencję. Jako starszy inżynier danych będziesz odgrywać kluczową rolę w projektowaniu, budowaniu i obsłudze infrastruktury danych, która leży u podstaw tej transformacji.

To stanowisko koncentruje się na tworzeniu solidnej, zarządzanej i skalowalnej podstawy danych, która integruje dane z wielu systemów w platformę gotową do obsługi sztucznej inteligencji. Obowiązki Projektowanie, budowanie i utrzymywanie skalowalnej platformy danych w oparciu o Databricks i AWS, zgodnie z zasadami architektury Medallion (brązowy/srebrny/złoty). Rozwijanie i zarządzanie pozyskiwaniem danych oraz potokami ETL/ELT z podstawowych systemów biznesowych, zapewniając jakość danych, niezawodność i wydajność.

Wdrażanie monitorowania jakości danych (świeżość, kompletność, ważność, wykrywanie anomalii) z automatycznym powiadamianiem.Tworzyj i utrzymuj rozpoznawanie tożsamości Golden Record i wsteczną synchronizację w systemach źródłowych.Zarządzaj metadanymi, pochodzeniem i uprawnieniami za pomocą Databricks Unity Catalog i standardów platformy.Współpracuj z zespołami wielofunkcyjnymi, aby dostarczać zestawy danych gotowe do analityki i sztucznej inteligencji, które wspierają cele biznesowe.Stosuj najlepsze praktyki w zakresie infrastruktury, takie jak kod, CI/CD i kontrola wersji dla potoków danych.Efektywna komunikacja z interesariuszami, zarządzanie niejednoznaczność i osiąganie wyników w szybko zmieniającym się środowisku. Wymagane kwalifikacje: ponad 8 lat doświadczenia w inżynierii danych, budowaniu potoków ETL/ELT klasy produkcyjnej na dużą skalę. Dobra biegłość w języku Python (PySpark, skrypty, integracje API, automatyzacja potoków).

Praktyczne doświadczenie z Databricks (notatniki, zadania, przepływy pracy, katalog Unity) i AWS (Lambda, ECS/Fargate, S3, Glue, Athena, DynamoDB, EventBridge, Step Functions, IAM). Doświadczenie w modelowaniu danych i architekturach Lakehouse (Medallion, Delta Lake, Parquet, ewolucja schematu, przyrostowe upsert). Biegłość w SQL i dbt w celu budowania modułowych, testowanych i udokumentowanych modeli.

Doświadczenie w integracji API REST, rozpoznawaniu encji i strategiach dopasowywania rekordów. Znajomość kontroli wersji opartej na Git i CI/CD dla danych. potoki.Preferowane:Zaawansowane funkcje Databricks (Delta Live Tables, integracja z MLflow).Doświadczenie w Salesforce API (Bulk API 2.0, REST API, SOQL).Proces aplikacji Jeśli prosperujesz w szybko zmieniającym się środowisku i chcesz wywrzeć znaczący wpływ w dziedzinie dostępności, czekamy na Twoją wiadomość! Jest to stanowisko na pełen etat za wynagrodzeniem, oferujące konkurencyjny pakiet świadczeń, w tym możliwości premii, hojne płatne urlopy, płatne urlopy oraz szereg programów mających na celu wspieranie dobrego samopoczucia pracowników i równowagi między życiem zawodowym a prywatnym.

Jesteś zainteresowany natychmiastowym rozpatrzeniem? Prześlij swoje CV, aby zostać rozpatrzonym na to stanowisko. Level Access przywiązuje dużą wagę do różnorodności siły roboczej i jest pracodawcą zapewniającym równe szanse.

Naszym celem jest zapewnienie rozsądnych udogodnień podczas całego procesu rekrutacji. Level Access wykorzystuje narzędzia sztucznej inteligencji (AI) do wspierania i usprawniania naszych procesów rekrutacji i zatrudniania. Narzędzia te mogą pomóc w takich czynnościach, jak sprawdzanie CV, ocena umiejętności, planowanie rozmów kwalifikacyjnych i komunikacja.

Narzędzia te mają na celu pomóc naszym rekruterom, a nie podejmować ostateczne decyzje o zatrudnieniu. Wszystkie procesy wspomagane przez sztuczną inteligencję podlegają weryfikacji przez człowieka, a informacje o kandydatach są przetwarzane zgodnie z naszą Polityką prywatności i obowiązującymi przepisami. Aby dowiedzieć się więcej o tym, jak gromadzimy i wykorzystujemy dane osobowe, zapoznaj się z naszą Polityką prywatności (https://www.levelaccess.com/privacy-statement) i naszym Centrum zaufania (https://trust.levelaccess.com).

Oryginalnie opublikowano w Himalayas