Starszy inżynier danych

W Instructure wierzymy w siłę ludzi, którzy mogą się rozwijać i odnosić sukcesy przez całe życie. Naszym celem jest wzmocnienie tej mocy poprzez tworzenie intuicyjnych produktów, które upraszczają naukę i rozwój osobisty, ułatwiają znaczące relacje i inspirują ludzi do dalszej edukacji i kariery. Robimy to, dając inteligentnym, kreatywnym i pełnym pasji ludziom możliwości tworzenia niesamowitych rzeczy.

I tu wkraczasz Ty: poszukujemy starszego inżyniera danych, który będzie kierować rozwojem i skalowaniem naszej podstawowej infrastruktury danych. Nie będziesz po prostu przenosić danych; będziesz kluczowym czynnikiem przyczyniającym się do projektowania i utrzymywania naszych Źródeł Prawdy. Twoją misją jest przekształcanie surowych danych źródłowych w wiarygodne, zarządzane zbiory danych poprzez budowanie wydajnych potoków i solidnej warstwy semantycznej, która zapewnia spójność w całej firmie.

Jeśli lubisz wyzwania związane z koordynowaniem złożonych przepływów pracy z wykorzystaniem Databricks, Fivetran, dbt i Snowflake - i jesteś dumny z tego, że kluczowe wskaźniki są zdefiniowane raz i wszędzie można na nich polegać - to jest rola dla Ciebie. Co będziesz robić - kompleksowa inżynieria rurociągów: projektuj, buduj i wdrażaj skalowalne potoki ETL/ELT z różnych systemów źródłowych do naszej chmury danych Snowflake. - Infrastruktura chmurowa: Zarządzaj i optymalizuj przepływy danych w środowisku AWS (S3, Lambda, IAM), zapewniając wysoką dostępność, bezpieczeństwo i efektywność kosztową. - Przetwarzanie na dużą skalę: Wykorzystaj Databricks i Python (PySpark), aby obsługiwać złożone transformacje danych i duże obciążenia. - Wdrożenie warstwy semantycznej: współpracuj z zespołem przy definiowaniu, wdrażaniu i skalowaniu naszej warstwy semantycznej (za pośrednictwem warstwy semantycznej dbt, MetricFlow lub podobnej) w celu standaryzacji logiki biznesowej, wskaźników i wymiarów dla wszystkich dalszych konsumentów. - Model prawdy: użyj dbt do budowania modułowych, kontrolowanych wersji i przetestowanych modeli danych, które służą jako ostateczna podstawa analizy biznesowej. - Zarządzanie danymi i jakość: wdrożenie zautomatyzowanych testów i monitorowania, aby zapewnić integralność i niezawodność gotowych zbiorów danych. Twój zestaw narzędzi technicznych - hurtownia danych: biegłość na poziomie eksperckim w programie Snowflake (klastrowanie, Snowpipe, strumienie i zadania) lub podobnych hurtowniach danych w chmurze. - Inżynieria analityczna: zaawansowana znajomość dbt i złożonej logiki transformacji SQL, ze szczególnym doświadczeniem w budowaniu modeli semantycznych i definicji metryk. - Big Data i kod: dobra znajomość języka Python i praktyczne doświadczenie z Databricks do orkiestracji opartej na platformie Spark. - Infrastruktura chmurowa: Praktyczne doświadczenie w zarządzaniu obciążeniami danych w AWS. - Kontrola wersji: głębokie zrozumienie przepływów pracy opartych na Git i CI/CD dla danych.

Co musisz wiedzieć/mieć: - Mistrz jakości danych: wierzysz, że dane stanowią obciążenie, dopóki nie zostaną odpowiednio uregulowane, a Twoją pasją jest modelowanie danych i ograniczanie „dryfu wskaźników” w całej organizacji. - Skalowalność i wydajność: projektujesz długoterminowo, budując usprawnione, spójne środowiska danych, które eliminują nadmiarowość i fragmentację. Koncentrując się na modułowej konstrukcji i automatyzacji, zapewniasz, że nasza infrastruktura będzie stabilna i łatwa w nawigacji w miarę wzrostu złożoności i objętości danych. - Narzędzie do rozwiązywania problemów: znajdujesz pierwotną przyczynę rozbieżności w danych i tworzysz zautomatyzowane rozwiązania, aby zapobiec ich ponownemu wystąpieniu. Weź udział w niesamowitych wydarzeniach w Instructure!

Oferujemy konkurencyjne i znaczące korzyści w każdym kraju, w którym działamy. Chociaż różnią się one w zależności od lokalizacji, oto ogólny zarys tego, czego możesz się spodziewać: - Konkurencyjne wynagrodzenie oraz wszyscy pracownicy pełnoetatowi uczestniczą w naszym programie własności, ponieważ każdy powinien mieć udział w naszym sukcesie. - Elastyczna kultura pracy. Nasze przestrzenie do współpracy zdalnej, hybrydowej i biurowej różnią się w zależności od roli, zespołu i lokalizacji. - Obfity czas wolny, w tym lokalne święta i nasz coroczny okres „Przyciemnij światła” pod koniec grudnia, kiedy zachęcamy zespoły do ​​odpoczynku i regeneracji sił w zależności od potrzeb działu. - Kompleksowe programy odnowy biologicznej i wsparcie zdrowia psychicznego - Zasoby do nauki i rozwoju, w tym narzędzia rozwoju zawodowego i zwrot czesnego, które wspierają Twój rozwój - Technologia i narzędzia, których potrzebujesz, aby wykonywać swoją najlepszą pracę - Program doceniania pracowników Motivosity - Kultura zakorzeniona w integracji, wsparciu i znaczących kontaktach Wierzymy w zatrudnianie wspaniałych ludzi i właściwe ich traktowanie.

Im bardziej jesteśmy różnorodni, tym lepsze są nasze pomysły i wyniki. Instructure jest pracodawcą zapewniającym równe szanse. Przestrzegamy obowiązujących przepisów prawa pracy i przeciwdziałania dyskryminacji w każdym kraju, w którym prowadzimy działalność.

W ramach procesu rekrutacji wszyscy pracownicy muszą przejść weryfikację przeszłości. Aby pomóc chronić nasze zespoły i systemy, wdrożyliśmy środki weryfikacji tożsamości. Kandydaci mogą zostać poproszeni o zweryfikowanie swojego imienia i nazwiska, aktualnej lokalizacji fizycznej oraz podanie prawidłowego numeru kontaktowego i adresu zamieszkania, zgodnie z lokalnymi przepisami dotyczącymi ochrony danych.

Jakakolwiek próba fałszywego przedstawienia danych osobowych lub zawodowych będzie skutkować dyskwalifikacją. Aplikuj bezpośrednio na RemoteJobs.org: https://remotejobs.org/remote-jobs/sr-data-engineer-instructure