Starszy inżynier danych

Firma 540 poszukuje starszego inżyniera danych do wsparcia federalnej inicjatywy modernizacji danych dotyczących zdrowia o kluczowym znaczeniu. Zespół łączy informacje z różnych systemów obronnych i federalnych, aby zbudować skalowalne potoki danych, interfejsy API i produkty związane z danymi, które usprawniają integrację, dostęp i wykorzystanie kluczowych danych dotyczących zdrowia. Na tym stanowisku będziesz pełnić funkcję starszego specjalisty technicznego, dostarczając skalowalne, gotowe do produkcji możliwości w zakresie danych, jednocześnie ustanawiając wzorce wielokrotnego użytku na potrzeby pozyskiwania, integracji i dostarczania danych.

Będziesz rozwiązywać złożone wyzwania związane z danymi, kierować zespołami inżynieryjnymi i pomagać w kształtowaniu technicznych podstaw rozwijającego się ekosystemu platformy danych wspierającego federalne misje zdrowotne. Lokalizacja: Odległa część kontynentalnych Stanów Zjednoczonych. Mogą być wymagane okresowe podróże.

Wymagania dotyczące obywatelstwa i pozwolenia: zgodnie z wymaganiami klienta kandydaci muszą być obywatelami USA z aktywnym zezwoleniem DoW Secret (lub wyższym). Wymagania dotyczące wykształcenia: licencjat z informatyki, inżynierii, analizy danych lub pokrewnej dziedziny technicznej (preferowane). 540 Wewnętrzny poziom Thrive: Senior Data Engineer DLACZEGO 540?

540 to przyszłościowo myśląca firma, do której zwraca się rząd, aby #getshitdone. Nie mówimy tylko o innowacjach - my je dostarczamy. Przełamujemy bariery, budujemy wpływową technologię i rozwiązujemy problemy o znaczeniu krytycznym.

JAK WYWRÓCIĆ WPŁYW - Projektowanie, rozwijanie i utrzymywanie skalowalnych, gotowych do produkcji potoków danych i produktów danych przy użyciu Spark (Python/SQL) w środowisku Databricks - Kierowanie integracją i transformacją złożonych danych z różnych DoW i federalnych systemów i źródeł opieki zdrowotnej w niezawodne produkty danych do ponownego wykorzystania - Projektowanie skalowalnych podejść do pozyskiwania, integracji i wymiany danych, w tym integracji i usług opartych na API - Ustanawianie i promowanie wzorców, standardów i standardów inżynierii danych wielokrotnego użytku najlepsze praktyki poprawiające spójność, skalowalność i łatwość konserwacji produktów danych - Zapewnianie wskazówek technicznych dotyczących architektury danych, projektowania potoków, modelowania danych, podejść do integracji i praktyk inżynieryjnych - Monitorowanie, rozwiązywanie problemów i optymalizacja produkcyjnych przepływów pracy i potoków danych, identyfikowanie ulepszeń w zakresie wydajności, niezawodności i skalowalności - Definiowanie i wdrażanie praktyk walidacji danych, jakości i zarządzania, które poprawiają niezawodność i użyteczność produktów danych - Rozwiązywanie złożonych problemów technicznych i wyzwań związanych z integracją danych, identyfikowanie przyczyn źródłowych i opracowywanie zrównoważonych rozwiązań - Współpraca z inżynierami, architektom, analitykom i interesariuszom klientów w celu przełożenia złożonych potrzeb w zakresie danych na skalowalne rozwiązania techniczne - Zapewnianie wskazówek technicznych i mentoringu innym inżynierom, pomagając zespołom w radzeniu sobie ze złożonymi lub nieznanymi wyzwaniami technicznymi - Aktywne identyfikowanie możliwości udoskonalenia narzędzi, procesów i wzorców inżynieryjnych oraz pomaganie w ich przyjęciu w całym zespole - Przejmowanie na własność złożonych obszarów technicznych i pomaganie w utrzymaniu jakości, spójności i spójności inżynierii w miarę rozwoju platformy i portfolio produktów związanych z danymi WYMAGANE UMIEJĘTNOŚCI I DOŚWIADCZENIE - Ponad 10 lat inżynierii danych, inżynieria oprogramowania lub pokrewne doświadczenie techniczne - Rozbudowane, praktyczne doświadczenie w projektowaniu, budowaniu i obsłudze produkcyjnych potoków danych i produktów danych - Zaawansowana biegłość w Pythonie i SQL - Duże doświadczenie z Apache Spark i rozproszonym przetwarzaniem danych - Doświadczenie w pracy z Databricks lub podobnymi nowoczesnymi platformami danych - Doświadczenie w projektowaniu i utrzymywaniu procesów ETL/ELT dla złożonych, wielkoskalowych zbiorów danych - Doświadczenie w integrowaniu danych w różnych systemach oraz korzystaniu lub opracowywaniu integracji danych w oparciu o API - Dobra znajomość modelowania danych, architektury danych, danych zasady jakości i zarządzania danymi - Doświadczenie w rozwiązywaniu problemów i optymalizacji złożonych potoków danych produkcyjnych pod kątem wydajności, niezawodności i skalowalności - Doświadczenie w pracy z przepływami pracy programistycznymi opartymi na Git i nowoczesnymi praktykami inżynierii oprogramowania - Doświadczenie w pracy w środowiskach terminali/lini poleceń - Udokumentowane doświadczenie w zapewnianiu wskazówek technicznych, doradzaniu inżynierom i wywieraniu wpływu na praktyki inżynieryjne - Silne umiejętności komunikacji z klientami i interesariuszami, z możliwością tłumaczenia koncepcji technicznych i rekomendacji zarówno dla odbiorców technicznych, jak i nietechnicznych - Umiejętność samodzielnego poruszania się w niejednoznacznościach, identyfikowania kwestii technicznych ryzyka i kieruj złożonymi wyzwaniami inżynieryjnymi w stronę ich rozwiązania - Doświadczenie w wykrywaniu problemów związanych z bezpieczeństwem, prywatnością i zgodnością oraz w pracy z interesariuszami zajmującymi się bezpieczeństwem/zgodnością/prawem MIŁO POSIADAĆ UMIEJĘTNOŚCI I DOŚWIADCZENIE - Doświadczenie w chmurze AWS - Doświadczenie w pracy z bardzo dużymi zbiorami danych, w tym zbiorami danych zawierającymi miliardy rekordów - Doświadczenie w Palantir Foundry - Doświadczenie w GitLabie - Doświadczenie w pracy z Advaną lub podobnymi środowiskami danych DoW - Doświadczenie w pracy z federalnymi danymi zdrowotnymi, finansowymi lub innymi regulowanymi i wrażliwymi danymi - Doświadczenie w korzystaniu ze sztucznej inteligencji/ML do przyspieszyć pracę, w tym automatyzację rutynowych zadań, przyspieszenie rozwoju i debugowania KORZYŚCI I KORZYŚCI - Elastyczny WOM + wolne święta federalne - Plany ubezpieczenia zdrowotnego, stomatologicznego i okulistycznego - Elastyczne konto wydatków (FSA) - 401 tys. z dopasowaniem pracodawcy - Ubezpieczenie na życie sponsorowane przez firmę, krótko- i długoterminowa niezdolność do pracy - Rozwój zawodowy (szkolenia, certyfikaty, konferencje) - Płatne konta programistów w chmurze - Premie za polecenie - Korzyści z biura w centrali (zwrot kosztów parkowania / metra, nitro kawa i lunche) - Coroczne wydarzenia towarzyskie (540 Week, hackathon, charytatywny turniej golfowy itp.) - Dostęp do biletów 540’s Washington Capitals i Nationals RÓWNE SZANSY ZATRUDNIENIA (EEO) Polityka 540 ma na celu zapewnienie równych szans zatrudnienia wszystkim pracownikom i osobom ubiegającym się o zatrudnienie oraz zabrania dyskryminacji i molestowania wszelkiego rodzaju bez względu na rasę, kolor skóry, religię, wiek, płeć, narodowość, niepełnosprawność, genetykę, chroniony weteran status seksualny, tożsamość lub ekspresja płciowa lub jakakolwiek inna cecha chroniona przez prawo federalne, stanowe lub lokalne. Niniejsza polityka ma zastosowanie do wszystkich warunków zatrudnienia, w tym rekrutacji, zatrudniania, pośrednictwa pracy, awansu, rozwiązania stosunku pracy, zwolnienia, odwołania, przeniesienia, urlopów, wynagrodzeń i szkoleń. Aplikuj bezpośrednio na RemoteJobs.org: https://remotejobs.org/remote-jobs/senior-data-engineer-540