Starszy inżynier ds. cegieł danych

Kim jesteśmy HIKE2 to partner doradczy i innowacyjny, pomagający organizacjom projektować i budować to, co będzie dalej. Współpracujemy ze złożonymi i regulowanymi branżami, w tym kancelariami prawnymi, usługami finansowymi, ubezpieczeniami, usługami profesjonalnymi i szybko rozwijającymi się firmami SaaS, aby modernizować modele operacyjne i osadzać dane, automatyzację i sztuczną inteligencję w rdzeniu sposobu wykonywania pracy. Nasi klienci nie tylko unowocześniają technologię.

Na nowo zastanawiają się nad przepływami pracy, aktywują zarządzaną sztuczną inteligencję i projektują środowiska, w których ludzie i inteligentne systemy współpracują ramię w ramię. Wierzymy, że znacząca transformacja ma miejsce, gdy strategia, dane, projekt i inżynieria współdziałają. Odizolowane inicjatywy nie mają skali.

Prawdziwy postęp wymaga jasnej wizji, solidnych podstaw danych, odpowiedzialnego zarządzania i zdyscyplinowanej realizacji. Nasze zespoły wnoszą głęboką wiedzę branżową, projektowanie skoncentrowane na człowieku oraz zaawansowane możliwości w zakresie danych i chmury, aby tworzyć bezpieczne, skalowalne rozwiązania zbudowane z myślą o złożoności w świecie rzeczywistym. Od nowoczesnych platform danych po przepływy pracy oparte na sztucznej inteligencji i automatyzację przedsiębiorstwa - pomagamy organizacjom przejść od eksperymentów do wymiernego wpływu.

Lubimy zmiany i przechodzimy od czystej karty do działających systemów. Bardzo zależy nam na wynikach, zaufaniu i budowaniu długoterminowych partnerstw. Nie tylko wdrażamy technologię.

Pomagamy projektować przyszłość pracy. HIKE2 poszukuje starszego inżyniera danych z głębokim doświadczeniem w Databricks i nowoczesnych platformach danych, szczególnie w dużych, złożonych środowiskach korporacyjnych. Jest to praktyczna rola dla osoby, która zbudowała i dostarczyła rozwiązania w zakresie danych na dużą skalę, najlepiej w środowisku od podstaw, i czuje się komfortowo pracując z klientami z listy Fortune 500.

Oczekuje się, że będziesz kierować kierunkiem technicznym, podejmować rozsądne decyzje dotyczące architektury i wspierać rozwój innych inżynierów w zespole. Będziesz ściśle współpracować z klientami i zespołami wewnętrznymi, aby od podstaw projektować i wdrażać platformy i potoki danych klasy korporacyjnej. Ta rola wymaga kogoś, kto potrafi działać przez cały cykl życia, od wczesnej architektury i projektowania, poprzez dostawę i optymalizację, przy jednoczesnym zapewnieniu funkcjonalności, niezawodności i zgodności rozwiązań z potrzebami biznesowymi.

Co będziesz robić - Projektować i budować wielkoskalowe platformy danych w Databricks (Delta Lake, Spark, Unity Catalog) na platformie Azure - Opracowywać i utrzymywać potoki danych wsadowych i strumieniowych dla złożonych źródeł danych o dużej objętości - Wdrażać od podstaw architektury medalion/lakehouse w środowiskach typu greenfield - Budować i optymalizować modele danych do obsługi analiz, raportowania i aplikacji końcowych - Integrować Databricks z systemami korporacyjnymi (interfejsy API, strumienie zdarzeń, hurtownie, uczenie maszynowe) przepływy pracy) - Dostosuj zadania i potoki Spark pod kątem wydajności, niezawodności i kosztów na dużą skalę - Wspieraj wdrożenia produkcyjne, w tym potoki CI/CD, testowanie i zarządzanie wersjami Jak będziesz pracować - Współpracuj bezpośrednio z klientami korporacyjnymi, aby przełożyć wymagania na działające rozwiązania techniczne - Współpraca z architektami, inżynierami i analitykami danych w wielu strumieniach pracy - Równowaga szybkości i jakości, wiedząc, kiedy działać szybciej, a kiedy wzmacniać rozwiązania - Podejmuj pragmatyczne decyzje w niejednoznacznych, rozwijających się środowiskach (szczególnie w przypadku kompilacji od podstaw) - Wnoś praktyczny wkład, kierując jednocześnie projektowaniem i podejściem w całym zespole - Jasno komunikuj kompromisy zarówno technicznym, jak i nietechnicznym interesariuszom - Pracuj w ramach nowoczesnych praktyk inżynierskich (kontrola wersji, przeglądy kodu, testowanie automatyczne) - Wykazana umiejętność mentorowania i wspierania inżynierów i analityków danych Co będziesz posiadać - Kompleksowe dostarczanie rozwiązań danych opartych na kostkach danych - od projektu po wsparcie produkcyjne - Kierownictwo techniczne i kluczowe decyzje dotyczące architektury w przypadku wdrożeń na dużą skalę - Niezawodność potoku danych, monitorowanie i reagowanie na incydenty w środowiska produkcyjne - Wydajność i efektywność kosztowa obciążeń działających w Databricks i Azure - Jakość danych, dostosowanie zarządzania i zgodność ze standardami bezpieczeństwa przedsiębiorstwa - Wzorce, struktury i standardy wielokrotnego użytku do skalowania przyszłych wdrożeń - Opieka mentorska i rozwój techniczny innych inżynierów w zespole Wymagania Pożądane umiejętności i doświadczenie: - Specjalizacja Deep Databricks, w tym doświadczenie w projektowaniu i wdrażaniu kompleksowych rozwiązań Lakehouse, które działają głównie lub całkowicie w oparciu o Databricks. Zaawansowane doświadczenie w zakresie nowoczesnych wzorców architektury Databricks, w tym deklaratywnych potoków/tabel Delta Live Table, Unity Catalog, Delta Lake, orkiestracji przepływu pracy, zarządzania, dostrajania wydajności i monitorowania operacyjnego. - Znajomość infrastruktury jako kodu (Terraform, Bicep), udostępniania środowiska i automatyzacji CI/CD (Github, Azure DevOps) dla platform opartych na Databricks. - Duża elastyczność uczenia się, ciekawość techniczna i wygoda korzystania z przepływów pracy programistycznych lub narzędzi automatyzacji obsługujących sztuczną inteligencję w celu przyspieszenia dostarczania i poprawy jakości. - Znajomość innych nowoczesnych architektur i narzędzi danych w chmurze, w tym natywnych hurtowni danych w chmurze (Snowflake, BigQuery, Redshift), jezior danych, struktur orkiestracji (Airflow/Astronomer), narzędzi do transformacji (dbt), platform katalogowych/zarządczych oraz skalowalnych usług wsadowego lub strumieniowego przetwarzania danych (Kafka, Kinesis). Przedział wynagrodzeń na tym stanowisku wynosi: 13*** *** 000 tys. dolarów.

Rzeczywiste wynagrodzenie w tym zakresie będzie zależeć od umiejętności, doświadczenia, kwalifikacji i lokalizacji danej osoby oraz obowiązujących przepisów prawa pracy. Zakres ten nie obejmuje żadnych bonusów ani prowizji. HIKE2 oferuje szeroką gamę świadczeń, które mogą obejmować świadczenia medyczne, dentystyczne, okulistyczne, 401 tys., wynagrodzenie urlopowe, urlop, zwolnienia chorobowe osobiste i rodzinne i inne.

Nie spełniasz wszystkich wymagań? Jako firma zajmująca się doradztwem w zakresie innowacji zdajemy sobie sprawę, że talent nie zawsze jest powiązany z historią zawodową, a umiejętności wynikają z cennych doświadczeń, które nie zawsze są ukazane w CV. Jeśli nie możesz się doczekać wywarcia pozytywnego wpływu, ale Twoje doświadczenie nie jest idealne, zachęcamy Cię do aplikowania.

Możesz być właściwym kandydatem do naszej organizacji, niezależnie od tego, czy będzie to ta, czy inna rola. Oświadczenie dotyczące zakwaterowania Zobowiązujemy się do zapewnienia rozsądnych udogodnień wykwalifikowanym osobom niepełnosprawnym i szczerze wyznającym przekonania religijne podczas całego procesu rekrutacji. Jeśli potrzebujesz zakwaterowania, aby wypełnić aplikację lub wziąć udział w rozmowie kwalifikacyjnej, daj nam znać.

Powiadomienie BGC Zatrudnienie może być uzależnione od pomyślnego przejścia weryfikacji przeszłości, przeprowadzonej zgodnie z obowiązującymi przepisami federalnymi, stanowymi i lokalnymi. Tylko w przypadku kwalifikujących się kandydatów, na których mają wpływ rozporządzenie w sprawie Fair Chance dla pracodawców hrabstwa Los Angeles, rozporządzenie Fair Chance Initiative for Hiring Ordinance w Los Angeles, rozporządzenie San Francisco Fair Chance, rozporządzenie w sprawie Fair Chance hrabstwa San Diego oraz kalifornijska ustawa Fair Chance Act, w stosownych przypadkach, przy zatrudnieniu będą brane pod uwagę zapisy dotyczące aresztowań lub wyroków skazujących zgodnie z tymi przepisami. W HIKE2 zdajemy sobie sprawę, że zapisy wyroków skazujących mogą mieć bezpośredni, niekorzystny i negatywny związek z obowiązkami takimi jak dostęp do wrażliwych informacji o firmie lub kliencie, zarządzanie zastrzeżonym majątkiem lub ścisła współpraca z członkami zespołu.

Starannie oceniamy te czynniki, aby zapewnić wszystkim bezpieczne i godne zaufania miejsce pracy. Obywatelstwo amerykańskie Ze względu na charakter pracy naszych klientów wszyscy kandydaci muszą mieszkać w USA i posiadać obywatelstwo amerykańskie, aby mogli zostać rozpatrzeni pod kątem zatrudnienia. Hike2 nie może sponsorować zezwoleń na pracę ani wiz ani teraz, ani w przyszłości.

Oświadczenie EEO Jesteśmy pracodawcą zapewniającym równe szanse i zobowiązujemy się do tworzenia włączającego środowiska dla wszystkich pracowników i kandydatów. Wszyscy wykwalifikowani kandydaci otrzymają wynagrodzenie za zatrudnienie bez względu na rasę, kolor skóry, religię, płeć (w tym ciążę, poród lub powiązane schorzenia), orientację seksualną, tożsamość lub ekspresję płciową, pochodzenie narodowe, wiek, niepełnosprawność, informacje genetyczne, chroniony status weterana, stan cywilny lub jakikolwiek inny status chroniony przez obowiązujące prawo federalne, stanowe lub lokalne. Zastrzeżenie Niniejszy opis stanowiska nie jest wyczerpującą listą obowiązków, odpowiedzialności ani kwalifikacji i może być modyfikowany w dowolnym momencie w celu zaspokojenia potrzeb biznesowych.

Aplikuj bezpośrednio na RemoteJobs.org: https://remotejobs.org/remote-jobs/senior-databricks-engineer-hike2