Inżynier Big Data

Inżynier Big Data - Remote Bright Vision Technologies to firma zajmująca się doradztwem technologicznym i tworzeniem oprogramowania, dostarczająca rozwiązania w zakresie chmury, sztucznej inteligencji, danych i rozwiązań dla przedsiębiorstw w całych Stanach Zjednoczonych. To fantastyczna okazja, aby dołączyć do uznanej i szanowanej organizacji oferującej ogromny potencjał rozwoju kariery. Stanowisko: Inżynier ds.

Big Data Lokalizacja: W 100% zdalne (USA) Rodzaj stanowiska: Pełny etat, bezpośrednie Zakres wynagrodzeń W2: 90 000 - 110 000 USD Wymagane doświadczenie roczne: ponad 6 lat Sponsoring: Obywatele USA, posiadacze zielonej karty, posiadacze EAD i kandydaci do przeniesienia H-1B zachęcani są do składania aplikacji. Nie możemy sponsorować nowych petycji wizowych H-1B na to stanowisko. Streszczenie stanowiska Poszukujemy doświadczonego inżyniera Big Data do projektowania, budowania i obsługi potoków przetwarzania danych na dużą skalę oraz platform analitycznych w Hadoop i powiązanych ekosystemach big data.

Na tym stanowisku będziesz odpowiedzialny za pozyskiwanie, przekształcanie i analizowanie ogromnych ilości ustrukturyzowanych i nieustrukturyzowanych danych w celu wspierania analityki korporacyjnej, uczenia maszynowego i raportowania obciążeń. Idealny kandydat będzie łączyć głęboką wiedzę techniczną w całym ekosystemie Hadoop z mocnymi podstawami inżynierii oprogramowania i jasnym zrozumieniem, w jaki sposób dostarczać niezawodne, wydajne i opłacalne platformy danych w środowiskach produkcyjnych. Wymagane kwalifikacje - tytuł licencjata w dziedzinie informatyki, inżynierii lub pokrewnej dyscypliny technicznej. - Pięć lub więcej lat doświadczenia zawodowego w projektowaniu i obsłudze potoków dużych zbiorów danych w Hadoop. - Duża praktyczna wiedza z zakresu Apache Spark (Scala, Python lub Java) w środowiskach produkcyjnych. - Solidne doświadczenie z Hive, HDFS, Sqoop, HBase i szerszym ekosystemem Hadoop. - Praktyczne doświadczenie z platformami przesyłania strumieniowego danych, takimi jak Kafka, Spark Streaming lub Flink. - Dobra znajomość języka SQL i doświadczenie w pracy zarówno z relacyjnymi, jak i NoSQL magazynami danych. - Doświadczenie z narzędziami do orkiestracji przepływu pracy, takimi jak Airflow lub Oozie. - Solidne zrozumienie koncepcji systemów rozproszonych, w tym partycjonowania, replikacji i odporności na błędy. - Dobra umiejętność pisania skryptów w Pythonie lub Shell. - Doskonałe umiejętności rozwiązywania problemów, debugowania i dokumentowania.

Preferowane kwalifikacje - doświadczenie w obsłudze Hadoop na platformach chmurowych, takich jak AWS EMR, Azure HDInsight lub Databricks. - Znajomość nowoczesnych formatów domków nad jeziorem (Delta, Iceberg, Hudi). - Znajomość narzędzi do zarządzania danymi, takich jak Apache Atlas lub Collibra. - Doświadczenie z platformami danych opartymi na Kubernetes (Spark-on-K8s, Trino). - Praktyczne doświadczenie w zakresie CI/CD i infrastruktury jako kodu w przepływach pracy inżynierii danych. Jak aplikować Chcesz dowiedzieć się więcej o tej możliwości? W celu natychmiastowego rozpatrzenia prosimy o przesłanie CV do firmy Vision Technologies jest pracodawcą zapewniającym równe szanse.

Oświadczenie dotyczące równych szans zatrudnienia (EEO) Firma Bright Vision Technologies (BV Teck) zobowiązuje się do zapewnienia równych szans zatrudnienia (EEO) wszystkim pracownikom i kandydatom bez względu na rasę, kolor skóry, religię, płeć, orientację seksualną, tożsamość lub ekspresję płciową, pochodzenie narodowe, wiek, informacje genetyczne, niepełnosprawność, status weterana lub jakikolwiek inny status chroniony zgodnie z obowiązującymi przepisami federalnymi, stanowymi lub lokalnymi. Zobowiązanie to rozciąga się na wszystkie aspekty zatrudnienia, w tym rekrutację, zatrudnianie, szkolenia, wynagrodzenia, awanse, przeniesienia, urlopy, rozwiązania stosunku pracy, zwolnienia i odwołania. BV Teck wyraźnie zabrania wszelkich form molestowania lub dyskryminacji w miejscu pracy.

Jakakolwiek niewłaściwa ingerencja w zdolność pracowników do wykonywania obowiązków służbowych może skutkować wszczęciem postępowania dyscyplinarnego, aż do rozwiązania stosunku pracy włącznie. Aplikuj bezpośrednio na RemoteJobs.org: https://remotejobs.org/remote-jobs/big-data-engineer-bright-vision-technologies