O tym stanowisku
auto_translated_note
ZATRUDNIAMY: Inżyniera - inżynieria danych Lokalizacja: Sri Lanka Rodzaj zatrudnienia: Firma kontraktowa Branża: Oprogramowanie Stanowisko Przegląd Poszukujemy zmotywowanego i wykwalifikowanego technicznie inżyniera - inżynieria danych do projektowania, rozwijania i utrzymywania skalowalnych rozwiązań w zakresie danych dla przedsiębiorstw oraz aplikacji do przetwarzania danych w chmurze. Wybrany kandydat będzie odpowiedzialny za budowanie niezawodnych potoków danych, integrowanie systemów wieloźródłowych, przetwarzanie dużych ilości danych oraz wspieranie rozwiązań w całym cyklu życia oprogramowania. Stanowisko wymaga silnych umiejętności programowania, praktycznego doświadczenia w chmurze oraz umiejętności efektywnej pracy w środowisku Agile i DevOps.
Kluczowe obowiązki - Projektowanie i opracowywanie skalowalnych rozwiązań do przetwarzania danych klasy korporacyjnej. - Twórz rozproszone i wysoce dostępne aplikacje danych, które obsługują wymagania biznesowe na dużą skalę. - Projektuj, rozwijaj, testuj i utrzymuj potoki danych łączące wiele systemów źródłowych i platform docelowych. - Opracuj przepływy pracy ETL i ELT do przetwarzania danych wsadowych i niemal w czasie rzeczywistym. - Przetwarzaj, przekształcaj i sprawdzaj duże ilości danych ustrukturyzowanych i nieustrukturyzowanych. - Twórz natywne rozwiązania w zakresie danych w chmurze, korzystając z usług Google Cloud Platform. - Twórz przepływy pracy związane z przetwarzaniem i orkiestracją danych za pomocą narzędzi takich jak Airflow i Cloud Composer. - Pracuj z usługami takimi jak BigQuery, Dataflow, Dataproc, Datastream, Pub/Sub, Cloud Functions i Cloud Run. - W razie potrzeby wspieraj rozwiązania do przetwarzania danych przy użyciu usług AWS, takich jak Glue, Lambda, EMR i Data Pipeline. - Twórz aplikacje do przetwarzania danych przy użyciu Pythona, skryptów Shell i SQL. - Projektuj i optymalizuj rozwiązania wykorzystujące relacyjne bazy danych, bazy danych NoSQL i silniki rozproszonej pamięci masowej. - Obsługa aplikacji do przesyłania strumieniowego danych przy użyciu technologii takich jak Kafka, Pub/Sub, Spark lub podobnych narzędzi. - Udział w rozwoju hurtowni danych, hurtowni danych, jezior danych i rozwiązań typu siatka danych. - Stosuj najlepsze praktyki inżynierii oprogramowania, aby zapewnić czysty, nadający się do ponownego użycia, łatwy w utrzymaniu i wysokiej jakości kod. - Uczestnictwo w przeglądach kodu, dyskusjach na temat projektów technicznych i działaniach związanych z architekturą rozwiązań. - Wdrażanie i utrzymywanie potoków ciągłej integracji i ciągłego dostarczania. - Korzystaj z narzędzi do zarządzania kodem i automatyzacji, takich jak GitHub, GitLab, Jenkins lub równoważne platformy. - Postępuj zgodnie z zasadami DevOps podczas programowania, testowania, wdrażania i wsparcia produkcyjnego. - Monitoruj stan aplikacji, wydajność potoku danych i niezawodność systemu. - Badanie i rozwiązywanie błędów przetwarzania danych, problemów z wydajnością i incydentów produkcyjnych. - W razie potrzeby korzystaj z platform monitorujących, takich jak Datadog lub równoważnych narzędzi. - Współpraca z inżynierami oprogramowania, inżynierami danych, inżynierami jakości, analitykami, architektami i interesariuszami produktu. - Weź udział w działaniach Agile, w tym w planowaniu sprintów, codziennych stand-upach, przeglądach i retrospekcjach. - Wspieranie dostosowania technicznego pomiędzy członkami zespołu i przyczynianie się do planowania wdrożenia. - Utrzymanie dokumentacji technicznej, mapowania danych, projektów rozwiązań i procedur operacyjnych. - Stale oceniaj nowe narzędzia inżynierii danych, usługi w chmurze i praktyki programistyczne. Profil kandydata - tytuł licencjata w dziedzinie informatyki, inżynierii oprogramowania, technologii informatycznych lub równoważnej dziedzinie. - Minimum 1-2 lata doświadczenia w tworzeniu aplikacji do przetwarzania danych klasy korporacyjnej. - Dobra umiejętność programowania w Pythonie, skryptach Shell i SQL. - Praktyczne doświadczenie w przetwarzaniu dużych ilości danych. - Doświadczenie w projektowaniu i rozwijaniu potoków danych ETL lub ELT. - Praktyczne doświadczenie z relacyjnymi bazami danych, bazami danych NoSQL i rozproszonymi silnikami pamięci masowej. - Praktyczne doświadczenie z Google Cloud Platform. - Doświadczenie z usługami GCP, takimi jak BigQuery, Dataflow, Dataproc, Datastream, Pub/Sub, Cloud Functions, Cloud Run i Cloud Composer. - Znajomość narzędzi ETL i orkiestracji, takich jak Airflow. - Znajomość usług danych AWS, takich jak Glue, Lambda, EMR, Spark, Hive lub Data Pipeline będzie zaletą. - Doświadczenie w pracy z technologiami streamingowymi takimi jak Kafka, Pub/Sub, Storm lub Spark Streaming będzie dodatkowym atutem. - Dobra znajomość systemów rozproszonych, skalowalnych architektur i przetwarzania danych w chmurze. - Doświadczenie w pracy w środowiskach Scrum i Agile. - Znajomość praktyk DevOps i procesów cyklu życia oprogramowania. - Doświadczenie z narzędziami do kontroli źródła i CI/CD, takimi jak GitHub, GitLab i Jenkins. - Znajomość narzędzi do monitorowania aplikacji, takich jak Datadog lub równoważna platforma będzie zaletą. - Preferowane będzie zrozumienie koncepcji hurtowni danych, hurtowni danych, jezior danych lub koncepcji siatki danych. - Dobra znajomość standardów inżynierii oprogramowania, praktyk testowania i zasad jakości kodu. - Silne umiejętności analityczne, rozwiązywania problemów i rozwiązywania problemów. - Silne umiejętności komunikacji pisemnej i werbalnej. - Umiejętność jasnego komunikowania pomysłów technicznych i wpływania na decyzje wdrożeniowe. - Umiejętność współpracy w ramach interdyscyplinarnych zespołów technicznych. - Proaktywni, elastyczni i zaangażowani w ciągłe uczenie się i rozwój zawodowy. - Duże zainteresowanie budowaniem i utrzymywaniem niezawodnych, wysokowydajnych rozwiązań w zakresie danych. Gotowy, aby przenieść swoją karierę na nowy poziom?
Jesteśmy In
Talent Asia, Twoim partnerem rekrutacyjnym na Sri Lance i mamy dla Ciebie ekscytującą okazję! Nasz klient poszukuje dynamicznej osoby na stanowisko Inżyniera - Inżynierii Danych. Aplikuj już teraz i przekonaj się, jak idealnie nadajesz się na to ekskluzywne stanowisko! #InTalentAsia #CareerOpportunity #JobVacancy #DataEngineer #DataEngineering #GoogleCloudPlatform #PythonJobs #CloudData #ETL #ElevateYourCareer Aplikuj bezpośrednio na RemoteJobs.org: https://remotejobs.org/remote-jobs/engineer-data-engineering-intalent-asia