O tym stanowisku
Numery telefonów i adresy e-mail w tym ogłoszeniu są ukryte do momentu zalogowania.
auto_translated_note
Informacje o roli Będziesz członkiem szybko rozwijającego się zespołu startowego AI, posiadającego niezawodność i jakość infrastruktury do ekstrakcji stron internetowych, która codziennie przetwarza miliony stron za pomocą setek skryptów. Ta rola, podlegająca oddelegowanemu inżynierowi, ma kluczowe znaczenie dla zapewnienia sprawnego i dokładnego działania potoku danych o dużej objętości. Co będziesz robić Utrzymywanie i monitorowanie kolejki segregacyjnej, rozwiązywanie uszkodzonych skrobaków i alerty dotyczące jakości danych, aby zapewnić płynne działanie operacji.
Twórz i wdrażaj nowe skrypty do skrobania sieci dla witryn wymagających ekstrakcji danych. Zweryfikuj zebrane dane pod kątem dokładności i zbadaj rozbieżności. Twórz dashboardy, aby wizualizować i monitorować zebrane dane w czasie rzeczywistym.
Współpracuj z agentami AI, aby wypełnić luki w możliwościach, rozwiązać problemy i ulepszyć istniejące skrypty. Czego szukamy Ponad 1 rok praktycznego doświadczenia zawodowego w tworzeniu lub utrzymywaniu rozwiązań do skrobania stron internetowych. Biegła znajomość TypeScript i Node.js do tworzenia i debugowania skryptów skrobających.
Biegła znajomość języka SQL do wykonywania zapytań i walidacji danych. Doświadczenie z Puppeteer lub podobnymi bibliotekami automatyzacji przeglądarki. Doświadcz debugowania i naprawiania uszkodzonych skryptów skrobania w środowiskach produkcyjnych.
Znajomość kolejek komunikatów (np. RabbitMQ) i systemów asynchronicznego przetwarzania zadań. Doświadczenie z Redis lub podobnymi systemami buforowania w pamięci.
Doświadczenie z Google Cloud Platform lub równoważną infrastrukturą chmurową. Komfort dzięki skryptom bash, git i gRPC.
Znajomość Big
Query lub podobnych rozwiązań do hurtowni danych będzie dodatkowym atutem. Doświadczenie w tworzeniu dashboardów lub narzędzi do wizualizacji danych będzie dodatkowym atutem. Silny komunikator asynchroniczny, który aktywnie sygnalizuje blokady i radzi sobie z niejednoznacznością w dynamicznym środowisku.
Dostępność przez ponad 8 godzin dziennie z możliwością nakładania się na godziny pracy w USA. LokalizacjaW pełni odległa - mile widziane wszystkie strefy czasowe, pod warunkiem, że godziny pracy pokrywają się z godzinami pracy w USA. Oryginalnie opublikowano w Himalajach
Pytania spolecznosci
Ktos tu pracowal? Zapytaj przed aplikacja.
Brak watkow dla tej oferty lub firmy.