O tym stanowisku
Numery telefonów i adresy e-mail w tym ogłoszeniu są ukryte do momentu zalogowania.
auto_translated_note
Fuse Energy to przyszłościowy start-up zajmujący się energią odnawialną, którego misją jest szybkie dostarczenie terawata energii odnawialnej. Łączymy myślenie oparte na pierwszych zasadach z najnowocześniejszą technologią, aby zbudować radykalnie lepszy system energetyczny. Zebraliśmy 210 milionów dolarów od czołowych inwestorów, w tym Multicoin, Balderton, Lakestar, Accel, Creandum, Lowercarbon, Ribbit, Box Group i aniołów strategicznych, takich jak Nico Rosberg, współzałożyciel Solana i GP stojących za Meta, Revolut, Spotify, Uber i nie tylko. W miarę jak centra danych stają się jednym z największych i najszybciej rosnących źródeł zapotrzebowania na energię elektryczną, Fuse rozwija się w kierunku wysokowydajnej infrastruktury obliczeniowej, która znajduje się na skrzyżowaniu energii i sztucznej inteligencji - optymalizacja sposobu planowania, chłodzenia i równoważenia obciążeń GPU o dużej gęstości mocy z warunkami sieci w czasie rzeczywistym.
Poszukujemy inżyniera CUDA, który napisze i zoptymalizuje niskopoziomowy kod GPU, który zasila nasze obciążenia wnioskowania. Będziesz projektować niestandardowe jądra CUDA, dostrajać wydajność w całej przepustowości pamięci i wąskich gardłach obliczeniowych, a także wycisnąć maksymalną przepustowość z każdego procesora graficznego w naszej flocie, pracując na poziomie SM, warpów i hierarchii pamięci. OpportunityFuse prowadzi aktywne dyskusje z głównymi klientami obliczeniowymi AI, którzy potrzebują wydajności centrów danych na wszystkich rynkach, na których działamy, głównie w celu wnioskowania.
Zapotrzebowanie znacznie przewyższa to, co możemy obecnie zbudować, co oznacza, że szybkość wykorzystania mocy, niezawodność i koszty wdrożenia mają większe znaczenie niż wybór konkretnego sprzętu. Stawia to inżynierię wydajności CUDA/GPU w centrum tego, jak Fuse obsługuje największych nabywców komputerów na rynku. Obowiązki Pisanie i optymalizacja niestandardowych jąder CUDA na potrzeby operacji wnioskowania transformatora rdzeniowego.
Profilowanie jąder w celu identyfikowania i eliminowania wąskich gardeł w zajętości, przepustowości pamięci i rozbieżnościach wypaczeń. Stosowanie fuzji jądra, aby zmniejszyć przepływy pamięci i uruchamiać obciążenie w potokach wnioskowania. Optymalizować wzorce dostępu do pamięci i maksymalnie zarządzać hierarchią pamięci wykorzystanie przepustowości.
Wdrażaj jądra obsługujące kwantyzację i arytmetykę o mieszanej precyzji, aby zmniejszyć opóźnienia i zużycie pamięci. Twórz i dostrajaj mechanizmy buforowania w celu wydajnego dekodowania autoregresyjnego. Dostosuj konfiguracje uruchamiania jądra dla docelowych architektur GPU.
Porównaj jądra z istniejącymi wartościami bazowymi i zapewnij mierzalną poprawę przepustowości i opóźnień. Pisz testy dla kodu CUDA, aby wychwycić regresje wydajności i poprawności. Utrzymuj wewnętrzne biblioteki CUDA i wkład w tworzenie standardów i dokumentacji kodowania zespołu.Wymagania Ponad 4 lata pisania produkcyjnego kodu CUDA, z doświadczeniem w dostarczaniu jąder o krytycznym znaczeniu dla wydajności.Dogłębne zrozumienie mikroarchitektury GPU, wypaczeń, obłożenia, ciśnienia w rejestrach i hierarchii pamięci.Doskonała znajomość CUDA C++, w tym strumieni i wykonywania asynchronicznego.Praktyczne doświadczenie w profilowaniu w celu diagnozowania wąskich gardeł związanych z obliczeniami i pamięcią.Doświadczenie w zakresie fuzji jądra, łączenia pamięci i unikanie rozbieżności wypaczeń.Doświadczenie w pisaniu skwantowanych jąder o mieszanej precyzji.Dokładne zrozumienie projektowania algorytmów równoległych i kompromisów w zakresie precyzji numerycznej.Miłe doświadczenie z jądrami transformatorowymi/w stylu uwagi lub dekodowaniem autoregresyjnym.Doświadczenie w budowaniu od podstaw wysokowydajnych bibliotek GPU.Doświadczenie w HPC lub innej inżynierii wydajności krytycznej dla opóźnień.Ekspozycja na optymalizację na poziomie jądra z wieloma procesorami graficznymi lub wieloma węzłami.Wygodna lektura PTX/SASS do sprawdzania wydajności jądra.KorzyściKonkurencyjne wynagrodzenie i premia za włączenie się do akcji.Plan premii półroczny.W pełni opłacana technologia dostosowana do Twoich potrzeb.Dodatek na śniadanie i kolację dla pracowników biurowych.Oryginalnie opublikowane w Himalajach
Pytania spolecznosci
Ktos tu pracowal? Zapytaj przed aplikacja.
Brak watkow dla tej oferty lub firmy.