wiadomości o firmie Starburst obsługuje procesory graficzne do szybszej rozproszonej analizy danych

Starburst osiąga 3-4 razy szybsze odpowiedzi na zapytania analizy AI dzięki zastosowaniu procesorów graficznych zamiast procesorów.

Firma rozwija i wykorzystuje otwarte, rozproszone silniki SQL Trino do odpytywania i analizowania rozproszonych źródeł danych, wcześniej polegając na procesorach x86 do przetwarzania zapytań. Jej oprogramowanie może wykonywać zapytania danych w arkuszach kalkulacyjnych, bazach danych, hurtowniach danych w chmurze i lakehouse'ach. W maju Dell zaktualizował swoje portfolio produktów AI Factory. Kluczowa aktualizacja: platforma zawiera silnik analizy danych oparty na Starburst z akceleracją GPU dla analiz SQL, zapewniający do 6 razy szybszą wydajność zapytań w porównaniu do systemów bez GPU na procesorach Nvidia Blackwell, z planowanym wsparciem dla przyszłego sprzętu Vera.

Dyrektor generalny Starburst, Justin Borgman, poinformował podczas briefingu, że oprogramowanie Starburst obsługuje teraz procesory Nvidia Vera i procesory graficzne Rubin. Zapytany o pozycję rynkową Starburst w porównaniu do Databricks i Snowflake, Borgman skomentował: „To klasyczna kooperacja. Współpracujemy z perspektywy klienta i współdziałamy z tymi platformami, odpytując ich dane. Jeśli jesteś dużą bankiem korzystającym z Databricks, Snowflake, Teradata, IBM i Oracle, Starburst uzupełnia wszystkie te systemy. To kluczowe dla naszej strategii, dając klientom elastyczność w zachowaniu ich istniejących inwestycji technologicznych. Po stronie konkurencyjnej obie platformy dążą do tego, aby służyć jako jedno, zunifikowane źródło danych.”

„Rywalizujemy o pewne obciążenia, ale nasza architektura jest inna. Dla dużych przedsiębiorstw dostarczamy unikalną wartość, której nie mogą dorównać: federacja danych i wdrożenia hybrydowe. Obsługujemy operacje lokalne, podczas gdy te dwie platformy działają tylko w chmurze.”

Kontynuował: „Partnerstwo z Nvidia staje się atrakcyjne, ponieważ teraz obsługujemy procesory graficzne obok procesorów. Nvidia wypuściła w tym roku nowy procesor, chociaż procesory graficzne pozostają jej głównym biznesem. Przedsiębiorstwa mogą wykorzystywać istniejące procesory graficzne, w tym niewykorzystaną moc, do uruchamiania obciążeń analitycznych i uzyskiwania większej elastyczności.”

„Rozpoczęliśmy tę pracę na początku roku i właśnie wydaliśmy pierwszą wersję, zbudowaną przy użyciu cuDF, otwartego zestawu narzędzi NVIDIA CUDA-X do przetwarzania danych strukturalnych. Zbudowany na zoptymalizowanych prymitywach CUDA, cuDF wykorzystuje równoległość GPU i przepustowość pamięci do przyspieszenia przetwarzania danych i potoków analitycznych.”

Borgman stwierdził: „Widzimy silną wydajność, około trzy do czterech razy szybszą niż procesory. Procesory graficzne wiążą się z wyższymi kosztami, które należy uwzględnić w planowaniu kosztów i wydajności. Jednak wczesne przypadki użycia pokazują, że duże banki zakupiły procesory graficzne, które nie pracują stale z pełną wydajnością. Ponieśli już te wydatki kapitałowe; uruchamianie analiz wsadowych poza godzinami pracy może zwiększyć wykorzystanie GPU z 60% do 90%.”

Przedstawił dwa podejścia operacyjne: „Można zaplanować zadania na znane okna bezczynności, takie jak od 21:00 do północy. Obsługujemy również monitorowanie wykorzystania GPU w czasie rzeczywistym, aby dynamicznie planować zadania, gdy dostępne są wolne zasoby.”

Nvidia zyskuje, ponieważ rozszerza swój całkowity rynek docelowy.

Zapytany, co zapoczątkowało tę inicjatywę, Borgman powiedział: „Przypadek odegrał dużą rolę. Na początku tego roku Nvidia skontaktowała się z nami, aby przetestować jej nowy procesor Vera, oznaczający wejście na rynek procesorów. Nasze testy wykazały, że Starburst działał znacznie szybciej na Vera w porównaniu do procesorów Intel. Nvidia zaprezentowała wyniki naszych testów w prezentacji keynote Jensena, co zapoczątkowało naszą współpracę. Następnie Nvidia zasugerowała, abyśmy ocenili ich framework cuDF, aby umożliwić działanie Starburst na GPU.”

Uzyskany wzrost wydajności wynosi od 3x do 7x, w zależności od złożoności zapytania, przy czym największe i najbardziej złożone zapytania osiągają 7-krotne przyspieszenie.

Borgman uważa, że zmienia to pozycjonowanie Starburst w porównaniu do Databricks i Snowflake: „To nas wyróżnia. Databricks i Snowflake to usługi natywne dla chmury, które wliczają koszty obliczeniowe w swój model cenowy, zmniejszając ich marże zysku. Pozwalamy klientom wdrażać rozwiązania na własnej infrastrukturze. Ci dostawcy chmury muszą stale szukać najtańszych obliczeń, co nie idzie w parze z droższym sprzętem Nvidia. Wierzymy, że jesteśmy jedyną platformą danych dla przedsiębiorstw, która jest dobrze przygotowana do partnerstwa z Nvidia w tej przestrzeni.”

Beijing Qianxing Jietong Technology Co., Ltd.
Sandy Yang/Dyrektor ds. Strategii Globalnej
WhatsApp / WeChat: +86 13426366826
Email: yangyd@qianxingdata.com
Strona internetowa: www.qianxingdata.com/www.storagesserver.com
Fokus biznesowy:
Dystrybucja produktów ICT/Integracja systemów i usługi/Rozwiązania infrastrukturalne
Z ponad 20-letnim doświadczeniem w dystrybucji IT, współpracujemy z wiodącymi globalnymi markami, dostarczając niezawodne produkty i profesjonalne usługi.
„Wykorzystując technologię do budowania inteligentnego świata” Twój zaufany dostawca usług w zakresie produktów ICT!