Firma zarządzająca nieustrukturyzowanymi danymi Komprise opracowała opatentowaną technologię zdolną do dynamicznego dzielenia ogromnych nieustrukturyzowanych zbiorów danych.Rozwiązanie to rozkłada obciążenia robocze na wiele silników obliczeniowych podczas transmisji danych do procesorów graficznych AI, znacząco przyspieszając ogólną prędkość przetwarzania.
Oficjalnie zarejestrowana jako patent US-12566637-B2, technologia Komprise Elastic Shares (KES) została złożona przez Komprise CTO Michaela Peercy i jego zespół badawczy.Jego formalny tytuł brzmi System i metody podziału nieznanego drzewa do wykonywania operacji przez wiele silników obliczeniowych.??
Peercy stwierdził: "Elastic Shares umożliwia naszym klientom pełne wykorzystanie cennych zasobów komputerowych, pamięci i sieci.pomoc przedsiębiorstwom w uzyskaniu znaczących przewag konkurencyjnych.??
W przypadku zbiorów danych w skali petabytu przesyłanych do serwerów sztucznej inteligencji do celów analitycznych, wnioskowania LLM lub obliczeń agentów sztucznej inteligencji,jeden silnik obliczeniowy wymaga godzin do przechodzenia przez drzewa katalogu lub prefiksy przechowywania obiektówSilnik obliczeniowy może być zdefiniowany jako niezależny serwer, indywidualny wątek, grupa wątków, proces lub klaster procesów, z spójnymi zasadami operacyjnymi we wszystkich scenariuszach.Chociaż użytkownicy mogą wdrożyć wiele silników do obliczeń równoległych z wyprzedzeniemNierównomierne rozmiary gałęzi powodują, że niektóre węzły obliczeniowe kończą wcześnie i pozostają bezczynne, czekając na wolniejsze węzły do zakończenia przydzielonych zadań.
Kompresa patent US-12566637-B2.
Zespół Peercy'ego wynalazł inteligentny harmonogram pracy wbudowany w jeden z silników obliczeniowych, aby monitorować stan węzła w czasie rzeczywistym.Obciążenia robocze są początkowo przydzielane między dostępne silniki obliczeniowePo zakończeniu przydzielonej partycji każdy węzeł wraca do puli zasobów, aby otrzymywać oczekujące zadania.stale przydziela nowe obciążenia do wolnych węzłów obliczeniowych, a także skraca ogólny czas przetwarzania.
Według oficjalnego wpisu na blogu Komprise, KES dynamicznie redystrybuuje nieustrukturyzowane obciążenia danych w klastrach serwerów w sposób strumieniowy.Technologia ta pozwala na osiągnięcie niemal liniowej prędkości przetwarzania danych na dużą skalę bez konieczności wcześniejszych informacji dotyczących pojemności zestawu danych., wewnętrzna struktura lub opóźnienie przetwarzania.
Mówiąc prościej: każdy węzeł obliczeniowy automatycznie otrzymuje nowe zadania natychmiast po zakończeniu bieżących zadań, utrzymując pełne wykorzystanie zasobów do czasu zakończenia całej pracy z danymi.
Michael Peercy.
Dokumenty patentowe wskazują, że duże zadania migracji danych między serwerami plików lub woluminami pamięci masowej często mają ograniczone czas.proces lub samodzielny serwer, nie ma wystarczającej przepustowości do szybkiego zakończenia ciężkich obciążeń roboczych, co sprawia, że proces równoległy z wieloma silnikami jest niezbędnym rozwiązaniem.
Dokument wyjaśnia ponadto, że struktury drzewa katalogu mogą być zidentyfikowane tylko podczas rekursyjnego przechodzenia od węzłów korzenia do liści.np. priorytetowanie katalogu nadrzędnego przed folderami i plikamiWymaga to dynamicznej segmentacji obciążeń roboczych w czasie rzeczywistym zamiast sztywnego, statycznego podziału, który musi dostosować się do różnorodnych i nieznanych architektur danych.
Ta opatentowana technologia ma zastosowanie do plików, folderów, obiektów pamięci masowej i prefiksów obiektów.jest kompatybilny ze wszystkimi rodzajami silników obliczeniowych, w tym wątki, procesy i klastry usług back-endowych.
Komprise podkreśla trzy podstawowe zalety technologii KES:
-
Dynamiczne podziały zadań: Wysokowartościowe zasoby obliczeniowe są natychmiast przydzielane do nowych zadań, gdy stają się nieaktywne.
-
Przetwarzanie danych w sposób ślepy: System obsługuje obliczenia zbiorów danych bez uprzedniej wiedzy o wielkości danych, strukturze wewnętrznej i zmiennej opóźnieniu przetwarzania, doskonale dopasowując się do scenariuszy transmisji danych strumieniowych AI.
-
Inteligentne zrównoważenie zasobów: Automatycznie optymalizuje strategie alokacji w celu dostosowania się do niestrukturyzowanych hierarchii danych o nieprzewidywalnej gęstości gałęzi.
Ta innowacyjna, opatentowana technologia zapewnia praktyczną i wydajną optymalizację dla wielkoskalowych nieustrukturyzowanych procesów obliczeniowych.
Pekin Qianxing Jietong Technology Co., Ltd.
Sandy Yang, dyrektor ds. strategii globalnej
WhatsApp / WeChat: +86 13426366826
Email: yangyd@qianxingdata.com
Strona internetowa: www.qianxingdata.com/www.storagesserver.com
Skoncentruj się na biznesie:
Dystrybucja produktów ICT/Integracja systemów i usługi/Rozwiązania infrastrukturalne
Dzięki ponad 20-letniemu doświadczeniu w dystrybucji IT współpracujemy z wiodącymi światowymi markami w celu dostarczania niezawodnych produktów i profesjonalnych usług.
Używanie technologii do budowy inteligentnego świata•Twój zaufany dostawca usług produktów ICT!
Twoja wiadomość musi mieć od 20 do 3000 znaków!
Polish
