Стартап Voltron Data из Маунтин-Вью совершил технологический прорыв. В решении одной из самых критичных, но малообсуждаемых проблем искусственного интеллекта — скорости обработки и трансформации массивных наборов данных. Компания представила аналитический движок Theseus, использующий графические процессоры (GPU) для обработки петабайтных объёмов данных.
В отличие от традиционных производителей баз данных, которые просто добавляли поддержку GPU в существующие системы, Voltron Data создала свой движок с нуля специально для работы с графическими процессорами. «Большинство компаний, пытаясь использовать GPU-ускорение, просто втискивают графические процессоры в существующую систему», — поясняет гендиректор Voltron Data Michael Abbott. «Благодаря созданию системы с нуля мы достигаем ускорения в 10, 20 и даже 100 раз в зависимости от конкретной задачи».
«Все сосредоточены на эффектных новинках, которые можно потрогать и почувствовать, но именно фундамент работы с данными становится ключевым», — подчеркивает Майкл Эбботт, руководитель банковской практики Accenture. «Чтобы ИИ работал, необходимо перемещать данные с такой скоростью, которая раньше была просто не нужна».
Theseus позиционируется как дополнение к существующим платформам вроде Snowflake и Databricks, используя фреймворк Apache Arrow для эффективного перемещения данных. «Это не конкурент, а ускоритель для всех этих баз данных», — поясняет Эбботт. «Используются те же SQL-запросы для получения тех же результатов, но происходит это значительно быстрее благодаря параллельной обработке».
Первые результаты внедрения оказались впечатляющими: компании, использующие Theseus, смогли сократить количество необходимых серверов с 1400 до 14, демонстрируя революционный потенциал технологии в эпоху стремительного развития искусственного интеллекта.