​YTsaurus — платформа Яндекса для работы с большими данными теперь в опенсорс

YTsaurus позволяет хранить и обрабатывать эксабайты данных, а также выполнять широкий спектр задач — от аналитики до обучения сложных моделей c миллиардами параметров. Все три суперкомпьютера Яндекса управляются планировщиком YTsaurus.

Серверный код "вайтизавра", инфраструктура развертывания с использованием k8s, а также веб-интерфейс системы и клиентский API для распространенных языков программирования (C++, Java, Go и Python) доступны на GitHub под лицензией Apache 2.0. Таким образом, все желающие могут загрузить его на свои серверы и адаптировать под свои нужды.

⤷ Ссылка на проект
⤷ Вакансии для бэкенд-разработчиков

GitHub | #Interesting #opensource #BigData