Вход на сайт
Система контроля версий и бекап для распределенных бекапов
3165 просмотров
Перейти к просмотру всей ветки
в ответ wasja-de 03.12.23 11:34
Хранение данных. Совместима с Амазоновским S3 https://github.com/minio/minio
Версионирование данных. https://github.com/iterative/dvc Довольно популярная штука, хотя я не уверен, что это хорошо. Какие-то наши сделали и весной-летом подняли финансирование и искали работников на удаленку.
Обработка данных. https://github.com/ray-project/ray Это просто огонь. Я покурил немного доки и впечатлился. Spark отдыхает. Для обработки и анализа данных. Уже есть на AWS и Azure, хотя относительно новая штука.