Data Ocean Flex Loader получил поддержку ClickHouse и патч безопасности

Помимо интеграции с ClickHouse, новая версия платформы упрощает работу с данными в Lakehouse-среде Data Ocean Nova. Теперь пользователи могут передавать файлы формата parquet напрямую, минуя стадию предварительной подготовки. Также расширен инструментарий извлечения данных: в дополнение к Spark-сервисам внедрен прямой доступ к источникам через внешние таблицы MPP-движков, что позволяет эффективнее распределять вычислительные мощности кластера.

Значительные изменения коснулись безопасности: команда устранила 507 уязвимостей, включая 92 критические бреши, доведя показатель защищенности до 98,6%. Как пояснил руководитель разработки Антон Маркин, такой подход к архитектуре позволяет гибко балансировать между регламентной загрузкой и пользовательскими запросами, а обновленная визуализация межкластерной репликации и улучшенное управление ролевым доступом упрощают администрирование системы.