Нажмите «принять», если вы соглашаетесь с условиями обработки куки‑файлов/cookie-файлов и данных о поведении на сайте, нужных нам для аналитики. Запретить обработку куки‑файлов/cookie-файлов можно через браузер
Принять
Nova
Flex Loader
SDI
Lakehouse-платформа данных нового поколения: высокая производительность при минимальных затратах
Инструмент для быстрого наполнения хранилища или озера данных на базе GreenPlum, Hadoop или S3
Low-code инструмент для потоковой обработки и репликации данных
UI Deploy — установка и обновление Data Ocean, UI Control — администрирование платформы, UI Explore — пользовательская self-service среда анализа данных
Platform UI
Высокопроизводительное объектное хранилище данных для аналитики
Data Ocean Store
Узнайте больше о решениях Data Ocean
Ответим на все ваши вопросы и поможем определиться с выбором
Пишите нам:

Только полезное и ничего лишнего

Раз в две недели — только ценная аналитика. Самые важные и интересные новости в одном письме.
Data Ocean Flex Loader 2026.3
Lakehouse-платформа · Пакетная репликация и интеграция данных

Data Ocean Flex Loader 2026.3

Команда Data Sapience представляет очередное обновление инструмента Data Ocean Flex Loader — с поддержкой СУБД ClickHouse и обновленным графическим интерфейсом.

* Указаны изменения и улучшения, являющиеся собственной разработкой Data Sapience и не доступные в open source сообществе

Основные изменения

01
Источники и приемники данных · ClickHouse

Добавлена поддержка СУБД ClickHouse в качестве источника и приемника данных

Закрывает один из самых частых запросов клиентов — отсутствие ClickHouse в списке поддерживаемых систем

02
Графический интерфейс · Межкластерная репликация

Улучшены свойства графического интерфейса

Режим межкластерной репликации данных обрел графические представления. Улучшены возможности ролевого доступа при работе команд

03
Извлечение данных · Новый режим

Представлен новый режим извлечения данных из системы-источника в Lakehouse-платформу Data Ocean Nova

Наряду с сервисом Spark появилась возможность прямого доступа в системы-источники через внешние таблицы MPP-движков

Результаты работы по повышению информационной безопасности · 2026.3
507
Всего устранено
уязвимостей
92
Из них
критических
98,6%
Общий процент
устранения уязвимостей
415
Закрыто
high-уязвимостей

Бизнес-польза

Расширение источников и приемников данных

Поддержка ClickHouse и прямая загрузка parquet-файлов из файловых директорий закрывают запрос клиентов на расширение списка поддерживаемых систем:

  • ClickHouse доступен как источник и как приемник данных;
  • файлы parquet загружаются напрямую в Lakehouse-платформу, без промежуточных шагов.
Удобство работы команд в графическом интерфейсе

Новый GUI для межкластерной репликации и доработанная ролевая модель ускоряют повседневную работу команд.

Стало доступно:

  • управление межкластерной репликацией без обращения к техническим специалистам;
  • более гибкое разграничение прав доступа между участниками команды.

Новый функционал в графическом интерфейсе

«Теперь для извлечения данных пользователи Data Ocean Flex Loader могут использовать не только сервис Spark, но и прямой доступ в системы-источники через механизм внешних таблиц MPP-движков. Это позволит более сбалансированно распределять вычислительные ресурсы в кластере Data Ocean Nova между нуждами пользователей и процессами регламентной загрузки данных. Также рады сообщить, что Flex Loader теперь поддерживает решения на базе СУБД ClickHouse и что в графическом интерфейсе произошли качественные изменения, улучшающие пользовательский опыт».
МА
Антон Маркин руководитель команды разработки Data Ocean Flex Loader
Журнал изменений

Changelog 2026.3

Changelog 2026.3

КомпонентОписаниеТип
Информационная безопасность
Flex LoaderЗакрыты уязвимости информационной безопасностиsec
Источники и приемники данных
Flex LoaderВнедрена поддержка СУБД ClickHouse в качестве источника и приемника данныхnew
Flex LoaderРеализована прямая загрузка файлов типа parquet из файловых директорий в Lakehouse-платформуnew
Flex LoaderСтало доступно опциональное использование внешних таблиц Impala вместо Spark для извлечения данных из систем-источниковfeature
Графический интерфейс
GUIРазработан новый графический интерфейс для управления межкластерной репликациейnew
GUIДоработана ролевая модель доступа в графическом интерфейсеupd
GUIУлучшен пользовательский опыт при работе с расписанием в графическом интерфейсеupd
REST API
REST APIРасширены интеграционные возможности функционала REST APIfeature

С полным списком накопленных изменений и улучшений относительно open source функционала можно ознакомиться на сайте решения.

Вам может быть интересно