Нажмите «принять», если вы соглашаетесь с условиями обработки куки‑файлов/cookie-файлов и данных о поведении на сайте, нужных нам для аналитики. Запретить обработку куки‑файлов/cookie-файлов можно через браузер
Принять
Nova
Flex Loader
SDI
Lakehouse-платформа данных нового поколения: высокая производительность при минимальных затратах
Инструмент для быстрого наполнения хранилища или озера данных на базе GreenPlum, Hadoop или S3
Low-code инструмент для потоковой обработки и репликации данных
UI Deploy — установка и обновление Data Ocean, UI Control — администрирование платформы, UI Explore — пользовательская self-service среда анализа данных
Platform UI
Высокопроизводительное объектное хранилище данных для аналитики
Store
Узнайте больше о решениях Data Ocean
Ответим на все ваши вопросы и поможем определиться с выбором
Пишите нам:

Только полезное и ничего лишнего

Раз в две недели — только ценная аналитика. Самые важные и интересные новости в одном письме.
/
/
Оптимизация MPP-кластера...

Оптимизация MPP-кластера: предсказываем потребление памяти SQL-запросов

22.07.2026
В блоге Data Sapience на Habr вышла новая статья.
Ресурсы вычислительного кластера всегда ограничены, а запросов — десятки и сотни тысяч в день. Проблема в том, что движок плохо угадывает, сколько памяти реально нужно запросу, и закладывает избыточный резерв. В пиковые часы это выливается в простой ресурсов, очереди и угрозу для SLA.

В статье показываем, как решить это с помощью AI: наш сервис предсказывает потребление памяти SQL-запросами для StarRocks и Impala и встроен прямо в платформу данных Data Ocean Nova.

В материале разбираем:
  • какие механизмы управления ресурсами в конкурентной нагрузке существуют в процессинговых движках Data Ocean Nova;
  • что из себя представляет специализированный платформенный AI-сервис Nova qModel;
  • как qModel повышает пропускную способность StarRocks и Impala и как интегрируется с пользовательским окружением — от API до кнопки в интерфейсе.

Вам может быть интересно