Distinct#


../../_images/distinct.png

Основные сведения#

Шаг “Distinct” применяется для исключения повторяющихся записей из потока данных, что позволяет оставить только уникальные значения. Этот процесс помогает в оптимизации обработки данных, исключая дубликаты и сокращая объем анализируемых данных.

Параметры#

Настройки Шага:

Поле настройки

Варианты значений

Назначение

Step name

-

Название шага в потоке данных

Source step

-

Выбор предыдущего шага

Keys

-

Ключи для проверки уникальности


Кейсы#

  • Очистка данных: Удаление дублирующих записей для упрощения анализа.

  • Подготовка к агрегации: Предварительная очистка данных перед выполнением агрегирующих операций.

Исключения#

  • Выбор ключей: Неправильный выбор ключей может привести к потере важных данных.

  • Потеря информации: Риск потери части данных при неверной настройке шага.

Вариант применения#

Этот компонент проверяет доступность полей шага Distinct. Нажимается кнопка “Distinct” на фронте. Если шаг работает правильно, во вкладке сеть появляется строка “execute” с предварительным просмотром ответа HTTP, в котором должны быть данные о трех записях.

  • Конфигурацию компонента можно скачать здесь.