Distinct#
Основные сведения#
Шаг “Distinct” применяется для исключения повторяющихся записей из потока данных, что позволяет оставить только уникальные значения. Этот процесс помогает в оптимизации обработки данных, исключая дубликаты и сокращая объем анализируемых данных.
Параметры#
Настройки Шага:
Поле настройки |
Варианты значений |
Назначение |
---|---|---|
Step name |
- |
Название шага в потоке данных |
Source step |
- |
Выбор предыдущего шага |
Keys |
- |
Ключи для проверки уникальности |
Кейсы#
Очистка данных: Удаление дублирующих записей для упрощения анализа.
Подготовка к агрегации: Предварительная очистка данных перед выполнением агрегирующих операций.
Исключения#
Выбор ключей: Неправильный выбор ключей может привести к потере важных данных.
Потеря информации: Риск потери части данных при неверной настройке шага.
Вариант применения#
Этот компонент проверяет доступность полей шага Distinct. Нажимается кнопка “Distinct” на фронте. Если шаг работает правильно, во вкладке сеть появляется строка “execute” с предварительным просмотром ответа HTTP, в котором должны быть данные о трех записях.
Конфигурацию компонента можно скачать здесь.