LowCardinality(T)

Документация по оптимизации LowCardinality для строковых столбцов

Преобразует внутреннее представление других типов данных в словарно-кодированное.

​

Синтаксис

LowCardinality(data_type)

Параметры

• data_type — String, FixedString, Date, DateTime и числовые типы, кроме Decimal. Использование LowCardinality для некоторых типов данных неэффективно, см. описание настройки allow_suspicious_low_cardinality_types.

​

Описание

LowCardinality — это надстройка, которая изменяет способ хранения и правила обработки данных. ClickHouse применяет словарное кодирование к столбцам LowCardinality. Работа с данными, закодированными с помощью словаря, существенно повышает производительность запросов SELECT во многих сценариях.

Эффективность использования типа данных LowCardinality зависит от разнообразия данных. Если словарь содержит менее 10 000 уникальных значений, ClickHouse в большинстве случаев обеспечивает более высокую эффективность чтения и хранения данных. Если словарь содержит более 100 000 уникальных значений, ClickHouse может работать хуже по сравнению с обычными типами данных.

Рекомендуется использовать LowCardinality вместо Enum при работе со строками. LowCardinality обеспечивает большую гибкость и часто дает такую же или более высокую эффективность.

​

Пример

Создайте таблицу со столбцом типа LowCardinality:

CREATE TABLE lc_t
(
    `id` UInt16,
    `strings` LowCardinality(String)
)
ENGINE = MergeTree()
ORDER BY id

​

Связанные настройки и функции

Настройки:

• low_cardinality_max_dictionary_size
• low_cardinality_use_single_dictionary_for_part
• low_cardinality_allow_in_native_format
• allow_suspicious_low_cardinality_types
• output_format_arrow_low_cardinality_as_dictionary

Функции:

• toLowCardinality

​

Похожие материалы

• Блог: Оптимизация ClickHouse с помощью схем и кодеков
• Блог: Работа с данными временных рядов в ClickHouse
• Оптимизация типа String (видеопрезентация на русском). Слайды на английском языке