ORDER BY 절에는 다음이 포함될 수 있습니다.
- 표현식 목록(예:
ORDER BY visits, search_phrase) SELECT절의 컬럼을 가리키는 숫자 목록(예:ORDER BY 2, 1) 또는SELECT절의 모든 컬럼을 의미하는ALL(예:ORDER BY ALL)
ALL 기준 정렬을 비활성화하려면 enable_order_by_all 설정을 0으로 지정하세요.
ORDER BY 절에는 정렬 방향을 지정하는 DESC(내림차순) 또는 ASC(오름차순) 수정자를 사용할 수 있습니다.
정렬 순서를 명시적으로 지정하지 않으면 기본적으로 ASC가 사용됩니다.
정렬 방향은 전체 목록이 아니라 개별 표현식에 적용됩니다. 예를 들어 ORDER BY Visits DESC, SearchPhrase와 같습니다.
또한 정렬은 대소문자를 구분하여 수행됩니다.
정렬 표현식 값이 동일한 행은 임의적이며 비결정적인 순서로 반환됩니다.
SELECT SQL 문에서 ORDER BY 절을 생략한 경우에도 행의 순서는 임의적이며 비결정적입니다.
특수 값의 정렬
NaN 및 NULL의 정렬 순서에는 두 가지 방식이 있습니다.
- 기본값 또는
NULLS LAST수정자를 사용하는 경우: 일반 값이 먼저 오고, 그다음NaN, 마지막으로NULL이 옵니다. NULLS FIRST수정자를 사용하는 경우:NULL이 먼저 오고, 그다음NaN, 마지막으로 다른 값이 옵니다.
예시
SELECT * FROM t_null_nan ORDER BY y NULLS FIRST를 실행하십시오:
Collation 지원
ORDER BY SearchPhrase COLLATE 'tr' - 문자열이 UTF-8 encoded라고 가정할 때, 터키어 알파벳을 사용하여 키워드를 오름차순으로 정렬하며 대소문자는 구분하지 않습니다. COLLATE는 ORDER BY의 각 표현식마다 독립적으로 지정하거나 생략할 수 있습니다. ASC 또는 DESC를 지정하는 경우 COLLATE는 그 뒤에 지정합니다. COLLATE를 사용하면 정렬은 항상 대소문자를 구분하지 않습니다.
COLLATE는 LowCardinality, 널 허용, 배열, Tuple에서 지원됩니다.
COLLATE를 사용한 정렬은 일반적인 바이트 기준 정렬보다 효율이 낮으므로, 소수의 행을 최종 정렬할 때만 사용하는 것을 권장합니다.
Collation 예시
Query
Response
Query
Response
Query
Response
Query
Response
Response
Query
Response
구현 세부 사항
ORDER BY와 함께 충분히 작은 LIMIT를 지정하면 RAM 사용량을 줄일 수 있습니다. 그렇지 않으면 정렬에 사용되는 메모리 양은 정렬할 데이터의 양에 비례합니다. 분산 쿼리 처리에서는 GROUP BY를 생략할 경우 정렬의 일부가 원격 서버에서 수행되고, 결과는 요청을 보낸 서버에서 머지됩니다. 즉, 분산 정렬에서는 정렬해야 하는 데이터 양이 단일 서버의 메모리 용량보다 클 수 있습니다.
RAM이 충분하지 않으면 외부 메모리(external memory)에서 정렬을 수행할 수 있습니다(디스크에 임시 파일 생성). 이를 위해 max_bytes_before_external_sort 설정을 사용하십시오. 이 값이 0(기본값)으로 설정되어 있으면 외부 정렬은 비활성화됩니다. 이 기능을 활성화하면 정렬할 데이터 양이 지정된 바이트 수에 도달할 때 수집된 데이터를 정렬한 뒤 임시 파일에 덤프합니다. 모든 데이터를 읽고 나면 정렬된 모든 파일을 머지하여 결과를 출력합니다. 파일은 설정의 /var/lib/clickhouse/tmp/ 디렉터리에 기록됩니다(기본값이며, tmp_path 매개변수를 사용해 이 설정을 변경할 수 있습니다). 또한 쿼리가 메모리 제한을 초과하는 경우에만 디스크로 스필을 사용하도록 설정할 수도 있습니다. 즉, max_bytes_ratio_before_external_sort=0.6으로 설정하면 쿼리가 메모리 제한(사용자/서버)의 60%에 도달했을 때만 디스크로 스필이 활성화됩니다.
쿼리를 실행할 때 max_bytes_before_external_sort보다 더 많은 메모리를 사용할 수 있습니다. 따라서 이 설정값은 max_memory_usage보다 충분히 작아야 합니다. 예를 들어 서버에 RAM이 128 GB 있고 단일 쿼리 하나를 실행해야 한다면 max_memory_usage를 100 GB로, max_bytes_before_external_sort를 80 GB로 설정하십시오.
외부 정렬은 RAM에서 수행하는 정렬보다 훨씬 덜 효율적입니다.
데이터 읽기 최적화
ORDER BY 표현식에 테이블 정렬 키와 일치하는 접두사가 있으면 optimize_read_in_order 설정을 사용해 쿼리를 최적화할 수 있습니다.
optimize_read_in_order 설정이 활성화되면 ClickHouse 서버는 테이블 인덱스를 사용해 ORDER BY 키 순서대로 데이터를 읽습니다. 이렇게 하면 LIMIT가 지정된 경우 모든 데이터를 읽지 않아도 됩니다. 따라서 LIMIT가 작은 대용량 데이터 쿼리를 더 빠르게 처리할 수 있습니다.
이 최적화는 ASC와 DESC 모두에서 동작하며, GROUP BY 절 및 FINAL 수정자와는 함께 사용할 수 없습니다.
optimize_read_in_order 설정이 비활성화되면 ClickHouse 서버는 SELECT 쿼리를 처리하는 동안 테이블 인덱스를 사용하지 않습니다.
ORDER BY 절이 있고 LIMIT이 크며, 조회 대상 데이터를 찾기 전에 매우 많은 레코드를 읽어야 하는 WHERE 조건이 있는 쿼리를 실행할 때는 optimize_read_in_order를 수동으로 비활성화하는 것이 좋습니다.
이 최적화는 다음 테이블 엔진에서 지원됩니다.
MaterializedView 엔진 테이블에서는 SELECT ... FROM merge_tree_table ORDER BY pk와 같은 뷰에서 이 최적화가 동작합니다. 하지만 뷰 쿼리에 ORDER BY 절이 없으면 SELECT ... FROM view ORDER BY pk와 같은 쿼리에서는 지원되지 않습니다.
ORDER BY Expr WITH FILL 수정자
WITH FILL 수정자는 ORDER BY expr 뒤에 지정할 수 있으며, 필요에 따라 FROM expr, TO expr, STEP expr 매개변수를 함께 사용할 수 있습니다.
expr 컬럼에서 누락된 모든 값은 순차적으로 채워지며, 다른 컬럼은 기본값으로 채워집니다.
여러 컬럼을 채우려면 ORDER BY 섹션에서 각 필드 이름 뒤에 선택적 매개변수와 함께 WITH FILL 수정자를 추가하십시오.
Query
WITH FILL은 Numeric(모든 종류의 float, decimal, int) 또는 Date/DateTime 타입의 필드에 적용할 수 있습니다. String 필드에 적용하면 누락된 값은 빈 문자열로 채워집니다.
FROM const_expr가 정의되지 않으면 채우기 시퀀스는 ORDER BY의 expr 필드 최솟값을 사용합니다.
TO const_expr가 정의되지 않으면 채우기 시퀀스는 ORDER BY의 expr 필드 최댓값을 사용합니다.
STEP const_numeric_expr가 정의되면 const_numeric_expr는 숫자 타입에서는 as is로, Date 타입에서는 days로, DateTime 타입에서는 seconds로 해석됩니다. 또한 시간 및 날짜 인터벌을 나타내는 INTERVAL 데이터 타입도 지원합니다.
STEP const_numeric_expr를 생략하면 채우기 시퀀스는 숫자 타입에는 1.0, Date 타입에는 1 day, DateTime 타입에는 1 second를 사용합니다.
STALENESS const_numeric_expr가 정의되면 원본 데이터에서 이전 행과의 차이가 const_numeric_expr를 초과할 때까지 쿼리가 행을 생성합니다.
INTERPOLATE는 ORDER BY WITH FILL에 포함되지 않는 컬럼에 적용할 수 있습니다. 이러한 컬럼은 이전 필드 값을 기준으로 expr를 적용해 채워집니다. expr가 없으면 이전 값을 반복합니다. 목록을 생략하면 허용되는 모든 컬럼이 포함됩니다.
WITH FILL이 없는 쿼리 예시:
Query
Response
WITH FILL 수정자를 적용한 동일한 쿼리:
Query
Response
ORDER BY field2 WITH FILL, field1 WITH FILL을 사용하는 경우, 채우기 순서는 ORDER BY 절에 지정된 필드 순서를 따릅니다.
예시:
Query
Response
d1은 채워지지 않고 기본값도 사용되지 않습니다. 이는 d2 값에 반복값이 없어 d1의 시퀀스를 올바르게 계산할 수 없기 때문입니다.
다음은 ORDER BY의 필드를 변경한 쿼리입니다:
Query
Response
d1 컬럼에서 채워지는 각 값에 대해 1일 INTERVAL 데이터 타입을 사용합니다:
Query
Response
STALENESS를 사용하지 않는 쿼리 예시:
Query
Response
STALENESS 3를 적용한 후 동일한 쿼리:
Query
Response
INTERPOLATE가 없는 쿼리 예시:
Query
Response
INTERPOLATE를 적용한 동일한 쿼리:
Query
Response
정렬 접두사별 그룹화된 데이터 채우기
sensor_id 컬럼을 채우기를 적용할 timestamp 컬럼의 정렬 접두사로 사용합니다:
value 컬럼을 9999로 보간했습니다.
이 동작은 use_with_fill_by_sorting_prefix 설정으로 제어되며, 기본적으로 활성화되어 있습니다.