Открытые табличные форматы

Документация по озерам данных

В этом разделе мы рассмотрим, как ClickHouse поддерживает озера данных. ClickHouse поддерживает многие популярные табличные форматы и каталоги данных, включая Iceberg, Delta Lake, Hudi, AWS Glue, REST Catalog, Unity Catalog и Microsoft OneLake.

​

Iceberg

См. iceberg, которая поддерживает чтение из Amazon S3 и S3-совместимых сервисов, HDFS, Azure и локальных файловых систем. icebergCluster — распределённый вариант функции iceberg.

​

Delta Lake

См. deltaLake, которая поддерживает чтение из Amazon S3, S3-совместимых сервисов, Azure и локальных файловых систем. deltaLakeCluster — распределённый вариант функции deltaLake.

​

Hudi

См. hudi: эта функция поддерживает чтение из Amazon S3 и S3-совместимых сервисов. hudiCluster — распределённый вариант функции hudi.

​

Каталоги данных

​

AWS Glue

Каталог данных AWS Glue можно использовать с таблицами Iceberg. Его можно использовать как с движком таблицы iceberg, так и с движком базы данных DataLakeCatalog.

​

Iceberg REST Catalog

Iceberg REST Catalog можно использовать с таблицами Iceberg. Он поддерживается как в движке таблиц iceberg, так и в движке базы данных DataLakeCatalog.

​

Unity Catalog

Unity Catalog можно использовать как с таблицами Delta Lake, так и с таблицами Iceberg. Его можно использовать с движками таблиц iceberg и deltaLake или с движком базы данных DataLakeCatalog.

​

Microsoft OneLake

Microsoft OneLake можно использовать как с таблицами Delta Lake, так и с таблицами Iceberg. Его также можно использовать с движком базы данных DataLakeCatalog.