Удаление партиций

Фоновая информация

Партиционирование задается для таблицы при ее первоначальном определении с помощью оператора PARTITION BY. Этот оператор может содержать SQL-выражение на любых колонках, результаты которого определяют, в какую партицию будет отправлена строка.

Части данных логически ассоциируются с каждой партицией на диске и могут запрашиваться в отдельности. В примере ниже мы партиционируем таблицу posts по году, используя выражение toYear(CreationDate). При вставке строк в ClickHouse это выражение будет оцениваться для каждой строки и будет маршрутизироваться в соответствующую партицию, если она существует (если строка является первой для года, партиция будет создана).

 CREATE TABLE posts
(
        `Id` Int32 CODEC(Delta(4), ZSTD(1)),
        `PostTypeId` Enum8('Question' = 1, 'Answer' = 2, 'Wiki' = 3, 'TagWikiExcerpt' = 4, 'TagWiki' = 5, 'ModeratorNomination' = 6, 'WikiPlaceholder' = 7, 'PrivilegeWiki' = 8),
        `AcceptedAnswerId` UInt32,
        `CreationDate` DateTime64(3, 'UTC'),
...
        `ClosedDate` DateTime64(3, 'UTC')
)
ENGINE = MergeTree
ORDER BY (PostTypeId, toDate(CreationDate), CreationDate)
PARTITION BY toYear(CreationDate)

Читать о настройке выражения партиции можно в разделе Как установить выражение партиции.

В ClickHouse пользователи должны в первую очередь рассматривать партиционирование как функцию управления данными, а не как технику оптимизации запросов. Разделяя данные логически по ключу, каждая партиция может обрабатываться независимо, например, удаляться. Это позволяет пользователям перемещать партиции, а значит, и подмножества, между уровнями хранения эффективно по времени или истекать данные/эффективно удалять из кластера.

Удаление партиций

ALTER TABLE ... DROP PARTITION предоставляет экономичный способ удалить целую партицию.

ALTER TABLE table_name [ON CLUSTER cluster] DROP PARTITION|PART partition_expr

Этот запрос помечает партицию как неактивную и полностью удаляет данные, приблизительно за 10 минут. Запрос реплицируется – он удаляет данные на всех репликах.

В примере ниже мы удаляем посты за 2008 год из ранее созданной таблицы, удаляя связанную партицию.

SELECT DISTINCT partition
FROM system.parts
WHERE `table` = 'posts'

┌─partition─┐
│ 2008      │
│ 2009      │
│ 2010      │
│ 2011      │
│ 2012      │
│ 2013      │
│ 2014      │
│ 2015      │
│ 2016      │
│ 2017      │
│ 2018      │
│ 2019      │
│ 2020      │
│ 2021      │
│ 2022      │
│ 2023      │
│ 2024      │
└───────────┘

17 rows in set. Elapsed: 0.002 sec.

ALTER TABLE posts
(DROP PARTITION '2008')

0 rows in set. Elapsed: 0.103 sec.