ClickHouse データの更新と削除
ClickHouse は高ボリュームの分析ワークロードに適しているものの、特定の状況では既存のデータを変更または削除できます。これらの操作は「ミューテーション」と呼ばれ、ALTER TABLE コマンドを使用して実行されます。また、ClickHouse の論理削除の機能を使用して、行を DELETE することもできます。
頻繁な更新が必要な場合は、ClickHouse の 重複排除 を使用することを検討してください。これにより、ミューテーションイベントを生成せずに行を更新および/または削除できます。
データの更新
テーブルの行を更新するには ALTER TABLE...UPDATE コマンドを使用します:
ALTER TABLE [<database>.]<table> UPDATE <column> = <expression> WHERE <filter_expr>
<expression> は <filter_expr> を満たすカラムの新しい値です。<expression> はカラムと同じデータ型であるか、CAST 演算子を使用して同じデータ型に変換可能である必要があります。<filter_expr> はデータの各行に対して UInt8(0 または 0 以外)の値を返す必要があります。複数の UPDATE <column> ステートメントをカンマで区切って単一の ALTER TABLE コマンドに組み合わせることができます。
例:
このようなミューテーションは、Dictionaryルックアップを使用して
visitor_idを新しいものに更新できます。ALTER TABLE website.clicks
UPDATE visitor_id = getDict('visitors', 'new_visitor_id', visitor_id)
WHERE visit_date < '2022-01-01'一つのコマンドで複数の値を変更することで、複数のコマンドよりも効率的になります。
ALTER TABLE website.clicks
UPDATE url = substring(url, position(url, '://') + 3), visitor_id = new_visit_id
WHERE visit_date < '2022-01-01'シャード化されたテーブルに対して
ON CLUSTERでミューテーションを実行できます。ALTER TABLE clicks ON CLUSTER main_cluster
UPDATE click_count = click_count / 2
WHERE visitor_id ILIKE '%robot%'
主キーまたはソートキーの一部であるカラムを更新することはできません。
データの削除
行を削除するには、ALTER TABLE コマンドを使用します:
ALTER TABLE [<database>.]<table> DELETE WHERE <filter_expr>
<filter_expr> はデータの各行に対して UInt8 の値を返す必要があります。
例
カラムが値の配列に含まれるレコードを削除する:
ALTER TABLE website.clicks DELETE WHERE visitor_id in (253, 1002, 4277)このクエリは何を変更するのか?
ALTER TABLE clicks ON CLUSTER main_cluster DELETE WHERE visit_date < '2022-01-02 15:00:00' AND page_id = '573'
テーブル内のすべてのデータを削除するには、TRUNCATE TABLE [<database].]<table> コマンドを使用する方が効率的です。このコマンドは ON CLUSTER でも実行できます。
詳細については、DELETE ステートメント ドキュメントページを参照してください。
論理削除
行を削除する別のオプションとして、DELETE FROM コマンドがあります。これは 論理削除 と呼ばれます。削除された行は即座に削除としてマークされ、後続のすべてのクエリから自動的にフィルタリングされるため、パーツのマージを待ったり FINAL キーワードを使用したりする必要はありません。データのクリーンアップはバックグラウンドで非同期に行われます。
DELETE FROM [db.]table [ON CLUSTER cluster] [WHERE expr]
たとえば、次のクエリは、Title カラムに hello というテキストが含まれる hits テーブルのすべての行を削除します。
DELETE FROM hits WHERE Title LIKE '%hello%';
論理削除に関する注意事項:
- この機能は
MergeTreeテーブルエンジンファミリーでのみ利用可能です。 - 論理削除はデフォルトで非同期です。
mutations_syncを 1 に設定すると 1 つのレプリカがステートメントを処理するのを待ち、2 に設定するとすべてのレプリカを待ちます。