sys.pdw_nodes_column_store_row_groups (Transact-SQL)
適用対象: Azure Synapse Analytics
Analytics Platform System (PDW)
Azure Synapse Analytics で管理者がシステム管理を決定できるように、セグメントごとにクラスター化列ストア インデックス情報を提供します。 sys.pdw_nodes_column_store_row_groups には、物理的に格納されている行の合計数 (削除済みとしてマークされているものを含む) の列と、削除済みとしてマークされた行数の列があります。 sys.pdw_nodes_column_store_row_groupsを使用して、削除された行の割合が高く、再構築する必要がある行グループを決定します。
列名 | データ型 | 説明 |
---|---|---|
object_id | int | 基になるテーブルの ID。 これはコンピューティング ノード上の物理テーブルであり、制御ノードの論理テーブルのobject_idではありません。 たとえば、object_idが sys.tables のobject_idと一致しません。 sys.tables と結合するには、sys.pdw_index_mappingsを使用します。 |
index_id | int | object_id テーブルのクラスター化列ストア インデックスの ID。 |
partition_number | int | 行グループの row_group_idを保持するテーブル パーティションの ID。 partition_numberを使用して、この DMV を sys.partitions に参加させることができます。 |
row_group_id | int | この行グループの ID。 これはパーティション内で一意です。 |
dellta_store_hobt_id | bigint | デルタ行グループの hobt_id で、行グループの種類がデルタではない場合は NULL。 デルタ行グループとは、新しいレコードを受け入れる読み取り/書き込み行グループのことです。 デルタ行グループには、 OPEN 状態があります。 デルタ行グループは、行ストア形式のままであり、列ストア形式に圧縮されていません。 |
state | tinyint | state_descriptionに関連付けられている ID 番号。 1 = OPEN 2 = CLOSED 3 = COMPRESSED |
state_desccription | nvarchar(60) | 行グループの永続的な状態の説明: OPEN - 新しいレコードを受け入れる読み取り/書き込み行グループ。 開いている行グループは引き続き行ストア形式であり、列ストア形式に圧縮されていません。 CLOSED - タプル ムーバー プロセスによって塗りつぶされたが、まだ圧縮されていない行グループ。 COMPRESSED - 塗りつぶしと圧縮が行われる行グループ。 |
total_rows | bigint | 行グループに物理的に格納されている行の合計。 一部は削除されている可能性がありますが、まだ保存されています。 行グループ内の行の最大数は 1,048,576 (16 進数の FFFFF) です。 |
deleted_rows | bigint | 削除対象としてマークされている行グループに物理的に格納されている行の数。 DELTA 行グループの場合は常に 0。 |
size_in_bytes | int | この行グループ内のすべてのページの合計サイズ (バイト単位)。 このサイズには、メタデータまたは共有ディクショナリを格納するために必要なサイズは含まれません。 |
pdw_node_id | int | Azure Synapse Analytics ノードの一意の ID。 |
distribution_id | int | ディストリビューションの一意の ID。 |
解説
クラスター化列ストア インデックスまたは非クラスター化列ストア インデックスを持つテーブルごとに、列ストア行グループごとに 1 行を返します。
sys.pdw_nodes_column_store_row_groupsを使用して、行グループに含まれる行の数と行グループのサイズを決定します。
行グループ内の削除済みの行の数が合計行数に対して占める割合が高くなると、テーブルの効率が低下します。 テーブルのサイズが小さくなるよう列ストア インデックスを再構築して、テーブルを読み取るために必要なディスク I/O を削減します。 列ストア インデックスを再構築するには、ALTER INDEX ステートメントの REBUILD オプションを使用します。
更新可能な列ストアは、最初に新しいデータを OPEN 行グループに挿入します。これは行ストア形式であり、デルタ テーブルとも呼ばれます。 開いている行グループがいっぱいになると、その状態は CLOSED に変わります。 閉じた行グループはタプル ムーバーによって列ストア形式に圧縮され、状態は COMPRESSED に変わります。 タプル ムーバーは、定期的に起動し、列ストア行グループに圧縮する準備ができている閉じた行グループがあるかどうかを確認するバックグラウンド プロセスです。 また、組ムーバーは、すべての行が削除された行グループの割り当てを解除します。 割り当て解除された行グループは、 RETIRED としてマークされます。 タプル ムーバーをすぐに実行するには、ALTER INDEX ステートメントの REORGANIZE オプションを使用します。
列ストア行グループは、いっぱいになると圧縮され、新しい行の受け入れを停止します。 圧縮されたグループから行が削除されると、削除された行は、保持されますが、削除済みとしてマークされます。 圧縮されたグループに対する更新は、圧縮されたグループからの削除、および OPEN 状態のグループへの挿入として実装されます。
アクセス許可
VIEW SERVER STATE アクセス許可が必要です。
例: Azure Synapse Analytics、Analytics Platform System (PDW)
次の例では、 sys.pdw_nodes_column_store_row_groups テーブルを他のシステム テーブルに結合して、特定のテーブルに関する情報を返します。 計算済みの PercentFull
列は、行グループの効率の推定値を示します。 1 つのテーブルに関する情報を検索するには、WHERE 句の前にあるコメント ハイフンを削除し、テーブル名を指定します。
SELECT IndexMap.object_id,
object_name(IndexMap.object_id) AS LogicalTableName,
i.name AS LogicalIndexName, IndexMap.index_id, NI.type_desc,
IndexMap.physical_name AS PhyIndexNameFromIMap,
CSRowGroups.*,
100*(ISNULL(deleted_rows,0))/total_rows AS PercentDeletedRows
FROM sys.tables AS t
JOIN sys.indexes AS i
ON t.object_id = i.object_id
JOIN sys.pdw_index_mappings AS IndexMap
ON i.object_id = IndexMap.object_id
AND i.index_id = IndexMap.index_id
JOIN sys.pdw_nodes_indexes AS NI
ON IndexMap.physical_name = NI.name
AND IndexMap.index_id = NI.index_id
JOIN sys.pdw_nodes_column_store_row_groups AS CSRowGroups
ON CSRowGroups.object_id = NI.object_id
AND CSRowGroups.pdw_node_id = NI.pdw_node_id
AND CSRowGroups.distribution_id = NI.distribution_id
AND CSRowGroups.index_id = NI.index_id
WHERE total_rows > 0
--WHERE t.name = '<table_name>'
ORDER BY object_name(i.object_id), i.name, IndexMap.physical_name, pdw_node_id;
次の Azure Synapse Analytics の例では、クラスター化列ストアのパーティションごとの行数と、Open、Closed、または Compressed 行グループの行数がカウントされます。
SELECT
s.name AS [Schema Name]
,t.name AS [Table Name]
,rg.partition_number AS [Partition Number]
,SUM(rg.total_rows) AS [Total Rows]
,SUM(CASE WHEN rg.State = 1 THEN rg.Total_rows Else 0 END) AS [Rows in OPEN Row Groups]
,SUM(CASE WHEN rg.State = 2 THEN rg.Total_Rows ELSE 0 END) AS [Rows in Closed Row Groups]
,SUM(CASE WHEN rg.State = 3 THEN rg.Total_Rows ELSE 0 END) AS [Rows in COMPRESSED Row Groups]
FROM sys.pdw_nodes_column_store_row_groups rg
JOIN sys.pdw_nodes_tables pt
ON rg.object_id = pt.object_id
AND rg.pdw_node_id = pt.pdw_node_id
AND pt.distribution_id = rg.distribution_id
JOIN sys.pdw_table_mappings tm
ON pt.name = tm.physical_name
INNER JOIN sys.tables t
ON tm.object_id = t.object_id
INNER JOIN sys.schemas s
ON t.schema_id = s.schema_id
GROUP BY s.name, t.name, rg.partition_number
ORDER BY 1, 2
参照
Azure Synapse Analytics と Parallel Data Warehouse のカタログ ビュー
CREATE COLUMNSTORE INDEX (Transact-SQL)
sys.pdw_nodes_column_store_segments (Transact-SQL)
sys.pdw_nodes_column_store_dictionaries (Transact-SQL)