2021-01-14から1日間の記事一覧

Why Snowflake is so fast…? The answer lies within the “Micro Partitions”(FDN)

www.linkedin.com 概要 マイクロパーティション間で、格納する列値の範囲が重なっている。これは(「特定の値は特定のパーティションに」というアプローチに比べて)skewの抑止に役立つ。 ユーザは圧縮アルゴリズムを指定しなくてよい(そもそもできない?)。Sno…

Cloud Data Warehouse Benchmark Redshift vs Snowflake vs BigQuery (2)

youtu.be 概要 我々は100GBオーダーのデータセットでベンチマークした。顧客のDWHがそれぐらいの規模感だから。 TPC-DSを使って、現実のDWHで発行されてるような、複雑な述語, 集約, 複数のサブクエリを含むクエリを投げてテストした。 また特定の製品に有利…