この記事は、 BigQuery Advent Calendar 2022の 25日目です。 こんにちは。ユビレジで遊撃サーバーチームに所属している濱口です。普段は開発基盤や分析基盤の整備をメインでやっています。 今回は、先日 BigQuery のレガシーな日付別テーブルについて試行錯誤する ...

パーティショニングとは、 1つのテーブルデータを分割して管理する仕組みのことです。MySQLでは、 バージョン5. 1から標準でパーティショニングの機能が提供されています。 パーティショニングを行うことで巨大なデータを複数に分割でき、 分割された ...

近年ではRedashやMetabaseのようなBIツールを簡単に導入でき、さらにはMySQLはバージョン8. 0からwindow関数が利用できるようになり、より分析的なSQLを記述する機会が増えた読者もいるかも知れません。このような分析に利用するSQLを記述をすると、どうしても ...

今回も以下のように、前回と同じSQLのチューニングを行います。 select l_orderkey, sum(l_extendedprice * (1 - l_discount)) as revenue, o_orderdate, o_shippriority from customer, orders, lineitem where c_mktsegment = 'BUILDING' and c ...

今回からは、SQL Data Warehouseのアーキテクチャを詳しく紹介します。SQL Data Warehouseのアーキテクチャを理解すれば、データベースのチューニングなども役に立ちます。今回のテーマは「テーブルの分散」に関わるSQL Data Warehouseのアーキテクチャです。 SQL Data ...

ログインして、InfoQのすべての体験をアンロックしましょう！お気に入りの著者やトピックの最新情報を入手し、コンテンツと交流し、限定リソースをダウンロードできます。 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with ...

RAISE EXCEPTION 'Cannot set p_source_table to the same value as the default table for this partition set. If you are moving data out of the default, please leave p_source_table unset and data will be ...

はじめに：システム改修時に直面する「データの整理」という課題 システムを長期間運用したり、大規模な改修を行ったりする過程で、過去のキャンペーンデータや検証用として作成した一時的なデータなど、役割を終えたテーブルがデータベース内に蓄積 ...

SWITCH / MERGE / SPLIT / TRUNCATE 指令。 【輸出】 TableName / PartitionNumber / LowerBoundary / UpperBoundary / PartitionScheme / PartitionFunction / FileGroupName / row_count / partition_column 【風險/注意】 純查系統 ...