Parquet– tag –
-
Azureネイティブなデータパイプライン設計：HTTP GETからData Lake・Parquet・SQLクエリまで徹底解説
外部SaaSやAPIからHTTP GETだけでデータを取得し、Azure上のData Lakeに蓄積しつつ、そのままSQLでクエリできる基盤を作りたい──そんな要件は、今や多くの企業で「標準... -
Azure SQL Managed InstanceのCETAS外部テーブルに追記する設計パターンとParquet運用ベストプラクティス
Azure SQL Managed Instance でデータ仮想化やアーカイブ設計を始めると、必ずと言っていいほどぶつかるのが「CETAS 外部テーブルへの追記をどうするか？」という問題で... -
Pythonでデータフレームの保存と読み込みを最適に行う方法
この記事では、Pythonでデータフレームの保存と読み込みを行う最適な方法について解説します。pandasを使った様々なフォーマット（CSV, HDF5, Parquet）での保存と読み...
1