Azure Data Factory– tag –
-
Azure Data Factory・Synapse・Databricksで実現するデータフロー運用自動化ガイド｜監視・復旧・CI/CD・無停止リリース
Azure上でデータパイプラインを運用していると、「障害対応やリリースに思った以上に工数がかかる」と感じる場面が多くなります。本記事では Azure Data Factory・Synap... -
Azure Data FactoryでSSISパッケージ実行が散発的に失敗するTLSエラーの原因と対処法まとめ
Azure Data Factory（ADF）で Azure-SSIS Integration Runtime（IR）上の SSIS パッケージを実行したときに、TLS バージョンのエラーが散発的に発生する原因と対処を、... -
Azure SQL Managed InstanceのCETAS外部テーブルに追記する設計パターンとParquet運用ベストプラクティス
Azure SQL Managed Instance でデータ仮想化やアーカイブ設計を始めると、必ずと言っていいほどぶつかるのが「CETAS 外部テーブルへの追記をどうするか？」という問題で... -
Azure Data FactoryでSnowflakeコネクタをV1からV2へ安全にアップグレードする手順とロールバック戦略
Azure Data Factory（ADF）で Snowflake コネクタを V1 から V2 へ切り替えるタイミングは、多くの現場で「いつかはやらなければならない技術的負債の解消」です。一方... -
Azure Data FactoryのREST Linked ServiceとWeb Activityの違いと使い分け完全ガイド
Azure Data Factory（ADF）で外部のREST APIと連携する際、必ず議論になるのが「REST Linked Service（REST LS）」と「Web Activity」のどちらを使うべきかというテーマ... -
Azure Data FactoryのOracle Linked Service v2切替でORA‑50000接続タイムアウトを解決する完全ガイド
Azure Data Factory / Synapse Pipelines の Oracle 連携で、Linked Service を v1 から v2 へ切り替えた途端に「Test connection failed」「ORA‑50000: Connection req... -
Azure Data FactoryのCopy Activityで出る「Unclosed quotation mark」エラーを完全解説｜動的SQLの安全な書き方とconcat/replace実装
Azure Data Factory（ADF）のCopy Activityで、動的SQLを使った途端に「Unclosed quotation mark」エラーで失敗した――そんな事象は珍しくありません。本記事では原因の... -
Azure Data FactoryのDeleteアクティビティで60日前より古いファイルを自動削除する完全ガイド（Synapse対応）
「更新日時が60日より古いファイルだけを安全に自動削除したい」。Azure Data Factory（ADF）/ Synapse Pipelines の Delete アクティビティで迷いやすいのが Start Tim... -
Azure Data FactoryでBlobのステータスJSONを作成・更新する完全ガイド｜最新上書きと履歴追記の実装パターン
Blob Storage に着地した CSV を複数の BigQuery 先テーブルへ取り込む ADF（Azure Data Factory）パイプラインの成否を、外部メタストア無し・Blob 内の 1 つの「ステ...