Azure Data Factory– tag –
-
Azure Data Factory（ADF）でEntra IDオンプレ同期ユーザー／グループを更新できない原因と対策｜Graph 400/401
Azure Data Factory（ADF）のカスタムアクティビティから Microsoft Entra ID（旧Azure AD）のユーザー／グループを更新しようとして、400（Request_BadRequest）や 401... -
Azure Data Factory Copy ActivityでCookieヘッダー認証が通らない原因と回避策
Azure Data Factory（ADF）でSOAP APIを叩き、Copy Activityでレスポンスをそのままファイル化したい。しかし認証がCookie（ASP.NET_SessionId）依存だと、Webアクティ... -
Azureデータ保存先はADLSかSynapse Dedicated SQL Poolか？Medallionとメタデータ駆動パイプラインで失敗しない設計
仮想化ツール上に大量のビューがあり、Azure移行で「ADLSに残すべきか」「Synapse Dedicated SQL Poolに全部入れるべきか」で迷うケースは多いです。本記事では、ADLS G... -
Azure Data Factoryで前回成功実行日時を取得してWeb APIに渡す方法｜ADFパイプライン差分取得の設計
Azure Data Factory（ADF）でWeb APIを定期的に呼び出してData Lakeへ保存する運用では、「前回の成功実行時刻（＝差分取得の起点）をどう管理するか」で設計が大きく変... -
Azure Data FactoryでADLS Gen2→Azure SQLの認証方式：マネージドIDで安全に長期運用する方法
Azure Data Factory（ADF）でADLS Gen2からAzure SQL Databaseへデータを移動するパイプラインは、Linked Serviceの認証設計で「セキュリティ」「運用コスト」「障害時... -
Azure Data Factoryで異なる統合ランタイム（Azure IR／Self-hosted IR）間にデータコピーするベストプラクティス
Azure Data Factory（ADF）で「ソースは Azure IR からしか届かない File Share」「シンクは Self-hosted IR からしか届かない SFTP」という構成は、現場でよく遭遇しま... -
Azure Data Factoryの自己ホスト型IRからSQLマネージドインスタンスに接続できない原因と解決策
Azure Data Factory の自己ホスト型統合ランタイム（SHIR）から SQL マネージド インスタンス（MI）へつなごうとすると「Pre-Login ハンドシェイクのタイムアウト」や「... -
Azure Data FactoryとAzure DevOps Git連携の権限設定完全ガイド｜Create repositoryは本当に必要か？
Azure Data Factory(ADF)をAzure DevOpsのGitと連携しようとしたとき、「権限が足りません」「リポジトリを作成できません」といったエラーで止まっていないでしょうか... -
Azureネイティブなデータパイプライン設計：HTTP GETからData Lake・Parquet・SQLクエリまで徹底解説
外部SaaSやAPIからHTTP GETだけでデータを取得し、Azure上のData Lakeに蓄積しつつ、そのままSQLでクエリできる基盤を作りたい──そんな要件は、今や多くの企業で「標準...