ADLS Gen2– tag –
-
Azure StorageでPublic network access Disabled＋Private Endpoint構成時に403になる原因と解決策（DNS/RBAC/ACL/リージョン）
Azure Storageアカウントで「Public network access: Disabled（パブリック ネットワーク アクセス無効）」にし、Private Endpoint（PE）経由に切り替えた途端に403（認... -
Azureデータ保存先はADLSかSynapse Dedicated SQL Poolか？Medallionとメタデータ駆動パイプラインで失敗しない設計
仮想化ツール上に大量のビューがあり、Azure移行で「ADLSに残すべきか」「Synapse Dedicated SQL Poolに全部入れるべきか」で迷うケースは多いです。本記事では、ADLS G... -
Azure Data FactoryでADLS Gen2→Azure SQLの認証方式：マネージドIDで安全に長期運用する方法
Azure Data Factory（ADF）でADLS Gen2からAzure SQL Databaseへデータを移動するパイプラインは、Linked Serviceの認証設計で「セキュリティ」「運用コスト」「障害時... -
AirshipとAzure DatabricksをSFTP連携でつなぐ：ADLS Gen2とDeltaテーブル設計ガイド
Airship から配信されるファイルを Azure 上で安全かつ確実に受け取り、Databricks で Delta テーブルとして利活用できるようにするには、単に SFTP を開けるだけでは足... -
Databricks から ADLS Gen2 への接続エラー「CONFIG_NOT_AVAILABLE」を徹底解説｜原因と安全な設定方法
Azure Databricks から ADLS Gen2 に OAuth（サービス プリンシパル＋クライアントシークレット）で接続しようとしたときに、突然 [CONFIG_NOT_AVAILABLE] が出てハマる... -
Azure BatchとADLS Gen2の対応状況まとめ｜階層型名前空間(HNS)の制限とベストプラクティス
Azure Batch を使っていると、「ストレージは ADLS Gen2（階層型名前空間あり）のままでよいのか？」という疑問に必ずぶつかります。特に、既存のデータレイクをそのま... -
Azure Databricks×ADLS Gen2で実現するイベント駆動ETL設計とネットワーク構成
Adobe やマーケティング基盤から JSON ファイルが ADLS Gen2 に到着したタイミングで、Azure Databricks の ETL を自動起動したい――多くのデータレイクプロジェクトで出... -
Azure Databricks Auto LoaderでincludeExistingFilesとmodifiedAfterが効かない原因と対処法
Azure Databricks の Auto Loader（cloudFiles）はとても便利ですが、「includeExistingFiles と modifiedAfter を設定したのに、なぜか全部のファイルが読み込まれてし... -
Databricks×Azure Storage｜アプリ登録なしで安全に接続する4つの方法と「Unsupported Azure Scheme: abfss」完全対処ガイド
Azure AD のアプリ登録（サービス プリンシパル）を作れない――そんな制約下でも、Databricks から Azure Storage に安全かつ実用的にアクセスする方法は複数あります。...
12