Databricks– tag –
-
Databricks Simba Spark ODBCで.NET 8パラメータクエリを実装する方法：LIMIT/OFFSETの制約と安全なページング対策
Databricks SQL Warehouse に Simba Spark ODBC ドライバー（v2.8.0）で接続し、.NET 8 / ASP.NET Web API（System.Data.Odbc）からパラメータクエリを実装すると、WHER... -
Microsoft Purviewでスキャン済みアセットのGUID一覧を取得する方法｜REST APIでDatabricksに保存
Microsoft Purviewでスキャン済みのAzureサービスやDatabricksテーブルのGUIDを一覧で取得したいなら、Type定義（ビルトイン）ではなく「Data Mapの検索（Discovery）AP... -
Databricks Auto Loaderのスキーマドリフト対応：Landing→Bronzeで完結しUnity Catalog managed tableで運用するベストプラクティス
Databricks Auto Loader でファイルを継続取り込みしていると、突然カラムが増えたり型が変わったりして「スキーマドリフト」に直面します。本記事では、メダリオンアー... -
AirshipとAzure DatabricksをSFTP連携でつなぐ：ADLS Gen2とDeltaテーブル設計ガイド
Airship から配信されるファイルを Azure 上で安全かつ確実に受け取り、Databricks で Delta テーブルとして利活用できるようにするには、単に SFTP を開けるだけでは足... -
Databricks から ADLS Gen2 への接続エラー「CONFIG_NOT_AVAILABLE」を徹底解説｜原因と安全な設定方法
Azure Databricks から ADLS Gen2 に OAuth（サービス プリンシパル＋クライアントシークレット）で接続しようとしたときに、突然 [CONFIG_NOT_AVAILABLE] が出てハマる... -
Azure Databricks×ADLS Gen2で実現するイベント駆動ETL設計とネットワーク構成
Adobe やマーケティング基盤から JSON ファイルが ADLS Gen2 に到着したタイミングで、Azure Databricks の ETL を自動起動したい――多くのデータレイクプロジェクトで出... -
Databricks×Azure Storage｜アプリ登録なしで安全に接続する4つの方法と「Unsupported Azure Scheme: abfss」完全対処ガイド
Azure AD のアプリ登録（サービス プリンシパル）を作れない――そんな制約下でも、Databricks から Azure Storage に安全かつ実用的にアクセスする方法は複数あります。... -
Databricks シークレットスコープと Azure Key Vault を一覧・権限管理する実践ガイド（CLI/REST/ノートブック手順）
Azure Databricks の運用現場では、ワークスペースに乱立するシークレットスコープと Azure Key Vault の対応関係をすばやく把握し、権限を安全に見直せることが重... -
Azureテナントが非アクティブでブロック（AADSTS5000225）された時の復旧・解除・課金停止ガイド
Azure ポータルで AADSTS5000225 — This tenant has been blocked due to inactivity と表示され、ログインや課金管理が止まると、不要課金の抑止も復旧手続きも進めら...
12