Azureリソースの誤削除を防ぐ「ロック」機能とは
Azureリソースの誤削除を防ぐ「ロック」機能とは 今回は、Azureのリソースを誤って削除してしまうことを防ぐ「ロック」機能についてご紹介します。 ロック機能とは？…
【Azure Databricks】Apache Airflow を使用して Azure Databricks ジョブを調整する
1. はじめに 皆さんこんにちは。 今回は、Apache Airflow を使用して Azure Databricks ジョブを調整する方法について説明していきます。 ※ 背景 データ処理パイプラインを開発・展開する際、タスク間の複雑な依存関係を管理することが要求されます。Databricks…
【Azure Databricks】メダリオンアーキテクチャとは？メダリオンアーキテクチャについて解説
1.はじめに 皆さんこんにちは。 今回は、Azure Databricksのメダリオンアーキテクチャの考え方とどうやってブロンズ、シルバー、ゴールドを使い分けているかについて説明していきます。 2.概要 メダリオン…
【Azure Databricks】データリネージとは
1.はじめに 皆さんこんにちは。 この記事では、データリネージの一般的な使用例および、使用方法について説明していきます。 Databricks のオープン データ ストレージ レイヤーである Delta Lake は、SQLや機械学習 (ML)…
Microsoft Azure上でOracle Exadataが稼働する「Oracle Database@Azure」が提供開始
Microsoft Azure上でOracle Exadataが稼働する「Oracle Database@Azure」が提供開始