Lakebridge:Databricksへのデータ移行を支援するツール

  1. はじめに 背景 近年、多くの企業では、PostgreSQL、SQL Server、Oracle、Teradataなどの従来型データベースやEDW(Enterprise Data Warehouse) から、Databricks…


【Azure Databricks】Databricks Genieとは? データ活用企業が統合プラットフォームを選ぶ理由

1. はじめに 背景 生成AIの時代において、多くの企業は大きな課題に直面しています。データ量は爆発的に増加している一方で、その価値を十分に引き出せていないのです。背景には、複数のシステムやツールが分散して存在する、断片化されたデータ環境があります。…


【Azure Databricks】外部ロケーションを使用して Azure Data Lake Storageに接続する

  1. はじめに 背景 現代のデータ分析基盤において、Azure Data Lake Storage Gen2(ADLS Gen2)は、高いスケーラビリティを備えた標準的なストレージとして広く利用されています。しかし、Azure…


【Azure Databricks】 REFRESH TABLEコマンドの説明

1.概要 Databricksを使用していると、DeltaテーブルやParquetファイルなどのストレージ上のデータを更新したはずなのに、クエリ結果に反映されないケースがあります。「なぜこうなるのか?」と疑問に思ったことはありませんか? 実は、こうした状況ではREFRESH…


【Microsoft Fabric】Synapse Data Engineering ユーザー向け Fabric チュートリアル_第2回

1. はじめに 皆さんこんにちは。 今回からMicrosoft Fabricについての連載ブログを始めていきます。 全5回を予定しています。第5回ではSynapse Data Engineering ユーザー向け Fabric チュートリアル_第2回について説明いたします。…


【Microsoft Fabric】Synapse Data Engineering ユーザー向け Fabric チュートリアル_第1回

1. はじめに 皆さんこんにちは。 今回からMicrosoft Fabricについての連載ブログを始めていきます。 全5回を予定しています。第4回ではSynapse Data Engineering ユーザー向け Fabric チュートリアル_第(1回)について説明いたします。…