Lakebridge：Databricksへのデータ移行を支援するツール
1. はじめに 背景 近年、多くの企業では、PostgreSQL、SQL Server、Oracle、Teradataなどの従来型データベースやEDW（Enterprise Data Warehouse） から、Databricks…
【Azure Databricks】No-CodeのLLMクエリおよびAIエージェントプロトタイプ構築
1. はじめに 皆さんこんにちは。 今回はNo-CodeのLLMクエリおよびAIエージェントプロトタイプ構築について説明していきます。 【背景】…
【Azure Databricks】SCIMによるMicrosoft Entra IDのユーザーとグループ同期
1. はじめに 企業環境では、Azure Databricksのようなデータプラットフォームにおけるユーザー管理やアクセス権限の管理は、一般的にMicrosoft Entra ID（旧Azure Active…
【Azure Databricks】外部ロケーションに新しいファイルが追加された際に、Databricks ジョブを自動的に起動する
1. はじめに 皆さんこんにちは。 今回は外部ロケーションに新しいファイルが追加された際に、Databricks ジョブを自動的に起動する方法について説明していきます。 【背景】…
【Azure Databricks】外部ロケーションを使用して Azure Data Lake Storageに接続する
1. はじめに 背景 現代のデータ分析基盤において、Azure Data Lake Storage Gen2（ADLS Gen2）は、高いスケーラビリティを備えた標準的なストレージとして広く利用されています。しかし、Azure…
Azure Databricks連載記事のまとめページ
皆さんこんにちは。 このページでは、これまで書いたAzure Databricksに関するブログ記事をご紹介します。 Azure Databricksに興味のある方に役立つ情報をお届けしています。 ぜひ、気になる記事をクリックして読んでみてください。 はじめに ・Azure…
【Azure Databricks】Azure Databricksと大規模言語モデル（LLMs）を活用したAI Functionsの利用方法
1. はじめに AI技術の急速な発展に伴い、多くの企業では大規模言語モデル（LLMs）をデータパイプラインや業務アプリケーションへ統合するニーズが高まっています。 Azure Databricksでは、AI…