Data News

Databricks Apps のコードセキュリティスキャンを Free Edition で試してみた

Recover dropped Unity Catalog volumes with UNDROP VOLUME

Unity Catalogで削除されたボリュームを7日以内に復旧できるようになりました。SHOW VOLUMES DROPPEDでボリュームのIDを確認し、UNDROP VOLUME WITH IDコマンドで権限とタグを保持したまま復元できます。Databricks Runtime 19以上が必要です。

Read, don't copy: replacing file feeds with OpenSharing - Part 2 (How to Implement)

ファイルフィードの代わりにOpenSharingを使用したデータ共有アーキテクチャの実装方法について解説した記事です。多くのデータ共有システムが採用する従来のファイルエクスポートパターンから、より効率的なOpenSharingへの移行手法を紹介しています。

Read, don't copy: replacing file and API feeds with OpenSharing - Part 1 (The Why)

OpenSharingという新しいアプローチにより、SFTPやAPIを通じたデータ取得の従来の方法を置き換えることが提案されています。この記事ではその導入理由について説明しており、顧客からのデータ取得プロセスの改善を目的としています。

How public sector organizations can govern AI at scale

政府のCIOは現在、AIの導入と迅速な業務推進という共通の使命を抱えています。本記事では、公共部門の組織がスケール段階でAIを効果的に統治・運用するための方法について解説しています。

Unity Catalog wikis are in Beta

Unity Catalogのウィキ機能がベータ版で利用可能になりました。このウィキ機能は、チームがテーブルの意味、用途、データソースをドキュメント化し、その情報について共同作業できるツールです。データオーナーと管理者がCatalog Explorerで手動またはGenieコードを使用してウィキを公開でき、テーブルメタデータにアクセス可能なユーザーはコメント、編集提案、リアクションが可能です。

Restore a deleted Unity Catalog metastore with the REST API (Public Preview)

Databricksが削除されたUnity Catalogメタストアを復元する機能をパブリックプレビューで提供開始します。アカウント管理者はREST APIを使用して、削除後5日以内であればメタストアをIDで復元できるようになりました。

Install drivers for JDBC Unity Catalog connections from Maven

Databricksで、JDBCドライバをボリュームにアップロードする代わりにMaven座標からインストールできるようになりました。この機能はサーバーレスコンピュート、Databricks Runtime 19以上、またはSQL warehouses 2026.43以上での利用が必要です。

Databricks ジョブの AI 関数タスクで、請求書 PDF の解析・抽出・分類を SQL なしで組んでみた

Zhipu AI GLM 5.2 is scheduled for retirement

Zhipu AIは生成AIモデル「GLM 5.2」のサポート終了を予定しており、2027年2月4日に廃止される予定です。同社はGLM 5.3への移行を推奨しており、既存ユーザーは移行ガイダンスに従って対応する必要があります。

Load Unity Catalog tables into PyTorch on AI Runtime (Beta)

DatabricksのAI Runtimeで、Unity CatalogのテーブルをPyTorchに直接ストリーミングできるようになりました。SparkやSQLウェアハウスなしにフィルタリングと削除ベクトルを適用しながら、データをGPUやデータローダーワーカーに分散できます。

Distinguish Lakeflow Designer Python previews from full runs (Public Preview)

Lakeflow Designerの新機能として、Pythonオペレータがプレビュー時とフル実行時を区別できるようになりました。config["is_preview"]を使用することで、コードがプレビュー中は副作用をスキップするなど、実行モードに応じた処理の制御が可能になります。

All Unity Catalog managed tables will be upgraded to catalog commits

Databricksは2027年8月19日のRuntime 15.4 LTS サポート終了後、Unity Catalogの管理テーブルをカタログコミットへ一括アップグレードします。これにより複数ステートメント・テーブルのトランザクション、外部エンジンからの書き込み、全エンジン間での一貫したガバナンスが実現されます。

Introducing Apache Spark® 4.3 - Now available in Databricks Runtime 19

Apache Spark 4.3がDatabricks Runtime 19で利用可能になりました。このバージョンではリアルタイムモードにステートフル処理が導入され、リアルタイムデータ処理の機能が強化されています。

A builder’s guide to scaling Databricks Apps

Databricks Appsで構築したアプリケーションが成長する際のスケーリング方法について、ビルダー向けガイドが提供されています。アプリの初期段階から段階的に拡大する過程での実装ポイントを解説した内容と考えられます。

Which Data Collaboration Tool: OpenSharing, Clean Rooms, Marketplace

データ協働ツールの選択肢として、OpenSharing、Clean Rooms、Marketplaceなど複数のソリューションが存在します。これらは従来のテーブル共有を超えて、安全なデータ共有を実現する手段として注目されています。記事ではこれらのツールの特性と使い分けについて解説しています。

From Delta Sharing to OpenSharing: what changed, what's next

Delta SharingからOpenSharingへの移行について解説した記事です。数千の組織がDelta Sharingを使用してライブデータを交換してきましたが、その後の変化と今後の展開を取り上げています。データ共有技術の進化に関する最新動向を紹介しています。

Push-based CDC into Unity Catalog with Zerobus Ingest and Debezium

Zerobus IngestとDebeziumを活用したプッシュベースのChange Data Capture（CDC）がUnity Catalogと統合され、運用データベース内のデータを効率的に分析可能にします。この統合により、ビジネス意思決定に必要なデータをリアルタイムでカタログ化・管理できるようになります。

More external knowledge sources

Databricksは、TableauとSigmaを外部知識ソースとしてサポートすることを計画しています。これにより、ユーザーは複数のBIツールからデータやインサイトを統合できるようになります。

Run Claude Code and Codex in the SSH tunnel

ClaudeのコードエージェントとCodexがSSHトンネルセッションで利用可能になりました。エージェントはUnity Gatewayを通じてモデルリクエストを送信し、SSHセッションの認証情報で認証されます。Databricks CLI 1.23.0以上が必要です。

Allow partner platforms in context-based ingress policies

Databricksのコンテキストベースのイングレスポリシーが、Power BI、Tableau Cloud、dbt Cloud、SlackおよびMicrosoft Teams向けGenie アプリからのトラフィックを許可できるようになりました。パートナープラットフォームの詳細が自動更新されるため、IPアドレスを手動で管理する必要がなくなります。

External knowledge sources are in Beta

Databricksの新機能として、外部知識ソースがベータ版で利用可能になりました。Power BIのセマンティックモデルからメタデータを取得し、Genieが質問に答える際にPower BIのメジャー定義を活用できます。アカウント管理者が有効化することで使用可能です。

DeepSeek V4 Flash (0731) is retired

DeepSeek V4 Flash (0731)が2026年11月5日に廃止されました。代わりにDeepSeek V4.1 Flash (1017)の使用が推奨されており、移行に関するガイダンスが提供されています。

Upcoming removal of AI Functions support on older runtimes

Databricksは2027年1月から、バージョン17.3 LTS未満のランタイムでSQL内のAI Functionsのサポートを終了します。ai_similarityとAI Functions REST APIは対象外で、SQL内でAI Functionsを使用し続けるにはDatabricks Runtime 17.3 LTS以上の使用が必要です。

MLflowの既定のジャッジはDatabricks Notebookの外からも呼べる

Real-time fraud detection with Feature Views

リアルタイム不正検知は、顧客の過去の行動、現在の取引情報、および時系列パターンという3種類の特徴データに依存しています。Feature Viewsを活用することで、これらの多様なデータソースから効率的に特徴を抽出し、迅速な不正検知モデルの構築が可能になります。

Metric view listings are generally available in Databricks Marketplace

Databricks Marketplaceにおいて、メトリックビューのリスティング機能が一般提供開始されました。プロバイダーはメトリックビューを追加することで、統治されたビジネスメトリクスをMarketplaceに公開でき、Databricksユーザーが共有されたメトリックビューを利用できるようになります。

Smart Routing is faster and lower cost, and now routes subagents only (Beta)

Smart Routingが機能を刷新し、サブエージェントのみのルーティングに対応しました。内部ベンチマークでコスト最大70%削減、p90ルーティングレイテンシを9秒から2秒に短縮されています。Codex向けSmart Routingは一時停止中です。

Smart Routing is faster and lower cost, and now routes subagents only (Beta)

Smart Routingの新機能は、最初のプロンプトではなくサブエージェントのみをルーティングするようになりました。内部ベンチマークでは最大70%のコスト削減を実現し、P90ルーティングレイテンシーを9秒から2秒に短縮します。

Calculate across rows in Lakeflow Designer (Public Preview)

Lakeflow Designerで新たに利用可能になったMulti-Row Formula演算子を使用することで、順序付けされた行全体にわたって累計計算、ランキング、移動平均などの複雑な計算を実行できます。このパブリックプレビュー機能により、データ分析の柔軟性が向上します。

The Enterprise Case for Open-Weight Models on Databricks

Databricksのフィールドエンジニアが企業のAI導入現場で経験した実例をもとに、オープンウェイト・モデルをエンタープライズ環境に導入する利点をまとめた記事。企業がプロプライエタリなAIモデルではなく、オープンウェイト・モデルを選択することの実用的なメリットについて解説しています。

AI Function tasks for jobs (Beta)

Databricksが、SQLを記述することなくAI Function タスクをジョブに追加できるベータ機能を提供開始しました。ai_parse_document、ai_extract、ai_classifyなどの処理をボリューム内のファイルやテーブルの行に対して実行でき、新規または変更されたデータのみを処理して結果をUnity Catalogテーブルに保存できます。

Databricks の Genie Code と Genie One のトレースを統合トレーステーブルで読む

Databricksのジョブ完了トリガーで、2つのジョブがそろってから下流ジョブを起動する

AI Functions require Databricks Runtime 17.3 LTS or above

Databricksは2027年1月より、ai_similarity以外のAI機能について、Databricks Runtime 17.3 LTS以上を必須とします。対象となるSQL クエリを実行するコンピュートを期限までに17.3 LTS以上にアップグレードする必要があります。AI Functions REST APIは影響を受けません。

Moonshot AI Kimi K3.1 Pro is now available on Unity Gateway

Moonshot AIの大規模言語モデル「Kimi K3.1 Pro」がUnity Gatewayで利用可能になりました。このモデルはコーディング、知識作業、エージェント機能に対応し、ネイティブなビジョン機能と推論能力を備えています。us-east-1リージョンでトークンベースの課金で利用できます。

Publish Unity Gateway Skills with a GitHub Action in Beta

Unityがベータ版のGitHub Actionを提供開始し、Git管理下のスキルをUnity Catalogに公開できるようになりました。フォルダをスキルにマッピングし、公開ブランチへのマージ時に自動的に更新を反映する仕組みです。

Moonshot AI Kimi K3.1 Pro is now available on Unity Gateway

Moonshot AI の言語モデル「Kimi K3.1 Pro」が Unity Gateway で利用可能になりました。このモデルはコーディングや知識業務、エージェント的なツール利用に対応し、ネイティブなビジョン機能と推論能力を備えています。us-east-1 リージョンでトークンベースの従量課金で提供されています。

Publish Unity Gateway Skills with a GitHub Action in Beta

Unity Catalogにスキルを公開するGitHub Actionがベータ版で利用可能になりました。Gitで管理されたスキルを直接公開でき、フォルダをスキルにマッピングして公開ブランチへのマージ時に自動更新できます。

Add aggregations for several Lakeflow Designer columns (Public Preview)

Lakeflow Designerで複数列を選択して集計を追加できる機能がパブリックプレビューで利用可能になりました。Aggregateオペレーターが選択された各列に対して個別の集計を作成するため、データ処理の効率化が可能になります。

Create Lakeflow Designer parameters while configuring fields (Public Preview)

Lakeflow Designerで、サポートされているオペレーターフィールドからパラメーターを直接作成できるようになりました。このパブリックプレビュー機能により、フィールド設定時にパラメーターを生成し、オペレーター内で参照・利用することが可能になります。

Detect CSV delimiters in Lakeflow Designer (Public Preview)

Lakeflow Designerがパブリックプレビューで、CSVファイルの区切り文字自動検出機能を追加しました。カンマ、タブ、セミコロン、パイプなど複数の区切り文字を自動認識し、検出結果が合わない場合は手動で設定することも可能です。

Claude Platform now supports native OpenTelemetry observability in Databricks MLflow

Anthropic のClaudeプラットフォームが、Databricks MLflowでネイティブなOpenTelemetry可観測性に対応しました。これにより、エージェントが重要な発見を見落としたり同じソースを繰り返し読んだりするような問題を監視・検出できるようになります。

Declare and optimize with UNIQUE constraints on Databricks

Databricksプラットフォーム上でUNIQUE制約を宣言・最適化する機能についての記事です。データチームが従来手動で管理していた一意性の保証をUNIQUE制約で効率的に実装でき、パイプラインの信頼性と性能が向上します。

Okta connector is available in Beta

Databricksの管理型OktaコネクタがLakeflow Connectでベータ版として利用可能になりました。このコネクタを使用することで、ユーザーやグループ、デバイス、ポリシーなどのOktaの認証・アクセスデータをDatabricksに取り込むことができます。SSWS APIトークン認証をサポートし、段階的なデータ取り込みに対応しています。

Control Lakebase sink upserts with merge strategies

Databricks Lakebaseへの書き込み時に、マージ戦略を使用してupsert操作での列更新の方法を制御できます。最初または最後の値を保持、nullを無視、順序列で値を選択するなど複数の戦略が利用可能で、Databricks Runtime 19以上が必要です。

Trigger Lakeflow Jobs when upstream jobs complete (Beta)

Databricksの新機能により、Lakeflow Jobを上流ジョブ完了時にトリガーできるようになりました。同じUnity Catalogメタストアに接続された異なるワークスペース間での依存関係設定にも対応し、より複雑なワークフロー管理が可能になります。

Lakehouse//RT supports fine-grained access control (Beta)

Lakehouse//RTがベータ版で細粒度アクセス制御に対応しました。行フィルター、列マスク、属性ベースアクセス制御（ABAC）ポリシーで保護されたテーブルに対する読み取りクエリが実行できるようになります。

Databricks SQL version 2026.44 is rolling out in Current

Databricks SQLのバージョン2026.44がCurrentチャネルへのロールアウトが開始されました。このバージョンには新しい機能が複数実装されており、詳細はリリースノートで確認できます。

Approve Genie tool actions in Slack and Microsoft Teams (Public Preview)

Databricks Genieは、Slack およびMicrosoft Teams上で外部ツール実行時の承認が必要な場合、チャット内に承認プロンプトを表示する機能をパブリックプレビュー提供します。ユーザーはチャットを離れることなく、アクション実行の許可または拒否が可能になります。

Start Lakeflow Designer workflows from suggested or recent tables

AWS Lakeflow Designerのウェルカム画面から、推奨テーブルやお気に入り、最近使用したテーブルを選択して、ビジュアルデータプレップワークフローを直接開始できるようになりました。既存テーブルの参照機能も提供されています。

Edit shared Lakeflow Designer operators with Genie Code

Genie Codeを使用することで、Lakeflow Designerで共有カスタムオペレータを作成・編集できるようになりました。ワークスペースのYAMLファイルパスを指定して、共有カスタムオペレータを簡単に管理できます。

Write Lakeflow Designer results to Google Drive or SharePoint

Lakeflow Designerの処理結果をOutput演算子を使用してGoogle DriveまたはSharePointに書き込めるようになりました。各実行時に最大2.75MiBまでのファイルを作成または置き換えることが可能です。

Set checkpoints across a Lakeflow Designer file

Lakeflow Designerのファイル内でチェックポイントを設定できる機能です。「すべてを自動に設定」または「すべてをオンに設定」オプションを使用して、ビジュアルデータ準備ファイル全体のチェックポイント構成を一括で管理できます。

Databricks SQL version 2026.45 is now available in Preview

Databricks SQLの最新版2026.45がプレビューチャンネルで利用可能になりました。このバージョンでは、ビュー共有時に履歴の有無を指定できる「WITH HISTORY」および「WITHOUT HISTORY」句がALTER SHARE コマンドに追加されています。既存の履歴設定は変更されません。

Managed warehouse for MLflow (Beta)

MLflowの管理型ウェアハウス機能が追加されました。ユーザーはSQLウェアハウスを選択することなく、Unity Catalogに保存されたトレースをMLflow UIで表示できるようになります。ワークスペース管理者はプレビューページから機能を有効化できます。

Lakebase Postgres is now generally available on Google Cloud

Google CloudでLakebase Postgresが正式リリースされました。このサービスにより、ユーザーはGoogle Cloud上でPostgresデータベースを活用できるようになります。エンタープライズグレードのPostgres機能がクラウド環境で利用可能になったことで、データ管理の柔軟性が向上します。

Databricks Runtime 19: November 2, 2026

Databricks Runtime 19は2026年11月2日にリリースされました。ALTER SHARE ADD/ALTER VIEWコマンドがWITH HISTORYおよびWITHOUT HISTORYオプションに対応し、Pythonライブラリのpytzとtzdataが最新バージョンに更新されています。

Higher limits and BROWSE support for Unity Catalog secrets

Databricksの統一カタログ機能において、シークレットの保存上限が引き上げられました。スキーマあたり1,000個、メタストアあたり10,000個まで保存可能になり、BROWSE権限でユーザーがシークレットのメタデータを確認できるようになります。これによりセキュリティを保ちながら、シークレット管理がより柔軟になります。

『MLflowで実践するLLMOps』の出版後、MLflow 3.10〜3.17で変わったことをサンプルコードを直しながらなぞる

Zerobus Ingest into default storage is now generally available

Lakeflow Connectの機能「Zerobus Ingest」がデフォルトストレージにテーブルを取り込む機能を一般向けに公開しました。この機能により、ユーザーはターゲットテーブルを作成・識別してデータを効率的に取り込むことができます。

Simba JDBC Driver (Legacy) 2.8.7 is available

Simba JDBC Driver (Legacy) 2.8.7がリリースされました。このバージョンではjackson-core、jackson-databind、jackson-datatype-jsr310が2.21.8に更新されています。JDBCドライバアーカイブからダウンロード可能です。

ai_decide (Beta) now delivers higher answer accuracy

ai_decide（ベータ版）が新しいモデルを採用し、既存の低レイテンシーを維持しながら、質問への回答精度を33%向上させました。このアップデートにより、より正確な回答を迅速に得られるようになります。

Genie Agents enhancements

Databricksの「Genie Agents」が強化され、Unity Catalogボリュームに保存されたPDFやスライド、画像などの非構造化ファイルを分析できるようになりました。エージェントは出典ページを引用しながら回答でき、ワークスペース管理者がアクセスを制御できます。

AI Functions usage is now included in Unity Gateway budgets

Unity Gatewayの予算追跡システムが2026年11月1日から変更され、ai_parse_documentやai_extractなどのタスク特化型AI機能の使用費用が予算に含まれるようになります。バッチ処理とリアルタイム実行の両方のパスでの支出が対象となります。

AI Functions usage is now included in Unity Gateway budgets

Unity Gatewayの予算管理が2026年11月1日から変更され、AI Functionsの使用コストが予算に含まれるようになります。ai_parse_documentやai_extract、ai_classifyなどのタスク固有のAI機能が、バッチ実行とリアルタイム実行の両方で予算対象となります。

Lakebase branching for CI/CD: lessons from 100 PR databases

Lakebaseはブランチング機能を使用してCI/CDパイプラインを改善し、本番データに対するテストの実行時間を30分以下に削減しました。Snorkelの事例から、PR単位でのデータベース環境構築による開発効率化のベストプラクティスが紹介されています。

Databricks発のOSS Omnigentの解説書『Omnigentによるメタハーネス入門』が全3巻そろいました — エンタープライズ編の中身と、どの巻から読むか

Microsoft Graph Logs connector is available in Beta

DatabricksのLakeflow Connectで、Microsoft Graph Logsコネクタのベータ版が利用可能になりました。このコネクタを使用することで、Microsoft Defender XDRやMicrosoft Sentinelなどマイクロソフトのセキュリティ製品からセキュリティアラートをDatabricksに取り込むことができます。OAuth認証とインクリメンタル取り込みに対応しています。

Databricks and SAP unleash end-to-end data & AI capabilities to level up enterprise AI transformation

DatabricksとSAPが提携し、エンタープライズ向けの包括的なデータ・AI機能を提供することで、企業のAI変革を加速させます。現在のAIモデルは性能が向上していますが、ビジネスコンテキストの統合が課題となっており、両社の連携でこれを解決することが期待されています。

Wealth Management Client Onboarding Needs More Than AI

ウェルスマネジメント業界において、クライアントオンボーディングプロセスは全システムが正常に機能していても停滞する可能性があります。記事はAIだけでは解決できない、書類収集を含むオンボーディング課題の複雑性について指摘しています。

Deliberate decisions and enterprise AI value

エンタープライズAIの価値創出には、単なるAI技術の導入だけでは不十分であり、戦略的な意思決定が重要であることを指摘しています。急速なAI進展に伴い、期待値が高まり実験的取り組みが広がる中で、組織が意図的で計画的なアプローチを取ることが、実際のビジネス価値の実現につながることを強調しています。

Track Unity Gateway skill usage with audit logs and the usage dashboard

Unity Gateway Skillsの利用状況を追跡できる新機能が追加されました。監査ログではスキルリスト、ロード、ファイル取得イベントが記録され、利用ダッシュボードのSkillsタブではダウンロード、ロード、ユーザー別のアクティビティが表示されます。

Claude Code auto mode for Anthropic and non-Anthropic models

AnthropicとDatabricksで提供される非Anthropicモデル向けに、Claude Codeの自動モードが利用可能になりました。この機能はツール呼び出しを審査し、日常的なパーミッションプロンプトを削減します。

Track Unity Gateway skill usage with audit logs and the usage dashboard

Unity Gateway Skillsの利用状況を追跡できるようになりました。監査ログでスキルリスト、ロード、ファイル取得イベントを記録し、利用ダッシュボードのSkillsタブでダウンロード数、ロード数、ユーザー別アクティビティを表示できます。

Relationships between metric views (Beta)

Unity Catalogのメトリックビュー間の関係機能がベータ版で利用可能になりました。ALTER VIEW構文を使用してソースメトリックビューがターゲットメトリックビューとどのように結合するかを定義でき、カーディナリティと結合条件を記録できます。これによりAIアシスタントやBIツールが正確な結合パスを選択できるようになります。

Moonshot AI Kimi K2.7 is retired

Moonshot AIは2026年10月30日にKimi K2.7モデルを廃止しました。ユーザーはKimi K3への移行が推奨されており、詳細な移行ガイダンスが提供されています。

Thinking Machine Labs Inkling is retired

Thinking Machine LabsのInklingが2026年10月30日に廃止されました。同社はGLM 5.3またはKimi K3への移行を推奨しており、詳細な移行ガイダンスは廃止モデルのドキュメントで確認できます。

DeepSeek V4 Pro (0813) is retired

DeepSeekのAIモデル「V4 Pro (0813)」が2026年10月30日に廃止されました。ユーザーはV4.1 Flash (1017)への移行が推奨されており、詳細な移行ガイダンスは廃止・リタイアモデルのページで確認できます。

Claude Code auto mode for Anthropic and non-Anthropic models

AnthropicはClaude Codeの自動モード機能を、Databricksでホストされているアンスロピック製とそれ以外のモデル両方に対応させました。自動モードはツール呼び出しを審査して、ルーチン的な許可プロンプトを削減します。

Monitor data freshness in Lakeflow Connect database connector pipelines (Public Preview)

Lakeflow Connectのデータベースコネクタパイプラインで、データの最新度を監視できる機能がパブリックプレビューで利用可能になりました。パイプラインのテーブルリストに「データ鮮度」列が追加され、各CDC（変更データキャプチャ）テーブルで最後のソースコミット以降の経過時間が表示されます。SQL Server、PostgreSQL、MySQL、Oracleのソースに対応しており、イベントログからクエリを実行したり、アラート設定も可能です。

Authorize headless machines with the OAuth device code flow (Beta)

ヘッドレスマシン（リモートVMやコンテナなど）でOAuthデバイスコードフローを使用することで、別デバイスのブラウザで認証を完了してワークスペースレベルのOAuthトークンを取得できるようになりました。この機能はプレビュー段階で、ワークスペース管理者が有効化できます。

How Procore is powering construction analytics with OpenSharing

Procoreは建設業界の分散したデータを統合するOpenSharing技術を活用して、建設分析機能を強化しています。従来、建設業界ではデータが複数の場所に散在していましたが、この取り組みによって業界全体のデータ接続を実現しようとしています。

Announcing General Availability of Real-Time Mode for Spark Declarative Pipelines on Databricks

Databricksが、Spark宣言型パイプラインのリアルタイムモードの一般提供を発表しました。このモードにより、顧客は低遅延の運用ユースケースを構築できるようになります。

Smarter cost controls for serverless

Databricksがサーバーレスコンピュート利用の急増に対応するため、より効果的なコスト管理機能を導入しています。同社のサーバーレス利用は過去1年間で3倍以上増加しており、組織のコスト最適化と支出管理の課題に対する実践的なソリューションが必要とされています。

Dashboard relationships are now generally available

ダッシュボード内で複雑なマルチファクトデータモデルを構築できるダッシュボードリレーションシップ機能が一般提供開始されました。AI/BIダッシュボードのスコープ内でデータ関連性を定義し、より高度なデータ分析が可能になります。

Dashboard bug fixes

ダッシュボード機能の複数のバグが修正されました。単一フィールドフィルタのデフォルト値クリア、ウィジェットレベルフィルタの自動更新、カスタムテーマの適用範囲の改善、ファネルチャートのフィールド保持、およびタブ付きエディタポップオーバーの高さ固定が対応されています。

Xero connector is available in Beta

Databricks Lakeflow Connectで管理型Xeroコネクタがベータ版として利用可能になりました。ワークスペース管理者がプレビューページから有効化でき、請求書や支払い、連絡先などの会計データをXeroからDatabricksに取り込めます。OAuth認証に対応し、増分取得と削除レコード対応に対応しています。

MLflowのGuidelinesジャッジの判定がぶれるとき、ガイドラインの書き方で直せること

Simba JDBC Driver (Legacy) 2.8.6 is available

Simba JDBC Driver（レガシー版）2.8.6がリリースされました。本バージョンは、保留中のCloud Fetchダウンロードが最後の接続のクローズを遅延させるのを防ぐほか、lz4-java、Jackson、libthriftを更新しています。

Native XML file format support is now generally available

XMLファイルのネイティブフォーマット対応が一般提供開始になりました。Auto LoaderやCOPY INTOなどを使用してバッチおよびストリーミング処理でXMLファイルの取り込み、クエリ、解析が可能になり、from_xmlやschema_of_xml関数も利用できます。

Real-time mode in Lakeflow pipelines is now generally available

Lakefloわのパイプラインにおけるリアルタイムモードが、クラシックコンピュートとサーバーレスコンピュートの両方で一般提供されました。このモードは不正検出など、5ミリ秒以下の低遅延が必要な運用ワークロードに対応しています。

How Procore is powering construction analytics with OpenSharing

Procoreは、建設業界の分散したデータを統合する「OpenSharing」を活用して、建設分析を強化しています。業界全体にデータが散在している現状を改善し、より効率的な分析基盤を構築する取り組みが進められています。

Databricks-provided MCP connectors in Genie One and Genie Code will soon be enabled by default for workspaces with the compliance security profile enabled

2026年12月より、Databricksが提供するMCPコネクタがGenie OneとGenie Codeにおいて、コンプライアンスセキュリティプロファイルが有効なワークスペースでデフォルト有効化されます。Google Drive、Gmail、Microsoft 365、Slackなど複数のサービスのコネクタが含まれ、Genie AIツールが外部サービスに接続してドキュメント検索やデータ操作が可能になります。

Data quality monitoring anomaly detection is now generally available

データ品質監視の異常検知機能が正式提供開始となりました。スキーマレベルで有効化することで、過去のデータパターンに基づいてスキーマ内の全テーブルの鮮度と完全性を監視できます。監視結果はシステムテーブルに保存されます。

Apply ABAC policies to shared views, materialized views, and streaming tables

Databricksは、OpenSharingで共有されるビュー、マテリアライズドビュー、ストリーミングテーブルに対して、属性ベースのアクセス制御（ABAC）を適用できるようになりました。行フィルターと列マスクを使用して、より細かいアクセス制御が可能になります。

Edit Lakeflow Designer parameter expressions inline (Public Preview)

Azure Data Factoryの統合サービスであるLakeflow Designerで、サポート対象のオペレーターフィールド内でパラメーター式を直接編集できるようになりました。この新機能により、パラメーター参照の作業がより効率的になります。

Voice Agents are here. Context turns them into real customer value.

音声エージェント技術が実用段階に入り、顧客価値の創出が現実的になってきました。記事は、消費者向けビジネスで日常的に発生する複数のシーンを例に、音声技術がなぜ今求められているのかを検討しています。文脈の理解がこの技術を真の顧客価値へと変える鍵となるようです。

Serverless GPU in clean rooms will soon be on by default for accounts where it's turned off

2026年11月26日以降、Enterpriseプラン利用企業のアカウントでは、Clean Rooms内のサーバーレスGPUがデフォルトで有効化される予定です。それまでの間、アカウント管理者はアカウントコンソールのプレビューページからこの機能を有効にできます。

Upcoming end of life for the Genie One MCP Beta endpoint

Genie One MCP Betaエンドポイントは2026年11月30日にサポート終了予定で、この日以降はリクエストが失敗します。ユーザーはすべてのワークロードをUnity Gatewayの一般提供版system.ai.genie_one_mcp MCPに移行する必要があります。

Serverless GPU for clean room notebooks is now generally available

DatabricksのサーバーレスGPUコンピュートがクリーンルームノートブックで一般利用可能になりました。AIRuntimeで動作し、モデル推論と学習を共有データ上で実行できます。既存のクリーンルームノートブックと同じ承認フロー、データアクセス、出力テーブルを使用します。

View personal and shared spend limits with the ug CLI

Ugの新しいCLI機能により、個人および共有の支出制限を確認できるようになりました。`ug usage`コマンドは、使用率の高い順に最大5つの制限を表示し、`--all`オプションですべての制限を閲覧できます。

View personal and shared spend limits with the ug CLI

ug CLIの「usage」コマンドが強化され、個人および共有の支出制限を最大5つまで表示できるようになりました。使用率が高い順に表示され、`ug usage --all`で全ての適用可能な制限を確認できます。

Multiple real-time flows per serverless pipeline and source stage adaptive repartitioning are in Beta

Dataflowのサーバーレスパイプラインにおいて、1つのパイプライン内で複数のリアルタイムフローを同時実行できる機能と、Kafkaなどのソースから読み込むタスク数を自動調整する適応型リパーティショニング機能がベータ版で利用可能になりました。これらにより、タスクスロットの競合を回避しながら効率的なデータ処理が実現します。

Unpaginated requests to some Unity Catalog REST API operations will soon be rejected

Databricksは、Unity Catalog REST APIの一部操作（カタログ一覧、スキーマ一覧、テーブル一覧など）に対するページネーション非対応のリクエストを近く拒否し始めます。その前段階として、これらの操作に対するレート制限が徐々に厳しくなり、HTTP 429レスポンスが返されるようになるため、ジョブの実行速度低下やエラーハンドリング不備による失敗の可能性があります。ページネーション対応への更新が必要です。

Serverless log delivery to Unity Catalog volumes (Beta)

DatabricksがサーバーレスジョブのアプリケーションログをUnity Catalogボリュームに配信できる機能をベータ版で提供開始しました。ワークスペース管理者はこの機能を使用して、ログの保持と分析を行うことが可能になります。

Request for access is now generally available

Databricksの「アクセスリクエスト」機能が一般利用可能になりました。ユーザーはDatabricks内の任意の場所からUnity Catalogオブジェクトへのアクセス権をリクエストでき、Catalog Explorerでリクエスト状態を追跡できます。

User-aware workspace instructions for Genie One

Genie Oneにおいて、ワークスペース管理者がユーザーグループごとにチャットの動作をカスタマイズできるようになりました。ユーザーのグループメンバーシップを読み込む指示を追加し、各グループに応じた動作を定義することで、より柔軟なワークスペース環境を構築できます。

Databricks SQL version 2026.44 is now available in Preview

Databricks SQLのバージョン2026.44がプレビューチャネルで利用可能になりました。このバージョンではOSセキュリティ更新と各種バグ修正が含まれていますが、新機能や動作変更はありません。

OpenAI GPT-6.1 Terra is now available on Unity Gateway

OpenAIの最新モデル「GPT-6.1 Terra」がUnity Gateway上で利用可能になりました。Foundation Model APIsを通じてアクセスでき、ユーザーは適用される利用規約への準拠を確認する責任があります。

Editing files in Unity Catalog volumes is now generally available

Unity Catalogのボリュームに保存されたファイルをワークスペースのファイルエディタで直接編集できるようになりました。ファイルのダウンロードとアップロードを繰り返す必要がなく、Catalog Explorerやノートブックのスキーマブラウザから直接ファイルを開いて編集できます。

OpenAI GPT-6.1 Terra is now available on Unity Gateway

OpenAIの最新モデル「GPT-6.1 Terra」がUnity Gateway上で利用可能になりました。Foundation Model APIsを使用してアクセスでき、ユーザーは適用される規約への準拠を確認する責任があります。

Vital Skills: Upskilling Genie Code with Healthcare and Life Sciences skills

Genie Codeという自動コーディングエージェントが、ヘルスケアおよびライフサイエンス分野に特化したスキルを搭載して強化されます。AIを活用した統一された統治プラットフォーム上で、医療業界向けの専門的なコーディング機能を提供することで、この分野での開発効率向上を実現します。

Unlocking Investment Insights Without Migrating Your Data: Lakehouse Federation

Lakehouse Federationは、データを移行することなく複数のデータソースをクエリできる新しいアプローチです。企業が現在のデータ環境を維持しながら、統合的な分析インサイトを得られる仕組みを提供します。

From spot fixes to measured gains: improving document extraction accuracy with ai_extract and MLflow Prompt Registry

AIとMLflowのプロンプトレジストリを活用し、単発の修正から体系的な改善へとアプローチを転換することで、ドキュメント抽出の精度向上を実現する方法について解説しています。従来の場当たり的な修正ではなく、測定可能で再現性のある改善プロセスを構築することが重要だとしています。

BigQuery to Databricks: A Strategic Framework

BigQueryからDatabricksへの移行を戦略的に実施するためのフレームワークについて紹介しています。現在BigQueryで複数のデータ分析ワークロードを運用する組織が、どのように移行を進めるべきかについて解説しています。

Default OAuth apps for external AI agents are now generally available

Databricks MCP サーバーに対して、ChatGPT、Codex、Claude、Claude Code、Cursor などの外部 AI エージェントがデフォルト OAuth クライアント ID を使用して接続できるようになりました。アカウント管理者が OAuth アプリケーションを別途作成する必要がなくなり、セットアップが簡素化されます。

AI Functions Unity Catalog permissions is now generally available

Databricks の Unity Catalog 権限機能が一般利用可能になりました。メタストア管理者は system.ai スキーマの権限を使用して、組織内のユーザーが実行できるタスク固有の AI Functions を制御できるようになります。

Databricks Free Edition で授業をするときに、先に確かめておくこと

Unity Gateway Usage Dashboard v1.0

Unity Gateway Usage Dashboard v1.0がリリースされました。このダッシュボードでは、coding-agentの採用状況、ハーネスの使用状況、推定セッション支出を確認できます。また、モデルとユーザーの支出分析の拡張機能、タグベースの支出帰属が提供されています。

Unity Gateway Usage Dashboard v1.0

Unity Gateway Usage Dashboard v1.0がリリースされました。このダッシュボードでは、コーディングエージェントの導入状況やリソース利用状況、推定セッション支出を確認できます。モデル別・ユーザー別の支出分析とタグベースの支出追跡機能も拡張されています。

Lakeflow Designer October release

Lakeflow Designerの10月リリースでは、AI関数と準備機能の強化、HTMLオペレータ、フルスクリーンプレビューの共有機能、大規模フロー整理ツールが追加されました。オペレータのカテゴリ分類、ai_decide関数によるテキスト分析、カスタムオペレータの公開機能など、データ準備作業の効率化が進みます。

How to teach with Databricks Free Edition

Databricks Free Editionを使用すれば、企業が本番環境で利用するのと同じプラットフォームで、データやAIの完全なコースを無料で実施できます。教育機関や学習者にとって、実践的な環境で学習できる有効な選択肢となります。

Building live intelligence: Databricks AI Search supports Streaming Tables, Materialized Views, and Managed tables using Iceberg

Databricksは、AI Searchの機能拡張を発表しました。Streaming Tables、Materialized Views、Managed tablesに対応することで、より多様なデータソースからのリアルタイム検索が可能になります。これにより、ユーザーはライブデータに基づいたインテリジェントな検索体験を実現できます。

The media industry is becoming a prediction economy

メディア産業は過去20年間、インプレッション数やリーチ、クリック数などの注目度指標を中心に運営されてきました。しかし現在、産業は予測経済へとシフトしつつあり、従来の注目度ベースのモデルから新しいアプローチへの転換が進んでいます。

Improved Lakeflow Performance Observability will soon be available by default for workspaces with the compliance security profile enabled

2026年11月25日以降、コンプライアンスセキュリティプロファイルが有効なワークスペースに対して、改善されたLakeflowパフォーマンス可視化がデフォルトで利用可能になります。Lakeflow Jobsは対応するタスクについてジョブレベルのクエリパフォーマンスメトリクスとインサイトを表示し、ユーザーはデータボリューム情報の確認やOptimizeボタンでクエリの最適化が可能になります。

QuickBooks connector is available in Beta

Databricksが提供するLakeflow ConnectにQuickBooksコネクタがベータ版として利用可能になりました。このコネクタを使用することで、QuickBooks Onlineから勘定科目や顧客、仕入先などの会計データをDatabricksに取り込めます。OAuth認証と増分取り込み機能に対応しています。

Improved Lakeflow Performance Observability is now generally available

Lakeflowがジョブレベルのクエリパフォーマンスメトリクスと分析情報を表示する機能を一般提供開始しました。ユーザーはデータボリュームメトリクスを確認でき、Optimizeボタンでパフォーマンス改善のための提案を得られます。

OpenTelemetryのspan linkをDatabricksのUnity Catalogトレースに送ってみた

Unify your productivity and AI data with Lakeflow Connect

Lakeflow Connectは、生産性とAIデータを統合するソリューションです。本記事は、Lakeflow Connectがどのように完全管理型サービスをもたらすかについて解説するシリーズの第2弾となっており、ユーザーの業務効率化とデータ活用の最適化を実現することを目指しています。

Account-level security features are now available by default at GA

アカウントレベルのセキュリティ機能が一般提供時にデフォルトで利用可能になります。プライベート接続、イングレス/エグレス制御、暗号化などの機能が全アカウントで即座に有効化されますが、管理者による設定は引き続き必要です。この変更により、プラットフォームチームはセキュリティのベストプラクティスをより容易に発見・採用できるようになります。

Databricks SQL version 2026.43 is rolling out in Current

Databricks SQLのバージョン2026.43がCurrentチャネルにロールアウトされています。このリリースには新しい機能が含まれており、詳細はDatabricksの公式ドキュメントで確認できます。

Databricks Runtime 19: October 26, 2026

Databricks Runtime 19が2026年10月26日にリリースされました。本バージョンではバグ修正とオペレーティングシステムのセキュリティ更新、その他の諸々の改善が実施されています。

Check budget usage with the Spend Status API

Unity Gatewayの予算管理機能を強化するSpend Status APIが提供されます。このAPIを使用することで、設定された予算限度額に対する使用状況を確認したり、複数の予算にわたるステータス一覧を取得したりできます。

Check budget usage with the Spend Status API

Unity Gatewayが提供するSpend Status APIを使用することで、予算制限に対する使用状況を確認できます。このAPIでは、単一の予算の支出状態を取得したり、複数の予算全体のステータスを一覧表示することが可能です。

Lakebase snapshots and backup schedule APIs are generally available

Lakebaseのスナップショット機能とバックアップスケジュール機能が正式提供開始されました。スナップショットAPIでポイントインタイムスナップショットの作成・取得・削除が可能で、新規ブランチ作成による復元にも対応します。バックアップスケジュールAPIではルートブランチの自動スナップショット実行間隔の設定・確認ができます。

受講者が「ループ」になる AI エージェントのハンズオンを作った：Databricks Free Edition で、仕組みから評価まで

PayPal connector is available in Beta

DatabricksのLakeflow Connectに、PayPalコネクタがベータ版で利用可能になりました。このコネクタを使用することで、トランザクションや紛争、請求書、残高、カタログ製品、請求プランなどのPayPalの支払いデータをDatabricksに取り込めます。OAuth認証に対応し、増分取り込みをサポートしています。

Use Claude desktop and ChatGPT desktop work agents with Unity Gateway

Anthropic の Claude デスクトップと OpenAI の ChatGPT デスクトップで、Unity Gateway を通じて管理されたモデル、MCP サーバー、スキルを設定できるようになりました。サブスクリプション リレー機能は Claude デスクトップでのみ利用可能です。

Use Claude desktop and ChatGPT desktop work agents with Unity Gateway

Unity Gatewayで、Claude DesktopおよびChatGPT Desktopのワークエージェントを設定できるようになりました。ガバナンス対象のモデル、MCPサーバー、スキルを構成可能で、サブスクリプションリレーはClaude Desktopでのみ利用可能です。

DataFrame caching on serverless compute is now in Public Preview

Databricksのサーバーレス環境でDataFrameキャッシング機能がパブリックプレビューで利用可能になりました。df.cache()またはdf.persist()を使用して、セッション中に計算コストの高い結果を再利用できます。この機能はサーバーレス環境バージョン5以上、および対応するDatabricks Connectで利用可能です。

DataFrame caching on serverless compute is now in Public Preview

Databricksのサーバーレスコンピュート上でDataFrameキャッシング機能がパブリックプレビューとして利用可能になりました。df.cache()またはdf.persist()を使用して高コストな計算結果をキャッシュし、セッション中に再利用できます。環境やライブラリの最小バージョン要件があり、デフォルトで有効化されています。

Box Audit Logs managed ingestion connector (Beta)

Box Audit Logs managed ingestion connectorがLakeflow Connectでベータリリースされました。このコネクタを使用することで、Boxから企業の監査イベントをDatabricksに取り込むことができます。

Built for Agents: The Case for Spark Declarative Pipelines

AIエージェントが本番環境のデータパイプラインの70%以上を作成するようになった現状を踏まえ、Spark Declarative Pipelinesの設計思想と利点について説明する記事。エージェント時代に対応したパイプライン構築アプローチの重要性を論じています。

Real-time energy trading and analytics on Databricks

エネルギー取引デスクがリアルタイム取引に成功するには、単なる処理速度の向上だけでは不十分です。Databricks上でリアルタイムエネルギー取引と分析を実現することで、より高度なデータ処理と分析機能が実現されます。

Files API 3.0 for Unity Catalog volumes is now in Beta

Unity Catalogボリュームの Files API 3.0 がベータ版で利用可能になりました。5GB以上のファイルアップロードに対応するマルチパートアップロード機能と、ファイルのバージョンに基づいてアップロード・ダウンロード・削除を制御する条件付き操作機能が新たに追加されています。

「ハーネス」とは何か: Claude Code の裏側で起きていることから理解する

Databricks のサーバーレスコンピュートで df.cache() が使えるようになったので試してみた

The new economics of AI cost management

AIの導入コスト管理に関する新たな経済学的アプローチについて論じた記事。過去2年間のエンタープライズAI導入に関する議論の展開と、その背景にある経済的な課題や戦略の変化を探る内容と考えられます。

The Fraud Analyst AI Coworker: Detecting Telecom Fraud in Real-Time on One Platform

通信詐欺検出のためのAI共働者システムが登場。通信業界における詐欺検知の課題に対応し、単一プラットフォーム上でリアルタイムに詐欺を検出する機能を備えています。Communications Fraud Control Association の2025年調査に基づいた背景から、業界の詐欺対策における重要な進展として紹介されています。

The AI Bill is coming

AI規制に関する「AI Bill」の成立が近づいており、Catherine Brownが規制プロセスで生じた事象についてPatrickと対話する内容の記事です。AI関連の法制化の動きと、その過程で何が起きたのかについて詳しく解説されているようです。

Microsoft Entra ID connector is available in Beta

Databricksの新しいMicrosoft Entra IDコネクタがベータ版で利用可能になりました。このコネクタを使用することで、ユーザー、グループ、アプリケーション、サービスプリンシパルなどのMicrosoft Entra IDデータをDatabricksに取り込めます。OAuth認証に対応し、監査ログとサインインログの増分取り込みをサポートしています。

MLflow 3.17 で Jev を make_judge() のモデルに指定できるようになったので試した

JEDAIもくもく会開催レポート: Databricksメトリクスビューと、いただいた質問への回答

Serverless job environments from pyproject.toml (Beta)

Databricksのサーバーレス環境で、pyproject.tomlファイルを用いてジョブ環境を構成できる新機能がベータ版で提供されます。ノートブックやPythonスクリプトタスクは、Jobs UIやJobs API、バンドルを通じてプロジェクト環境を設定でき、ワークスペース管理者がProject-Scoped Shared Computeを有効化することで利用可能になります。

Shared Serverless for Asset Bundles (Beta)

Databricksが新機能「Shared Serverless for Asset Bundles」をベータ版で提供開始しました。同じバンドル内のノートブックとファイルがサーバーレスコンピュートと環境設定を共有でき、ワークスペース管理者がプレビューページで「Project-Scoped Shared Compute」を有効化できます。

Shared Serverless (Beta)

Shared Serverlessは、同じバンドル内のノートブックとファイルがサーバーレスコンピュートと環境定義を共有できるベータ機能です。ワークスペース管理者はプレビューページでProject-Scoped Shared Computeを有効化でき、bundle-root pyproject.tomlで環境を定義できます。

Genie One enhancements

Genie Oneが複数の機能強化を実施しました。会話の概要表示で長い対話を効率的に移動でき、スキルファイルのアップロード機能やdbtなどの外部ツールのクエリスニペット抽出が追加されました。モバイルアプリでは前回のログインメールアドレスが記憶される機能が実装されています。

Dashboard enhancements

ダッシュボード機能が複数強化されました。プライベートブックマーク機能でフィルター組み合わせを保存でき、PDF出力時に特定ページの選択が可能になりました。また、Power BIやTableauから最大100ファイルの一括インポート、フィールドピッカーのツールチップ表示、複合チャートやウォーターフォールチャートの拡張機能など、ダッシュボード作成と管理の利便性が向上しています。

Databricks AI Runtime and NVIDIA make it easier to customize open models with enterprise data

DatabricksのAIランタイムとNVIDIAが連携し、企業データを用いたオープンモデルのカスタマイズを容易にします。GPUを活用して高度なAIワークロードを処理し、言語モデルなどの最先端技術をサポートします。

AI Runtime is Generally Available

Microsoftが「AI Runtime」(AIR)の一般提供開始を発表しました。このツールにより、開発者はAIアプリケーションの構築と実行が容易になります。AIRは、機械学習モデルの統合と展開を簡素化するプラットフォームとして機能します。

Deploy RFD4-Proteina on Databricks

Databricks上でRFD4-Proteinaを展開できるようになりました。AI支援開発とサーバーレスのNVIDIA GPU計算を活用して、研究データにRFD4-Proteinaをもたらすソリューションです。

Screen MCP tool calls and results for jailbreaks (Beta)

Unity Gatewayで、MCPツールの呼び出しと結果をスクリーニングし、ジェイルブレイクやプロンプトインジェクション攻撃を検出できるようになりました。Jailbreak保護機能を入出力の片方または両方に適用可能です。

Screen MCP tool calls and results for jailbreaks (Beta)

Unity Gatewayで、MCPツールコールとその実行結果をスクリーニングしてジェイルブレイクやプロンプトインジェクション攻撃を検出する機能がベータ版で提供開始されました。入出力またはその両方に「ジェイルブレイク」ガードレールを適用できます。

Omnigent の omnigent agent add で GitHub のエージェントを登録して、更新の反映まで確かめた

Genie Code tasks in Lakeflow Jobs are available by default for workspaces with the compliance security profile enabled starting in November 2026

2026年11月から、コンプライアンスセキュリティプロファイルが有効なワークスペースではLakeflow JobsのGenie Codeタスクがデフォルトで利用可能になります。このタスクはプロンプトを自動実行し、上流タスクの出力を読み込んで必要に応じてツールを呼び出し、結果へのリンクを返します。

Lakeflow pipelines system tables are now generally available (GA)

Lakeflowのパイプラインシステムテーブルが一般提供開始となりました。pipelinesとpipeline_update_timelineの2つのテーブルがアカウント内のパイプラインおよびその更新情報を記録します。詳細はJobsシステムテーブルリファレンスで確認できます。

Genie Code tasks in Lakeflow Jobs are now generally available

Lakeflow Jobsに含まれるGenie Codeタスクが一般提供開始されました。このタスクはプロンプトをジョブの一部として自律的に実行し、上流のタスク出力を読み込んだり必要なツールを呼び出したりできます。実行結果はGenie Codeチャットへのリンクとして返されます。

Genie Ontology snippets will soon be generally available and enabled by default

Genie Ontologyスニペットが2026年11月初旬に一般利用可能となり、デフォルトで有効化されます。この機能は既存のメトリクスビュー、ダッシュボード、SQLクエリ、Genie Agentsから自動的にビジネスコンテキストを抽出・維持し、Genie OneとGenie Code検索の精度と速度を向上させます。

SurveyMonkey connector is available in Beta

Databricksの「Lakeflow Connect」にSurveyMonkeyコネクターがベータ版で追加されました。このコネクターを使用することで、SurveyMonkeyからアンケート、回答、連絡先などのデータをDatabricksに取り込むことができます。OAuth認証に対応し、増分取得やUI/API経由のパイプライン作成に対応しています。

Oracle Eloqua connector is available in Beta

Oracle EloqaコネクタがLakeflow Connectにベータ版で利用可能になりました。このコネクタを使用することで、Oracle Eloquaからcontacts、accounts、campaigns、emailなどのマーケティングデータをDatabricksに取り込むことができます。OAuth認証に対応し、UIベースのパイプライン作成やAPIベースのパイプライン作成など複数の機能をサポートしています。

Google Analytics Aggregated connector is available in Beta

Databricksの「Google Analytics Aggregated connector」がベータ版で利用可能になりました。このコネクタを使用することで、Google Analytics 4の集約レポートデータをDatabricksに取り込むことができます。ユーザーアクティビティ、獲得、エンゲージメント、収益化などのデータに加えて、カスタムレポートの定義も可能で、増分取り込みと複数の認証方式に対応しています。

Asana connector is available in Beta

Asanaコネクタがベータ版でLakeflow Connectで利用可能になりました。このコネクタにより、AsanaからDatabricksへワークスペース、チーム、プロジェクト、タスク、ポートフォリオ、目標などの業務管理データを取り込めます。OAuth U2M認証を使用し、ワークスペース管理者がプレビューページからアクセスを制御できます。

How HP Is Building an AI-Ready CDP with Databricks CustomerLake

HPはDatabricksのCustomerLakeを活用して、AI対応のカスタマーデータプラットフォーム（CDP）を構築しています。Data + AI Summit 2026でグローバルデータ戦略・エンジニアリング責任者のルイス・アロンソ氏が、この取り組みについて発表しました。

MemCurrent: Designing Persistent Memory for Production Agents

AIエージェントの開発ツールが普及する中、企業向けコード生成エージェントの構築・運用には永続的なメモリ機構が重要となっています。MemCurrentは本番環境でのエージェント運用を想定した永続メモリの設計に関する技術です。

Introducing Agent Memory on Databricks

Databricksがエージェント開発プラットフォーム「Agent Bricks」にエージェントメモリ機能を導入しました。この新機能により、AI エージェントは過去のやり取りや学習内容を保持でき、より連続性のある対話が可能になります。開発者はこれにより、より高度で実用的なエージェント構築ができるようになります。

How Hamlet uses Databricks Lakebase Postgres to test changes against production data

Hamlet（AI搭載の地方自治体意思決定支援プラットフォーム）は、Databricks Lakebase Postgresを活用して、本番環境データに対して変更内容をテストしています。この取り組みにより、本番データを使用した効率的な検証が実現され、プラットフォームの信頼性と開発プロセスの最適化が図られています。

ai_enrich can ground rows with external MCP search providers (Beta)

ai_enriched機能がベータ版で、外部MCP検索プロバイダーを通じた行のグラウンディングに対応しました。Unity Gatewayに登録したYou.comやExaなどのMCPサーバーから検索ツールを利用でき、他の情報源と組み合わせて使用できます。ワークスペース管理者は、プレビューページからAi Enrichプレビューを有効化できます。

Saving an unchanged job no longer adds rows to the jobs system tables

ジョブの設定を変更せずに保存する場合、システムテーブルに新しい行が追加されなくなりました。UI、Jobs API、宣言的オートメーションバンドルからの保存が対象で、change_timeは最後の変更時刻のままとなります。

What makes a catalog open? Unity Catalog Advances the Open Lakehouse

Unity Catalogがオープンレイクハウスの実現に向けて進化しています。ほぼすべてのプラットフォームがオープンフォーマットに対応する中で、カタログを本当の意味で「オープン」にするための要素が議論されています。

How to get the most out of running dbt on Databricks

dbtはデータ変換に利用される広く普及したツールであり、Databricks上でdbtを実行する際の活用方法について解説しています。数万の組織がdbtに依存しており、Databricksプラットフォームでの効果的な運用方法に関する情報提供されています。

Databricks Is Doubling Down On New York City As A Premier AI Talent Hub

Databricksが5 Bryant Parkに開設したニューヨークのR&Dハブを中心に、同社がニューヨークシティをAI人材の主要拠点として強化している。エンタープライズデータとAI分野における技術開発の中心地として、同都市への投資を拡大している動きが報じられている。

CustomerLake enters Beta: Leading enterprises going live with the Agentic CDP

CustomerLakeがベータ版に突入し、大手企業によるAgenticプラットフォームの導入が開始されました。Campaign Agentsと呼ばれる機能を中心に、顧客データプラットフォーム(CDP)の新たな段階へ移行しています。

Lakebase Insights moves to per-project settings, with on-demand runs (Beta)

Lakebase Insightsがプロジェクト単位の設定に移行し、オンデマント実行機能をベータ版で提供開始しました。システムテレメトリを使用して問題を診断し、次のステップを推奨します。ユーザーは各プロジェクトの設定でInsightsを直接構成でき、スケジュール設定またはオンデマンドで分析を実行できます。

DeepSeek V4.1 Flash (1017) is now available on Unity Gateway

DeepSeek V4.1 Flash（1017）がUnity Gateway上で利用可能になりました。このモデルはテキストと画像入力に対応しており、Foundation Model APIを通じてアクセスできます。ユーザーは適用される利用規約への準拠を確認する責任があります。

Databricks Runtime 19: October 19, 2026

Databricks Runtime 19ではSpark Connectで実行メトリクスの表示方法が変更され、行フィルタと列マスク関連の内部オペレータとメトリクスが非表示になります。これはポリシー実行に関する情報を保護するための変更で、クエリ結果は影響を受けませんが、詳細なメトリクスに依存するノートブックやツールは更新が必要になる可能性があります。

Filter data per end user with OAuth custom identity claims

OAuth トークンにカスタムアイデンティティクレームを追加し、動的ビューまたは ABAC ポリシーでそれに基づいてデータをフィルタリングできるようになりました。この機能により、1つのサービスプリンシパルで複数のエンドユーザーにサービスを提供しながら、各ユーザーが自分のデータのみを閲覧することが可能になります。

DeepSeek V4.1 Flash is scheduled for retirement

DeepSeekがV4.1 Flashモデルを2026年11月19日に廃止することを発表しました。代替モデルとしてDeepSeek V4.1 Flash (1017)の利用が推奨されており、移行に関する詳細なガイダンスが提供されています。

DeepSeek V4.1 Flash (1017) is now available on Unity Gateway

Unity Gatewayでテキストと画像入力に対応したDeepSeek V4.1 Flash (1017)が利用可能になりました。Foundation Model APIsを通じてアクセスでき、ユーザーは適用される利用規約の遵守を確認する責任があります。

Asynchronous processing with transformWithState is now generally available

PythonのrowベースのtransformWithState APIで非同期処理が一般利用可能になりました。わずかなコード変更で状態操作とユーザーロジックを並行実行し、スループットを向上させることができます。

Databricks SQL version 2026.43 is now available in Preview

Databricks SQLバージョン2026.43がプレビューチャネルで利用可能になりました。本バージョンではOSセキュリティ更新と各種バグ修正が含まれており、新機能や動作変更は実装されていません。

Databricks SQL version 2026.42 is rolling out in Current

Databricks SQLのバージョン2026.42がCurrentチャネルへのロールアウトを開始しました。本バージョンには新機能が複数搭載されており、詳細はDatabricksの公式ドキュメントで確認できます。

October 19, 2026

Databricks Runtime 19を搭載したサーバーレスコンピュートのリリースです。Spark Connectの実行メトリクスが、行フィルタとカラムマスクの詳細情報を非表示にするよう変更され、ポリシー実行に関する情報を保護します。保護されたサブプラン内の詳細メトリクスに依存するノートブックやツールは更新が必要になる可能性があります。

MLflowの問題検出で、仕込んだ4つの問題が見つかるか試してみた

READ METADATA privilege support for compliance security profile standards

DatabricksのREAD METADATA权限が、同社がサポートするすべてのコンプライアンスセキュリティプロファイル標準に対応しました。コンプライアンスセキュリティプロファイルが有効なワークスペースでデフォルトで利用可能になり、規制要件への対応がより容易になります。

Transactions are Generally Available, advancing warehousing on the Lakehouse

Lakehouse アーキテクチャにおいて、マルチステートメント・トランザクションが一般利用可能になりました。この機能により、組織はデータウェアハウスの運用を以前よりも効率的に進めることが可能になります。

Closing the Binary Blind Spot: Domain-Knowledge Injection for LLM Malware Triage in npm Packages

npm パッケージレジストリへのサプライチェーン攻撃が増加する中、本研究はLLMを活用したマルウェア分類において、ドメイン知識を注入することで精度向上を図っています。バイナリ解析の限界を補うアプローチにより、npm パッケージの脅威検出能力の強化を目指しています。

TypeSafe AI Jev 1.14.0 is now available on Unity Gateway

TypeSafe AI Jev 1.14.0がUnity Gatewayで利用可能になりました。TypeSafe AIがホストしており、アカウント管理者が外部ホストのTypeSafe AIモデルプレビューを有効にする必要があります。利用にはTypeSafeの利用規約が適用されます。

TypeSafe AI Jev 1.14.0 is now available on Unity Gateway

TypeSafe AI Jev 1.14.0がUnity Gatewayで利用可能になりました。TypeSafe AIがホストしており、アカウント管理者が外部ホストのTypeS afe AIモデルプレビューを有効にする必要があります。利用はTypeSafeの利用規約に従います。

Unity Gateway の統合トレーステーブルを試す: 計装なしでプロンプトと応答まで記録される

Delegate access to Genie budgets

Genie予算管理機能がアクセス制御リスト（ACL）に対応しました。アカウント管理者とワークスペース管理者は、予算マネージャーまたは予算ビューアーロールを特定のユーザー、グループ、またはDatabricksサービスプリンシパルに付与でき、各予算の表示・管理権限を委譲できます。

File upload in Genie One and Genie Agents is now generally available

Genie OneおよびGenie Agentsのファイルアップロード機能が正式リリースされました。ワークスペース管理者はプレビューを有効にする必要がなくなり、ユーザーは会話にファイルをアップロードして自然言語で分析できます。ただし、コンシューマーアクセスのみのユーザーは利用できません。

File upload in Genie One and Genie Agents will soon be available by default for compliance security profile workspaces with supported compliance standards

2026年11月15日から、コンプライアンスセキュリティプロファイルが有効化されたワークスペースでは、対応する規格に限り、Genie OneおよびGenie Agentsのファイルアップロード機能がデフォルトで利用可能になります。ユーザーは会話にファイルをアップロードして自然言語で分析できます。

Delegate budget access with access control lists (ACLs)

Databricksのバジェット機能がアクセス制御リスト(ACL)に対応し、アカウント・ワークスペース管理者はBudget ManagerやBudget Viewerロールをユーザーやグループ、サービスプリンシパルに付与できるようになりました。これにより、予算の閲覧と管理権限をきめ細かく委譲することが可能になります。

Delegate budget access with access control lists (ACLs)

Databricksの予算機能がアクセス制御リスト（ACL）に対応しました。アカウントおよびワークスペース管理者は、ユーザー、グループ、またはサービスプリンシパルに対してBudget ManagerやBudget Viewerロールを付与でき、予算の表示と管理権限を委譲できるようになります。

Sizing Lakebase Search: lessons from a real app and 4 million passages

Databricksの内部アプリ「Slide Hub」の事例から、Lakebase Searchのスケーリングに関する知見を紹介します。400万以上のパッセージを処理する実運用アプリケーションの経験に基づき、検索機能を大規模に展開する際の教訓と実装のポイントを解説しています。

How our AI Research team uses AI Runtime

DatabricksのAI研究チームが、AI Runtimeをどのように活用して新しいAI研究技術の開発と評価を行っているかについて紹介しています。同社が継続的に進めている研究活動における、このツールの役割と具体的な応用方法が説明されるものと考えられます。

Reducing the noise: How Atlassian built an OCSF security lakehouse on Databricks

アトラシアンは、20年分のログデータの増加に対処するため、DatabricksプラットフォームでOCSF（Open Cyber Security Framework）セキュリティレイクハウスを構築しました。グローバル規模での膨大なログノイズを減らし、セキュリティ分析の効率化を実現する取り組みについて紹介されています。

Geospatial queries are up to 38X faster with Lakehouse//RT

Lakehouse//RTにおいて地理空間クエリの性能が大幅に向上しました。Spatial SQLと空間結合が対応し、最大38倍の高速化を実現しています。これにより地理情報を扱う大規模データ分析がより効率的に処理できるようになります。

ADBC driver for Power BI is now generally available

Databricks向けのArrow Database Connectivity（ADBC）ドライバがPower BIで一般提供開始されました。ADBCはPower BI DesktopおよびPower BIサービスの新規接続におけるデフォルトドライバとなります。

Agent Bricks CLI のクイックスタートを試してみた

Stripe Data Pipeline now syncs real-time Stripe data to Lakebase Postgres

Stripeが提供するデータパイプラインが、Stripe内のリアルタイムデータをLakebase Postgresに同期できるようになりました。Stripeで事業を運営する企業のアプリケーションが、Stripeのデータへアクセスする必要性に対応するもので、データ連携の効率化を実現します。

Lakebase Search supports Chinese, Japanese, and Korean full-text search

Lakebase Searchの拡張機能が、中国語・日本語・韓国語のフルテキスト検索に対応しました。これらの言語は単語が空白で区切られないため、新たにmorph形態解析機能を使用して言葉を分割し、複合語処理や言語固有のフィルタリング機能を備えています。既存の設定やインデックスを変更することなく、拡張機能をアップデートするだけで利用可能です。

Replicate data in and out of Lakebase with Postgres logical replication

Lakebseが新たにPostgresの論理レプリケーション機能に対応しました。既存のPostgresデータベースをLakebseに移行して同期を保つことや、Lakebseからの変更を外部のPostgresデータベースに公開することが可能になります。

Consumer access to query Unity Gateway services is generally available

Unity Gatewayのコンシューマーアクセス機能が一般提供となり、アカウント管理者の承認なしでユーザーが直接モデルサービスやコーディングエージェント機能にアクセス可能になりました。アカウント管理者は予算設定やレート制限によりトラフィック制御が可能です。

MySQL integrated CDC pipeline is now generally available

MySQLの統合CDCパイプラインが一般提供開始されました。このパイプラインはMySQLからDatabricksへの変更データの取り込みを単一パイプラインで実現し、抽出と適用を一つのパイプラインアップデートに統合します。従来のゲートウェイベースのアーキテクチャとは異なり、別個のインジェストゲートウェイが不要です。

Consumer access to query Unity Gateway services is generally available

Unity Gatewayのコンシューマーアクセス機能が一般提供開始されました。コンシューマーアクセス権限を持つユーザーは、アカウント管理者の有効化なしで、共有されたモデルサービスへのクエリやUnity Gateway コーディングエージェント機能を利用できるようになります。管理者は予算制限やレート制限でトラフィックを制御可能です。

The agentic code converter is generally available for SQL conversion

Databricksの自動コード変換ツール「agentic code converter」がSQL変換向けに正式リリースされました。T-SQLやSnowflake、Redshiftなど複数のSQL方言をDatabricks SQLに変換でき、変換結果の検証と自動修正後にワークスペースに出力します。変換後もAIチャットで追加の調整や変更内容の確認が可能です。

Redesigned MLflow Logs tab for AI Runtime runs

MLflowのLogsタブがAI Runtime実行用に再設計され、ノード・レベル・時間範囲でのログ検索とフィルタリング、リアルタイム追跡、ダウンロード機能に対応しました。新規実行ではArtifactsタブの従来のログファイルに代わり、60日間利用可能なログが表示されます。

Data Classification adds 50 new classes and support for 16 more countries and regions

Data Classificationが50の新しいセンシティブデータクラスを検出し、16の国・地域で新たにサポートされました。支払いカード情報、個人・従業員データ、ソフトウェアセキュリティシークレットなどが含まれ、中国やメキシコを含む18の国・地域で35の新しいクラスが追加されています。

Data Classification adds 50 new classes and support for 16 more countries and regions

Data Classification機能が50の新しい機密データクラスを検出できるようになり、16の国と地域で新たにサポートされました。支払いカード情報や財務データ、個人・従業員データ、ソフトウェアセキュリティシークレットなど多様な機密情報の分類に対応し、中国やメキシコ、英国を含む18の国と地域で地域識別子も拡張されています。

Genie Migrate is generally available for SQL conversion

Databricksが提供するGenie Migrateが正式リリースされました。このツールはT-SQLやSnowflake、Redshift、Oracle、BigQueryなど複数のSQLダイアレクトをDatabricks SQLに自動変換します。変換後もGenie Codeとの対話を通じて、結果の検証や修正、変更内容の確認が可能です。

Genie One enhancements

Genie Oneが複数の機能を強化しました。ドキュメント編集の共有、ユーザーグループ情報の取得、過去の調査コンテキストの再利用、Unity Gatewayを通じたスキル共有（ベータ版）が新たに対応となり、チームでの協働作業やスキル管理がより効率的になります。

Dashboard enhancements and bug fixes

Lakehouse Real-Timeウェアハウスのサポート、Dashboard Insightsによるチャート分析、Power BI .tmdlファイルのインポート機能などが追加されました。また、ピボットテーブルのドリルダウン機能やテーマフォントの継承、各種バグ修正も実装されています。

Genie Agents enhancements

Google Genieエージェント機能が強化されました。新たに「Flash」モードが追加され、応答速度を優先する設定が可能になり、シンプルな日常業務に最適化されています。同時にエージェントモード全体で長いコンテキスト処理と応答速度が改善された新モデルが導入されました。

Workspace-level package repositories for Databricks Apps will soon be available by default for workspaces with the compliance security profile enabled

Databricksは2026年11月13日より、コンプライアンスセキュリティプロファイルが有効なワークスペースに対して、Databricks Apps向けのワークスペースレベルパッケージリポジトリを自動的に有効化します。ワークスペース管理者はPythonおよびnpmパッケージリポジトリのデフォルト設定ができ、アプリレベルでの上書きも可能です。

Workspace-level package repositories for Databricks Apps are generally available

Databricks AppsのワークスペースレベルパッケージリポジトリがGA化されました。ワークスペース管理者はPythonおよびnpmパッケージリポジトリのデフォルト設定が可能になり、アプリはこの設定を継承しつつアプリレベルでのオーバーライドもサポートします。

Unlock powerful insights and forecasts with Predictive AI Functions

Salesforceが予測AI機能を発表しました。データチームが頻繁に受ける「次四半期の売上はいくらか」といった質問に対して、強力な洞察と予測を提供できる機能です。これにより、データ分析をより効率的かつ正確に実行できるようになります。

Power real-time applications and agents with Document Intelligence

Databricksは、Document Intelligenceを活用して、エンタープライズ顧客が受け取る数百万件のドキュメントをリアルタイムで処理し、アプリケーションとエージェントを強化するソリューションを提供しています。この技術により、大量の文書データから価値を効率的に引き出すことが可能になります。

Introducing Private Network Gateway

Databricksがプライベートネットワークゲートウェイを発表しました。このサーバーレスコンピュートソリューションは、完全に管理され、インテリジェントで、バージョン管理が不要な特徴を備えています。セキュアなネットワーク接続を提供することで、エンタープライズ環境でのデータ処理がより安全になります。

Reducing Qwen training time by 6x on AI Runtime

Alibaba CloudのAI Runtimeを使用することで、Qwenなどの多数億パラメータ規模の基盤モデルの訓練時間を従来比6倍削減できます。膨大な計算量が必要なモデル訓練を効率化する新たなソリューションが実現されました。

How FactSet cut model training and deployment from days to hours with Databricks AI Runtime

FactSetのText-to-Formula（TTF）システムが、Databricks AI Runtimeを活用することで、モデルの訓練と展開の時間を数日から数時間に短縮しました。自然言語処理を用いた同システムの開発効率が大幅に改善され、より迅速なイテレーションが可能になったことが報告されています。

Data Classification API is now generally available

データ分類APIが一般提供開始されました。これにより、Terraformリソースを使用したデータ分類機能が利用可能になります。なお、自動タグ付け設定（auto_tag_configs）は現在パブリックプレビュー段階です。

Transactions support both managed Delta Lake and Apache Iceberg tables

DatabricksがUnity Catalog管理下のDelta LakeおよびApache Icebergテーブルにトランザクション機能を一般提供開始しました。複数のSQL文を単一のアトミックトランザクションにまとめることができ、BEGIN ATOMIC...END構文またはBEGIN TRANSACTION...COMMIT構文を使用します。

Data Classification API is now generally available

データ分類APIが一般提供開始となりました。同APIとそのTerraformリソースが正式に利用可能になりましたが、自動タグ付け設定機能はパブリックプレビュー段階のままです。

Genie agentic capabilities are now processed in India

Databricksは、インド地域のワークスペース向けに、Genie Code、Genie Agents、Genie Oneのチャット機能を含むエージェント機能をインド国内で処理するようにしました。これにより、データが国外に転送されることなく処理されます。

A practical guide to real-time analytics in 2026

2026年におけるリアルタイム分析の実装ガイドです。ビジネスの意思決定において データは常に中心的な役割を果たしており、多くの分析ワークロードに対応する必要があります。本記事では、現代的なリアルタイム分析の実践的なアプローチについて解説しています。

What's New in Lakeflow Designer - October 2026 Roundup

Lakeflow Designerが6月に一般利用開始となって以来、継続的な改善が進められています。本記事は2026年10月時点での新機能や更新内容をまとめたもので、ツールの機能拡張や改良についての最新情報を提供しています。

Databricks is a Visionary the Gartner® Magic Quadrant™ for Analytics and Business Intelligence Platforms

Databricksが、分析とビジネスインテリジェンスプラットフォーム向けのGartner Magic Quadrantで、初めてVisionary（先見者）として認定されました。この認定は、同社のデータ分析および知能プラットフォーム分野における革新性と実行力が評価されたことを示しています。

On-demand state repartitioning is now generally available

Databricksが、ステートフルなストリーミングクエリやレイクフロウパイプラインにおいて、チェックポイント状態を失わずにシャッフルパーティション数をリサイズできる「オンデマンド状態リパーティショニング」の一般提供を開始しました。この機能により、ストリーミング処理の柔軟性が向上します。

Everyone's adopting AI agents. Almost no one can prove the ROI. Here's why

AI エージェントの導入が急速に広がっているものの、ほとんどの企業がその投資対効果（ROI）を証明できていない状況にあります。Databricks のスタッフが指摘する、この測定困難な現状と、その背景にある理由を探ります。

What is HTAP? A plain-English guide to hybrid transactional/analytical processing

HTAP（ハイブリッドトランザクショナル/アナリティカルプロセッシング）について解説した記事です。支払い処理の例を用いて、取引の承認前に必要となるリアルタイムデータ処理と分析処理を同時に行うシステムの仕組みを説明しています。

AI Runtime will soon be available by default for workspaces with the compliance security profile enabled

AI Runtimeは2026年10月15日にAWSとAzureで一般利用可能になり、11月中旬にはコンプライアンスセキュリティプロファイルが有効なワークスペースでデフォルトで利用できるようになります。このサービスにより、ユーザーはインフラストラクチャの管理なしにサーバーレスGPU上でモデルの学習とファインチューニングが可能になります。

Google Gemini 4 Argon is now available on Unity Gateway

Google傘下のUnity Gatewayで、最新のAI言語モデル「Gemini 4 Argon」がリリースされました。Foundation Model APIsを通じてこのモデルにアクセス可能となり、ユーザーは利用時に適用される規約への準拠を確認する必要があります。

External access to views through the Unity REST API is generally available

Unity Catalog のビューに対して、外部エンジンが Unity REST API 経由でアクセスできる機能が一般提供されました。この機能により、Delta Lake テーブル上のビューを外部システムから直接クエリできるようになります。

Databricks AI Runtime SDK replaces serverless_gpu

Databricks AI Runtime SDKが、GPU環境バージョン6でserverless_gpuパッケージを置き換えます。新しいSDKは@distributedやray_init APIなどを提供し、パラメータ名もnum_acceleratorsなどに変更されました。旧パッケージはバージョン7で廃止予定です。

Google Gemini 4 Argon is now available on Unity Gateway

Google Gemini 4 Argonがunity Gateway上で利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスでき、ユーザーは適用可能な利用規約への準拠を確認する責任があります。

External writes to managed Delta tables are now generally available

Databricksは、外部のApache Sparkクライアントから Unity Catalog管理下のDeltaテーブルへの作成と書き込みをサポートする機能を一般提供開始しました。このサポート機能を利用するには、テーブルでカタログコミットを有効にする必要があります。

Shared output in clean rooms is now generally available

クリーンルームの共有出力機能が一般利用可能になりました。実行中のテーブルが作成されると同時に、すべての協力者が読取可能な共有出力スキーマに書き込めるようになり、実行完了前から結果やログ、デバッグ情報を共有できます。

JAR workloads in clean rooms are now generally available

Databricksのクリーンルーム機能でJARワークロードの実行が一般利用可能になりました。コンパイルされたJavaまたはScalaコードをクリーンルームで実行でき、JARを独立した分析として実行するか、JARから関数を登録してクリーンルームノートブックから一時的なUDFとして呼び出すことが可能です。

Create clean rooms with identity resolution providers in one step (GA)

Google Cloudのクリーンルーム機能が強化され、Acxiom、Adstra、LiveRamp、The Trade Deskなどの承認されたアイデンティティ解決プロバイダーとの連携がワンステップで可能になりました。プロバイダーは事前設定されており、データを追加してすぐに分析を実行できます。

Cribl connector is available in Beta

Databricks Lakeflow Connectに管理型Criblコネクタがベータ版で利用可能になりました。このコネクタを使用することで、Cribl.Cloud Worker Groupの設定、ワーカーおよび健全性ステータス、組織メタデータ、リーダーの監査アクセスログをDatabricksに取り込めます。OAuth機械間認証に対応し、監査ログとアクセスログの段階的な取り込みをサポートします。

Brickster Voices: Meet Clara Kurian

Brickster Voices は、Brickster の仕事を支えるスタッフたちを紹介するシリーズです。このシリーズでは、Clara Kurian を含む各メンバーの個人的なキャリアの経歴を通じて、組織を構成する人材にスポットライトを当てています。

How Flo Health built safer, more useful open models with Databricks AI Runtime

Flo Healthは、Databricks AI Runtimeを活用してより安全で有用なオープンモデルの構築に成功しました。月間8100万人のユーザーを擁する同社は、生成AIに対して高い基準を設定し、これを達成するためにDatabricksのソリューションを採用しています。

Unity Gateway Skills API and developer tools are available in Beta

Unityカタログ管理機能に対応したUnity Gateway Skills APIがベータ版で利用可能になりました。DatabricksCLI、Python SDK、Go SDK、Javaなど複数の開発者向けツールで、スキルリソースの作成・読み取り・更新・一覧表示・削除・確定操作に対応しています。

Feature Views will soon be available by default for workspaces with the compliance security profile enabled

Feature Viewsが一般提供開始され、2026年11月中旬にはコンプライアンスセキュリティプロファイル有効なワークスペースでは自動的に有効化されます。バッチまたはストリーミングデータから宣言的に機能を定義・計算し、モデル学習とオンライン提供に活用できます。

Unity Gateway Skills API and developer tools are available in Beta

UnityのGateway Skills APIがベータ版として利用可能になりました。このAPIはDatabricksの複数の開発者ツール（CLI、Python SDK、Go SDK、Java SDK、JavaScript SDKなど）に対応し、スキルの作成、読み取り、更新、リスト表示、削除、確定といった基本的な操作をサポートしています。

Governed tag propagation is in Beta

Unity Catalogのタグ伝播機能がベータ版で利用可能になりました。この機能を有効にすると、CREATE TABLE AS SELECTなどのサポート対象操作実行時に、ガバンド タグが自動的に派生テーブルやビューに適用され、データ系統全体での分類とアクセス制御の一貫性が維持されます。

Parameters for Lakeflow pipelines are now generally available

Lakeflowのパイプラインパラメータ機能が一般向けに利用可能になりました。キーバリューペアを使用してパイプラインのSQLコードをパラメータ化することで、ソースコードの編集なしに異なるカタログやスキーマ、テーブルに対して単一のパイプラインを実行できます。パラメータのデフォルト値はパイプライン設定で定義でき、実行時にオーバーライドして柔軟に運用できます。

Agent memory pipelines are in Beta

エージェント向けメモリパイプライン機能がベータ版で利用可能になりました。このパイプラインはセッションストアとメモリストアを接続し、LLMを用いて保存された会話から永続的な事実や好みを抽出します。エージェントはこの抽出情報を後の会話で活用できます。オンデマンドまたは24時間ごとに実行可能です。

Feature Views are now generally available

Feature Viewsが一般利用可能になりました。バッチ処理、ストリーミング、リクエストタイム データに対応しており、2026年11月中旬にはコンプライアンスセキュリティプロファイルワークスペースでも有効化される予定です。

Unity Gateway は Unity Catalog の上に乗っている: 2つの製品の役割分担を整理する

人のラベルと突き合わせて見つけたプロンプトの書き漏れを、MLflow の align() で直せるか試した

Knowledge Assistant and Supervisor Agent are now legacy

DatabricksがKnowledge AssistantとSupervisor Agentをレガシー化しました。新しいコードベースのエージェント開発にはAgent Bricks CLIの使用を推奨し、コードレス開発にはGenie Agentsの利用を勧めています。

Databricks SQL version 2026.42 is now available in Preview

Databricks SQL version 2026.42がプレビューチャネルで利用可能になりました。このバージョンではOSセキュリティアップデートと各種バグ修正が含まれており、新機能や動作変更は実装されていません。

Private connectivity from serverless compute to AWS-managed resources is now generally available

Databricksのサーバーレスコンピュートから、S3などのAWSマネージドリソースへの接続を実現するAWS PrivateLinkが一般提供開始されました。このソリューションによりデータトラフィックはAWSネットワーク内に完全に留まり、公開インターネットを経由しないため、セキュリティが強化されます。

Zoho CRM connector is available in Beta

DatabricksのLakeflow Connectにおいて、Zoho CRMコネクタがベータ版で利用可能になりました。このコネクタを使用することで、リード、コンタクト、アカウント、ディール等のCRMレコードをZoho CRMからDatabricksに取り込むことができます。OAuth認証に対応し、増分取り込みもサポートしています。

DatabricksのサービスポリシーでOpenJevをjudgeにしたガードレールを作る

Google Workspace connector is available in Beta

Databricks Lakeflow Connectで、Google Workspaceのコネクタがベータ版で利用可能になりました。このコネクタを使用することで、Google Workspace内のアプリケーションやサービスからの監査アクティビティをDatabricksに取り込むことができます。OAuth認証と段階的なデータ取り込みに対応しています。

How California built its Behavioral Health Public County Profile on Databricks

カリフォルニア州保健医療サービス部門がDatabricks上に構築した行動健康に関する公開郡プロファイル。このプロジェクトにより、州全体の行動健康データの可視化と分析が実現され、郡別の健康指標を公開することで、医療サービスの透明性と意思決定の質向上が期待されています。

Solving defense supply chain visibility through governed data sharing

防衛サプライチェーンの全段階が、必要な関係者と管理された方法でデータを共有できるようになることで、サプライチェーン全体の可視性が向上するという課題への取り組みについて述べた記事です。データガバナンスを通じた情報共有の重要性が強調されています。

Use request tags in Unity Gateway service policies (Beta)

Unity Gatewayのカスタムサービスポリシーが、呼び出し元から提供されるリクエストタグの確認機能に対応しました。モデルリクエストやMCPツール呼び出しを実行する前に、特定のタグを要求するなどの条件設定が可能になります。

Use OpenJev as the evaluator for LLM-as-a-judge service policies (Beta)

LLM-as-a-judge サービスポリシーの評価モデルとして OpenJev（Qwen3.5 4B）が利用可能になりました。OpenJev は出力トークンを生成せずコンテンツを分類するため、チャット型評価器と比べて高速な応答が特徴です。

Code execution in Genie One (Public Preview)

Genie Oneが、セキュアで隔離されたサンドボックス環境でコード実行機能を新たに搭載しました。SQLを超えた高度な分析など、より複雑な処理に対応でき、既存のアクセス権限を使用して実行されるため、Unity Catalogのガバナンスとデータアクセス制御が継続して適用されます。

Use OpenJev as the evaluator for LLM-as-a-judge service policies (Beta)

LLM-as-a-judge サービスポリシーで、評価モデルとして OpenJev (Qwen3.5 4B) を選択できるようになりました。OpenJev は出力トークンを生成せずコンテンツを分類するため、チャット評価器よりも高速に応答します。

Use request tags in Unity Gateway service policies (Beta)

Unity Gatewayのカスタムサービスポリシーが、リクエストタグの確認機能をサポートします。モデルリクエストやMCPツール呼び出し前に特定のタグを要求するなど、呼び出し元が提供するリクエストタグに基づいた制御が可能になりました。

From post-training to production: How TinyFish runs its web-native model on Databricks AI Runtime

TinyFishはエンタープライズ向けにウェブを横断して動作するエージェント基盤を構築する企業です。同社はDatabricks AI Runtimeを活用し、ウェブネイティブモデルをポスト学習から本番環境まで実行する方法を紹介しており、Search、Fetch、Browserなどの機能を提供しています。

Unity Gateway supports Amazon Bedrock Mantle

Databricksは、Amazon Bedrock Mantleモデルに対するアクセスをUnity Gatewayを通じてサポートしました。Unity Catalogの権限管理、レート制限、予算設定、推論テーブル機能などが利用可能になります。

JDBC Unity Catalog connections will soon be available by default for workspaces with the compliance security profile enabled

2026年11月中旬から、コンプライアンスセキュリティプロファイルが有効なワークスペースでは、SSL証明書サポートを含むJDBC Unity Catalog接続がデフォルトで利用可能になります。この機能により、カスタムJDBCドライバを使用して外部データベースに接続し、Unity Catalogでアクセスを制御できます。

Unity Gateway supports Amazon Bedrock Mantle

DatabricksのUnity Gatewayがアマゾンのベッドロック・マントルモデルに対応しました。Unity Catalogの権限管理、レート制限、予算設定、推論テーブル機能を利用して、これらのモデルにアクセスできるようになります。

Code execution in Genie One (Beta)

Genie One（ベータ版）にセキュアな分離サンドボックス環境でのコード実行機能が追加されました。SQLを超えた高度な分析など、より複雑な作業に対応可能になります。既存の権限で実行されるため、Unity Catalogのガバナンスとデータアクセス制御が引き続き適用されます。

Announcing Workday Data Connect federation in Unity Catalog

WorkdayがUnity Catalogに対応した新しいData Connect フェデレーションコネクタのパブリックベータ版を発表しました。このコネクタにより、Workdayのデータをより効率的に統合・管理できるようになります。

Introducing Funke: Native HL7v2 Parsing on Databricks

Databricksが新たに「Funke」というネイティブなHL7v2パーサーを導入しました。HL7v2は医療業界で広く使用されているメッセージング標準であり、本ツールはレイクハウス環境でのHL7v2データ処理を効率化します。

Lakebase and Agentic SDLC: Branching Databases for Coding Agents

AIの発展に伴い、コーディングエージェントがソフトウェア開発で重要な役割を担うようになっています。Lakebaseは「Branching Databases」という新しい概念を導入し、コーディングエージェント向けのSDLC(ソフトウェア開発ライフサイクル)を実現しようとしています。

Biomedical Imaging's Real Bottleneck Is the Data, Not the Model

生物医学画像処理において、モデルではなくデータが主要な課題であることが指摘されています。医療機関が生成する大量の画像データの処理と活用が、AI技術の発展を制約する実際のボトルネックとなっているという問題提起です。

Load terabytes of data in minutes into Lakebase Postgres

Lakebaseは、Postgresデータベースへのテラバイト単位のデータを数分で高速ロードする機能を提供しています。既存のPostgresの並行処理能力を活かしながら、大規模データの効率的な取り込みを実現する新しいソリューションです。

How to build governed enterprise apps on Databricks with Replit and Lakebase

Replitとdatabricksを組み合わせることで、企業向けアプリケーション開発から本番環境への展開まで一貫したプラットフォームを構築できます。Lakebaceを活用することにより、ガバナンスを備えた企業向けアプリケーションの効率的な構築が実現します。

Unity Catalog Scala and Java UDFs and Scalar and Batch Unity Catalog Python UDFs will soon be available by default for workspaces with the compliance security profile enabled

Unity CatalogでのScala、Java、Pythonユーザー定義関数（UDF）が、2026年11月からコンプライアンスセキュリティプロファイルが有効なワークスペースでデフォルト利用可能になります。これらの機能により、ユーザーはより柔軟なデータ処理が実現できるようになります。

The Discover page and domains are now GA

Databricksの「Discover」ページとドメイン機能が一般提供開始されました。この機能は、カタログの階層構造に関する深い知識がなくても、ユーザーが資産を探索できるキュレーション済みの閲覧体験を提供します。ドメインとサブドメインを使用してテーブルやダッシュボードなどを整理し、カスタムキュレーションで主要資産を強調できます。

File upload in Genie One is now generally available

Genie Oneのファイルアップロード機能が一般公開されました。CSV、Excel、PDF、画像、Word、プレーンテキスト、Markdownファイルなど、複数のファイル形式をチャット会話に直接アップロードできるようになります。

Genie One file upload supports new file types (Beta)

Genie Oneのファイルアップロード機能がベータ版で拡張され、テキスト（.txt）とMarkdown（.md）ファイルのプレーンテキスト形式に対応しました。これまでのCSV、Excel、PDF、画像、Word、PowerPointファイルに加え、さらに多くのファイル形式が利用可能になります。

Productboard connector is available in Beta

ProductboardコネクタがLakeflow Connectでベータ版として利用可能になりました。このコネクタを使用することで、製品階層、ロードマップ、目標、顧客フィードバックノート、ワークスペースメンバーデータなどをProductboardからDatabricksに取り込めます。Server-to-Server OAuth認証に対応し、増分取り込みやUI/APIベースのパイプライン作成をサポートしています。

Azure DevOps connector is available in Beta

DatabricksのLakeflow Connectで、Azure DevOpsコネクタがベータ版として利用可能になりました。このコネクタを使用することで、プロジェクト、リポジトリ、作業項目、ビルド、リリース、ID情報などのAzure DevOpsデータをDatabricksに取り込めます。Microsoft Entraサービスプリンシパル認証とコミットの段階的な取り込みに対応しています。

Dashboard enhancements and bug fixes

ダッシュボード機能が複数強化されました。ファセット化されたカウンター表示、凡例のクロスフィルタリング機能、ダッシュボードタスクへのページ選択とテーブル添付機能が新たに追加されています。併せて、日付フィルターの月ピッカーがダークモード設定に対応しないバグも修正されました。

Genie Code CLIで、Claude CodeのようにターミナルからDatabricksを操作してみた

Set Budgets and Alerts for Cloud Data Warehouse Costs

クラウドデータウェアハウスの利用コストが予想外に増加する問題に対応するため、予算設定とアラート機能の重要性が指摘されています。月末の請求書で高額な課金に驚くアナリティクスチームが多い状況を踏まえ、事前に予算管理と監視体制を整備することの必要性が強調されています。

Now GA: Building permission-aware Databricks Apps with on-behalf-of-user authorization

Databricksが、ユーザーに代わって権限を適用する「on-behalf-of-user認可」機能を備えたDatabricks Appsを一般提供開始しました。この機能により、開発者はDatabricksプラットフォーム上に構築されたデータ・AI アプリケーションで、ユーザーの権限に基づいたアクセス制御を実現できます。

DeepSeek V4.1 Flash supports priority pay-per-token and reserved provisioned throughput

DeepSeekがV4.1 Flashモデルに対して、レイテンシ重視のトラフィック向けの優先度付き従量課金と、専用キャパシティ向けの予約プロビジョニング・スループットの2つの新しい課金オプションを提供開始しました。ユースケースに応じた柔軟な利用方法が可能になります。

Enforce partner guardrails with external service policies (Beta)

Unity Gatewayではパートナー企業のガードレール機能を外部サービスポリシーで実装できるようになりました。このポリシーはリクエスト・レスポンスコンテンツをベンダーに送信し、ベンダーが拒否した場合に通信をブロックします。アプリケーション側の変更は不要です。

Anthropic Claude Haiku 5.5 is now available on Unity Gateway

AnthropicのAI言語モデル「Claude Haiku 5.5」がUnity Gatewayで利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスでき、利用者は適用される規約への準拠を確認する責任があります。

Enforce partner guardrails with external service policies (Beta)

Unity Gatewayで第三者製のガードレール機能を実装できるようになりました。外部サービスポリシーにより、リクエストとレスポンスをガードレール提供企業に送信し、否定された場合は呼び出しをブロックします。アプリケーションの変更は不要です。

Anthropic Claude Haiku 5.5 is now available on Unity Gateway

AnthropicのAI言語モデル「Claude Haiku 5.5」がUnity Gateway上で利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスできます。利用者は適用される利用規約への準拠を確保する責任があります。

Dataset materialization for AI/BI dashboards is now in Beta

AI/BIダッシュボード向けの「データセット物理化」機能がベータ版で利用可能になりました。この機能はダッシュボードの結果セットをスケジュール実行で事前計算・保存し、高コストなクエリの再実行を回避することで、ダッシュボードの応答性を大幅に向上させます。

Context-based ingress policies for inbound private connectivity are now generally available

AWS Databricksが、インバウンドPrivate Link接続向けのコンテキストベースの入口ポリシーを正式提供開始しました。登録済みVPCエンドポイントがワークスペースにアクセスするのを制御でき、エンドポイントルールをアイデンティティおよびリクエストタイプ条件と組み合わせて単一ポリシーで管理できます。

The lakehouse is a better data warehouse: 2026 benchmarks and proof

レイクハウスアーキテクチャが従来のデータウェアハウスに代わる、より優れたソリューションであることを示す2026年のベンチマーク結果について報じています。20年間データウェアハウスが最適なソリューションとして機能してきましたが、新しい時代に向けてレイクハウスへのシフトが進んでいることが示唆されています。

Scaling and Operating a Large dbt Project on Databricks: IFCO's Data Team on Performance, Visibility, and Debugging

IFCOは世界最大級の再利用可能なパッケージングプールを運営しており、Databricksプラットフォームでdbtプロジェクトをスケーリングする際のパフォーマンス最適化、可視性の確保、デバッグ手法について発表します。大規模データ運用の実践的な知見が共有される事例紹介です。

Meta’s ads MCP server comes to Databricks: Put your customer intelligence to work in advertising campaigns

MetaがDatabricksと連携し、広告キャンペーン向けのMCPサーバーを提供開始します。企業の顧客データをより効果的に広告運用に活用できるようになり、データチームと広告チームの連携が改善されます。

Metric view window measures are generally available

メトリックビューのウィンドウメジャー機能が一般提供開始されました。この機能は移動平均、前期比変化、累積合計など、ローリングウィンドウ、累積、または準加算的な集計を定義します。

Zhipu AI GLM 5.2 is now a legacy model

Zhipu AIの「GLM 5.2」がレガシーモデルに指定されました。Databricksはユーザーに対し、GLM 5.3またはGLM 5.3 Flashへの移行を推奨しています。

Genie Code CLI is in Beta

Databricksが開発したGenie Code CLIがベータ版として公開されました。このツールはターミナルで動作するコーディングエージェントで、データとAI作業に最適化されており、ローカルファイルと連携してDatabricks CLI経由でデータを検出し、パイプラインやモデル、アプリの構築・デプロイをサポートします。

DeepSeek V4 Flash (0731) is scheduled for retirement

DeepSeekはV4 Flash（0731）を2026年11月5日に廃止予定と発表しました。ユーザーはV4.1 Flashへの移行が推奨されており、公式ドキュメントで移行ガイダンスが提供されています。

How to Repoint dbt ETL Pipelines to Databricks

dbtのETLパイプラインをDatabricksに再接続する方法に関する記事です。より多くのチームがDatabricks Lakehouse上でdbt変換を実行するようになっており、この記事ではその実装方法について解説しています。

AI-powered analytics: Building data visualizations with natural language vs. SQL

Databricksの製品マーケティング責任者による記事で、自然言語とSQLを用いたデータビジュアライゼーション構築について、AI搭載分析ツールの比較検討を扱っています。データ分析における両手法のアプローチの違いが解説されています。

Genie visualizations in Microsoft Teams replies (Public Preview)

Microsoft TeamsのGenieにおいて、チャート含むGenieのレスポンスが可視化画像として直接Teams返信に表示される機能がパブリックプレビューで利用可能になりました。これによりDatabricks GenieアプリがTeams内でより効果的に機能するようになります。

Run Lakeflow pipelines as a group

Lakeflowパイプラインの実行ユーザーをグループアカウントに設定できるようになりました。従来のユーザーやサービスプリンシパルに加えて、グループの権限でパイプラインを実行することで、特定の個人に依存せずチーム全体で自動化パイプラインを管理できます。

Unlocking Data Portability: Preventing Catalog Lock-in with REGISTER and UNREGISTER APIs

レイクハウスアーキテクチャの採用に伴い、組織はプロプライエタリなカタログからオープンな形式へのデータシフトを進めています。本記事はREGISTERおよびUNREGISTER APIを活用して、カタログロックインを防ぎデータポータビリティを実現する方法について解説します。

NEAREST BY Join: Scaling Vector Search in Databricks Runtime

Databricks Runtimeで新機能「NEAREST BY Join」が導入され、ベクトル検索のスケーリングが可能になりました。チャットボットなどのベクトル検索の応用例から出発した同機能により、大規模なベクトルデータに対する効率的な検索処理を実現します。

How Genie Ontology powers product development at Databricks

Databricksでは、汎用的なAIエージェントの検索、推論、コード作成能力を活用し、Genie Ontologyを通じて製品開発を推進しています。この技術により、開発プロセスの効率化と品質向上が実現されているとみられます。

Databricks SQL version 2026.39 is rolling out in Current

Databricks SQLのバージョン2026.39がCurrentチャネルへのロールアウトを開始しました。このアップデートにより、ユーザーは最新機能と改善された機能を利用できるようになります。

Use multiple triggers for Lakeflow Jobs (Beta)

Lakeflow Jobsが最大5つのトリガーに対応しました。異なるトリガータイプの組み合わせや同じタイプの複数トリガー追加が可能で、各トリガーを独立して一時停止できます。

Genie Code scheduled tasks are now available by default for workspaces with the compliance security profile enabled

Genie Codeのスケジュール実行機能が、コンプライアンスセキュリティプロファイルを有効にしたワークスペースで、デフォルトで利用可能になりました。この機能により、ユーザーはGenie Codeのタスクを予定された時間に自動実行できるようになります。

Agent Bricks documentation for code-first agent development

Databricksの「Agent Bricks」ドキュメントが、コードファーストなカスタムエージェント開発に対応するよう刷新されました。エージェントの構築・デプロイ・実行方法や、DurableAgentServerとAgent Runtimeなどの新機能について説明し、レガシー機能との対応も明記されています。

OAuth custom identity claims for service principal tokens will soon be available

OAuthトークンのサービスプリンシパルに対して、カスタムアイデンティティクレームを追加できる機能が間もなく利用可能になります。アプリケーションはトークンリクエスト時に「custom_claim」パラメータを使用することで、複数のエンドユーザーを1つのサービスプリンシパルで管理しながら、各ユーザーが自分のデータのみを閲覧できるようになります。SQLの「current_oauth_custom_identity_claim()」関数でこの値を読み取ることが可能です。

The remote_query function will soon be available by default for workspaces with the compliance security profile enabled

2026年11月から、コンプライアンスセキュリティプロファイルが有効なワークスペースでは、remote_query関数がデフォルトで利用可能になります。この関数を使用することで、Unity Catalogの接続認証情報を用いて外部データベースに対してネイティブSQL構文でクエリを実行できるようになります。

ai_parse_document now extracts chart data as JSON

ai_parse_documentが更新され、チャートデータをJSON形式で抽出できるようになりました。抽出されたデータにはシリーズ、凡例、軸の情報が含まれ、検索機能やエージェントがこれらの値を回答に活用できます。

Share and govern Genie One skills with Unity Gateway (Beta)

Genie Oneで作成したスキルをUnity Gatewayで管理・共有できるようになりました。Unity Catalogの標準的な権限を使用して、スキルを保持するカタログとスキーマへのアクセスを制御できます。

Databricks Runtime 19: October 5, 2026

Databricks Runtime 19では、Amazon Kinesis polling in real-time modeがクラシックコンピュートで一般提供開始されました。Structured Streamingにおいて、Kinesisからのリアルタイムデータ取得が利用可能になり、Kafkaへの変換例なども提供されています。

MLflow 3.14の @mlflow.test で、エージェントの評価をpytestのテストにする

In Capital Markets, the Buy Side Runs on NAV. Finance Protects the Fee.

資本市場の買い手企業では、純資産価値（NAV）が事業運営の中心となっており、財務部門がこれに基づく手数料体系を保護する構造になっています。買い手企業のCFOが四半期業績について質問されるとき、その回答はNAVから始まることが示唆されています。

How to choose your first Genie Agents for maximum impact

Genie Agentsの利用が2026年に100万件を超える中、ユーザーはどの自動化エージェントを優先的に導入すべきかという課題に直面しています。本記事では、最大の効果を得るための最初のGenie Agents選択方法について解説しています。

Real-Time Retail Intelligence: Building E-Commerce Recommendations with Lakebase and AI Search on Databricks

Databricks上のLakebaseとAI検索を活用して、eコマースの推奨システムをリアルタイムで構築する方法を紹介。パーソナライゼーションを収益向上の手段として位置付け、ショッパーの行動データを効果的に活用し、顧客体験を最適化するソリューションを解説しています。

OpenJev (Qwen3.5 4B) is now available on Unity Gateway

Unity Gatewayで軽量AIモデル「OpenJev (Qwen3.5 4B)」が利用可能になりました。このモデルはトークン単位での従量課金で提供され、TypeSafe System One APIを通じて、はい/いいえ質問や選択肢、スコアリング質問に対して構造化された回答と確率を生成できます。

JDBC Unity Catalog connections are now generally available

DatabricksのJDBC Unity Catalog接続が一般提供開始となりました。サーバーレスコンピュート、Databricks Runtime 19以上、SQL warehouses 2025.40以上で利用でき、SSLサーティフィケート対応を含みます。OAuth M2M認証はベータ版のままです。

Standard ai_extract now delivers higher-quality extraction

Standard ai_extractの新モデルチェックポイントが導入され、処理速度が2.3倍高速化されました。追加費用なしで抽出品質も向上し、デフォルトモードでこの改善が適用されます。

【実践】Lakeflow Designer で始めるノーコードETL — 日本語の指示だけでパイプラインを作る

Google Gemini 2.5 Pro is retired

GoogleはGemini 2.5 Proを廃止し、サービスの提供を終了しました。ユーザーはGemini 3.1 ProまたはGemini 3.5 Flashへの移行が推奨されており、詳細な移行ガイダンスが提供されています。

Google Gemini 2.5 Flash is retired

Googleが提供していたAIモデル「Gemini 2.5 Flash」がサービス終了となりました。ユーザーはGemini 3.1 ProまたはGemini 3.5 Flashへの移行が推奨されており、詳細な移行ガイダンスが提供されています。

Customer-managed keys for query history are now generally available

クエリ履歴において顧客管理キーを使用できるようになりました。システムカタログ上の顧客管理キーを用いて、クエリ履歴システムテーブルのstatement_textとerror_messageフィールドを暗号化・復号化することが可能です。これにより、クエリデータのセキュリティが向上します。

Save reusable query templates in Google Sheets

Databricks ConnectorがGoogle Sheetsの新機能として、再利用可能なクエリテンプレートの保存に対応しました。チームメンバーは保存されたテンプレートを一度のステップで実行でき、個別のUnity Catalog権限が適用されます。

ai_parse_document now extracts chart data

ai_parse_documentの機能が拡張され、図表からより詳細な説明を抽出できるようになりました。特にチャートに対しては、系列値や凡例ラベルなどのチャートデータが構造化されたJSON形式で返されるようになります。

IP Functions are Generally Available, bringing high-performance network analytics to the Lakehouse

Databricksがレイクハウスアーキテクチャ向けのIP Functions機能を一般提供開始しました。ファイアウォールやロードバランサーなどネットワークデバイスから生成されるIP関連データに対し、高性能な分析機能を提供し、ネットワーク分析の効率化を実現します。

Jev のような判定モデルを SQL から呼べる ai_decide を日本語で試した

Read Restrictions and Catalog Labels: Unifying governance across engines and catalogs

オープンテーブル形式とオープンAPIを活用した統一的なガバナンスの実現に向けて、読み取り制限とカタログラベルの重要性が説明されています。複数のエンジンとカタログにまたがるデータ管理を統一的に制御するための取り組みが紹介されています。

Lakebase Postgres branch-based restores for fast recovery at scale

Lakebseのpostgresql向けブランチベースリストア機能により、大規模環境でも高速なデータベース復旧が可能になります。マネージドOLTPシステムではリストアの遅延が課題でしたが、この新機能によってスケーラブルで効率的な復旧プロセスが実現されます。

Connecting customer context to measurable ROI with agentic marketing

マーケティング幹部が直面する複雑性の増加に対応するため、エージェント型マーケティングが顧客コンテキストを測定可能なROIに結びつけるソリューションを提供します。この技術により、マーケティング効果の可視化と最適化が実現します。

LTAP Direct Writes is generally available

LTAP Direct Writesが正式リリースされました。同期テーブルをLakebaseに読み込む際、データをコンピュートエンドポイント経由ではなくストレージレイヤーに直接書き込むことで、初期読み込みと完全更新を高速化し、クエリとの競合を避けられます。Postgres 16、17、18対応のLakebaseプロジェクトで利用可能です。

Schedule automatic data refresh in the Databricks Excel Add-in (Public Preview)

Databricks Excel Add-inでは、Microsoftエクセルに取り込んだDatabricksデータの自動更新をスケジュール設定できるようになりました。更新間隔やカレンダースケジュールを選択し、各更新を実行するSQLウェアハウスを指定でき、最近の実行状況をアドインから確認できます。

How Genie One reshapes work for finance teams

Genie Oneは財務チームの業務を変革するツールです。財務チームの役割は単なる数字の報告ではなく、その意味を解釈することにあり、本ツールはこうした高度な分析業務へのシフトを支援します。

Cross-engine attribute-based access controls (ABAC) is now generally available

Databricksのサーバーレスコンピュートで、クロスエンジン属性ベースアクセス制御（ABAC）が一般利用可能になりました。Unity Catalogで管理されるテーブルに対して、ABAC ポリシー、行フィルタ、列マスクを外部エンジンから実行できるようになります。

GitLab connector is available in Beta

Databricksは、GitLabコネクタのベータ版をLakeflow Connectで利用可能にしました。このコネクタにより、GitLabからリポジトリ、プロジェクト、グループ、CI/CDおよびセキュリティデータをDatabricksに取り込めます。OAuth認証に対応し、段階的な取り込み、UIベースのパイプライン構築など複数の構築方法をサポートしています。

Vimeo connector (Beta)

Lakeflow ConnectにVimeoコネクタのベータ版が追加されました。このコネクタはVimeoからチーム情報、メンバー、ロール、監査ログデータをDatabricksに取り込み、個人アクセストークンで認証します。ワークスペース管理者がプレビューページからアクセス制御を設定できます。

Introducing ai_decide: make fast decisions on your governed data

Databricksが新たなAI機能「ai_decide」をリリースしました。この機能は、ガバナンスされたデータに対して迅速な意思決定を行うことができます。企業が管理下にあるデータを活用して、より高速で効率的な判断が可能になります。

A practical guide to cost optimization with Lakebase Postgres

Lakebseはフルマネージド型のPostgresデータベースで、実務的なニーズに対応するために構築されています。本記事は、Lakebseを使用したコスト最適化の実践的ガイドを提供しており、ユーザーが効率的にデータベース運用コストを削減する方法について説明しています。

How to scale agentic applications without creating AI sprawl

AIエージェントアプリケーションの構築は容易になっていますが、スケーリング時にAI技術の無秩序な拡大を避ける方法についての記事です。より高性能なモデルとコーディングエージェントの進化により、開発が簡素化される一方で、適切な管理戦略が必要とされています。

Table update triggers on OpenSharing objects and system tables are now generally available

Lakeflowジョブのテーブル更新トリガーが、OpenSharingオブジェクトとシステムテーブルの監視に対応しました。これにより、これらのテーブルへの変更を検出して自動的にジョブをトリガーできるようになり、データ管理ワークフローの柔軟性が向上します。

Query tags for SQL warehouses are now generally available

Databricks SQLウェアハウスにおいて、クエリタグ機能が一般提供開始となりました。カスタムキーバリュータグをSQLワークロードに適用することで、グループ化、フィルタリング、コスト配分が可能になります。タグはクエリ履歴やDatabricks UIで確認できます。

Supported Postgres extensions updated to new versions

PostgreSQLの複数の拡張機能が新しいバージョンに更新されました。PostGISやその関連拡張は各Postgresバージョンで異なるバージョンに、hllはPostgres 16～18で2.21にアップデートされています。既存インストールは手動でALTER EXTENSIONコマンドを実行するまで現在のバージョンを継続します。

Salesforce Data 360 file sharing will soon be available by default for workspaces with the compliance security profile enabled

Salesforceは、コンプライアンスセキュリティプロファイルが有効なワークスペースに対して、Data 360ファイル共有コネクタをデフォルトで提供開始予定です。このコネクタはLakehouse Federationで利用でき、Databricksにデータをコピーすることなく、クラウドオブジェクトストレージから直接Salesforce Data 360データをクエリできます。

Control spreadsheet writeback with a workspace admin setting

DatabricksのExcelおよびGoogle Sheetsへのデータ書き戻し機能が、ワークスペース管理者による有効化を必須とするセキュリティ設定に変更されました。この新しい設定により、スプレッドシート経由のデータ書き戻しアクセスがより厳密に制御されるようになります。

Horizontal scaling for Databricks Apps is now generally available

Databricks Appsの水平スケーリング機能が一般利用可能になりました。複数インスタンスにわたってアプリを実行でき、単一のURLで高可用性と同時実行性を実現します。ゼロダウンタイムデプロイメントとセッションアフィニティにも対応しています。

Your data, your storage, your rules: a 2026 guide to storing Unity Catalog managed tables

Unity Catalog管理テーブルを使用することで、2026年のデータストレージについてユーザーが自身のデータ配置を制御できるようになります。この機能により、データの保存場所や管理ルールをユーザー自身で決定することが可能になり、より柔軟なデータ管理戦略の実現が期待されます。

OpenAI GPT-6.1 Sol is now available on Unity Gateway

OpenAIの最新モデル「GPT-6.1 Sol」がUnity Gatewayで利用可能になりました。FoundationModel APIを通じてこのモデルにアクセスできます。利用者は適用される利用規約への準拠を確認する責任があります。

Agent Bricks CLI is in Beta

Databricksが提供するAgent Bricks CLIがベータ版で利用可能になりました。このコマンドラインツールは、フレームワークテンプレートからプロジェクトをスカッフォルディングし、ローカル実行やDatabricksエージェントランタイムへのデプロイを可能にします。メモリ管理、セッション、ツール、MLflowトレーシング機能が統合されています。

OpenAI GPT-6.1 Sol is now available on Unity Gateway

OpenAIの最新モデル「GPT-6.1 Sol」がUnity Gatewayで利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスできます。ユーザーは適用される利用規約への準拠を確認する責任があります。

Genie Code にドキュメント処理パイプラインを作らせてみた

Databricks JDBC Driver (Simba) 2.8.4 is available

DatabricksのSimba JDBC Driver 2.8.4がリリースされました。Java 25のサポート追加と、libthrift、httpclient5、httpcore5、lz4-javaなどの依存ライブラリのアップグレードが含まれています。JDBCドライバアーカイブからダウンロード可能です。

Genie One memory is now generally available

Genie Oneのメモリ機能が一般利用可能になりました。ユーザーの好みやレポート形式などの特定情報を記憶し、以後の会話で活用することで、毎回同じ文脈を繰り返す必要がなくなります。メモリはプライベートで他のユーザーと共有されません。

ai_parse_document quality improvements: signature detection and layout prediction

AI文書解析機能「ai_parse_document」が改善され、署名領域の検出と文書レイアウトのより正確な予測が可能になりました。これにより、文書処理の精度が向上し、より効率的なドキュメント分析が実現します。

How Databricks rolls out frontier models to 12,000 employees on Day 1

Databricksは初日から12,000人の従業員に最先端のAIモデルへのアクセスを提供することを優先事項としており、すべての社員がフロンティアAI機能を利用できる環境を実現しています。

Lakebase Search: State-of-the-art full text and vector search for Postgres

Lakebase Searchは、PostgresデータベースにおいてAIエージェントの検索需要に対応した最先端のフルテキスト検索とベクトル検索を提供するソリューションです。従来のOLTPシステムではAI時代の検索要件を満たせないという課題に対応しています。

Manufacturing data and AI: Connecting the product value chain

製造業におけるデータとAIの活用について、製造上の欠陥は通常単一のシステムに属さず、スクラップの急増などの問題は複数の要因が関連していることが指摘されています。本記事は製品の価値チェーン全体を統合的に分析する重要性を探ります。

How to roll out Genie One: A step-by-step enterprise playbook

Genie Oneの企業導入に関するステップバイステップガイドです。地域営業責任者が今四半期の北東部パイプラインの不調について検証する必要があるなど、実践的なビジネスシナリオを通じた展開方法を解説しています。

The 24 most commonly misunderstood marketing data terms

マーケターがデータチームに「非アクティブな顧客」のリストを要求する際、用語の定義の曖昧さから誤解が生じるケースがあります。本記事は、マーケティングデータ分析で頻繁に誤解されやすい24の重要な用語を解説し、データチームとマーケターの間での正確なコミュニケーションを促進します。

Workday Activity Logging connector (Beta)

Workday Activity Logging connectorがLakeflow Connectでベータ版として利用可能になりました。このコネクタはWorkdayのユーザーアクティビティログイベントをDatabricksに段階的に取り込み、OAuth更新トークンを使用した認証に対応しています。ワークスペース管理者はプレビューページからこの機能へのアクセスを制御できます。

Okta System Logs connector is available in Beta

Databricks Lakeflow Connectで、OktaのシステムログをDatabricksに段階的に取り込むためのマネージド型Okta System Logsコネクターがベータ版で利用可能になりました。このコネクターはSSWS APIトークン認証を使用し、監査・セキュリティイベントの取り込みに対応しています。

Microsoft 365 Unified Audit Logs connector is available in Beta

DatabricksのLakeflow Connectに、Microsoft 365統合監査ログコネクタがベータ版で利用可能になりました。このコネクタを使用すると、Microsoft Entra ID、Exchange、SharePointなどのMicrosoft 365ワークロードからの監査イベントをDatabricksに取り込めます。OAuth機械間認証に対応し、増分取り込みをサポートしています。

Thinking Machine Labs Inkling is scheduled for retirement

Thinking Machine LabsのInklingモデルは2026年10月30日に廃止予定です。代替案としてGLM 5.3とKimi K3が推奨されており、マイグレーションガイダンスが提供されています。

CrowdStrike Falcon Event Stream connector (Beta)

CrowdStrike Falcon Event Stream connectorがLakeflow Connectでベータ版として利用可能になりました。このコネクタはOAuth 2.0認証を使用してCrowdStrike FalconのイベントストリームをDatabricksに取り込み、ワークスペース管理者がプレビューページからアクセスを制御できます。

Akamai WAF connector (Beta)

AkamaiのWAFコネクタがLakeflow Connectのベータ版として利用可能になりました。このコネクタはAkamaiからWebアプリケーションファイアウォールのセキュリティイベントをDatabricksに取り込み、認証にはAkamai EdgeGrid APIクライアント認証情報を使用します。ワークスペース管理者はプレビューページからアクセスを制御できます。

1Password Event Logs connector (Beta)

パスワード管理サービスの1Passwordが、Lakeflow Connectで「1Password Event Logs connector」ベータ版を提供開始しました。このコネクタはEvents APIを利用して監査イベント、アイテム使用状況、サインイン試行などをDatabricksに取り込み、ワークスペース管理者がアクセス制御を可能にします。

集計済みのビューを配るのをやめる。Databricksメトリクスビューを触ってみた

How Databricks rolls out frontier models to 12,000 employees on Day 1

Databricksは、従業員が初日からフロンティアAIモデルにアクセスできるようにすることを優先事項としており、12,000人の全従業員に対して最先端のAI機能を展開しています。同社にとって、従業員がこうした先進的なAI機能にアクセスできる環境を整備することが重要な経営課題であることがうかがえます。

xAI Grok 4.7 is now available on Unity Gateway

xAIの最新モデル「Grok 4.7」がUnity Gatewayで利用可能になりました。Foundation Model APIsを通じてトークン単位での従量課金制でアクセスできます。利用者は適用される利用規約への準拠を確認する責任があります。

xAI Grok 4.7 is now available on Unity Gateway

xAIの言語モデル「Grok 4.7」がUnity Gateway上で利用可能になりました。このモデルはFoundation Model APIを通じてトークンベースの従量課金で利用でき、ユーザーは適用される規約への準拠を確保する責任があります。

Lakebase Search adds a configurable text tokenizer for keyword search

Lakebase Searchに新しい設定可能なテキストトークナイザー拡張機能が追加されました。この拡張機能により、テキストを検索用語に変換する方法を制御でき、データとユーザーの実際の読み方に合致したキーワード検索が実現します。正規化、ストップワード管理、ステミングなど複数の制御機能を備え、PostgreSQLの標準テキスト検索インターフェースを通じて提供されます。

Databricks SQL version 2026.39 is now available in Preview

Databricks SQLの2026.39バージョンがプレビューチャネルで利用可能になりました。新しいバージョンはまだ開発段階にあり、ユーザーは先行して機能を試験できます。

Databricks SQL version 2026.38 is rolling out in Current

Databricks SQLのバージョン2026.38がCurrentチャネルへのロールアウトを開始しました。このバージョンアップでは新機能が複数追加されており、詳細はDatabricksの公式ドキュメントで確認できます。

AIはQ&Aだけの道具ではない: 方向性を渡し、結果を返してサイクルを回す

メタハーネスはなぜ必要なのか ― ハーネスの境目で人がやっている4つの作業から考える

Usage tracking adds session metadata and token details (Public Preview)

AI Gatewayの使用状況追跡機能が公開プレビューとなり、`system.ai_gateway.usage`システムテーブルにコーディングエージェントのセッションメタデータと呼び出し元情報が追加されました。さらに、プロンプトキャッシュに書き込まれたトークン数やファイル・ウェブ検索の回数を詳細に記録する新しいトークン詳細フィールドが実装されています。

Usage tracking adds session metadata and token details (Public Preview)

AI Gatewayの利用状況追跡機能が強化され、コーディングエージェントのセッションメタデータと実行元情報が記録されるようになりました。また、プロンプトキャッシュへの書き込みトークン数やファイル・ウェブ検索の実行回数など、より詳細なトークン情報の追跡が可能になります。

Databricks で open-Jev (SemIf) を動かし、Jev と LLM ジャッジとして比べた

The Genie One MCP server is now generally available

Databricksが提供するGenie One MCPサーバーが一般利用可能になりました。Model Context Protocol経由でGenieを会話形式のツールとして公開し、ClaudeやChatGPTなどのMCPクライアントやエージェントがGenieの信頼できる洞察を活用できます。Unity Catalogの権限がすべてのリクエストで強制されます。

Tags for dashboards, notebooks, Databricks apps, and Genie Agents are now generally available

Databricksは、ダッシュボード、ノートブック、Databricks apps、Genie Agentsに対するタグ付け機能を一般公開しました。ユーザーはこれらのワークスペースアセットをタグで整理・分類でき、統治されたタグと非統治タグの両方がサポートされています。

From Data to Dialogue: How S&P Global Energy Made Its Structured Data Estate Conversational with Databricks Genie Agents and MCP

S&P Global Energyは、Databricks Genie AgentsとMCPを活用し、構造化データを会話型インターフェースに変換しました。これにより顧客がデータの発見と利用方法を根本的に改善することを目指しています。データを対話的にアクセスできる仕組みの構築事例です。

Genie Code can now build intelligent document processing pipelines

Genie Codeが、解析、分類、抽出、検証を統合したエンドツーエンドのドキュメント処理パイプラインを構築できるようになりました。PDFや契約書、請求書などの非構造化データを処理し、抽出品質をラベル付きデータに対して評価して改善を繰り返します。

Jev は LLM ジャッジに使えるか、紛らわしい誤答72件で確かめた

Deleting a Unity Catalog pipeline now retains tables by default

Unity Catalogパイプラインの削除時に、デフォルト公開モードを使用している場合、関連するマテリアライズドビュー、ストリーミングテーブル、ビューが既定で保持されるようになりました。保持されたテーブルはクエリ可能ですが、アクティブなパイプラインに移動されるまで更新できません。パイプラインとテーブルを一括削除する場合はAPIリクエストでcascadeフィールドをtrueに設定します。

Running open-Jev in SQL on Databricks

Databricks上でSQL環境でopen-Jevを実行できるようになりました。Jevなどの「System One」決定モデルが週末に立ち上がり、SQLを用いたデータ分析と機械学習の統合がさらに進展することが期待されます。

Deploy and manage coding agents at scale with the Unity Gateway CLI

Unity Gateway CLIを活用することで、コーディング・エージェントを大規模に展開・管理できるようになります。GPT-6やClaude Opus 5.5など、複数の最新AIモデルが最近リリースされ、これらの先進的なAIツールの統合と運用を効率化するソリューションとして注目されています。

How I built agent-based security reviews on Databricks

DatabricksでAIエージェントを活用したセキュリティレビュープロセスの構築事例を紹介しています。既存の自動化に加えて、エージェントベースのアプローチにより、セキュリティレビュー業務の効率化と品質向上を実現した実装方法について解説しています。

Service principal Genie usage is billed at standard pricing

Genie機能のサービスプリンシパルによる利用が、標準的なGenie従量課金制で課金されるようになりました。サービスプリンシパルは個別ユーザーに適用される無料月間利用枠の対象外となります。

Sharing metric views with OpenSharing is now generally available

OpenSharingで メトリック ビューの共有機能が一般向けに利用可能になりました。共有にメトリック ビューを追加し、サーバーレス コンピュート上で MEASURE(...)関数を使用してクエリできるようになります。

Genie App BuilderでDatabricks Appsを自然言語から作ってデプロイする

Genie Agents enhancements

Genie Agentsの監視機能が強化され、モニタリングテーブルで表示する列を選択できるようになりました。また、ボリュームファイルから取得したコンテンツを使用する場合、引用が特定のページを指すことが可能になり、情報源の追跡がより詳細になります。

Genie One enhancements

Genie Oneが機能拡張され、チャットをサイドバーの上部に固定できるようになりました。また、モバイルアプリのベータ版では、接続した外部ツールからのMCP書き込みアクション機能が新たに追加されています。

Dashboard enhancements and bug fixes

ダッシュボード機能が強化され、データセット結果テーブルと指標ビュープレビューに列の固定やフォーマット、検索機能などが追加されました。また、指標ビュー エディターがLOD式に対応し、ウィジェットが特定のダッシュボードフィルターを無視する設定が可能になりました。併せて複数のバグ修正が実施されています。

ai_search can search Lakebase synced tables (Beta)

ai_search機能がLakebase同期テーブルの検索に対応しました。Lakebase Searchが有効化されたテーブルに対してai_searchで検索でき、lakebase_searchナレッジソースを追加して利用できます。vector_searchソースと組み合わせることも可能で、現在ベータ版です。

Lakeflow Designer September Release

Lakeflow Designerの9月リリースでは、データ品質チェック機能「Guardrails」や複数ファイルからの一括取り込み、3つ以上のテーブルを結合するJoin機能など複数の新機能が追加されました。プレビュー行数の一括設定やPivot演算子の拡張、パラメータ化機能、Genie Codeによるカスタム演算子生成など、ビジュアルデータ準備の利便性が向上しています。

Dashboard enhancements and bug fixes

ダッシュボード機能が拡張され、データセット結果やメトリックビューに列固定やフォーマット、検索機能などが追加されました。メトリックビューエディタではLOD式に対応し、ウィジェットで特定のダッシュボードフィルタを無視する設定も可能になりました。併せて複数のバグ修正が実施されています。

Genie One enhancements

Genie Oneの機能が複数拡張されました。チャットのピン留め機能、10MB以上のファイルアップロード対応、ツールアクションの自動承認機能が追加され、モバイルアプリではMCP書き込みアクション機能がベータで利用可能になっています。

Genie Agents enhancements

Genie Agentsの監視機能が強化されました。エージェント監視テーブルで表示する列を選択できるようになり、ボリュームファイルから取得したコンテンツを使用する場合、引用は引用元ファイルの特定ページを指し示すようになります。

Genie One enhancements

Genie Oneが複数の機能強化を実装しました。チャットのピン留め、10MB以上のファイルアップロード対応、ツールアクションの自動承認機能が追加されたほか、モバイルアプリではMCP書き込みアクション（ベータ版）がサポートされるようになりました。

How Concurrence governs clinical AI at a trillion-token scale with Unity Gateway

Concurrenceは、Unity Gatewayを活用して、大規模なトークン処理を伴う臨床AIの運用を効率的に管理しています。患者ケアの調整を支援するAIエージェントは高い精度が求められるため、このシステムは医療AIの信頼性と安全性を確保するために設計されています。

Scalar and Batch Unity Catalog Python UDFs are now generally available

Databricksの「Scalar and Batch Unity Catalog Python UDFs」が全サポート計算タイプで一般提供となりました。このリリースでは、行単位スカラーUDFの名前付きハンドラ追加、クエリごとの5UDF呼び出し制限廃止、PySparkとのTimestampの動作統一が実現されています。カスタム依存関係のインストールやUnity Catalogの認証情報へのアクセスも可能になりました。

Scala UDFs can access Unity Catalog secrets

Scala UDFがUnity Catalogで管理されたシークレットへのアクセスに対応しました。セッションスコープのUDFは呼び出し元の権限を使用し、Unity Catalog Scala UDFはSECRETSクローズでシークレットを宣言して関数所有者の権限で実行されます。サーバーレスコンピュートではenvironment version 6以上が必要です。

Build governed data and AI apps without code (Beta)

Genie App Builderが自然言語でアプリ開発を可能にし、App Spacesがガバナンスを実装、Serverless Micro Appsがアイドル時にスケールダウンするという、ノーコードでのデータとAIアプリ構築が実現されました。

Time travel queries now enforce ABAC policies (Beta)

Databricks Runtime 19から、Unity Catalogの管理テーブルに対するタイムトラベルクエリでABAC（属性ベースアクセス制御）ポリシーが強制されるようになりました。この機能はベータ版で、行フィルタやカラムマスクポリシーを適用したまま過去のデータにアクセスできます。

DeepSeek V4 Pro (0813) is scheduled for retirement

DeepSeekのAIモデル「V4 Pro (0813)」が2026年10月30日に廃止予定となります。ユーザーには後継モデルの「V4.1 Flash」への移行が推奨されており、マイグレーション手順については公式ドキュメントで確認できます。

Lakebase observability telemetry in system tables (Beta)

Lakebaseが新たにPostgres観測可能性テレメトリをsystem.lakebaseシステムテーブルに自動的に取得する機能をベータ公開しました。クエリプラン、セッション履歴、待機イベント、スキーマ変更履歴、データベース・コンピュート健全性、Postgresログなど7日間保持され、管理者がアクセス制御を行い、ユーザーはUnity Catalogテーブルと同様に照会できます。

The Genie One MCP is now Generally Available

Genie OneというMCP（Model Context Protocol）がGenerally Availableになりました。AIコワーカーやコーディングエージェントが組織全体で急速に普及する中、このツールは開発チームの生産性向上を支援するものとして提供されています。

Genie One MCP: Give any AI Agent the Right Business Context

Genie One MCPは、AIエージェントがビジネスコンテキストにアクセスできるようにするツールです。企業リーダーが大量のデータを保有していながら信頼性の高い情報を得られない課題に対し、AIエージェントに適切なビジネスコンテキストを提供することで、意思決定の質を向上させます。

Shopify connector (Beta)

Shopifyコネクタがベータ版でLakeflow Connectに利用可能になりました。このコネクタはShopifyの商品、注文、顧客、在庫、フルフィルメント、割引などのeコマースデータをDatabricksに取り込み、OAuth認証を使用します。ワークスペース管理者はプレビューページからアクセス制御できます。

Lakebase backup schedule API (Beta)

Lakebaseがバックアップスケジュール管理のAPI（ベータ版）を提供開始しました。このAPIにより、ルートブランチの自動スナップショット頻度（日次、週次、月次）と保持期間をプログラムで設定・管理できます。全Lakebaseワークスペースで利用可能です。

OpenAI GPT-6 Sol is now available on Unity Gateway

OpenAIの最新モデル「GPT-6 Sol」がUnity Gateway上で利用可能になりました。Foundation Model APIsを通じてトークン単位の従量課金制でアクセスでき、ユーザーは適用される利用規約への準拠を確認する責任があります。

OpenAI GPT-6 Luna is now available on Unity Gateway

OpenAIの最新モデル「GPT-6 Luna」がUnity Gateway上で利用可能になりました。Foundation Model APIsを通じてトークンベースの課金で利用でき、ユーザーは適用される利用規約への準拠を確認する必要があります。

Invite OpenSharing recipients by email (Beta)

OpenSharingで、受信者とIDやクレデンシャルファイルを交換する代わりに、メール招待による共有が可能になりました。受信者にセキュアな有効化リンクをメール送信し、共有データへのアクセスを簡素化します。現在ベータ版で提供されています。

OpenAI GPT-6 Sol is now available on Unity Gateway

OpenAIの最新モデル「GPT-6 Sol」がUnity Gatewayで利用可能になりました。このモデルはFoundation Model APIを通じてトークン単位の従量課金で利用でき、ユーザーは適用される利用規約への準拠を確認する責任があります。

OpenAI GPT-6 Luna is now available on Unity Gateway

OpenAIの最新モデル「GPT-6 Luna」がUnity Gateway上で利用可能になりました。Foundation Model APIを通じてトークンベースの従量課金で利用でき、ユーザーは適用される利用規約への準拠を自身で確保する必要があります。

Unity Catalog Pages: a governed home for your business knowledge in Genie Ontology

Databricksが提供するUnity Catalog Pagesは、Genie Ontologyにおけるビジネス知識の統治された保管場所です。AIエージェントが正確に機能するには適切なコンテキストが不可欠であり、このソリューションはそれを実現します。

Variant shredding will soon be enabled by default on new Variant tables

2026年11月18日より、DatabricksはVARIANT型カラムを含む新規テーブルに対して、variantShredding機能を自動的に有効化します。この機能は頻繁にアクセスされるフィールドを型付きの列形式で保存し、クエリパフォーマンスを向上させます。Databricks Runtime 15.4は互換性がないため、事前のアップグレードが必要です。

Connect coding agents to Unity Gateway with the ug CLI

Unity Gateway CLI（ug）を使用することで、Claude Code、Codex、Piなどのコーディングエージェントを一つのコマンドでUnity Gatewayに接続できます。ugは認証と設定を処理し、承認されたMCPサーバーとスキルを追加し、ターミナルで支出を表示します。

Unified tracing now includes coding agent activity

Unity Gatewayの統合トレース機能がコーディングエージェントのアクティビティに対応しました。Unity Gateway CLIを通じて、モデルリクエストと共にエージェントが使用したツールやスキルを追跡できるようになり、Govern > TracesまたはGenieで確認可能です。

Centrally configure coding agents

組織は今、コーディングエージェントを一元管理できるようになりました。モデルやMCPサーバー、スキル、デフォルトハーネス、スマートルーティングなどの設定を中央で構成でき、エージェント起動時またはモバイルデバイス管理を通じてロールアウト可能です。

Anthropic Claude Opus 5.5 is now available on Unity Gateway

AnthropicのClaudeモデル最新版「Opus 5.5」がUnity Gatewayで利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスでき、ユーザーは適用される利用規約への準拠を確認する責任があります。

Anthropic Claude Opus 5.5 is now available on Unity Gateway

AnthropicのClaude Opus 5.5がUnity Gatewayで利用可能になりました。Foundation Model APIsを通じてこのモデルにアクセスできます。ユーザーは適用される利用規約への準拠を確認する責任があります。

Centrally configure coding agents

組織は、コーディングエージェントの設定を一元管理できるようになりました。モデルやMCPサーバー、スキル、デフォルトハーネス、Smart Routingなどをセットアップでき、エージェント起動時に適用されます。モバイルデバイス管理(MDM)を通じたロールアウトも可能です。

Connect coding agents to Unity Gateway with the ug CLI

Unity Gateway CLIツール「ug」を使用することで、Claude Code、Codex、Piなどのコーディングエージェントを簡単に接続できます。このツールは認証設定の処理、承認されたMCPサーバーとスキルの追加、ターミナルでの支出表示を自動化します。

Unified tracing now includes coding agent activity

Unity Gatewayの統合トレーシング機能がコーディングエージェントのアクティビティに対応しました。Unity Gateway CLIを通じて、モデルリクエストと共に使用されたツールやスキルを可視化できるようになり、Govern > TracesやGenieで詳細を確認できます。

Top 5 System Table Queries for Understanding Your Databricks Costs

Databricksのシステムテーブルを活用することで、Databricksの利用状況とコストに関する詳細な情報を把握できます。この記事では、コスト分析に役立つ重要なシステムテーブルクエリのトップ5を紹介しており、ユーザーがコスト最適化を実現するための実践的なガイダンスを提供しています。

CREATE OR REPLACE VIEW will soon preserve grants, comments and tags by default

2026年10月12日以降、CREATE OR REPLACE VIEWはビューをドロップして再作成する代わりに、インプレース更新を実行するようになります。これにより、権限、タグ、コメントがデフォルトで保持されます。ただし、非所有者がクエリを変更した場合の権限保持やガバナンスタグ付きの列削除など、いくつかの注意事項があります。

Bundled BigQuery JDBC driver removal in Databricks Runtime 20

Databricks Runtime 20ではバンドルされたBigQuery JDBCドライバが削除されました。従来のコンピュートワークロードでSpark JDBCを使用している場合、BigQuery JDBCドライバをインストールしない限り、ドライバ未検出エラーが発生します。アップグレード前にワークロードの移行が必要です。

Lakebase backup schedule API (Beta)

Lakebaseのバックアップスケジュール管理がAPI経由で可能になりました。このAPIを使用すると、ルートブランチの自動スナップショット頻度（日次、週次、月次）と各スナップショットの保持期間をプログラムで設定・確認できます。現在ベータ版として全Lakebaseワークスペースで利用可能です。

The query history system table is now generally available

クエリ履歴システムテーブルの一般提供が開始されました。このテーブルを使用することで、SQLウェアハウスやサーバーレスコンピュート上で実行されたクエリのアカウント全体の記録に、実行ステータス、期間メトリクス、クエリソースを含めてアクセスできます。

Databricks Runtime 19: September 21, 2026

Databricks Runtime 19では、数値を四捨五入なしで指定した桁数に切り詰める`truncate`関数や、配列の要素を削除する`trim_array`関数など、SQL及びScala、Python DataFrameに新機能が追加されました。また、Pythonワーカーのセッション環境変数設定機能やAuto-optimized shuffle v2のデフォルト有効化など、パフォーマンス向上に関連した改善も実装されています。

Back model provider service credentials with a Unity Catalog secret

Unity Catalogのシークレット機能を使用して、モデルプロバイダーサービスの認証情報をセキュアに管理できるようになりました。顧客が所有するシークレットをAPI キーとして使用し、クエリ時に読み込むため、シークレットのローテーションがサービス変更なしで即座に反映されます。

Back model provider service credentials with a Unity Catalog secret

Unity Catalogの秘密管理機能を使用して、モデルプロバイダサービスのAPI認証情報をバックアップできるようになりました。クエリ時に秘密を読み込むため、サービス変更なしに認証情報のローテーションが可能です。

Databricks SQL version 2026.38 is now available in Preview

Databricks SQLのバージョン2026.38がプレビューチャネルで利用可能になりました。新機能には、数値を四捨五入せずに指定の桁数で切り詰める「truncate」関数と、配列の末尾から要素を削除する「trim_array」関数が含まれています。

September 21, 2026

Databricks Runtime 19に基づくサーバーレスコンピュートのリリースで、新機能が追加されました。truncate関数は数値を四捨五入せずに指定した桁数に切り詰め、trim_array関数は配列の末尾から指定した数の要素を削除します。

Databricks Certified Context Engineer Associate に合格しました: テストセンター受験と、90分で45問を英語で解く読み方

RADAR: Catch gray failures with anomaly detection

RADARは、従来の監視システムでは検出されない「グレー障害」と呼ばれる部分的な障害を、異常検知技術を用いて捕捉するシステムです。監視ツールが見落とす微妙な問題を検出することで、深刻な障害を未然に防ぐことを目的としています。

Configure provider discounts for external model spend

Unity Gatewayが外部モデルの利用コストを推定する際、プロバイダーの公開価格に基づいて計算していますが、組織が異なる価格を交渉している場合、モデルプロバイダーサービス上で価格乗数を設定できるようになりました。これにより、実際の契約レートがコスト推定に反映されます。

Configure provider discounts for external model spend

Unity Gatewayが外部モデルの利用料を推定する際、プロバイダーと交渉した独自の価格を反映させるための価格乗数設定機能が提供されます。この機能により、組織の実際の契約料金に基づいた正確なコスト推定が可能になります。

Databricks Apps is now on by default for workspaces with the compliance security profile enabled

Databricksは、コンプライアンスセキュリティプロファイルが有効化されたワークスペースに対して、Databricks Appsをデフォルトで有効にしました。この機能により、セキュリティと規制要件に対応したワークスペース環境でアプリケーション機能が標準で利用可能になります。

Enabling secure, productive work on personal devices

Databricksは、個人デバイスでのセキュアで生産的な働き方を実現するビジョンを掲げています。場所を問わずの働き方を可能にしながらも、セキュリティを損なわないようにするアプローチについて紹介しています。

Databricks Apps telemetry is now generally available

Databricks Appsのテレメトリ機能が一般提供開始となりました。OpenTelemetry プロトコルを使用してトレース、ログ、メトリクスを収集し、Unity Catalogテーブルに保存します。有効化後は自動的にシステムログと使用イベントがキャプチャされ、OpenTelemetry SDKで カスタムインストルメンテーションも追加可能です。

Lakebase Search is generally available

Lakebase Searchが一般利用可能になりました。2つのPostgres拡張機能を通じてLakebaceプロジェクトにスケーラブルなベクトル検索とキーワード検索をもたらします。lakebase_vectorは近似最近傍探索を提供し、pgvectorとの互換性を持ちながら10億以上のベクトルに対応可能です。lakebase_textはBM25全文検索インデックスを追加し、両者を組み合わせてハイブリッド検索が実現できます。

Omnigentのコスト制御を設定して、予算が実際にどう効くか確かめた

Databricks のマネージド Iceberg テーブルを一通り試す — Delta との差はどこに出るか

Database Branching: A Developer's Guide to Git-Style Workflows

Gitが開発チーム間での分離された開発環境を標準化したように、データベースブランチングは同様のワークフローをデータベース管理にもたらします。この記事はデータベースに対するGitスタイルのアプローチと実装方法を開発者向けに解説しています。

The Web Search Your Agent Inherited Isn't Good Enough

AIエージェントが外部情報を必要とする際、従来のウェブ検索機能では不十分であることが指摘されています。ソフトウェア企業のエンジニアが開発するエージェントは、より高度な情報取得能力を必要としており、既存の検索機能の改善が課題となっています。

What is AIOps?

AIOps（Artificial Intelligence for IT Operations）は、AI機械学習をIT運用に活用し、異常検知などを行う技術です。これにより、IT運用プロセスの効率化と自動化が実現します。

Skills in Genie One support multiple files and folders

Genie Oneのスキル機能が拡張され、複数のファイルとサブフォルダをサポートするようになりました。1つのスキルで最大3階層のフォルダと1スキルあたり50個のファイル・フォルダまで含めることができ、テキストファイルの読み込みに対応しています。

Metastore-level ABAC policies are in Beta

Unity CatalogでメタストアレベルのABAC（属性ベースアクセス制御）ポリシーがベータ版で利用可能になりました。行フィルタやカラムマスク、GRANTやDENY権限をメタストアレベルで設定すれば、メタストア内の全カタログに統一的に適用でき、組織全体のデータ保護ルールを一元管理できます。

Moonshot AI Kimi K2.7 is scheduled for retirement

Moonshot AIのKimi K2.7は2026年10月30日に廃止予定となります。後継モデルのKimi K3への移行が推奨されており、マイグレーションガイダンスが提供されています。

Database for AI Agents: 5 Evaluation Criteria

AIエージェント向けデータベースの評価では、ブランチ分離、サーバーレス機能など5つの重要な基準が存在します。これらの基準により、AI エージェント環境に最適なデータベースソリューションを選定することが可能になります。

Modernizing the Trade Lifecycle With Governed Data and AI

資本市場企業は、データ量の増加など様々な圧力を受け、取引ライフサイクルの近代化を進めています。ガバナンスの効いたデータとAIを活用することで、取引プロセスの効率化と信頼性向上が実現できます。

Unity Gateway support for compliance security profile standards

UnityGatewayがDatabricksでサポートされているコンプライアンスセキュリティプロファイル標準に全て対応し、コンプライアンスセキュリティプロファイルが有効なワークスペースではデフォルトで利用可能になりました。これによりセキュリティ規制への準拠がより強化されます。

Base environments are now supported on classic compute (Beta)

Databricksのクラシックコンピュート環境でベース環境がサポートされました。Databricksが提供するベース環境またはカスタムワークスペースレベルの環境を使用して、Pythonの依存関係を管理できるようになります。

Unity Gateway support for compliance security profile standards

Unityカタログ対応のUnity Gatewayが、Databricksがサポートするすべてのコンプライアンスセキュリティプロファイル標準に対応しました。コンプライアンスセキュリティプロファイルが有効なワークスペースではデフォルトで利用可能になります。

Genie Agents enhancements and bug fixes

Genie Agentsが複数の機能強化を実施しました。PDF アップロードの上限が20ページから100ページに拡張され、アクティビティサマリーは最大6ヶ月分まで対応するようになりました。また、エージェントが明示的に添付されたデータソースのみを使用するようになり、使用状況分析のバグも修正されています。

Dashboard enhancements and bug fixes

ダッシュボード機能が複数強化されました。SQLデータセットをローカルメトリックビューに変換できるようになり、Genie Codeがパラメータ対応で強化されました。ウィジェットタイトルへのフィールド参照挿入、ピボットテーブルの展開レベル設定、ファセットチャートの独立した軸スケーリングなど、視覚化とカスタマイズ性が向上しています。

Genie Agents enhancements and bug fixes

Genie Agentsが複数の改善と修正を実施しました。PDFアップロード容量が20ページから100ページに拡大され、Monitorタブから最大6ヶ月のエージェント活動を要約できるようになりました。また、エージェントが明示的に添付されたデータソースのみを使用するよう改善され、Agent Usage集計のバグも修正されています。

Genie Agents enhancements and bug fixes

Genie Agentsがアップデートされ、PDFアップロード上限が20ページから100ページに拡大されました。また、Monitor タブからGenie Agentの最大6ヶ月分の活動を要約できるようになり、エージェントが明示的に添付されたデータソースのみを使用するよう改善されています。併せてAnalyze Agent Usage の不具合も修正されました。

Dashboard enhancements and bug fixes

ダッシュボード機能が複数拡張されました。SQLデータセットのローカルメトリックビューへの変換、ウィジェットのタイトルと説明への集計フィールド値の参照挿入、ピボットテーブルのデフォルト展開レベル設定などが新たに可能になりました。また、ファセットチャートの軸スケーリング独立化やテーマプレビュー表示、ダッシュボード変数の操作に関するバグ修正も実施されています。

Dashboard enhancements and bug fixes

ダッシュボード機能が複数強化されました。SQLデータセットのローカルメトリックビュー変換、Genie Codeでのパラメータ対応、ウィジェットタイトルへのフィールド参照挿入、ピボットテーブルのデフォルト展開レベル設定など、新しい機能が追加されました。また、ファセットチャートの軸スケーリング、テーマプレビュー表示、ダッシュボード変数の取り消し・やり直し機能の修正なども実装されています。

Genie One enhancements

Genie Oneの機能が拡張され、スキルが複数ファイルとフォルダに対応しました。最大3階層のフォルダと1スキルあたり50個までのファイルやフォルダを含められるようになり、テキストファイルの読み込みが可能になっています。

"Regex for Rows": Simplifying Pattern Detection in SQL with MATCH_RECOGNIZE

SQLのMATCH_RECOGNIZE機能を使用して、ログインの試行回数追跡などの時系列データからパターンを検出する方法を紹介する記事です。正規表現のような柔軟なパターン認識をSQL内で実現することで、複雑なデータ分析処理をシンプル化できます。

Unity Gateway API and developer tools are generally available

Databricksが、モデルサービスやモデルプロバイダーサービスなどを管理するUnity Gateway APIの一般提供を開始しました。Terraform、CLI、Python、Go、Java、JavaScriptなど複数の開発者ツールで、CRUD操作に対応しており、Declarative Automation Bundlesはベータ版で利用可能です。

Unity Gateway API and developer tools are generally available

Databricksが、モデルサービスやモデルプロバイダーサービス、MCPサービスを管理するUnity Gateway APIの正式版をリリースしました。Terraform、CLI、Python、Go、Java、JavaScriptなど複数の開発者ツールで、作成・読取・更新・一覧表示・削除機能をサポートしています。

WindowsでOmnigentを動かす ― ネイティブの限界とWSL2、そしてDatabricks連携まで

Unused OAuth client secrets are automatically deleted after 90 days

Databricksが未使用のOAuthクライアントシークレットを90日後に自動削除する機能を導入しました。これは未使用のアクセストークン削除と同様のセキュリティ対策です。削除されたシークレットが必要な場合は、新しいOAuthシークレットを作成する必要があります。

Anthropic models will be removed from AWS GovCloud IL5 workspaces

2026年9月19日、AnthropicのモデルはAWS GovCloud上のDatabricksから削除されます。特にDoD Impact Level 5（IL5）準拠標準が適用されたワークスペースが対象となり、その後IL5ワークスペースではAnthropicモデルを提供するエンドポイントの作成・使用ができなくなります。ユーザーは指定期日までに別のサポートされたモデルに移行する必要があります。

Account-only user access to Genie One (Beta)

Genie Oneがアカウント専用ユーザーアクセスに対応し、登録済みのアイデンティティプロバイダー内のユーザーはワークスペース割り当てやコンシューマーアクセス許可なしでアカウントレベルのGenie Oneにアクセス可能になりました。有効化時に対象ユーザーは自動登録され、Unity Catalogがアクセス権限を管理します。

Account-only user access to Genie One (Beta)

Genie Oneがアカウント限定ユーザーのアクセスに対応しました。登録済みの身元プロバイダーのユーザーはワークスペース割り当てやコンシューマーアクセス付与がなくても、アカウントレベルのGenie Oneにアクセス可能になります。適格ユーザーは自動的に登録され、Unity Catalogがユーザーの表示権限を管理します。

VARIANT cast extends to ARRAY and MAP columns in ABAC column masks

DatabricksのABAC列マスク機能において、VARIANT関数がARRAYおよびMAP列に対応しました。これまでのSTRUCT型に加えて、複数の列型を単一のVARIANT関数でマスク可能になり、Databricks Runtime 19以上で利用できます。

Managed agent memory and sessions are in Beta

Databricksがエージェントのメモリとセッション管理機能をベータリリースしました。Lakehouseをベースとした完全管理型のストレージにより、エージェントは複数の会話を超えて永続化する長期記憶とセマンティック検索、および会話履歴の管理が可能になります。

Lakebase snapshots API (Beta)

Lakebseのスナップショット機能がAPI経由で利用可能になりました。このAPIを使用することで、プロジェクトブランチのポイントインタイムスナップショットをプログラムで作成、取得、一覧表示、削除できます。また、スナップショットから新規ブランチを作成して復元することも可能です。

How energy teams turn theft detection into governed action with Genie and AI business processes

エネルギー企業が盗難検出を統制されたアクションに変えるために、Genieとai業務プロセスを活用する方法について論じた記事。エネルギー盗難（ガスや電気を無断使用する行為）の検出から対応まで、AIを用いた業務プロセス自動化による効率的な管理体制の構築を紹介しています。

How Databricks’ marketers use data 3x more with Genie, an AI analytics assistant

Databricksのマーケティングチームが、AI分析アシスタント「Genie」を活用することで、データの利用頻度を3倍に増やしています。Genieは信頼できる分析結果を迅速に得るのに役立つツールで、マーケティングチームがより効果的にデータドリブンな意思決定を実現できるようにしています。

The READ METADATA privilege will soon be available by default for workspaces with the compliance security profile enabled

コンプライアンスセキュリティプロファイルが有効なワークスペースにおいて、2026年10月中旬からREAD METADATAプリビレッジがデフォルトで利用可能になります。このプリビレッジはメタデータへの読み取り専用アクセスを付与し、権限設定や行フィルタ、列マスク、ABACポリシーなどセキュリティに関連する情報を閲覧でき、セキュリティ監査者やデータガバナンスチーム、SREなどのアクセス制御検査に活用されます。

Sharing foreign Delta tables with OpenSharing is now generally available

DatabricksのOpenSharingが一般提供開始され、OneLake、Hive metastore、AWS Glueから統合されたDelta形式テーブルをデータコピーなしで共有・読み取りが可能になりました。プロバイダーは外部ソースのデータを効率的に共有できるようになります。

Data Classification now scans Unity Catalog views (Beta)

Data Classificationがユニティ カタログのビューをスキャンする機能がベータ版で追加されました。テーブルに加えてビューもスキャン対象となり、同じ検出エンジンを使用して列の機密データを分類できるようになります。

ABAC on views is in Beta

Databricksが属性ベースのアクセス制御（ABAC）をビューに拡張するベータ機能を公開しました。これまでテーブルに限定されていた行フィルタと列マスクがビューにも対応し、ビューを通じて公開される機密データへのアクセスをより細かく制御できるようになります。Databricks Runtime 19以上が必要です。

『Omnigentによるメタハーネス入門』が9/30に刊行されます — 全3巻の構成と、どの巻から読むか

Automatic change data feed will soon be available in all supported regions

Databricksが自動変更データフィード（Auto CDF）を展開しており、2026年10月末までにすべての対応リージョンで利用可能になります。この機能はクエリ時に行レベルの変更を計算するため、Delta LakeやApache Iceberg v3テーブルで個別に変更データフィードを有効化する必要がなくなります。

Data Classification now scans Unity Catalog views (Beta)

Databricksのデータ分類機能がUnity Catalogのビューのスキャンに対応しました。テーブルに加えてビューも機密データの列を検出・分類できるようになり、同じ検出エンジンが使用されています。現在ベータ機能です。

Data Ontology defined: The context layer your AI agents are missing

企業内で同じ用語の定義が統一されていない問題に着目した記事です。AIエージェントが正確に機能するには、データの意味や関係性を明確に定義する「データオントロジー」という文脈層が必要だと指摘しており、このコンテキスト層がAIシステムにおける重要な要素であることを解説しています。

What is AI analytics? Why it only works on governed data

AI分析とは、データ分析にAIと機械学習を適用する実践のことです。記事は、AI分析が効果的に機能するためには、適切に管理されたデータが必須であることを強調しています。ガバナンスが整ったデータ環境があることで、初めてAI分析の真の価値が実現されるという内容です。

Webhook-triggered deployments for Databricks Apps will soon be generally available

Databricks Appsのウェブフック トリガー デプロイメント機能が2026年10月に一般提供開始予定です。GitHubやAzure DevOpsリポジトリへの変更プッシュ時に自動でアプリをデプロイでき、手動再デプロイなしにリポジトリとの同期を保てます。

Lakebase snapshots API (Beta)

Lakebaseがスナップショット管理APIをベータ版で提供開始しました。このAPIにより、プロジェクトブランチの特定時点のスナップショットをプログラムで作成、取得、一覧表示、削除でき、スナップショットから新しいブランチを作成して復元することが可能です。すべてのLakebaceワークスペースで利用できます。

Announcing On-Demand State Repartitioning for Apache Spark™ Structured Streaming on Databricks

Databricksが、Apache Spark Structured Streamingのステートフル・クエリに対する「オンデマンド・ステート・リパーティショニング」機能を発表しました。本番環境でストリーミングクエリを実行しているユーザーを対象とした、状態管理の改善機能です。

Genie visualizations in Slack replies (Public Preview)

Databricks Genieが生成したチャートを、Slack返信内に画像として直接表示できるようになりました。この機能をご利用いただくには、以前インストールされたDatabricks Genie Slackアプリを再インストールする必要があります。

Managed Postgres: What Lakebase Actually Takes Off Your Plate

マネージドPostgresサービスの定義は各ベンダーで異なりますが、Lakebaseがどのような管理タスクを実際に引き取るのかについて解説した記事。マネージドという名称の曖昧性を指摘しながら、Lakebaseが具体的にユーザーの負担を軽減する範囲を明らかにしています。

JAR tasks on serverless compute will soon be available for workspaces with the compliance security profile enabled

2026年10月初旬より、コンプライアンスセキュリティプロファイルが有効なワークスペースでは、サーバーレスコンピュート上でのJARタスク実行が自動的に利用可能になります。JavaまたはScalaのSparkコードをJARにパッケージ化し、クラスターをプロビジョニングすることなくLakeflow Job上でサーバーレスコンピュートで実行できるようになります。

The counter_diff SQL window function is now available

Databricks SQLに新しい`counter_diff`ウィンドウ関数が追加されました。この関数は連続するカウンター値の差分を計算し、カウンターのリセットに対応しており、時系列データの分析に活用できます。Databricks Runtime 19以上で利用可能です。

Window measures on a numeric index column in metric views

メトリックビューにおいて、ウィンドウメジャーが連続する整数順序の数値インデックス列に対応しました。カレンダー期間以外の会計週や4-4-5期間などの期間に対して、単位なしのオフセットと末尾/先頭範囲の指定が可能になります。

Databricks Gitフォルダサーバーレス (ベータ) を試す — 2つ目のノートブックでは環境設定をしなくていい

Health Plans: Your BI Tells You MLR Moved. Can Your AI Tell You Why?

健康保険プランのCFOが月次決算を終えた際、ビジネスインテリジェンスツールはMLR（医療損失率）の変動を示しますが、AIツールはその変動理由を説明できるかという課題を探ります。データ分析の精度向上と意思決定支援の重要性が問われています。

Unify your marketing data with Lakeflow Connect

Lakeflow Connectは、マーケティングデータを統一するためのソリューションです。新しいシリーズの最初の記事として、Lakeflow Connectがどのようにして完全な機能をもたらすかについて探索していきます。

Standard performance mode is now available for one-time runs in the Jobs API

Databricksの Jobs API で、ワンタイム実行時のパフォーマンスモードを STANDARD に設定できるようになりました。Apache Airflow の DatabricksSubmitRunOperator でも対応し、より柔軟なジョブ実行の制御が可能になります。

Sharing foreign Iceberg tables with OpenSharing is now generally available

OpenSharingを使用して外部のIcebergカタログから連携されたIcebergテーブルを共有・読取できる機能が一般利用可能になりました。プロバイダーはLakehouse Federationを通じて外部クライアントを使用する受信者を含む複数の受信者とIcebergテーブルを共有でき、受信者は共有されたテーブルのデータを読み取ることができます。

Sharing foreign schemas and tables with OpenSharing is now generally available

Databricksの「OpenSharing」機能で、外部データソースから統合された外部スキーマとテーブルを共有できるようになりました。プロバイダーはデータをDatabricksにコピーせずに共有できますが、データの具体化によって計算とストレージのコストが発生します。

DeepSeek V4.1 Flash is now available on Unity Gateway

DeepSeek V4.1 Flashがunity Gatewayで利用可能になりました。このモデルはテキストと画像入力に対応しており、Foundation Model APIsを通じてアクセスできます。ユーザーは適用される利用規約への準拠を確認する責任があります。