DATA+AI SUMMIT 2025 KeyNote Day2 メモ

[DATA+AI SUMMIT 2025](https://www.databricks.com/dataaisummit)にバーチャル参加しています。
キーノート2日目で発表があった、主にプラットフォームの新機能に関するメモの共有記事となります。

:::note warn
日本時間1時という深夜開催のため、眠さで十分にメモが取れてない可能性があります。
:::


日本企業の事例やAnthropic CEOとの対話など、興味深い内容もありましたのでキーノート動画の視聴をお勧めします。**Super Excited here!**

:::note warn
速報的記載のため、内容に誤りがある可能性があります。
できるだけ1次ソースを合わせて参照ください。

Databricks 公式Blogで公開されている情報はそのリンクも付けています。

:::

動画はこちら。
<iframe width="560" height="315" src="https://www.youtube.com/embed/0pys27kA67U?si=DgF127iZngf8Aula" title="YouTube video player" frameborder="0" allow="accelerometer; autoplay; clipboard-write; encrypted-media; gyroscope; picture-in-picture; web-share" referrerpolicy="strict-origin-when-cross-origin" allowfullscreen></iframe>

# What's next for Unity Catalog?

全体として、Unified Governanceという言葉が強調されていました。

機能としてはIcebergのフルサポート、ビジネスユーザへの拡大が発表されました。

Unity CatalogはIcebergにとってもベストなカタログであると述べられていて、Predictive OptimizationもIcebergに適用される。
また、Iceberg Managed Tableを発表。Unity Catalogを通じてDatabricksとSnowflakeや他のサービスとTable Read/Writeの連携が可能となる。
Delta Sharingを使ったIceberg Tableの共有も可能。

ビジネスユーザへの拡大については、
- ビジネスメトリクス
- ディスカバービュー
- データインテリジェンス
を対応。

機能として、Unity Catalog Metrics、Unity Catalog Discover、Data Intelligence Insightを発表。

https://www.databricks.com/blog/whats-new-databricks-unity-catalog-data-ai-summit-2025

# Announcing Apache Spark 4.0

Structured Streamingについて、Real-timeモードの搭載を発表。従来よりさらに少ないレイテンシを実現。
また、Spark Declarative Pipelineを発表。Databricks DLTの知見をSparkに適用。

# Lakeflow

以下の３コンポーネントについて発表。
- Connect
- Declarative Pipelines
- Jobs

Connectはより多くのConnector対応を発表。
また、多くのProducersから低レイテンシにUnity Catalogに連携するZerobus APIも発表された。

Transform領域であるDeclarative Pipelineを発表。従来のDLTから変更なしに移行。
AutoCDCによる容易なCDC(Change Data Capture)の対応も発表。
専用のIDEによる開発プロセスの効率化。

Jobsについては、PowerBIやdbt、snowflakeとのオーケストレーションも発表。

https://www.databricks.com/blog/announcing-general-availability-databricks-lakeflow

# Lakeflow Designer

ノーコードでデータパイプライン構築を行うデザイナ機能。
デモでは、Excelファイルをドラッグアンドドロップでのテーブル作成や、既存のテーブルを自然言語で指示してパイプラインを作成、画像から出力表の自動デザインを実施。そのままパイプラインのデプロイも可能。
パイプライン処理のSQLも表示・編集ができるため、技術部門とビジネス部門のコラボレーションが容易にできることが示された。

**純粋にすごい。このレベルならデータリテラシーが高くないビジネス部門でもデータ処理できそう。**

https://www.databricks.com/blog/announcing-lakeflow-designer-no-code-etl

# Databricks SQL

Next-gen Data Warehouseの発表。
パフォーマンスが25%向上、コストは据え置き。TCO効率は市場で最上位。

ストレージンフォーマット含め、全ての機能がオープンであることを強調。
DB SQLはネイティブにUnity Catalogと連携。

ai_queryのマルチモーダル化や、ai_parse_document関数によるドキュメント取り込みといったAI連携や
Day1で発表されたOLTPとの連携も示された。

https://www.databricks.com/blog/databricks-sql-accelerates-customer-workloads-5x-just-three-years

# Lakebridge

無償・オープンで利用可能なマイグレーションソリューション。
EDWのマイグレーションは非常に複雑だが、Lakebridgeを使うことでマイグレーションを加速する。

https://www.databricks.com/blog/introducing-lakebridge-free-open-data-migration-databricks-sql

# Databricks x Google Cloud

GeminiがDatabricks Platforms上でネイティブ利用可能に。

<blockquote class="twitter-tweet"><p lang="en" dir="ltr">We&#39;re excited to announce a strategic AI partnership with Google Cloud to bring Gemini Models natively to the Data Intelligence Platform.<br><br>The latest Gemini models will be available as native products within Databricks, empowering organizations to build, deploy and scale AI… <a href="https://t.co/VGffjBzUhO">pic.twitter.com/VGffjBzUhO</a></p>&mdash; Databricks (@databricks) <a href="https://twitter.com/databricks/status/1933222067396121040?ref_src=twsrc%5Etfw">June 12, 2025</a></blockquote> <script async src="https://platform.twitter.com/widgets.js" charset="utf-8"></script>

# AI/BI

AI/BIがGA。

BIダッシュボードの予測対応や可視化の増加、Genie統合など利用しやすさが向上している。
また、Genie Deep Researchの発表。今夏公開予定。

他、Unity Catalog Metricsの様々なパートナーサービスとの連携。
Genie Knowledge Extractionの発表。利用パターンから知識抽出。

https://www.databricks.com/blog/aibi-genie-now-generally-available

# Databricks One

ビジネスユーザ(Consumer)向けの新UI。
チャットベースで知りたいことを聞く、自分に関連するダッシュボードを提示する、などに特化。
従来のワークスペースにおける複雑さを軽減し、ビジネスユーザが知りたいことに集中できる。

**日本の事業会社が真に求めているものってコレだと思う。これを使いこなせるリテラシーを持った組織を作ろう（自戒）**

https://www.databricks.com/blog/introducing-databricks-one

# 所感

<blockquote class="twitter-tweet"><p lang="ja" dir="ltr">情報量が・・・情報量が多すぎる・・・<a href="https://twitter.com/hashtag/DataAISummit?src=hash&amp;ref_src=twsrc%5Etfw">#DataAISummit</a> <a href="https://twitter.com/hashtag/DAISJapanTeam?src=hash&amp;ref_src=twsrc%5Etfw">#DAISJapanTeam</a></p>&mdash; Tyam (@isanakamishiro2) <a href="https://twitter.com/isanakamishiro2/status/1933232616469377207?ref_src=twsrc%5Etfw">June 12, 2025</a></blockquote> <script async src="https://platform.twitter.com/widgets.js" charset="utf-8"></script>

二日間お疲れさまでした！

# DATA+AI SUMMIT 2025の公式サイトはこちら

https://www.databricks.com/dataaisummit