APC 技術ブログ

株式会社エーピーコミュニケーションズの技術ブログです。

株式会社 エーピーコミュニケーションズの技術ブログです。

Databricks

DatabricksとD&Bが拓く、次世代マスターデータ管理(MDM)の現実解

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 企業活動の根幹をなすデータ。しかし、そのデー…

データの名寄せは新たなステージへ:ベクトル検索とLLMが拓くエンティティ解決の最前線

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データが爆発的に増え続ける現代において、異な…

AIプロダクション化の壁を越える:Databricksが提唱するDatabricks AI Security Framework (DASF)の解説

AIプロダクション化の壁を越える:Databricksが提唱するDatabricks AI Security Framework (DASF)の解説 AI、特に生成AIの活用がビジネスの核心に迫る中、多くの企業がその本番導入(プロダクション化)の壁に直面しています。Databricksの講演「# Best Prac…

AirflowからLakeflowへ?Databricksが示すデータワークフロー近代化の選択肢

AirflowからLakeflowへ?Databricksが示すデータワークフロー近代化の選択肢 データエンジニアリングの世界では、ワークフローのオーケストレーションが常に中心的な課題です。長年にわたり、多くの組織がApache Airflowをその強力なエコシステムと柔軟性の…

ストリーミングデータフローにおけるCDF活用術:84.51°「Better Together」アーキテクチャ

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データストリーミングの世界では、一方的にデー…

Databricks Unity Catalog 最新アップデート解説:ライブデモから紐解く次世代データ&AIガバナンスの全貌

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Databricksが開催したセッション「What’s New in…

チャットボットの先へ:Agentic AIが保険引受プロセスを数週間から数分に短縮する未来

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 DatabricksのAmit Kumar Jha氏とMarcela Granado…

Databricks Unity Catalogで実現する、次世代のApache Iceberg活用術

Databricks Unity Catalogで実現する、次世代のApache Iceberg活用術 先日開催されたDatabricksのセッション「Databricks + Apache Iceberg™: Managed and Foreign Tables in Unity Catalog」では、現代のレイクハウスアーキテクチャにおける重要な課題、す…

DatabricksとSnowflakeの壁を壊す:T-Mobileが実現したIcebergとUnity Catalogによるデータ相互運用性

DatabricksとSnowflakeの壁を壊す:T-Mobileが実現したIcebergとUnity Catalogによるデータ相互運用性 現代のデータドリブンな企業において、DatabricksとSnowflakeはそれぞれが強力なデータプラットフォームとして確固たる地位を築いています。しかし、多く…

DatabricksのMosaic AIが拓く、本番AIシステムの構築とスケーリングの未来

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 エンタープライズ環境で生成AIを本格的に導入し…

Databricks AI/BIダッシュボードはここまで来た!

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 エンタープライズ規模のレポーティングを実現す…

ドメイン特化型AIエージェントの品質をどう測るか? MLflow 3とLLMジャッジによる実践的アプローチ

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 ドメイン特化型AIエージェントの品質をどう測る…

巨大組織のMLOps変革:PetrobrasがDatabricksで実現した高速化

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Data + AI Summitで発表されたセッション「Petro…

ArizeとDatabricks ML Flowによるエージェントの自己改善とエージェント評価

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 生成AIエージェントは自ら賢くなるのか? 生成AI…

Databricksで実現するセキュアなデータコラボレーション:セキュリティ、フレームワーク、ユースケースを徹底解説

Databricksで実現するセキュアなデータコラボレーション:セキュリティ、フレームワーク、ユースケースを徹底解説 現代のビジネスにおいて、組織の垣根を越えたデータ共有と協業、すなわち「データコラボレーション」は、新たな価値を創出するための鍵となっ…

SAPとDatabricksの連携が拓く未来:データとAIでビジネスはどう変わるのか?

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 先日開催された「Partner Summit Breakout_ SAP …

医療AIの未来を拓く「半合成データ」:プライバシーと実用性を両立するモデル構築術

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 先日開催されたData+AI Summitにて、Fight Healt…

AIガバナンスは「宣言」から「実践」へ:Databricksが提唱する具体的フレームワークDAGFとは

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 AIの導入がビジネスの標準となる中、多くの企業…

Azure Data Lake Storageにおける包括的データガバナンスの実践ガイド

Azure Data Lake Storageにおける包括的データガバナンスの実践ガイド 先日開催されたカンファレンスで、MicrosoftのAzure Data Lake Storage(ADLS)チームに所属するJames Baker氏とSantosh Pillai氏による「Comprehensive Data Management and Governance…

AcxiomがDatabricksで挑む「汚れたデータ」問題:AI駆動マーケティングデータ管理の最前線

AcxiomがDatabricksで挑む「汚れたデータ」問題:AI駆動マーケティングデータ管理の最前線 データ主導のマーケティングが当たり前になった現代、多くの企業が直面する根深い課題があります。それは「汚れたデータ(Dirty Data)」の問題です。不完全、不正確…

酪農DXの最前線:LelyはいかにしてDatabricksで「内部データマーケットプレイス」を構築したか

酪農DXの最前線:LelyはいかにしてDatabricksで「内部データマーケットプレイス」を構築したか オランダの酪農ロボット大手Lely社。同社はData + AI Summitの講演「Unlocking the Future of Dairy Farming: Leveraging Data Marketplaces at Lely」で、デー…

Databricks AI/BI GenieとTeamsの連携:チャットで実現する次世代のセルフサービスBI

Databricks AI/BI GenieとTeamsの連携:チャットで実現する次世代のセルフサービスBI DatabricksのソリューションアーキテクトであるRyan Bates氏と、米国の家具販売チェーンRooms To Goでデータエンジニアリングを担当するNathan Sundararajan氏による講演…

Databricks DQXでデータ品質管理をプロアクティブに:リアルタイム検証とデータ検疫の新常識

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データパイプラインの信頼性は、データドリブン…

トヨタのコネクテッドカー戦略:Databricksで実現するデータ価値最大化とプライバシー保護の両立

トヨタの[コネクテッドカー戦略:Databricksで実現するデータ価値最大化とプライバシー保護の両立 自動車がインターネットと常時接続される「コネクテッドカー」。その膨大なデータは、私たちの移動をより安全で快適なものに変える可能性を秘めています。一…

実世界に即したAIペルソナデータセット

実世界に即したAIペルソナデータセット AIのトレーニングデータは、その性能と公平性を左右する生命線です。しかし、インターネットから収集されたデータは、特定の層に偏りがちで、現実世界の多様性を反映しているとは言えません。この根深い課題に、NVIDIA…

DatabricksとDSPyで加速するマルチエージェント開発:単一LLMの限界を超える実践的アプローチ

DatabricksとDSPyで加速するマルチエージェント開発:単一LLMの限界を超える実践的アプローチ 生成AIの世界では、単一の巨大な言語モデル(LLM)にすべてを任せる時代が終わりを告げようとしています。代わって注目を集めているのが、複数の専門エージェント…

DatabricksとMCPで作る、次世代AIエージェント開発の最前線

DatabricksとMCPで作る、次世代AIエージェント開発の最前線 Databricksが開催したセッション「Building Tool-Calling Agents With Databricks Agent Framework and MCP」では、同社のElise氏とSid氏が登壇し、AIエージェント開発における新たな標準となりう…

DSPy 3.0登場:プロンプトエンジニアリングを「職人技」から「ソフトウェア工学」へ

DSPy 3.0登場:プロンプトエンジニアリングを「職人技」から「ソフトウェア工学」へ LLM(大規模言語モデル)を使ったアプリケーション開発において、多くの開発者が「プロンプトエンジニアリング」という複雑で終わりの見えない作業に直面しています。まる…

Databricks Lakeflow本格運用ガイド:CI/CD、テスト、監視をスケールさせる新手法

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Databricksが主催するData + AI Summitでは、毎…

Databricks Data + AI Summit 2025 Keynote 2日目

Databricks Data + AI Summit 2025 Keynote 2日目 Databricks Data + AI Summit 2025のKeynote 2日目では、データとAIの活用をさらに加速させる、エンジニアにとってもビジネスユーザーにとっても非常に興味深い発表が目白押しでしたね。今回は、「Data Inte…