APC 技術ブログ

株式会社エーピーコミュニケーションズの技術ブログです。

株式会社 エーピーコミュニケーションズの技術ブログです。

Databricks

Globe TelecomのMLOps刷新:Databricks統合で処理時間28倍・コスト97%削減を実現した全貌

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 フィリピンの大手通信会社Globe Telecomが、乱立…

従来MLと生成AIの分断を乗り越える:RecSys, Topic Modeling and Agents: Bridging the GenAI-Traditional ML Divide

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 生成AI(GenAI)の波が押し寄せ、多くの開発現場…

ByteDanceはIcebergとMosaic Streamingをどう拡張したか?大規模ML基盤「Magnus Lake」と「ByteD Streaming」の全貌

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Data + AI Summitで発表されたByteDanceのソフト…

Mercedes-Benzが実践するクロスクラウドData Mesh:Delta SharingとUniFormで実現するコスト効率とデータ連携

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 現代のエンタープライズ環境において、複数のク…

7-Elevenが実践したDatabricks Unity Catalog移行の現実解:UCXツールで複雑な大規模移行を成功に導く

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 DatabricksのUnity Catalog(UC)への移行は、多…

データレイクハウスにおけるトランザクション競合とその解決策

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データレイクハウスの運用が広がる中で、多くの…

DatabricksとD&Bが拓く、次世代マスターデータ管理(MDM)の現実解

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 企業活動の根幹をなすデータ。しかし、そのデー…

データの名寄せは新たなステージへ:ベクトル検索とLLMが拓くエンティティ解決の最前線

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データが爆発的に増え続ける現代において、異な…

AIプロダクション化の壁を越える:Databricksが提唱するDatabricks AI Security Framework (DASF)の解説

AIプロダクション化の壁を越える:Databricksが提唱するDatabricks AI Security Framework (DASF)の解説 AI、特に生成AIの活用がビジネスの核心に迫る中、多くの企業がその本番導入(プロダクション化)の壁に直面しています。Databricksの講演「# Best Prac…

AirflowからLakeflowへ?Databricksが示すデータワークフロー近代化の選択肢

AirflowからLakeflowへ?Databricksが示すデータワークフロー近代化の選択肢 データエンジニアリングの世界では、ワークフローのオーケストレーションが常に中心的な課題です。長年にわたり、多くの組織がApache Airflowをその強力なエコシステムと柔軟性の…

ストリーミングデータフローにおけるCDF活用術:84.51°「Better Together」アーキテクチャ

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データストリーミングの世界では、一方的にデー…

Databricks Unity Catalog 最新アップデート解説:ライブデモから紐解く次世代データ&AIガバナンスの全貌

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Databricksが開催したセッション「What’s New in…

チャットボットの先へ:Agentic AIが保険引受プロセスを数週間から数分に短縮する未来

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 DatabricksのAmit Kumar Jha氏とMarcela Granado…

Databricks Unity Catalogで実現する、次世代のApache Iceberg活用術

Databricks Unity Catalogで実現する、次世代のApache Iceberg活用術 先日開催されたDatabricksのセッション「Databricks + Apache Iceberg™: Managed and Foreign Tables in Unity Catalog」では、現代のレイクハウスアーキテクチャにおける重要な課題、す…

DatabricksとSnowflakeの壁を壊す:T-Mobileが実現したIcebergとUnity Catalogによるデータ相互運用性

DatabricksとSnowflakeの壁を壊す:T-Mobileが実現したIcebergとUnity Catalogによるデータ相互運用性 現代のデータドリブンな企業において、DatabricksとSnowflakeはそれぞれが強力なデータプラットフォームとして確固たる地位を築いています。しかし、多く…

DatabricksのMosaic AIが拓く、本番AIシステムの構築とスケーリングの未来

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 エンタープライズ環境で生成AIを本格的に導入し…

Databricks AI/BIダッシュボードはここまで来た!

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 エンタープライズ規模のレポーティングを実現す…

ドメイン特化型AIエージェントの品質をどう測るか? MLflow 3とLLMジャッジによる実践的アプローチ

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 ドメイン特化型AIエージェントの品質をどう測る…

巨大組織のMLOps変革:PetrobrasがDatabricksで実現した高速化

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 Data + AI Summitで発表されたセッション「Petro…

ArizeとDatabricks ML Flowによるエージェントの自己改善とエージェント評価

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 生成AIエージェントは自ら賢くなるのか? 生成AI…

Databricksで実現するセキュアなデータコラボレーション:セキュリティ、フレームワーク、ユースケースを徹底解説

Databricksで実現するセキュアなデータコラボレーション:セキュリティ、フレームワーク、ユースケースを徹底解説 現代のビジネスにおいて、組織の垣根を越えたデータ共有と協業、すなわち「データコラボレーション」は、新たな価値を創出するための鍵となっ…

SAPとDatabricksの連携が拓く未来:データとAIでビジネスはどう変わるのか?

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 先日開催された「Partner Summit Breakout_ SAP …

医療AIの未来を拓く「半合成データ」:プライバシーと実用性を両立するモデル構築術

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 先日開催されたData+AI Summitにて、Fight Healt…

AIガバナンスは「宣言」から「実践」へ:Databricksが提唱する具体的フレームワークDAGFとは

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 AIの導入がビジネスの標準となる中、多くの企業…

Azure Data Lake Storageにおける包括的データガバナンスの実践ガイド

Azure Data Lake Storageにおける包括的データガバナンスの実践ガイド 先日開催されたカンファレンスで、MicrosoftのAzure Data Lake Storage(ADLS)チームに所属するJames Baker氏とSantosh Pillai氏による「Comprehensive Data Management and Governance…

AcxiomがDatabricksで挑む「汚れたデータ」問題:AI駆動マーケティングデータ管理の最前線

AcxiomがDatabricksで挑む「汚れたデータ」問題:AI駆動マーケティングデータ管理の最前線 データ主導のマーケティングが当たり前になった現代、多くの企業が直面する根深い課題があります。それは「汚れたデータ(Dirty Data)」の問題です。不完全、不正確…

酪農DXの最前線:LelyはいかにしてDatabricksで「内部データマーケットプレイス」を構築したか

酪農DXの最前線:LelyはいかにしてDatabricksで「内部データマーケットプレイス」を構築したか オランダの酪農ロボット大手Lely社。同社はData + AI Summitの講演「Unlocking the Future of Dairy Farming: Leveraging Data Marketplaces at Lely」で、デー…

Databricks AI/BI GenieとTeamsの連携:チャットで実現する次世代のセルフサービスBI

Databricks AI/BI GenieとTeamsの連携:チャットで実現する次世代のセルフサービスBI DatabricksのソリューションアーキテクトであるRyan Bates氏と、米国の家具販売チェーンRooms To Goでデータエンジニアリングを担当するNathan Sundararajan氏による講演…

Databricks DQXでデータ品質管理をプロアクティブに:リアルタイム検証とデータ検疫の新常識

※本記事は、Data + AI Summit のセッションを現地で視聴したエンジニアが、内容をできる限り客観的に共有することを目的に、生成AIを活用して作成したものです。 ― エーピーコミュニケーションズ Lakehouse部 データパイプラインの信頼性は、データドリブン…

トヨタのコネクテッドカー戦略:Databricksで実現するデータ価値最大化とプライバシー保護の両立

トヨタの[コネクテッドカー戦略:Databricksで実現するデータ価値最大化とプライバシー保護の両立 自動車がインターネットと常時接続される「コネクテッドカー」。その膨大なデータは、私たちの移動をより安全で快適なものに変える可能性を秘めています。一…