APC 技術ブログ

株式会社エーピーコミュニケーションズの技術ブログです。

株式会社 エーピーコミュニケーションズの技術ブログです。

2023-06-01から1ヶ月間の記事一覧

How to Build LLMs on Your Company’s Data While on a Budget(予算内で会社のデータにLLMSを構築する方法)

GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している永里の報告をもとに、「How to Build LLMs on Your Company’s Data While on a Budget(予算内で会社のデータにLLMSを構築する方…

Best Practices for Running Efficient Apache Spark™ Workloads on Databricks(Databricksで効率的なApacheSpark™ワークロードを実行するためのベストプラクティス)

はじめに​ GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している儀保の報告をもとに、「Best Practices for Running Efficient Apache Spark™ Workloads on Databricks(Databricksで…

AWS Certified Security - Specialty (SCS-C01) に合格したので所感を綴る

AWS

はじめに こんにちは、クラウド事業部の坂口です。 先日 AWS Certified Security - Specialty (AWS 認定セキュリティ – 専門知識) に合格しましたのでざっくりとした所感を書いていければと思います。 本記事でとりあげている試験は SCS-C01 です。 2023年7…

What's New in Databricks SQL -- With Live Demos(Databricks SQLの新機能 - ライブデモ付き)

はじめに GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している永里の報告をもとに、「What's New in Databricks SQL -- With Live Demos(Databricks SQLの新機能 - ライブデモ付き)…

Accelerating the Development of Viewership Personas with a Unified Feature Store(統一された特徴量ストアで視聴者ペルソナの開発を加速する)

GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している永里の報告をもとに、「Accelerating the Development of Viewership Personas with a Unified Feature Store(統一された特徴量…

What’s New with Data Sharing and Collaboration on the Lakehouse: From Delta Sharing to Clean Rooms(レイクハウスでのデータ共有とコラボレーションの最新情報: デルタ共有からクリーン ルームまで)

GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している市村の報告をもとに、「What’s New with Data Sharing and Collaboration on the Lakehouse: From Delta Sharing to Clean Rooms…

Testing Generative AI Models: What You Need to Know(生成AIモデルのテスト:知る必要があること)

はじめに GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS2023)に参加している永江の報告をもとに、「Testing Generative AI Models: What You Need to Know(生成AIモデルのテスト:知る必要がある…

dbt Labs | Leveling Up SQL Transformations in the Lakehouse with dbt(dbtラボ| dbtを使用してLakehouseのSQL変換をレベルアップ)

はじめに GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS)に参加している永里の報告をもとに、「dbt Labs | Leveling Up SQL Transformations in the Lakehouse with dbt(dbtラボ| dbtを使用してLa…

Getting Insight From Anything: Gathering Data With IoT Devices and Delta Live(インサイトを得る:IoTデバイスとデルタライブでデータを収集する)

はじめに GLB事業部Lakehouse部の陳(チェン)です。サンフランシスコで開催されているData + AI SUMMIT2023(DAIS)に参加している市村の報告をもとに、「Getting Insight From Anything: Gathering Data With IoT Devices and Delta Live(インサイトを得…

CopilotとChatGPTによるコード生成と補完の使い分けを考える

はじめに こんにちは、ACS事業部の大久保です。 蒸し暑くて大変な時期ですが皆様いかがお過ごしでしょうか? 幣事業部でもCopilot 利用が盛んになってきており、久しぶりに筆を執りたいと思います。 テーマ LLMやそれを利用したアプリケーションの普及が進む…

LLMOps: Everything You Need to Know to Manage LLMs(LLMOps: LLM を管理するために知っておくべきことすべて)

はじめに GLB事業部Lakehouse部のメイです。 現地でのData + AI SUMMIT2023(DAIS)に参加しているメンバーの報告をもとに、 「LLMOps: Everything You Need to Know to Manage LLMs」を共有します。このセッションでは、DatabricksのProduct ManagerであるE…

Data Application Bundles: A Standard, Unified Approach to Deploying Data Products on Databricks(Databricks にデータ製品をデプロイするための標準的で統一されたアプローチ)

はじめに GLB事業部Lakehouse部のメイです。 現地でのData + AI SUMMIT2023(DAIS)に参加しているメンバーの報告をもとに、「Data Application Bundles: A Standard, Unified Approach to Deploying Data Products on Databricks」 を共有します。 このセッ…

What’s New in Databricks Workflows -- With Live Demos( Databricks ワークフローの新機能 -- ライブ デモあり)

はじめに GLB事業部Global Engineering部 佐々木です。 現地でのData + AI SUMMIT2023(DAIS)に参加している市村の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 htt…

Unlocking the Value of Data Sharing in Financial Services with Lakehouse(Lakehouse で金融サービスにおけるデータ共有の価値を引き出す)

はじめに GLB事業部Lakehouse部のメイです。 現地でのData + AI SUMMIT2023(DAIS)に参加しているメンバーの報告をもとに、金融サービス業界におけるデータ共有の価値を最大化するLakehouseの活用についての「Unlocking the Value of Data Sharing in Finan…

Data Caching Strategies for Data Analytics and AI(データ分析と AI のためのデータ キャッシング戦略 )

はじめに GLB事業部Global Engineering部 佐々木です。 現地でのData + AI SUMMIT2023(DAIS)に参加している永江の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 htt…

Lakehouses: The Best Start to Your Graph Data and Analytics Journey(レイクハウス:グラフデータとアナリティクスの旅への最良のスタート)

はじめに GLB事業部Lakehouse部の阿部です。現地でのData + AI SUMMIT2023(DAIS)に参加している市村の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 こちらも見てい…

Jet Streaming Data and Predictive Analytics(ジェット ストリーミング データと予測分析)

はじめに GLB事業部Lakehouse部のメイです。 現地でのData + AI SUMMIT2023(DAIS)に参加しているメンバーの報告をもとに、航空業界におけるデータ活用の最前線に迫ることについての「Jet Streaming Data and Predictive Analytics: How the Lakehouse and …

Streaming Schema Drift Discovery and Controlled Mitigation(ストリーミング・スキーマ・ドリフトの発見と制御された緩和)

はじめに GLB事業部Lakehouse部の阿部です。現地でのData + AI SUMMIT2023(DAIS)に参加している儀保の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 こちらも見てい…

Github Copilot Labsを使ってみる

はじめに こんにちは。ACS 事業部の奥山です。 前回の続きで Github Copilot ネタです。 GitHub Copilot Lab というGithub Copilotの拡張機能を VSCode で動かしてみましたのでブログにしておきます。 GitHub Copilot Lab とは 公式サイトはこちら GitHub Co…

Why a Major Japanese Financial Institution Chose Databricks to Accelerate its Data and AI-Driven Journey

Introduction This is Abe from the Lakehouse Department of the GLB Division. I wrote an article summarizing the contents of the session based on the report by Mr. Nagae, who is participating in Data + AI SUMMIT2023 (DAIS) on site. Articles …

Why a Major Japanese Financial Institution Chose Databricks to Accelerate its Data and AI-Driven Journey(日本の大手金融機関がデータとAI主導の旅を加速するためにDatabricksを選んだ理由)

はじめに GLB事業部Lakehouse部の阿部です。現地でのData + AI SUMMIT2023(DAIS)に参加している永江の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 こちらも見てい…

Making Travel More Accessible for Customers Bringing Mobility Devices

Introduction This is Abe from the Lakehouse Department of the GLB Division. I wrote an article summarizing the content of the session based on the report by Mr. Kanamaru, who is participating in Data + AI SUMMIT 2023 (DAIS) on site. Articl…

Scaling Deep Learning Using Delta Lake Storage Format on Databricks

Introduction I'm Sasaki from the Global Engineering Department of the GLB Division. I wrote an article summarizing the contents of the session based on the report by Mr. Nagae, who is participating in Data + AI SUMMIT2023 (DAIS) on site. A…

DATA+AI Summit 2023 EXPO!! (Contributed by Databricks)

Introduction This is Ichimura from the lakehouse department of the glb business department. I am participating in the "Data + AI SUMMIT 2023 (DAIS)" being held in San Francisco from June 26, 2023, and I feel the explosive excitement at the…

Making Travel More Accessible for Customers Bringing Mobility Devices(モビリティデバイスをお持ちのお客様にも旅をより身近に)

はじめに GLB事業部Lakehouse部の阿部です。現地でのData + AI SUMMIT2023(DAIS)に参加している金丸の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 こちらも見てい…

Increasing Trust in Your Data: Enabling a Data Governance Program on Databricks Using Unity Catalog and ML-Driven MDM Part 2/2

Introduction ​This is Johann from the Global Engineering Department of the GLB Division. I wrote an article summarizing the content of the session based on reports from Mr. Ichimura participating in Data + AI SUMMIT2023 (DAIS).​ ​ In this …

DATA+AI Summit 2023 EXPO!!(Databricks社様寄稿)

はじめに GLB事業部Lakehouse部の市村です。 2023年6月26日よりサンフランシスコで開催中の「Data + AI SUMMIT2023(DAIS)」に参加させていただいており現地にて会場の爆発的な盛り上がりを感じています。 今回はDatabricks社長谷川様より現地会場で開催さ…

Scaling Deep Learning Using Delta Lake Storage Format on Databricks(Databricks で Delta Lake ストレージ フォーマットを使用したディープ ラーニングのスケーリング)

はじめに GLB事業部Global Engineering部 佐々木です。 現地でのData + AI SUMMIT2023(DAIS)に参加している永江の報告をもとに、セッションの内容をまとめた記事を書きました。 DAISでのセッションに関する記事は、以下の特設サイトにまとめています。 htt…

Increasing Trust in Your Data: Enabling a Data Governance Program on Databricks Using Unity Catalog and ML-Driven MDM Part 2/2 (データの信頼性の向上: Unity Catalog と ML ドリブン MDM を使用した Databricks でのデータ ガバナンス プログラムの有効化 Part 2/2)

はじめに ​GLB事業部Global Engineering部 ヨハンです。 現地でのData + AI SUMMIT2023(DAIS)に参加している市村の報告をもとに、セッションの内容をまとめた記事を書きました。​ ​ 今回は、データガバナンスプログラムを実現するための取り組みについて紹…

Increasing Trust in Your Data: Enabling a Data Governance Program on Databricks Using Unity Catalog and ML-Driven MDM Part 1/2

Introduction This is Johann from the Global Engineering Department of the GLB Division. I wrote an article summarizing the content of the session based on reports from Mr. Ichimura participating in Data + AI SUMMIT2023 (DAIS).​ ​ In this p…