APC 技術ブログ

株式会社エーピーコミュニケーションズの技術ブログです。

株式会社 エーピーコミュニケーションズの技術ブログです。

SIG の検索結果:

AWS全冠(≒All Certifications Engineer)になりました。

AWS

はじめに こんにちは、あるいはこんばんは、クラウド事業部の原田です。 今回はAWSほぼ未経験の状態から、無事AWS全冠を達成できましたので、 全冠に至るまでの振り返り、達成して思ったこと、感じたことを共有させていただこうと思います。 ※タイトルにAll Certifications Engineersと記載していますが、 記事公開時点では2024 Japan AWS All Certifications Engineers の応募クライテリアを満たしただけで、 来年 2024…

How to connect Databricks and KX: PyKX with kdb Insights license

…ing kdb Insights license of KX's product kdb+ on Databricks. kdb+ is the world's fastest time-series database and analytics engine. Please check the article for more details on KX's product. techblog.ap-com.co.jp Contents Introduction Conte…

Terraform Cloud で Azure モジュールのテストを自動生成してみた

… "SystemAssigned" } automatic_channel_upgrade = "patch" tags = { author = var.author } } 3.1.2 outputs.tf outputs.tf には作成した AKS の認証情報を kubeconfig に登録する Azure CLI コマンドを出力する output ブロックを定義しています。 output "aks_credential" { value = "az aks get-c…

CCIE - Service Provider ラボ受験記

…ラボ試験の流れ Design試験 昼ごはん DOO試験 結果 今後の対策 Design試験対策 DOO試験対策 マイナーアップデートv5.1対策 おわりに 己の敵を知れ! ラボ試験の内容と構造、試験の準備戦略について記載した良いドキュメントがあります。 以下の資料はCCIE Enterprise Infrastructureトラックのものになります。 https://www.ciscolive.com/c/dam/r/ciscolive/emea/docs/2020/pdf/…

DatabricksとKXをConnectする方法: PyKX with kdb Insights license

…ks上でkdb Insights licenseを使用してKXのプロダクトのkdb+を利用する検証を行います。 kdb+は世界最速の時系列データベース及び分析エンジンです。 KXのプロダクトの詳細情報は記事をご確認ください。 techblog.ap-com.co.jp 目次 はじめに 目次 PyKXの紹介 検証 1. kdb Insights licenseをダウンロードする 2. PyKXをインストールする 3. PyKXをインポートする 4. KXのq言語を使ってみる 5…

【AWS re:Invent 2023】KEY005 | Dr. Werner Vogels NOT現地レポート

…plication Signalsの発表!EKSに関するあらゆるメトリクスを1つのダッシュボードから確認できるようになります。 aws.amazon.com メーターを定義することで、それを継続的に監視した結果、システムとコストがどのように変化するかわかるようになります。 計測の2つ目、コストを意識したアーキテクチャにはコストの管理が必要です。 システムの一部にアクセスなどによって負荷が集中したとき、その一部を切り離して調整できるようにする必要があります。 アプリケーションを…

【AWS re:Invent 2023】KEY003 | Dr. Swami Sivasubramanian 現地レポート

…azon Quicksightの話。こちらはAWSのShannon Kaliskyさんから。 これで自分たちのデータをベースにした生成モデルが作れる、となりますが、作成したモデルをどう評価すればよいのでしょうか? ここでModel evaluation on Amazon Bedrockの発表。モデル評価までBedrockがしてくれます。 aws.amazon.com 最後にPartyRockの紹介などで終了。 さいごに Day1/2に続き3日目の内容も共有させていただきまし…

【AWS re:Invent 2023】KEY002 | Adam Selipsky Keynote 現地レポート

…azon QuickSightとの連携の紹介。 データをもとにグラフを生成したり、テキストを生成したり。 最後はカスタマーサポートのエージェントを手助けするお話。 Amazon Connectとの連携。顧客とのやり取りの最中に利用できるだけでなく、オンボーディングもサポートしてトレーニング時間を少なくしたり。 以上がAmazon Qの機能の紹介でした。AWSでもついに登場、だけでなく、ユースケースごとに別サービスとの連携も盛り込んだ発表でした。 ここまでで生成AIの3つのレイ…

【AWS re:Invent 2023】KEY002 | Adam Selipsky Keynote オンラインレポート

はじめに こんにちは、クラウド事業部の岩崎です。 今年も待ちに待ったreinvent2023が遂に始まりました。 reinvent.awsevents.com AWSに関わる身としては是非これからの動きに繋げていきたいと考えて、オンラインで視聴してみました。 オンラインは簡単な登録だけで視聴できますので、AWSに関わる方々は是非視聴してみましょう! 現地の様子は別レポートが掲載されますのでそちらをご覧ください! 本日は2日目の基調講演について書いていこうと思います。(日本時間…

AKS の KEDA アドオンが GA したので使ってみた

…ication Insights Azure Blob Storage Azure Data Explorer Azure Event Hub Azure Log Analytics Azure Monitor Azure Pipelines Azure Service Bus Azure Storage Queue KEDA の詳細な仕組みについては 公式ドキュメント をご覧ください。 keda.sh また、弊社の吉川が KEDA について登壇した資料がありますので、あわせ…

Azure Managed Grafana で新プラン登場&機能追加が発表されました

…ication Insightsのトレース対応 Application Insights内のデータをトレースとして表示できるようになりました。Grafana version10のみの対応です。 Tech Community blogより引用 Azure Data Explorer のユーザーベース認証対応 Azure Data Explorerをデータソースとして使用する際、Grafanaにアクセスしているユーザーの認証情報を利用してAzure Data Explorerへア…

【Microsoft Ignite 2023速報】俺たちの本当に欲しかったAzure Functionsが来るかもしれない

…s form to sign up to the waitlist for early access. This feature preview has no SLA provided during the preview. Please DO NOT use the preview features in any production or critical environments. 顧客が本当に欲しかったもの、来ましたね。 注目ポイント 注目すべきはココです。 It i…

【AWS】【初心者】IAM Identity Center とは?IAM Identity Center ユーザーって何者?

AWS

はじめに こんにちは!クラウド事業部の早房です。 今回は、IAM Identity Center についてご紹介します。 IAM Identity Center とは? AWS が提供するサービスの1つで、複数のAWSアカウントへのシングルサインオンを簡素化するためのサービスです。 IAM Identity Centerを使用することで、ユーザーは 1 つの認証情報を使用して複数のAWSアカウントにアクセスすることができます。 また、外部 ID プロバイダーと IAM Ide…

Introduction to KDB.AI (6) - Sample code (Image Search)

…rovides insight into where misclassifications may occur. _umap = umap.UMAP(n_neighbors=15, min_dist=0.0) # UMAP's instance umap_df = pd.DataFrame(_umap.fit_transform(reduced_embeddings), columns=["u0", "u1"]) # dimensionality reduction Indi…

入門KDB.AI (6) - サンプルコード(Image Search)

はじめに GLB事業部Lakehouse部の阿部です。 本記事では、KDB.AIによる頭部MRI画像との類似画像を検索する方法を紹介します。 KDB.AIは、KX systemsが提供するナレッジベースのベクトルデータベースと検索エンジンです。ベクトルデータベースは膨大な量のテキストデータを分析・処理可能であり、テキストデータをベクトル形式に変換することで、コンピューターは入力された自然言語を理解して対応できます。開発者はリアルタイムのデータを使用してAIアプリケーションのた…

Introduction to KDB.AI (5) - Sample code (LangChain and RAG)

…Press the Sign up button on the homepage. (If you already have an account, please log in and check "Create API Key".) ➁ Enter the email address and password you want to use. ③ Verify your email. (Open the email with the subject "OpenAI - Ve…

入門KDB.AI (5) - サンプルコード(LangChain and RAG)

…om ホームページでSign upボタンを押します。 (アカウントをすでにお持ちの方はLoginしていただいた後、「API Keyの作成」からご確認ください。 ) ➁ 使用するメールアドレスとパスワードを入力します。 ③ メール認証をします。 (「OpenAI - Verify your email」という件名のメールを開いてVerify email addressボタンを押します。 ) ④ OpenAI ホームページに戻ってまたログインした後、自分の個人情報を入力します。 …

【Blog Week】さらば、コンソール作業、、~AWS運用自動化ツール:IAMユーザ作成編~

…の設定、Slack Signing Secretの取得 5. Secrets Managerへの登録 6. 動作確認 おわりに お知らせ 基本設計 IAMユーザ作成ツール 基本設計 本ツールの概要 本ツールは、IAMユーザの作成を、AWSマネジメントコンソースにアクセスせず実現するツールです。 本ツールはSlackから特定のコマンドを実行することで利用できるため、開発者が自らIAMユーザ作成することができます。 本ツールの利用イメージ 本ツールは、Slackから特定のコマンド…

Two Key Factors for Successful Data Management - "Data Mesh and Organizational Transformation"

…ve seen a significant increase in opportunities to provide comprehensive support. In this article, I would like to discuss the architecture of data management based on my previous work experience, focusing on "Data Mesh." ◇History of Data M…

GPT-4Vで構成図を元にAKSクラスタをデプロイするTerraformファイルを生成する

… "SystemAssigned" } } resource "azurerm_lb" "example" { name = "example-lb" location = azurerm_resource_group.example.location resource_group_name = azurerm_resource_group.example.name frontend_ip_configuration { name = "example-frontend" s…

Amazon EKS on AWS Fargate でお手軽 Kubernetes環境

…ssfully assigned default/nginx-7b66446657-8pd8c to fargate-ip-192-168-174-174.ap-northeast-1.compute.internal Normal Pulling 3m24s kubelet Pulling image "nginx:1.25.2" ★ Normal Pulled 3m15s kubelet Successfully pulled image "nginx:1.25.2" i…

AWS Application Discovery Serviceで収集したデータを解析する

AWS

…azon QuickSightといったサービスと連携することで、収集したサーバーの情報を分析することが可能です。これにより、移行計画を考案するうえで必要な既存のサーバーの情報を分析し、計画立案に役立てることができます。 今回はAWS ADSとAmazon Athena / QuickSightとを組み合わせる例を試してみます。 AWS ADSと組み合わせるサービス AWS ADSと他サービスを組み合わせたデータ分析はAWSドキュメントに紹介されています。 Amazon Ath…

Introduction to KDB.AI (1) - Overview

…b+, kdb Insights, and kdb Insights Enterprise. The characteristics of each product are as follows. -kdb+ is the world's fastest time series database and analysis engine. Fastest query speed In-memory calculation engine Great scalability Sup…

入門KDB.AI (1) - 概要編

…b+ 、kdb Insights 、 kdb Insights Enterpriseがあります。 各プロダクトの特徴は以下の通りです。 kdb+は世界最速の時系列データベース及び分析エンジンです。 ➢ 最速のquery速度 ➢インメモリ計算エンジン ➢ 優れたスケーラビリティ ➢ q言語をサポート kdb Insightsは、マルチ言語のためのクラウド対応した時系列データベースと分析エンジンです。 ➢ kdb+にビルトされている ➢ Object storageとRESTをサ…

kubectlのTipsまとめ

…ana.org/assignments/service-names). Non-standard protocols should use prefixed names such as mycompany.com/my-custom-protocol. name <string> The name of this port within the service. This must be a DNS_LABEL. All ports within a ServiceSpec …

汎用的に使えそうなAWS構成 - 第3回 アクセスログの簡単な分析

AWS

… STRING, `sigv` STRING, `ciphersuite` STRING, `authtype` STRING, `endpoint` STRING, `tlsversion` STRING) ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.RegexSerDe' WITH SERDEPROPERTIES ( 'input.regex'='([^ ]*) ([^ ]*) \\[(.*?)\\] ([^ ]*) (…

Actions Runner Controller Deep Dive!- コード解説 後編 -

…ub.com 次に、SIGINT, SIGTERMがPod内で発生した場合にcontextをcancelさせるため、以下のsignal.NotifyContext関数でcontextを作成します。 更に、contextをerrgroup.WithContext関数に渡してあげることで、goroutine用のGroupを作成しています。 AutoScalingListener PodはこのGroupを使用し、後続処理を非同期で並行処理しています。 https://github.…

Actions Runner Controller Deep Dive!- コード解説 前編 -

…rvice unassigns the job if no runner accepts it. Once the runner pod is created, the runner application in the pod uses the JIT configuration token to register itself with the Actions Service. It then establishes another HTTPS long poll con…

AKSの操作方法をAzure OpenAI Serviceに教えてもらおう - az aks copilot の解説

…I option, sign in to https://www.openai.com/, navigate to the API key section in your account dashboard (https://platform.openai.com/signup), follow the instructions to create a new API key, and choose models from https://platform.openai.co…

Actions Runner Controller Deep Dive!- 動作解説編 -

…s": 0, "assigned jobs": 0, "running jobs": 0, "registered runners": 0, "busy runners": 0, "idle runners": 0} 2023-09-05T02:28:58Z INFO service process batched runner scale set job messages. {"messageId": 42, "batchSize": 2} 2023-09-05T02:28…