クラウドエース の技術ブログ
全717件
Eventarc を使用して Dataflow ジョブを管理する
2023/12/20
ブックマーク
はじめに こんにちは、クラウドエース データMLディビジョン所属の直江です。 データMLディビジョンとはクラウドエースのITエンジニアリングを担うシステム開発部の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門としております。 データMLディビジョンでは活動の一環として、毎週Google Cloudの新規リリースを調査
Cloud Run ジョブにオーバーライド機能が追加されました
2023/12/18
ブックマーク
はじめに こんにちは！クラウドエース データML ディビジョン所属の佐塚と申します。 データML ディビジョンとはクラウドエースのITエンジニアリングを担うシステム開発部の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門としております。 データML ディビジョンでは活動の一環として、毎週Google Cloud の新規リリー
Microsoft Sentinel に Google Cloud の監査ログを取り込む
2023/12/18
ブックマーク
はじめに こんにちは！ クラウドエース SRE ディビジョンの小田です。 今回は、Google Cloud と Microsoft Azure のマルチクラウド環境におけるログ監視および、攻撃分析・検出を行うために Microsoft Sentinel へ Google Cloud の監査ログを取り込む設定方法について解説します。 ! 本記事内で利用している Microsoft Sentinel の GCP Pub/Sub Audit Logs コネクタは記事執筆時点 (2023/12) でプレビュー
Google Cloud における Firewall 系サービスの違いまとめ (2023年末版)
2023/12/15
ブックマーク
こんにちは、クラウドエースの阿部です。 この記事は、Google Cloud Champion Innovators Advent Calendar 2023 の15日目です。 最近の Google Cloud って Firewall っぽいサービス多いよね 私が Google Cloud に入門したのは 2017年10月頃ですが、その頃の Google Cloud における Firewall と言えるサービスは VPC ファイアウォールルールと Cloud SQL の承認済みネットワークくらいだったと思います。 その後
Cloud Armor の Managed Protection Plus が従量課金(Pay as you go)で使えるようになりました
2023/12/14
ブックマーク
こんにちは。クラウドエースの阿部です。 本記事では2023年12月11日に公開された Cloud Armor Managed Protection Plus における従量課金(Pay as you go)について紹介します。 概要 Cloud Armor には Managed Protection Plus と呼ばれる、 高度な DDoS 攻撃への適応型保護をはじめとする、追加機能が存在します。 Managed Protection Plus はこれまで年間サブスクリプションのサービスのみが存在していま
Cloud Run のネットワーク構成で考慮した点
2023/12/14
ブックマーク
はじめに こんにちは。クラウドエースで SRE ディビジョンに所属している kazz と申します。 最近、Cloud Run のネットワーク構築に取り組む機会がありましたので、構成を考えるにあたって考慮した点をまとめていきたいと思います。 Cloud Run について Cloud Run は、コンテナを使用して、サーバーレスでアプリケーションを実行できるプロダクトです。 Cloud Run を使用すると、
BigQuery を Pandas のように操作する
2023/12/13
ブックマーク
はじめに こんにちは、クラウドエース Data/ML ディビジョン所属の坂田です。 BigQuery 界隈のみなさん、「BigQuery DataFrames」という Python ライブラリをご存知でしょうか。 BigQuery DataFrames は 2023 年 9 月に登場したライブラリで、BigQuery データを使ってデータ分析を行うことができる、Google 提供のライブラリです。 BigQuery DataFrames は、2 つの機能に分かれています。 Pandas ライク
Google Cloud 認定資格の新しい更新方法「ACE Renewal Lab Exam」を試してみました
2023/12/13
ブックマーク
ご挨拶 こんにちは、クラウドエース株式会社で SRE をしている谷口です。 今回は Associate Cloud Engineer 資格の認定期間を更新するための新しい試験方式 ACE Renewal Lab Exam を受験出来る機会があったので、実際に受験してみました。 今の時点では正式な合格通知は届いていないものの、無事に試験を終えられましたので、受験までの流れや従来の更新方法との違いについて紹介
DDD入門：用語解説・モデリング編
2023/12/13
ブックマーク
はじめに こんにちは、クラウドエース Backend Division 所属の秋庭です。 私は今年新卒で入社したのですが、入った案件では DDD (ドメイン駆動設計)を元に設計・実装が行われていたため DDD について学ぶ必要がありました。 この記事は、私が何も知らない状態から DDD について学び始めた一歩目のアウトプットであり、同様にこれから一歩を踏み出す方の手助けになるものと
R言語の関数を、BigQuery（SQL）の関数に置き換える
2023/12/12
ブックマーク
はじめに クラウドエースの康です。 今回は R 言語について調べながら BigQuery（SQL）の関数に置き換える理由について説明します。また、それぞれの R 言語の関数と BigQuery SQL の関数を比較し、どのように対応しているかを示します。 これにより、二つの言語間の同様の機能と処理方法が理解できます。 R 言語とは データ分析、統計計算、グラフィック作業のために設計
GKEでEnvoy、OPAなどAP以外のプロダクトもトレース計装したいですよね
2023/12/12
ブックマーク
はじめに こんにちは。クラウドエース株式会社で SRE をしている間瀬です。 この記事は OpenTelemetry Advent Calendar 2023 12日目の記事です。 https://qiita.com/advent-calendar/2023/otel マイクロサービスアーキテクチャ等の普及に伴いシステムのアーキテクチャが複雑になるにつれて、自前のアプリケーションだけで実装するのではなく、幾つかのプロダクトを組み合わせて実現するケー
Cloud Logging に集約したいログと扱い方
2023/12/08
ブックマーク
こんにちは、クラウドエース SRE ディビジョン所属の茜です。 皆さんは、日々の運用においてどのようなログを活用していますか？ 運用の現場では、システムの健全性、セキュリティ、パフォーマンスのモニタリングに不可欠な多種多様なログが生成されます。これらのログを効率的かつ効果的に管理し活用することが、システム運用の成功には欠かせません。 本記事で
Google Cloud 主催の TAP Meetupへ参加してみた！
2023/12/08
ブックマーク
こんにちは！SRE ディビジョンの小林由暁です。 今回は、先日 Google Cloud 主催の TAP Meetup へ参加したため、その時の様子をご紹介します。 会場となった Google 渋谷オフィス 35F のドロイドくん TAP Meetupとは 内容に入る前に、簡単に TAP についてご紹介します。 TAP は、Google Cloud による内製化支援の一種です。具体的には、数日間でアジャイル開発型ワークショップを実施し、
Bigtable: リクエストの優先度を構成する
2023/12/07
ブックマーク
はじめに こんにちは、クラウドエース Data/ML ディビジョン所属の谷口です。 クラウドエースの IT エンジニアリングを担うシステム開発部の中で、 特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門とするのがデータ ML ディビジョンです。 データ ML ディビジョンでは活動の一環として、毎週 Google Cloud の新規リリースを調査
Cloud Storageで管理フォルダを使ったアクセス制御
2023/12/07
ブックマーク
はじめに こんにちは、クラウドエース データ ML ディビジョン所属のヒッキーです。 クラウドエースの IT エンジニアリングを担うシステム開発部の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門とするのがデータ ML ディビジョンです。 データML ディビジョンでは活動の一環として、毎週 Google Cloud (旧 Google Cloud Pla