はじめに データエンジニアをやっておりますTaichiです。 最近Apache Icebergという単語をよく耳にするようになりました。 Icebergの処理エンジンといえば Apache Spark Apache Flink Trino などでしょうか。このラインナップ、構築/運用するのは結構ハードなものが多いと思いませんか？ 例えば、私のプロジェクトではSparkを使った構成でデータ処理を実施していますが、以下のような具体的な課題に直面しました。 Apache Hadoopのクラスタ構築作業や、Spa

こんにちは。ソリューションアーキテクト (以下 SA) の高野です。 　2025 年 4 月 16 日に「 AWS 春の Observability 祭り 2025 〜進化する Amazon CloudWatch 基礎から最新機能まで完全解説〜 」と題したイベントを開催しました。2 年前から半期に 1 回実施させていただいているイベントで今回で 4 回目になります。ご参加いただきました皆様には、改めて御礼申し上げます。今までの開催報告ブログはこちら ( 2023秋 、 2024春 、 2024秋 )。 　

G-gen の杉村です。Google Cloud の Cloud WAN（Cloud Wide Area Network）の構成要素である、 Cross-Site Interconnect を解説します。 概要 Cross-Site Interconnect とは 構成イメージ ユースケース 要件 構成要素 ワイヤー ワイヤーグループ クロスサイトネットワーク ワイヤーグループのトポロジ シングルワイヤー 冗長トポロジ ボックスアンドクロストポロジ ネットワークのトポロジ ハブアンドスポークトポロジ リン

こんにちは。 インフラ・SREチームマネージャーのよしたくです。 はじめに 「技術ブログには何を書いていいかわからない」 技術ブログの運用をしているとこのような声を聞いたり、自身がこのように思ったりしたことがあるのではないでしょうか。 これに対しては持論があって、 「どんなエンジニアでも、アウトプットできる何かを持っている」 というものです。しかし、それを阻害する要因の方が強く出てしまうため前述の気持ちに行き着いてしまうのだと考えています。 本記事では、これまでの経験をベースとして、実際に聞いた意見とそれ

こんにちは。SCSKの坂木です。 さっそくですが、某人気アニメを捩ったタイトルにつられてこのページをクリックしてくれた方へ、本ブログは一切地球の運動を感じられないバチバチの技術ブログとなっております。 ただ、せっかく開いたことですし、このまま最後までお付き合いいただけると嬉しいです。 元々、Patch Manager目的で開いた方は目的どおりの記事となっておりますので、ご安心ください！ 本ブログでは、AWS System Managerのツールである Patch Manager を用いたEC2インスタンス

G-gen の三浦です。当記事では、 Cloud Run Threat Detection を検証した結果を紹介します。 概要 Cloud Run Threat Detection とは 2つの検出機能 Artifact Analysis との違い 注意事項 検証内容 検証 脅威検出機能の有効化 Cloud Run のデプロイ ディレクトリ構成 Dockerfile main.py requirements.txt 疑似攻撃の実行と検出結果の確認 概要 Cloud Run Threat Detection

はじめに 現在ラスベガスで開催されている Google Cloud の旗艦イベント「Google Cloud NEXT'25（以下、Next'25）」に現地参加中の\textcolor{red}{赤髪}の Shanks / kazz / 小堀内 / 岸本 です。 Google Cloud NEXT'25 で発表された 最新情報 を現地からお届けしています。 この記事は、Google Cloud Next '25 で発表されたセッション「Software Logistics: The Future of S

G-gen の道下です。本記事は Google Cloud Next '25 in Las Vegas の 1日目に行われたブレイクアウトセッション「 What’s new with Cloud Storage 」のレポートです。 他の Google Cloud Next '25 の関連記事は Google Cloud Next '25 カテゴリ の記事一覧からご覧いただけます。 セッションの概要 導入 6つの主要なトピック AIとデータレイク Rapid Storage Managed Lustre ス

こんにちは、クラウドエースの松島です。 本記事では、Google Cloud Next '25 及び Google 公式ブログで公開された情報をもとに、セキュリティ関連プロダクトのアップデートについてお届けします。 https://www.youtube.com/live/Md4Fs-Zc3tg?t=6220s https://cloud.google.com/blog/ja/products/identity-security/driving-secure-innovation-with-ai-goog

はじめに JSR 株式会社 （以下、 JSR ） はライフサイエンス事業の研究開発における HPC 環境利用において、 AWS を活用することでオンプレミスデータセンターの CPU とストレージを削減し利用効率を高めるとともに、研究者のインフラ管理負荷を下げ研究効率を向上しました。このブログでは JSR株式会社 JSR・慶應義塾大学 医学化学イノベーションセンター (JKiC) 青戸 良賢 様に JSR 様のチャレンジと AWS 導入効果に関する記事を寄稿いただきました。 JSR のライフサイエンス事業へ

note.mntsq.co.jp

G-gen の佐々木です。当記事では Google Cloud Next '25 で発表された Google Kubernetes Engine（GKE）における最新の生成 AI 関連機能を紹介します。 概要 GKE における AI 推論 ワークロード GKE Inference Quickstart GKE Inference Gateway GKE TPU serving stack 概要 Google Cloud の旗艦イベントである Google Cloud Next '25 にて、GKE で生成

企業のセキュリティと効率向上を支援するAWSでのトラフィック集約術。効果的なネットワーク設計のポイントを詳述。

1. 前書き こんにちは。 前回に引き続き、ホワイトペーパー「Elasticsearchを使った簡易RAGアプリケーションの作成」に 記載した技術的要素を紹介いたします。（*脚注1 1 ） 今回は N-gram 検索です。 前半(Part 1)と後半(Part 2)の2回に分けて紹介します。 前半は N-gram 検索の基本的な考え方について、後半は実践的なサンプルアプリについて紹介します。 なお、今回使用した Elasticsearch のリクエストは、下記の GitHub リポジトリで公開しています。