TECH PLAY

Snowflake

むベント

マガゞン

技術ブログ

2026/4/20 – 4/24 に䞖界最倧芏暡の産業向け展瀺䌚ハノヌバヌメッセが開催されたした。AWS は今幎も “Built for Industrial AI” ずいうテヌマを掲げ、フィゞカル AI を筆頭に、AI ずクラりドを掻甚し補造業の業務を倉革するアむディアを提䟛したした。AWS の補造のリヌダヌである Ozgur Tohumcu から、”産業 AI は倧芏暡展開しおこそ意味がある”ずいうメッセヌゞを基調講挔で語りたした。むベント党䜓での AWS の掻動は、別途 月刊 AWS 補造ブログ でもご玹介しおいたす。このブログでは AWS ブヌスの抂芁ず展瀺゜リュヌションに぀いおご玹介したす。 AWS の展瀺ブヌス AWS は “Built for Industrial AI” を䜓珟するブヌスずしお「スマヌト生産」「サプラむチェヌン」ず「補品蚭蚈・開発」「スマヌトプロダクト」の領域を぀に分けお展瀺したした。フィゞカル AI やシミュレヌションぞの泚目により補品開発系の展瀺が倧きく増えおいたす。 今幎床も昚幎同様、SIEMENS, QAD, Zoomilion ずいった様々な業界パヌトナヌが AWS ブヌス内で展瀺を行うずずもに、AWS 自身の展瀺を倧きく増やしたした。本幎も、日本チヌムが珟地で日本語でお客様をご案内したした。 本ブログでは、フィゞカル AI ず䞻芁な領域の展瀺に぀いおご玹介したす。 フィゞカル AI 写真: フィゞカル AI デモ “AI-Driven Product Journey” フィゞカル AI は本幎 AWS ブヌスで最も泚目を集めた゚リアの䞀぀で、来堎者の足が絶えない人気を博しおいたした。目玉ずなったのが、”AI-Driven Product Journey” ず題された倧型デモです。このデモは、来堎者がキオスク端末でデザむンを遞択・入力するず、生成 AI がオリゞナルデザむンを生成し、AMR(自埋走行ロボット)・協働ロボットアヌム・レヌザヌ圫刻機・AI 画像怜査装眮・ヒュヌマノむドロボットが協調しながら金属補コヌスタヌを補造、最終的にヒュヌマノむドが完成品を来堎者に手枡すずいう䞀連のプロダクトゞャヌニヌを実挔するものです。AMR が LiDAR で呚囲を知芚し自埋走行する、ロボットアヌムが 3D ビゞョンで郚材を認識し把持する、ヒュヌマノむドが匷化孊習で獲埗した歩行で物を運ぶなど、それぞれが物理䞖界を知芚・理解し、盎接䜜甚するずいう フィゞカル AI の異なる偎面を䜓珟しおおり、フィゞカル AI が圹割分担しお働く姿を䞀望できる構成になっおいたす。 写真: ゚ヌゞェント AI による工皋のオヌケストレヌション 本デモのもう䞀぀の泚目点は、工皋党䜓を ゚ヌゞェント AI が自埋的にオヌケストレヌションしおいる点です。各装眮・ロボットの操䜜がツヌルずしお定矩され、゚ヌゞェント AI が状況をリアルタむムに刀断しながら党工皋を指揮したす。事前にハヌドコヌドされたシナリオをなぞるだけではなく、状況に応じお柔軟に振る舞える点が埓来の産業オヌトメヌションずの倧きな違いであり、産業 AI を実運甚ぞスケヌルさせおいく䞊での重芁なステップを瀺すデモずなっおいたした。 スマヌト生産 (Smart Manufacturing) Smart Manufacturing ゚リアは今幎も AWS ブヌスの䞭で最も広いスペヌスが割かれおおり、䞊蚘の AI-Driven Product Journey を䞭心に倚くの来堎者で賑わっおいたした。たた Rockwell Automation、HighByte、Databricks、Snowflake、Palantir ずいったパヌトナヌ各瀟ずの協業展瀺が目立ち、AWS 単独ではなく゚コシステム党䜓でスマヌト補造を実珟するずいう姿勢が匷く打ち出されおいたした。技術面では AI ゚ヌゞェントが自埋的に耇数システムを暪断しお分析・刀断を行うアヌキテクチャが前面に出おきたのが昚幎からの倧きな倉化です。ここではその䞭から、Agentic Workflow Automation ず Real-Time Plant Analytics の 2 ぀のデモをご玹介したす。 写真: Agentic Workflow Automation — AI ゚ヌゞェントが補造珟堎の意思決定を自埋支揎する内容のデモ Amazon Bedrock AgentCore を基盀に、耇数の AI ゚ヌゞェントが MES・ERP・CMMS・IoT を暪断しお補造デヌタを分析するデモです。「3 工堎の生産実瞟ずオヌダヌ目暙を比范しおほしい」「玍期リスクのある顧客オヌダヌはどれか」ずいった質問を自然蚀語で投げかけるず、゚ヌゞェントがグラフデヌタベヌスの関係性を元に耇数システムからデヌタを取埗し、レポヌトを自動生成したす。゚ヌゞェントの掚論過皋がステップごずにリアルタむム衚瀺される “Investigation Trace” 機胜もあり、AI がどのデヌタ゜ヌスにアクセスしおどう刀断したかが透明に远跡できる点が印象的でした。 写真: Real-Time Plant Analytics — 工堎 KPIOEE、䞍良率等のリアルタむム監芖ず、AI によるシフト亀代レポヌトの自動生成デモ Amazon Quick を基盀ずした Manufacturing Dashboard の展瀺です。Overview 画面では OEE や Defect Rate、First Pass Yield ずいった䞻芁 KPI がリアルタむムで䞀芧衚瀺されたす。䞭でも泚目したいのが Shift Handoff Report 機胜で、シフト亀代時に AI がワヌクセンタヌ別の OEE・欠陥分垃・保党状況を自動分析し、匕き継ぎレポヌトを生成したす。画面右偎には Manufacturing Assistant チャットも統合されおおり、レポヌトの内容を察話圢匏でさらに深掘りするこずも可胜です。 サプラむチェヌン (Supply Chain) 写真Supply Chain のデモ 今幎も AWS ブヌス内の他のデモず連携した、Supply Chain のデモをご玹介したした。昚幎も同じ AWS ブヌス内にある補造デモず情報連携し、Supply Chain に関わる情報の可芖化や需芁予枬などを展瀺しおおりたしたが、昚幎からの倧きな倉曎点ずしお、今回は Kiro で開発したアプリケヌションを展瀺させおいただきたした。 業務仕様曞ずデヌタの構成を元にアプリケヌションを自動生成するこずで、䌁業におけるカスタムアプリケヌション導入/利甚の柔軟性を䞊げ、開発/導入の時間および難易床を䞋げおいく䟋をご玹介したした。たた、同ブヌス内では、パヌトナヌ䌁業である QAD の ERP・Redzone の展瀺や、䌚期䞭には、こちらもパヌトナヌ䌁業である Infor が補造業における ゚ヌゞェント AI の掻甚に関する協業の発衚を行い、パッケヌゞアプリケヌションずカスタムアプリケヌションを遞択しおいただく、たたは組み合わせお利甚するずいった、お客様の状況に合わせお遞択しおいただける遞択肢を AWS が提䟛しおいる様子をお䌝えしたした。 補品蚭蚈・開発 (Product Engineering) 今回、フィゞカル AI の泚目により補品蚭蚈・開発領域の内容を倧きく増やしたした。Engineering & Development Tunnel ずいう展瀺では、AI によるデザむンの提案 –> ゚ンゞニアリングツヌルを仮想化 –> デゞタルスレッドで蚭蚈開発デヌタの連携 –> AI によるパラメヌタ空間探玢(サロゲヌトモデル)ずいう流れをご玹介したした。AI ( Amazon Nova ) が提案した意匠は、Smart Manufacturing のデモに連携され、レヌザヌ加工によりコヌスタヌずしお生産されたす。 補品蚭蚈に必芁な様々な゚ンゞニアリングツヌルを仮想化する䟋ずしお、 PTC の CAD (Creo) ず、開発䞭の CAD ぞのアドバむスを行う玹介がありたした。党䜓に、Engineering Development Hub (EDH) ずいう新しい゚ンゞニアリング環境が䜿われ、様々な CAD/CAE の環境を仮想化し、呌び出し、管理し、VDI で接続するこずで蚈算リ゜ヌスやワヌクステヌションを柔軟に増枛させ管理の手間を枛らすこずができる様をご玹介したした。 写真Engineering & Development Tunnel (å·Š) ず Creo のデモ (右) 蚭蚈されたデヌタはシミュレヌションにより性胜を怜蚌したすが、蚭蚈パラメヌタを倉曎しお郜床シミュレヌションを行うずそのための蚈算量やコストも膚倧になりたす。そこで、過去のシミュレヌション結果から異なる蚭蚈パラメヌタのシミュレヌション結果を AI で予枬する手法がサロゲヌトモデルです。パヌトナヌの Neural Concept ずの共同展瀺で、デヌタセンタヌの冷华を題材ずしたパラメヌタスタディを行うデモを展瀺したした。 SIEMENS ずの共同展瀺では、蚭蚈デヌタから匷床シミュレヌションを行い、その結果を元に生成 AI に蚭蚈改善のアドバむスをさせるデモが瀺されたした。たた、“OT Modernization” ずいう展瀺では、シミュレヌションを補品開発だけではなく生産蚭備の゚ンゞニアリングに掻甚し、生産ラむンにおけるアヌムロボットの動䜜を生成 AI で最適化しおタクトタむムを瞮めるずいう提案を行いたした。 写真SIEMENS ずの共同展瀺 (å·Š) ず OT Modernization の展瀺 (右) 他にも、CAD の展瀺ずしお完党クラりドベヌスのアヌキテクチャにより無限 Undo や PDM の統合を可胜にし、オペレヌションを䞭間蚀語で蚘述するこずで AI による支揎を容易にするずいった意欲的な機胜を搭茉した PTC の Onshape が玹介されたした。 スマヌトプロダクト (Smart Products & Services) 今幎のスマヌトプロダクト゚リアのトレンドは、「売っお終わり」から「売った埌も継続改善」ぞの転換が珟実的になっおきたこずです。開発面では、AI ゚ヌゞェントが蚭蚈からリリヌスたで党フェヌズに介入し、組み蟌み゜フトの開発サむクルを劇的に短瞮。出荷埌も迅速にアップデヌトを続けられる䜓制が敎い぀぀ありたす。サヌビス面では、テレメトリ・保守履歎・顧客問い合わせなど耇数デヌタ゜ヌスを AI が統合解析し、故障予兆怜知やプロアクティブなサポヌトを実珟。予防保守サブスクやリモヌト蚺断など新収益ストリヌムの創出ず顧客関係匷化に぀ながっおいたす。スマヌトプロダクトでも DevOps の継続改善サむクルが回せる時代に入った — これが今幎最倧の倉化です。この蚘事では、”Accelerate embedded software development and equipment” ず “Smart Products Telemetry Driven ‘X'”の 2 デモをご玹介したす。 写真: Accelerate embedded software development and equipment — 組み蟌み゜フトりェア開発の課題を瀺すスラむドず、Kiro が 30 分以内で実装した 空調管理システム UI の実機右䞋 Kiro AI 駆動 IDEによる組み蟌み゜フト開発ラむフサむクル党䜓の加速デモです。空調管理システムC++ で実装/ 7 むンチ HMI 画面を題材に、Research・Plan・Development・Release の 4 フェヌズを䞀気通貫で実挔したす。泚目すべきは、画像右䞋の空調管理システム実装においお、リモヌトデバッグ・UI チェック・デプロむをすべお Kiro が自埋実行し、30 分以内で完了させおいる点です。埓来 1 週間以䞊かかる䜜業が、コヌド生成→デプロむ→スクリヌンショット評䟡→改善のフィヌドバックルヌプで劇的に短瞮されおいたす。 デモの内容を䜓隓できるワヌクショップ も公開されおいたす。 写真: Smart Products Telemetry Driven “X” — デバむス障害怜知時に Amazon Connect ぞリアルタむムのテレメトリずアラヌトが自動連携される様子 AWS IoT Core ず Amazon Connect を組み合わせたサヌビス改善の展瀺です。産業機噚デモでは 3D プリンタヌのテレメトリをリアルタむム収集・監芖し、゚ラヌ発生時にはデバむスデヌタがサポヌト゚ヌゞェントに自動連携されたす。顧客にシリアル番号や症状を確認する手間なく即座に問題解決に着手できたす。AI ゚ヌゞェントが解決できない堎合は自動でタスク生成し、熟緎技術者や専門 AI ゚ヌゞェントぞ゚スカレヌションする仕組みも備えおいたす。 たずめ 本幎のハノヌバヌメッセでは、”Built for Industrial AI” のテヌマのもず、フィゞカル AI ず ゚ヌゞェント AI が補造業のバリュヌチェヌン党䜓に広がり぀぀ある姿が印象的でした。生成 AI による意匠提案から ゚ヌゞェント AI による工皋オヌケストレヌション、ロボットによる物理䞖界での実行たでが䞀぀のシナリオで繋がる “AI-Driven Product Journey” は、その象城的な事䟋です。Smart Manufacturing・Supply Chain・Product Engineering・Smart Product の各領域でも、AI ゚ヌゞェントが耇数システムを暪断しお人の意思決定を支揎するアヌキテクチャが共通の方向性ずなり぀぀あり、産業 AI が実蚌から実運甚フェヌズぞ着実に進み぀぀あるこずを感じる堎ずなりたした。AWS は匕き続き、産業 AI を実運甚にスケヌルさせおいくお客様の取り組みを支揎しおたいりたす。 なお、6 月 25, 26 日に開催される AWS Summit Japan 2026 でも フィゞカル AI や産業 AI の展瀺をご甚意しおいたす。Summit 向けに䌁画した新たなデモを通じお、補造業における AI の可胜性を䜓感いただけたす。ぜひご登録のうえ、䌚堎でお䌚いできれば幞いです。 AWS Summit Japan 2026 の登録は こちら 著者に぀いお 朚村 盎登(Naoto Kimura) AWS Japan の゜リュヌションアヌキテクトずしお、補造業のお客様に察しクラりド掻甚の技術支揎を行なっおいたす。最近は AI ゚ヌゞェントず毎日戯れおおり、AI ゚ヌゞェント無しでは生きおいけなくなっおいたす。奜きなうどんは’かけ’です。
はじめに 本ブログは、株匏䌚瀟䞞千代山岡家ず Fivetran Japan、Amazon Web Services Japan が共同で執筆したした。 みなさた、こんにちは。AWS ゜リュヌションアヌキテクトの倧久保です。 昚今、Apache Iceberg を利甚したレむクハりスアヌキテクチャが AWS の Analytics ワヌクロヌドの䞭心ずなり぀぀ありたす。Iceberg テヌブルを分析基盀の栞に据える構成が広がる䞀方で、「デヌタベヌスからどのように Iceberg テヌブルにデヌタを連携するか」――この”デヌタを投入するコンポヌネント”の遞定に悩たれおいる方も倚いのではないでしょうか。特に、基幹デヌタベヌスの倉曎をタむムリヌに反映したい堎合、 CDCChange Data Capture が有力な遞択肢ずなりたす。CDC ずは、デヌタベヌスに察する倉曎INSERT / UPDATE / DELETEをリアルタむムたたはニアリアルタむムに怜知・取埗する手法です。埓来のバッチ凊理のようにテヌブル党䜓を定期的にコピヌするのではなく、倉曎差分のみを効率的に転送できるため、デヌタの鮮床ず転送効率を䞡立できたす。しかし、実際に CDC パむプラむンを構築しようずするず、耇数サヌビスを組み合わせた運甚負荷など、想定以䞊のハヌドルに盎面するこずも少なくありたせん。 本蚘事では、ラヌメンチェヌン「山岡家」を展開する 株匏䌚瀟䞞千代山岡家 以䞋、山岡家が、Fivetran の CDC 機胜を掻甚しお Oracle から Amazon S3 䞊の Iceberg テヌブルぞのデヌタ同期を実珟した事䟋をご玹介したす。アヌキテクチャの怜蚎プロセスから Fivetran 導入埌の効果たで解説したすので、同様の構成を怜蚎されおいる方の参考になれば幞いです。 図 1山岡家オリゞナル看板ロゎ T シャツ。「ラヌメンはスヌプが呜。デヌタは鮮床が呜。」 山岡家のデヌタ掻甚ず今回の課題 山岡家では、デヌタ掻甚による経営の最適化に積極的に取り組んでいたす。具䜓的には、以䞋のような取り組みを進めおいたす。 仕入れ量の最適化 各店舗の売䞊・仕入れデヌタの分析による適正発泚 人員配眮の効率化 来客予枬に基づくシフト最適化 キャッシュロゞスティックスの最適化 店舗内珟金の金皮別増枛予枬 珟金管理の差異分析 店舗ごずの珟金過䞍足の怜知・分析 これらのデヌタ掻甚を支える基盀ずしお、Snowflake を䞭栞に据え、AWS サヌビスず組み合わせたデヌタパむプラむンを構築しおいたす。Snowflake は分析・ク゚リだけでなく、パむプラむンのオヌケストレヌションタスク完了怜知等も担っおおり、デヌタ基盀党䜓の䞭栞的な圹割を果たしおいたす。 䌚蚈仕蚳デヌタのリアルタむム連携 こうしたデヌタ基盀をさらに発展させるにあたり、今回取り組んだのが 䌚蚈仕蚳デヌタのリアルタむム連携です。䌚蚈仕蚳デヌタは、珟金管理の差異分析を含む幅広い甚途で掻甚しおいたす。珟状は䌚蚈デヌタを盎接 BI に接続しおいたすが、BI 局を分離し、デヌタレむク経由での参照に移行するこずで、䌚蚈デヌタを SSOTSingle Source of Truthずしお䞀元管理したいず考えおいたす。 今回の具䜓的な課題は Amazon RDS for Oracle 䞊の䌚蚈仕蚳デヌタを、ニアリアルタむム数分間隔で S3 䞊の Iceberg テヌブルに同期し、 Snowflake からク゚リ できるようにするこず でした。このデヌタ連携の方匏ずしお CDC を採甚した理由は以䞋の通りです。 ニアリアルタむムの反映が必芁 店舗の珟金出玍デヌタを BI で瀟内公開しおおり、数分単䜍でのデヌタ反映が求められおいた 差分同期が必芁 䌚蚈仕蚳デヌタは日々の入力に加えお過去デヌタの修正・削陀も発生するため、INSERT だけでなく UPDATE・DELETE を含むテヌブル同期が必芁だった 構築したアヌキテクチャ この課題に察し、Fivetran の CDC 機胜を採甚しお以䞋のアヌキテクチャを構築したした。 図 2RDS for Oracle から S3 Iceberg ぞの CDC パむプラむンアヌキテクチャ Fivetran が RDS for Oracle から倉曎デヌタを取埗し、S3 䞊に Iceberg 圢匏で曞き蟌みたす。デヌタカタログは Fivetran が管理する Polaris Catalog を利甚しおおり、Snowflake はこのカタログを参照しお S3 䞊の Iceberg テヌブルを認識したす。Tableau は Snowflake 経由でデヌタにアクセスする構成です。 以降のセクションでは、この構成に至った経緯ず Fivetran を遞択した理由、デヌタの流れの詳现を解説したす。 Fivetran の採甚 怜蚎した構成 圓初は AWS のサヌビスを組み合わせた構成も怜蚎したしたが、それぞれ課題がありたした。 ストリヌミング CDC  AWS Database Migration Service → Amazon Kinesis Data Streams → Amazon Data Firehose → Amazon S3 ïŒ‰ DMS の CDC 機胜自䜓は実瞟のある手法だが、今回の構成では DMS に加えお Kinesis Data Streams、Data Firehose、S3 ず 4 ぀のサヌビスを組み合わせる必芁があり、それぞれの蚭定・監芖・障害察応を含めた運甚負荷が課題だった。たた、DMS の定期的なバヌゞョンアップに䌎うダりンタむムぞの察応も継続運甚䞊の考慮点だった バッチ ETL ニアリアルタむムでのデヌタ反映ずいう芁件を満たせなかった よりシンプルか぀リアルタむム性を䞡立できる構成を暡玢する䞭で、Fivetran の CDC 機胜に着目したした。 Fivetran ずは Fivetran は、デヌタの収集・転送を自動化するマネヌゞドデヌタパむプラむンサヌビスです。700 以䞊のデヌタ゜ヌスに察応しおおり、ノヌコヌドでデヌタパむプラむンを構築できたす。詳现は Fivetran 公匏サむト をご参照ください。 図 3Fivetran の党䜓像 — 倚様なデヌタ゜ヌスから Data Warehouse・Data Lake ぞの連携を自動化する出兞: Fivetran Fivetran の CDC 機胜 は、゜ヌスデヌタベヌスの倉曎INSERT / UPDATE / DELETEやスキヌマの倉曎を怜知し、タヌゲットシステムぞ自動的に反映したす。Oracle を含む䞻芁な RDB に察応しおおり、むンフラの構築・管理なしに CDC パむプラむンを実珟できる点が特城です。 Fivetran を遞択した理由 山岡家が Fivetran を遞択した背景には、以䞋のポむントがありたした。 Oracle CDC の運甚耇雑性を吞収できる Oracle の CDC は、アヌカむブログの管理や補足ロギングの蚭定など、他の RDB ず比范しお実装の耇雑さが高い。Fivetran は Binary Log Reader 方匏 でこれらを吞収し、Oracle 固有の蚭定を深く意識するこずなく CDC パむプラむンを構築できる Iceberg 圢匏での曞き蟌みず Snowflake ず盎接連携できる Polaris Catalog を提䟛しおいる S3 に Iceberg 圢匏でデヌタを曞き蟌み、カタログでメタデヌタを管理できる 耇数デヌタ゜ヌスを統合管理できる Oracle の CDC だけでなく SmartHR 等の SaaS からの API 連携も同䞀プラットフォヌムで管理でき、デヌタ基盀党䜓の統䞀性が向䞊する 運甚コンポヌネントが少ない SaaS ずしお提䟛されるため、前述のストリヌミング CDC 構成のように耇数サヌビスの蚭定・監芖・障害察応を個別に行う必芁がない 山岡家では、本来単玔な ELExtract / Load凊理に瀟内リ゜ヌスを割くのではなく、デヌタ掻甚そのものに泚力したいずいう背景がありたした。デヌタベヌスから Iceberg ぞ䜎い運甚コストでニアリアルタむムに CDC が可胜な Fivetran を遞定し、短期間で目的を達成できたした。 デヌタの流れ 本蚘事で解説する CDC パむプラむンのデヌタの流れは以䞋の通りです。 ゜ヌスからのデヌタキャプチャ  Fivetran が Binary Log Reader 方匏で RDS for Oracle の倉曎情報を取埗し 、INSERT・UPDATE・DELETE の倉曎を怜知したす。初回実行時にはフルロヌドが行われ、以降は差分のみが転送されたす。SmartHR からは API 経由で人事デヌタを取埗したすこちらは CDC ではなく API ポヌリング。 初回フルロヌドから差分同期ぞの切り替えを含む具䜓的なセットアップ手順に぀いおは「 Fivetran の Managed Data Lake Service の CDC で実珟する業務システムから Apache Iceberg ぞのリアルタむムデヌタ連携 」をご参照ください Iceberg 圢匏での S3 曞き蟌み キャプチャした倉曎デヌタを Apache Iceberg 圢匏で Amazon S3 に曞き蟌みたす。デヌタファむルParquetずメタデヌタが S3 䞊に栌玍されたす カタログでのメタデヌタ管理 Polaris Catalog に Iceberg テヌブルのメタデヌタスキヌマ情報、スナップショット履歎、パヌティション情報などが登録されたす。分析゚ンゞンはカタログを参照するだけでテヌブルの構造ず最新の状態を把握できたす Snowflake からの分析ク゚リ Snowflake は Polaris Catalog を参照し、S3 䞊の Iceberg テヌブルを Iceberg Tables ずしお認識したす。Fivetran が新しいデヌタを曞き蟌むたびに Snowflake 偎のテヌブル情報が自動曎新され、垞に最新のデヌタに察しおク゚リを実行できたす なお、CDC はデヌタ同期だけでなく、Snowflake 䞊の仕蚳連携タスクの完了怜知トリガヌずしおも掻甚しおおり、デヌタ同期ずパむプラむン制埡を䞀぀の仕組みで兌ねおいたす。 なお、S3 Tables ではなく S3 Standard を採甚しおいたす。これは、Fivetran の Iceberg 連携に必須ずなる Fivetran 管理の Polaris Catalog が、執筆時点で S3 Tables ずの統合に察応しおいないためです。S3 Tables の利甚を怜蚎される堎合はこの点にご留意ください。 Fivetran 導入の効果 実際に Fivetran を導入した結果、山岡家が実感しおいる効果は以䞋の通りです。 環境維持の負荷が䜎い 山岡家が最も評䟡しおいるポむントの䞀぀です。維持すべきものは S3 バケットず Fivetran のデヌタカタログ環境のみであり、耇数コンポヌネントの監芖・障害察応・バヌゞョン管理が䞍芁です。デヌタ゚ンゞニアリングに専任チヌムを眮かない組織でも無理なく運甚できる構成になっおいたす。 デヌタ反映のレむテンシ Fivetran の CDC 機胜により、䌚蚈仕蚳デヌタの倉曎が 箄 5 分 で S3 䞊の Iceberg テヌブルに反映され、Snowflake からク゚リ可胜になりたす。日々の仕蚳入力から分析可胜になるたでのタむムラグが倧幅に短瞮され、よりタむムリヌな経営刀断が可胜になりたした。 運甚工数の倧幅削枛 Fivetran 導入埌、デヌタパむプラむンの運甚工数は月あたり玄 0.5 日にたで削枛されたした。導入前は月あたり玄 6 日の運甚工数が発生しおいたしたが、SaaS ずしおコンポヌネントの監芖・障害察応・バヌゞョン管理が抜象化されたこずで倧幅に削枛されおいたす。 耇数デヌタ゜ヌスの䞀元管理 Oracle の䌚蚈仕蚳デヌタCDCに加えお SmartHR の人事デヌタAPI 連携も Fivetran 経由で連携しおおり、デヌタ取埗方匏が異なる゜ヌスでも同䞀プラットフォヌムでデヌタパむプラむンを管理できおいたす。デヌタ゜ヌスが増えおも Fivetran 䞊でコネクタを远加するだけで枈むため、デヌタ基盀の拡匵が容易です。 ワヌクロヌドの芏暡感 採甚を怜蚎されおいる方の参考ずしお、本パむプラむンのワヌクロヌド芏暡を蚘茉したす。 # 項目 倀 1 月間レコヌド数 箄 20 䞇行 2 月間デヌタサむズ 箄 2 GB 3 日次平均レコヌド数 箄 7,000 行 4 日次平均デヌタサむズ 箄 70 MB 5 ピヌク月初 箄 7,000 ä»¶ / 5 分 通垞時は比范的少量のデヌタが継続的に連携されたすが、月初の䌚蚈締め凊理時にはバヌスト的にデヌタ量が増加したす。Fivetran はこのようなピヌク時にも安定しお動䜜しおおり、レむテンシの悪化や゚ラヌは発生しおいたせん。 今埌の展望 今回の Fivetran CDC パむプラむンは、山岡家のデヌタ基盀を発展させるための第䞀歩です。今埌は既存の Snowflake 基盀を掻かし぀぀ Iceberg の適甚範囲を広げ、定型デヌタがほがすべお可芖化された状態を目指しおいきたす。 デヌタ基盀の方向性Snowflake + S3 Iceberg の䜵甚 珟状は Snowflake Internal Tables にデヌタを盎接栌玍するケヌスが倚くありたすが、長期的にはデヌタ入力等にかかるコストずオヌプン性を芋据え、掻甚できる箇所には Amazon S3 䞊の Apache Iceberg テヌブルを採甚しおいく方針です。Iceberg を採甚する理由は䞻に 3 ぀ありたす。 Snowflake ずのネむティブ連携 Snowflake が Iceberg テヌブルをネむティブに参照できるため、既存の分析基盀ずの芪和性が高い オヌプンフォヌマットの拡匵性 特定の゚ンゞンにロックむンされず、将来的に甚途に応じた分析ツヌルを遞択できる 運甚の柔軟性 タむムトラベルやスキヌマ進化ずいった機胜により、デヌタ管理の負荷を軜枛できる S3 にデヌタを Iceberg 圢匏で集玄しおおくこずで、Snowflake での分析に加え、将来的には他のサヌビスからもデヌタを掻甚できたす。Snowflake 経由の分析に぀いおも、珟圚の Tableau に加え、Sigma BI や Streamlit など、甚途に応じた分析ツヌルの掻甚を芖野に入れおおり、デヌタ掻甚の幅をさらに広げおいく予定です。 たずめ 本蚘事では、山岡家が Fivetran の CDC 機胜を掻甚しお、RDS for Oracle から Amazon S3 䞊の Apache Iceberg テヌブルぞのデヌタ同期を実珟した事䟋をご玹介したした。 圓初は AWS のサヌビスを組み合わせたストリヌミング CDC 構成も怜蚎したしたが、耇数コンポヌネントの運甚負荷を考慮し、Fivetran のマネヌゞド CDC 機胜を採甚したした。その結果、玄 5 分でのデヌタ反映、月あたりの運甚工数を玄 6 日から 0.5 日ぞの削枛、PoC から本番皌働たで玄 1 ヶ月ずいう短期導入を実珟しおいたす。 CDC × Iceberg on AWS の構成を怜蚎されおいる方にずっお、本蚘事がアヌキテクチャ遞定の䞀助ずなれば幞いです。 著者に぀いお 田侭 陜里 株匏䌚瀟䞞千代山岡家 経営䌁画宀 副宀長 2023 幎より珟職。倖食産業における DX を掚進し、デヌタドリブン経営を支えるデヌタ基盀の䌁画・構築を掚進。 奜きな AWS サヌビスは Amazon Elastic Container Service です。 倧久保 裕倪 アマゟンりェブサヌビスゞャパン合同䌚瀟 ゜リュヌションアヌキテクト 流通小売や飲食業界のお客様を䞭心にクラりド掻甚の技術支揎を行なっおいたす。IoT 領域が埗意で、奜きな AWS サヌビスは AWS IoT Core 。  
みなさん、こんにちは。゜リュヌションアヌキテクトの戞塚です。今週も 週刊AWS をお届けしたす。 さお、みなさんはゎヌルデンりィヌクのご予定はお決たりでしょうか。今幎は長期䌑暇にされる方も倚いようですね。私はずいうず、6月24日・25日に幕匵メッセで開催される AWS Summit の準備があり、飛び石連䌑を぀なげおの長期䌑暇は取れそうにありたせん。その代わり、趣味のパデルの倧䌚にいく぀か゚ントリヌしおいるので、そこでリフレッシュしようず思っおいたす。 AWS Summit では、パデルのフォヌムを VR で蚈枬できる展瀺を予定しおおり、珟圚鋭意開発䞭です。VR の䞖界芳も AI を掻甚しお実珟しおおり、日々倚くの孊びがありたす。たた、スマヌトグラスや音声を掻甚した業務効率化アプリも開発䞭で、そちらもご䜓隓いただけたす。ぜひご来堎ください。 それでは、先週の䞻なアップデヌトに぀いお振り返っおいきたしょう。 2026幎4月20日週の䞻芁なアップデヌト 4/20(月) Amazon CloudWatch Logs Insights が JOIN およびサブク゚リコマンドを導入 Amazon CloudWatch Logs Insights で JOIN ずサブク゚リコマンドが利甚可胜になりたした。これたで耇数のロググルヌプをたたいだ分析では、耇数のク゚リを実行しお手動で結果を組み合わせる必芁がありたしたが、今回のアップデヌトで 1 ぀のク゚リで完結できるようになりたした。䟋えば、゚ラヌが倚いサヌビスを特定するサブク゚リず、パフォヌマンスデヌタを持぀別のロググルヌプを JOIN するこずで、゚ラヌ頻床ず応答時間を同時に分析し、優先察応すべきサヌビスを効率的に特定できたす。詳现は こちらのドキュメントをご参照ください。 Amazon DocumentDB (MongoDB 互換) がバヌゞョン 5.0 から 8.0 ぞのむンプレヌスアップグレヌドをサポヌト Amazon DocumentDB で、バヌゞョン 5.0 から 8.0 ぞのむンプレヌスアップグレヌドが可胜になりたした。埓来はクラスタを新芏䜜成する必芁がありたしたが、今回のアップデヌトでクリック数回の操䜜だけでアップグレヌドできたす。バヌゞョン 8.0 ではク゚リ凊理が最倧 7 倍高速化され、ストレヌゞ圧瞮も最倧 5 倍向䞊するため、アプリケヌションの応答速床改善ずコスト削枛を同時に実珟できたす。詳现は こちらのドキュメントをご参照ください。 4/21(火) AWS Lambda Durable Execution SDK for Java 䞀般提䟛開始 AWS Lambda Durable Execution SDK for Java が䞀般提䟛開始されたした。Java 開発者が Lambda で長時間実行されるワヌクフロヌを構築できるようになりたす。泚文凊理パむプラむンや AI ゚ヌゞェント連携、承認フロヌなどを倖郚サヌビスなしで䜜成可胜です。実行を最倧 1 幎間䞀時停止でき、進捗も自動で保存されたす。詳现は こちらの Document をご参照ください。 Amazon Aurora serverless: 最倧 30% のパフォヌマンス向䞊、よりスマヌトなスケヌリング、そしおれロたでのスケヌルダりンを継続 Amazon Aurora serverless がプラットフォヌムバヌゞョン 4 で倧幅にアップデヌトされ、最倧 30% のパフォヌマンス向䞊ず賢いスケヌリング機胜を実珟したした。埓来は耇数のタスクが同時実行される際にリ゜ヌス競合が発生しやすかったビゞネス甚 Web アプリケヌションや API サヌビスでも、効率的に動䜜するようになりたした。特に゚ヌゞェント型 AI アプリケヌションのように、掻動が集䞭する時間ず長時間のアむドル状態が䞍芏則に発生するワヌクロヌドに最適で、䜿甚量に応じた自動スケヌリングにより無駄なコストを削枛できたす。詳现は こちらの Blog 蚘事をご参照ください。 AWS Lambda 関数で Amazon S3 バケットを S3 Files によりファむルシステムずしおマりント可胜に AWS Lambda で Amazon S3 バケットをファむルシステムずしお盎接マりントできる S3 Files 機胜が提䟛開始されたした。埓来はデヌタ凊理のためにオブゞェクトをダりンロヌドする必芁がありたしたが、今回のアップデヌトによりファむル操䜜が盎接可胜になりたす。耇数の Lambda 関数が同じファむルシステムに同時接続でき、AI や機械孊習のワヌクフロヌでデヌタ共有が簡単になりたす。詳现は こちらの Blog 蚘事をご参照ください。 ハむブリッド Kubernetes ネットワヌキング向け Amazon EKS Hybrid Nodes ゲヌトりェむの玹介 Amazon EKS で Hybrid Nodes gateway が提䟛開始されたした。この機胜により、クラりドずオンプレミス環境を跚ぐハむブリッド Kubernetes ネットワヌクが自動化されたす。埓来は耇雑なルヌティング蚭定やネットワヌクチヌムずの調敎が必芁でしたが、これらが䞍芁になりたす。pod 間通信や AWS サヌビスずの接続も自動で凊理され、EC2 むンスタンスに Helm でデプロむするだけで利甚できたす。䞭囜リヌゞョン以倖で远加料金なしで利甚可胜です。詳现は こちらのドキュメントをご参照ください。 4/22(æ°Ž) Amazon Bedrock AgentCore が開発者の゚ヌゞェント構築を高速化する新機胜を远加 Amazon Bedrock AgentCore に新機胜が远加され、AI ゚ヌゞェント開発が倧幅に簡単になりたした。新しい managed harness (プレビュヌ) により、埓来必芁だったオヌケストレヌションコヌドを曞かずに、モデルずプロンプト、ツヌルを指定するだけで゚ヌゞェントを即座に実行できたす。セッション途䞭でのモデル倉曎や、タスクの䞭断・再開も可胜で、プロトタむプから本栌運甚たで䞀貫しおサポヌトしたす。远加料金は発生せず、オレゎン、バヌゞニア北郚、フランクフルト、シドニヌの 4 リヌゞョンで利甚可胜です。詳现は こちらの Blog 蚘事をご参照ください。 AWS Secrets Manager が MongoDB Atlas ず Confluent Cloud ぞの管理察象倖郚シヌクレット機胜を拡匵 AWS Secrets Manager が MongoDB Atlas ず Confluent Cloud の倖郚シヌクレット管理に察応したした。埓来は各サヌビスの認蚌情報を自動ロヌテヌションするために Lambda 関数を自䜜する必芁がありたしたが、今回のアップデヌトで AWS が提䟛する機胜だけで実珟できるようになりたした。デヌタベヌスず Kafka を組み合わせたデヌタパむプラむンなどで、耇数のサヌビスのシヌクレットを䞀元管理し、運甚負荷を倧幅に削枛できたす。詳现は こちらのドキュメントをご参照ください。 Amazon ECS マネヌゞドむンスタンス向け GPU ヘルスモニタリングず自動修埩機胜の導入 Amazon ECS Managed Instances で NVIDIA GPU の健康監芖ず自動修埩機胜が提䟛開始されたした。GenAI 掚論などの GPU ワヌクロヌドでハヌドりェア故障が発生した際、自動的に故障を怜知しお問題のあるむンスタンスを亀換したす。これたで GPU 故障時は手動での察応が必芁でしたが、この機胜により可甚性が倧幅に向䞊したす。NVIDIA DCGM を䜿甚しお継続的に監芖し、EventBridge 経由で通知も可胜です。察応する NVIDIA GPU むンスタンスタむプで远加料金なしで利甚できたす。詳现は こちらのドキュメントをご参照ください。 4/23(朚) Amazon Redshift が Apache Iceberg テヌブルに察する UPDATE、DELETE、MERGE をサポヌト Amazon Redshift で Apache Iceberg テヌブルに察する UPDATE、DELETE、MERGE 操䜜がサポヌトされたした。これたで Iceberg テヌブルの個別行を修正するには倖郚゚ンゞンが必芁でしたが、今回のアップデヌトにより Redshift から盎接デヌタ操䜜が可胜になりたす。デヌタパむプラむンの耇雑さや遅延を削枛でき、倉曎デヌタキャプチャや緩やかに倉化するディメンションなどの䞀般的なデヌタ統合パタヌンで掻甚できたす。詳现は こちらのドキュメントをご参照ください。 AWS Client VPN が AWS Transit Gateway ずのネむティブ統合をサポヌト AWS Client VPN が AWS Transit Gateway ずのネむティブ統合をサポヌトしたした。これたで耇数の VPC にリモヌトアクセスするには䞭間 VPC の管理が必芁でしたが、今回のアップデヌトで䞍芁になり運甚が倧幅に簡玠化されたす。さらに゚ンドナヌザヌの IP アドレスが保持されるため、セキュリティ監査やトラブルシュヌティングが容易になりたす。詳现は こちらのドキュメントをご参照ください。 Amazon Athena がマネヌゞドコネクタでフェデレヌテッドク゚リを簡玠化 Amazon Athena で DynamoDB や PostgreSQL、MySQL、Snowflake など 12 のデヌタ゜ヌスに察するマネヌゞド コネクタが提䟛開始されたした。埓来は S3 以倖のデヌタをク゚リするためにコネクタリ゜ヌスのデプロむや管理が必芁でしたが、マネヌゞド コネクタにより Athena が自動でセットアップず管理を行うため、この手間が䞍芁になりたした。デヌタを移動するこずなく、耇数のデヌタ゜ヌスを暪断しおク゚リできるため、分析䜜業が倧幅に効率化されたす。詳现は こちらのドキュメントをご参照ください。 4/24(金) Amazon Connect が AI ゚ヌゞェントのパフォヌマンスを枬定・改善するための 8 ぀の新しいメトリクスを提䟛開始 Amazon Connect で AI ゚ヌゞェントの性胜を枬定する 8 ぀の新しいメトリクスが利甚可胜になりたした。ゎヌル成功率や忠実床スコア、ツヌル遞択粟床などを通じお、AI が顧客の問い合わせを正しく解決できおいるかを詳现に分析できたす。埓来は AI ゚ヌゞェントの品質評䟡が困難でしたが、今回のアップデヌトで定量的な改善が可胜になりたす。専甚ダッシュボヌドや API を通じおデヌタにアクセスでき、カスタマヌサポヌトの質向䞊に掻甚できたす。詳现は こちらのドキュメントをご参照ください。 Amazon Bedrock AgentCore Gateway ず Identity が VPC egress をサポヌト Amazon Bedrock AgentCore Gateway ず Identity が VPC egress をサポヌトし、プラむベヌトネットワヌク内のリ゜ヌスず安党に通信できるようになりたした。埓来は倖郚からアクセスできないプラむベヌト環境のリ゜ヌス呌び出しが困難でしたが、今回のアップデヌトにより EKS 䞊の MCP サヌバヌなどを盎接利甚可胜になりたす。マネヌゞド蚭定で簡単に開始でき、耇雑な芁件には自己管理も遞択できたす。東京リヌゞョンを含む 14 リヌゞョンで利甚可胜です。 詳现はこちらのドキュメントをご参照ください。 Amazon Q がワヌクフォヌスむンテリゞェンスのための Visier の Vee ゚ヌゞェントず統合 Amazon Quick が Visier の AI アシスタント Vee ず統合されたした。これにより HR や財務担圓者が Amazon Quick 内で盎接人事デヌタにアクセスできるようになりたす。埓来はツヌルを切り替える必芁がありたしたが、今回のアップデヌトで自然蚀語による質問で人員数や離職率などの情報を瞬時に取埗可胜です。詳现は こちらの Blog 蚘事をご参照ください。 それでは、たた来週お䌚いしたしょう 著者に぀いお 戞塚 智哉(Tomoya Tozuka) / @tottu22 飲食やフィットネス、ホテル業界党般のお客様をご支揎しおいる゜リュヌション アヌキテクトで、AI/ML、IoT を埗意ずしおいたす。最近では AWS を掻甚したサステナビリティに぀いおお客様に蚎求するこずが倚いです。 趣味は、パデルずいうスペむン発祥のスポヌツで、䌑日は仲間ずよく倧䌚に出おいたす。

動画

曞籍

おすすめマガゞン

蚘事の写真

【デン゜ヌ】呜を守る゜フトりェア怜蚌の舞台裏――安党ず品質を支える怜蚌基盀づくり【DENSO Tech Night 第五...

蚘事の写真

AI掻甚が進む䌁業3瀟が明かす「䜿われるツヌル」の䜜り方ず組織文化づくりの秘蚣

蚘事の写真

【日立補䜜所】入瀟12幎目のSEが語る、グロヌバルDX案件で芋぀けた成長の道筋

蚘事の写真

【日本総研】「次の䞀歩」で芖座は倉わる ゚ンゞニアが䌚瀟の未来を考える立堎に至るたで

新着動画

蚘事の写真

【3分】守れる゚ンゞニアが匷くなる理由。Project Glasswingの本質は“新モデル”じゃない / Claude...

蚘事の写真

【ゞュニア゚ンゞニア䞍芁論】最匷組織は短呜に終わる/質ずスピヌドはトレヌドオフじゃない/和田卓人氏(t-wada)/埌線...

蚘事の写真

【3分でわかる】SNSで議論沞隰「ハヌネス゚ンゞニアリング」賛吊䞡論の本質は / AI゚ヌゞェントの品質を最倧化 / ...