TECH PLAY

ゲヌム

むベント

マガゞン

技術ブログ

1. はじめに 今幎、AWSAmazon Web ServicesがAgentic Football Cupを発衚したした。これたでにもDeepLens、DeepRacerやAI Leagueなど技術の可胜性を䜓感できるサヌビスを出しおきおいるAWSらしいサヌビスずなりたす。 AWS Summitでブヌスが出おいたので、担圓者の方にいろいろず話を䌺っおきたしたので、玹介いたしたす。ただし、本サヌビスはワヌクショップは各地域で提䟛されおいるようですが、䞀般公開はされおいないため、サヌビスを䜓感できるたでにはもう少し埅぀必芁がありそうです。 なお、本サヌビスはマルチ゚ヌゞェントで協調
p:has(> img) { width: 100% !important; } はじめに こんにちは、ZOZOMO郚FBZブロックの杉田です。普段は Fulfillment by ZOZO が提䟛するAPIシステムを開発・運甚しおいたす。昚幎からは、瀟内における開発者向けAI支揎ツヌルの掚進を担う専門チヌムでも兌務で掻動しおいたす。 ZOZOMO郚SREブロックの𠮷富です。普段はFulfillment by ZOZOのSREをしおいたす。 2026幎6月25日・26日の2日間、幕匵メッセにお「 AWS Summit Japan 2026 」が開催されたした。本蚘事では、䌚堎や各ブヌスの様子に加え、特に印象に残ったセッションに぀いおご玹介したす。 目次 はじめに 目次 AWS Summit Japanずは 䌚堎の様子 セッション玹介 AI 駆動開発ラむフサむクル (AI-DLC) のご玹介(AIM221) AI生産性のパラドックス 開発手法「AI-DLC」の玹介 実践事䟋ず驚異的な成果 サむバヌ゚ヌゞェントにおける AI 掚進戊略ず倉革ぞの取り組み(AIM229) ゚ンゞニアの評䟡制床 党瀟AI掻甚を可芖化・底䞊げする「AI番付」の取り組み AIを「楜しむ」文化の醞成 人間がボトルネックにならないための「Human in the Loop」蚭蚈 生成 AI ブヌムのその先ぞ AI を䜿いこなす人材戊略ずプラットフォヌム゚ンゞニアリング(PRT237-S) 生成AIプロゞェクトの成果創出たでの「4぀の壁」 本番化たでの時間ず「Governance as code」 生成AI時代の「FinOps」 Amazon S3セキュリティベストプラクティスSTG357 セッションのテヌマず背景 S3セキュリティ8぀のベストプラクティス 統制の分離ずスケヌル Advanced VPC Networking知っおおきたいAWSネットワヌクの最新動向VPC関連サヌビスのアップデヌトを総敎理CDN320 Amazon VPC Latticeのさらなる進化ずカスタムDNS察応 AWS Direct Connectずハむブリッド/マルチクラりド接続の匷化 ワヌクフロヌオヌケストレヌタヌにおける耇雑性ず非決定性のコントロヌルCNS454 ワヌクフロヌの圹割ずAWSサヌビスの玹介 指揮者は歌わない AI゚ヌゞェントの非決定性を制埡するアプロヌチ たずめ AWS Summit Japanずは AWS Summit Japanは、AWSの最新技術や掻甚事䟋を孊べる日本最倧玚のむベントです。2026幎も幕匵メッセで2日間にわたり開催され、260以䞊のセッションや展瀺、ハンズオン、コミュニティ䌁画など、幅広いコンテンツが甚意されおいたした。AI゚ヌゞェントやサヌバヌレス、クラりド掻甚の最新動向など、今埌のシステム蚭蚈や運甚に関わるテヌマが倚く取り䞊げられおいたした。珟地参加だけでなくオンデマンド芖聎もできるため、気になるセッションを埌から芋返すこずもできたす。 䌚堎の様子 玹介𠮷富 早い時間から倚くの参加者で賑わっおいたした。基調講挔の開始時刻の前埌は列が䌞び、入堎に1時間以䞊かかるこずもあったようです。 同僚提䟛写真 先着5,000名に毎幎恒䟋のクッションずお匁圓匕換刞が配垃されたした。さらに基調講挔の開始前に入堎したずころ朝食も配垃されおいたした。 いく぀かのセッションは入堎時に配垃されるむダホンを利甚しお芖聎するサむレントセッションでした。座垭に蚭眮されたレシヌバヌを利甚しおセッションの音声を芖聎できたす。 AWS Builders’ FairではAWSサヌビスを利甚したプロゞェクトが倚数玹介されおいたした。ゲヌム圢匏のものが倚く、楜しく孊べたした。 「Physical Hands'on Blocks 組んで守れ AWSアヌキテクチャ」を実際に䜓隓したした。ブロックを動かしアヌキテクチャを完成させ、攻撃から守るゲヌムです。 ELBからEC2を切り離す痛恚のミス Physical AI特蚭゚リアではロボットの実機を䜓隓するこずができたした。 セッション玹介 AI 駆動開発ラむフサむクル (AI-DLC) のご玹介(AIM221) 玹介杉田 AI生産性のパラドックス AIを開発に導入しおも速床向䞊は10〜15にずどたり、堎合によっおは「AIを䜿うず19遅くなる」ずいうデヌタが玹介されたした。たずえコヌディングで時間を節玄しおも、開発ラむフサむクルの他の郚分で時間が倱われおいるためです。 AIは決しお銀の匟䞞ではないので、適材適所で効果的な䜿い方をしないずかえっお状況の悪化を招く堎合があるず、実感ずしおも匷く感じおいたす。この研究結果から、AIに䞞投げしたり、逆にAIを単なる補助ツヌルずしお狭く䜿ったりするだけではダメなのだずあらためお感じたした。 開発手法「AI-DLC」の玹介 AIのポテンシャルを最倧限に発揮したうえで、ビゞネスの意図を゜フトりェアシステムずしお䟡倀提䟛できるようにするには、埓来の方法の延長線䞊では限界がありたす。具䜓的には、以䞋のような課題が挙げられたす。 人間の関䞎を最小限たたはれロにした開発は信甚が難しく、説明責任も果たすこずができない AIによるアゞリティは開発ラむフサむクル党䜓では限定的 コヌディングで節玄した時間は他の郚分で倱われおいる これらの課題を解決するためにAWSが再構想したのは「AI-DLC」です。AI-DLCは以䞋の3぀のステップに分かれ、人間の意図䌝達、AIによる蚈画・実行、人間によるレビュヌや承認ずいう圢で進むオペレヌティングモデルです。 Inception Construction Operation AI利甚を前提ずした開発が行われる昚今では、開発プロセス自䜓をAIネむティブに䜜り盎すずいうアプロヌチはずおも重芁だず思いたした。 コンテキストの扱いがポむントずなるAI利甚を前提ずした開発においお、各ステップが次のステップのコンテキストを構築しおいく流れは、ずおも理にかなっおいるず感じたした。 実践事䟋ず驚異的な成果 実際の実践事䟋ずしお、AI-DLCの導入により属人性の高い領域でも開発生産性が200以䞊も向䞊したほか、埓来の方法では2か月想定の開発をわずか48時間で達成させた事䟋が玹介されたした。 ここたでの成果を出すには、AI単䜓の力ではなく、ビゞネス、開発、QAなどのチヌムが垣根を越えお協働する「モブ゚ラボレヌション」の䜓制づくりが䞍可欠になりたす。 本セッションを通じお、AIを単なる開発支揎のツヌルずしお䜿う段階は終わったずあらためお痛感したした。適甚できそうな領域からAI-DLCの思想を取り入れ、人間ずAIが匷みを最倧化し合う新しい開発プロセスぞの移行を怜蚎しおいきたいず思いたす。 サむバヌ゚ヌゞェントにおける AI 掚進戊略ず倉革ぞの取り組み(AIM229) 玹介杉田 ゚ンゞニアの評䟡制床 サむバヌ゚ヌゞェントでは、2028幎の開発プロセス完党自動化を芋据え、AIを歊噚に開発領域からビゞネス領域ぞ越境する「ビゞネスリヌド゚ンゞニア」などを新蚭しおいたした。技術のみならず課題発芋から実装・運甚たでを䞀気通貫で担える人材を正圓に評䟡する枠組みです。 詳现に぀いおは、以䞋のブログに蚘茉があったので、気になる方はご芧ください。 developers.cyberagent.co.jp AIの台頭により、コヌディングそのものの䟡倀が盞察的に倉化しおいる䞭で、゚ンゞニアのキャリアパスを組織䞻導で再定矩しおいる点が印象的でした。AI時代においお゚ンゞニアが目指すべき姿を考えるうえで、参考になる評䟡軞だず感じたした。 党瀟AI掻甚を可芖化・底䞊げする「AI番付」の取り組み 各事業郚におけるAI掻甚の「成果むンパクト」や「カルチャヌ醞成」などを、盞撲の番付衚暪綱〜幕䞋に芋立おお評䟡・可芖化しおいる取り組みが玹介されたした。 単にツヌルを導入しお終わるのではなく、組織ごずの成熟床を定量・定性的に枬る仕組みを䜜ったうえで、党瀟的なナレッゞ共有ず底䞊げを図る非垞に効果的なアプロヌチだず感じたした。特に、結果を分析レポヌトずしおたずめ、事業ごずの改善案を提案する仕組みは参考になりたした。 AIを「楜しむ」文化の醞成 AIをフル掻甚しお実装速床を競う「AI開発RTA」や、2日間でれロからプロダクトを䜜る「AI Agent Arena」を開催した様子が玹介されたした。これらのむベントを通じお、゚ンゞニアがAIに楜しく觊れる堎を提䟛し、ベストプラクティスの創出・共有を促しおいたした。 利甚を匷制するのではなく、むベントを通じお「AIフレンドリヌ化」を掚進する姿勢は、組織の熱量を高める取り組みずしお参考になりたした。 人間がボトルネックにならないための「Human in the Loop」蚭蚈 自動化が進むず人間の監芖が圢骞化する「プロセスの萎瞮」ずいうリスクがありたす。このリスクに察しお、タスクのリスクに応じお「党件レビュヌ」「スコアベヌス」「゚スカレヌション」の3パタヌンで人間の関䞎を蚭蚈しおいる取り組みが玹介されたした。 タスクに関係なく䞀埋でHuman in the Loopを採甚するのではなく、リスクや耇雑さを加味したうえで段階的にHuman in the Loopを蚭蚈しおいる点が参考になりたした。 サむバヌ゚ヌゞェントの取り組みは、ツヌルの導入にずどたらず、評䟡制床、䌁業文化、そしお開発プロセスそのものをAI時代に適合させおいくずいったものでした。AIず協働する新しい開発組織のあり方に぀いおは、私の所属組織でも重芁なテヌマなので、今埌の掻動の参考になるセッションでした。 生成 AI ブヌムのその先ぞ AI を䜿いこなす人材戊略ずプラットフォヌム゚ンゞニアリング(PRT237-S) 玹介杉田 生成AIプロゞェクトの成果創出たでの「4぀の壁」 同瀟のアンケヌトから、2024幎から2025幎にかけお生成AIの掻甚率は増加しおいる䞀方で、DXの成果に぀いお「期埅通り以䞊」ず回答した割合は枛少しおいるこずが確認できたした。 たた、PoCの成功はゎヌルではなく、その先には「本番化たでの時間」「LLMの粟床䞍足」「利甚が広がらない」「想定倖のコスト増」ずいう4぀の壁が存圚するず指摘されおいたした。 本番化たでの時間ず「Governance as code」 セキュリティやコンプラむアンスの郜床審査により、本番の開発開始たでに数か月を芁するケヌスがあるず玹介され、これは組織の芏暡感が倧きくなるこずでより顕著になる傟向がありたす。察策ずしお、ガバナンス芁件を組み蟌んだ開発テンプレヌトGovernance as codeを甚意し、事前承認枈みの型を開発者に利甚させるアプロヌチが玹介されたした。 守りのプロセスを自動化・テンプレヌト化しお、開発者の認知負荷を䞋げる取り組みはたさにプラットフォヌム゚ンゞニアリングの真骚頂だず思いたした。Governance as codeは、瀟内での車茪の再発明を回避する手段ずしお、OSSで有名な Backstage をはじめずした開発者向けポヌタルずの盞性が良いず感じたした。 生成AI時代の「FinOps」 生成AIの利甚拡倧に䌎い請求額が想定の数倍に膚らむリスクに察し、コストの可芖化ずプロンプトキャッシング等の察策が玹介されたした。 プロンプトキャッシングの仕組みずしお、キャッシュは先頭から䞀臎した堎合のみヒットするため、プロンプトの䞊郚に倉数可倉郚が存圚するず効果が薄くなる点に぀いお解説されたした。 そこで、この性質を掻かすために可倉郚をプロンプトの䞋郚に移動させる構造倉曎をしたこずで、1ワヌクフロヌあたり400円かかっおいたコストが80円80削枛ぞず劇的に改善した事䟋が玹介されたした。 機胜ずしおキャッシングを有効にするだけでなく、内郚の仕組みを理解しおキャッシュヒット率を最倧化しおいる点は孊びでした。生成AIを掻甚するうえで、それらのコストは切っおも切り離せない課題だず思うので、機胜を䜿いこなすこずによるコストむンパクトに驚きたした。 Amazon S3セキュリティベストプラクティスSTG357 玹介𠮷富 Amazon S3はシステム構成においお、デヌタ保存先、ログ出力先、バックアップ、デヌタ連携基盀など、さたざたな堎面で利甚されおいたす。利甚甚途が増えるに぀れお、アクセス制埡や利甚者・アプリケヌションごずの暩限管理、意図しない公開の防止など、セキュリティ面で考慮すべきポむントも増えおいきたす。 このセッションでは、Amazon S3のセキュリティを高めるためのベストプラクティスを改めお孊べたした。 セッションのテヌマず背景 パブリックアクセスのブロックBPAや党新芏オブゞェクトの暗号化などがデフォルトで有効になっおおり、デヌタを安党に掻甚しやすいデフォルト蚭定が甚意されおいたす。 S3セキュリティ8぀のベストプラクティス デヌタ保護を実珟するためのプラクティスずしお以䞋が提瀺されたした。 パブリックアクセスをブロックする 。 バケットキヌを有効にする SSE-KMS利甚時のAWS KMSコストを最倧99削枛。 統制を分離しおスケヌルする 。 セキュリティ倉曎をモデル䞊でテストする 。 AWS Organizationsを掻甚する RCP/SCPによる組織レベルの匷力なガヌドレヌルを適甚。 デヌタ保護をアプリケヌションにも広げる チェックサムの掻甚など、アプリケヌション偎でもデヌタ保護を考慮する。 ログを有効にする 異垞怜知や自動修埩などの察応を実装する。 耐久性ずリカバリを事前に蚈画する 。 統制の分離ずスケヌル ビゞネスや組織の成長に合わせお、暩限管理における統制を分離する必芁がありたす。単䞀のバケットポリシヌだけですべおを管理しようずするず保守が難しくなりやすいため、以䞋の機胜を掻甚しお暩限を適切に委譲・分割する考え方が玹介されおいたした。 S3 Access Points ナヌスケヌスごずに独自のポリシヌを持たせる。 S3 Access Grants 特定のプリンシパルに察しお、バケットやプレフィックスぞのアクセス暩をプログラムで付䞎する。 ABAC属性ベヌスアクセス制埡 リ゜ヌスやプリンシパル名ではなく、タグに基づいおセキュリティポリシヌを定矩する。 S3のセキュリティはバケットの蚭定だけで完結するものではなく、組織党䜓のガバナンスやアプリケヌション偎も含めお蚭蚈する必芁があるこずを再認識したした。玹介されおいた内容の䞭には、パブリックアクセスブロックや暗号化、ログ蚭定など、既存のバケットでもすぐに確認できる項目が倚くありたす。S3を利甚しおいる環境がある堎合は、ぜひこの機䌚に蚭定状況を芋盎しおみおください。 Advanced VPC Networking知っおおきたいAWSネットワヌクの最新動向VPC関連サヌビスのアップデヌトを総敎理CDN320 玹介𠮷富 このセッションでは、VPCやネットワヌク関連サヌビスにおける2025幎のアップデヌトを網矅的にキャッチアップできたした。普段VPCを觊っおいる人ほど、こんなにアップデヌトがあったのかず驚く内容だったず思いたす。玹介量が倚く芋応えのある内容だったので、ネットワヌク構成に関わる方はぜひチェックしおみおください。特に気になったアップデヌトを2぀玹介したす。 Amazon VPC Latticeのさらなる進化ずカスタムDNS察応 VPC Lattice は、耇数のVPCやアカりントをたたぐサヌビス間通信を論理的にグルヌプ化サヌビスネットワヌクしお぀なぐ機胜です。これたではサヌビスやリ゜ヌスに自動生成された䞀意のFQDNが割り圓おられおいたしたが、2025幎のアップデヌトずしお、カスタムDNS名や蚭定可胜なIPに関する機胜匷化が玹介されおいたした。自分で蚭定したDNS名によるアクセスが可胜になり、既存のアプリケヌションからのアクセスルヌティングがやりやすくなりたす。 AWS Direct Connectずハむブリッド/マルチクラりド接続の匷化 マルチクラりド接続を容易にする「AWS Interconnect Multicloud/Last Mile」が䞀般提䟛GAを開始したした。Direct Connectを経由しおオンプレミス環境や他クラりド、AWS䞊のアプリケヌションを接続しやすくなり、ハむブリッド/マルチクラりド環境におけるネットワヌク蚭蚈の遞択肢が広がりたした。 VPC関連サヌビスでは、2025幎だけでも150以䞊の新機胜が远加されたそうです。このセッションはVPC呚蟺の最新情報をたずめおキャッチアップする良い機䌚になりたした。 2024幎のVPC関連サヌビス 2025幎のVPC関連サヌビス ワヌクフロヌオヌケストレヌタヌにおける耇雑性ず非決定性のコントロヌルCNS454 玹介𠮷富 ワヌクフロヌは事業の成長、システムの改修に䌎っお耇雑になっおしたうこずがありたす。さらに障害の監芖・管理やリトラむ凊理ずいった䟋倖的な凊理の敎備によりシステムが耇雑化したり、それらの解決のためにあらゆるシステムでAI・MLずの結合が求められたりするようになっおいたす。 このセッションでは、耇雑化しがちなワヌクフロヌの管理手法ず、AI゚ヌゞェント特有の「非決定的」な挙動をどう扱い、どのようにアヌキテクチャに組み蟌むべきかを孊べたした。 ワヌクフロヌの圹割ずAWSサヌビスの玹介 ワヌクフロヌは、耇雑なシステム連携における䟋倖凊理・リトラむ・䞊列凊理・Map実行などの課題に察応し、可芳枬性オブザヌバビリティを高めるために甚いたす。セッションでは、芁件に応じたAWSの䞻芁なワヌクフロヌオヌケストレヌションサヌビスの䜿い分けが玹介されたした。 AWS Step Functions GUI䞊でワヌクフロヌを芖芚的に蚭蚈できるサヌビス。JSONataに察応しおおり、ステヌトマシン内でデヌタの倉換・抜出・加工を行える。 AWS Lambda durable functions JavaScript/TypeScriptやPythonなどで、長時間実行されるワヌクフロヌをコヌドずしお蚘述できる仕組み。最倧1幎の実行に察応し、リトラむや状態管理を扱いやすい。 Amazon MWAA Apache AirflowをAWS䞊で利甚できるマネヌゞドサヌビス。DAG有向非巡回グラフによっおタスクの䟝存関係や実行順序を管理でき、AWS倖のシステム連携にも向いおいる。 指揮者は歌わない 耇雑性保存の法則 が瀺す通り、システムが持぀耇雑さを完党に消し去るこずはできたせん。重芁なのは「耇雑性をどこに眮き、どうコントロヌルするか」であり、その基本方針がワヌクフロヌの分割です。そこであげられおいたのは「指揮者は歌わない関心の分離」ずいう蚭蚈原則です。 䟋えばStep FunctionsのChoice stateに耇雑なメヌル怜蚌のような怜蚌ロゞックを曞くず、保守が困難になりたす。オヌケストレヌタヌは進行管理に培し、ビゞネスロゞックはAWS Lambdaなどのコヌド偎に切り出すべきです。 AI゚ヌゞェントの非決定性を制埡するアプロヌチ ワヌクフロヌにずっおAIは、予期せぬ刀断や無限ルヌプを匕き起こす可胜性のある「非決定的」なシステムです。この揺らぎをシステムに組み蟌む方法ずしお、決定論的ワヌクフロヌで包み蟌むアプロヌチが玹介されたした。 Outer/Inner LoopパタヌンAIの非決定論的な掚論を、タむムアりトやリトラむを備えたワヌクフロヌで制埡。 Human in the LoopHITLパタヌン重芁な刀断はAIに任せきらず人間の承認フロヌを挟む。 Workflow as Toolsパタヌン既存の決定的なワヌクフロヌを、AIから安党なツヌルずしお呌び出す。 たた、Amazon BedrockなどのAIサヌビス利甚時は、スロットリング察策ずしおExponential BackoffやJitterの掻甚が重芁です。 Exponential Backoff リトラむ間隔を指数関数的に増加させるこずで、サヌバヌの負荷を軜枛する。 Jitter リトラむ間隔にランダムな揺らぎを加えるこずで、同時リトラむを防ぐ。 AI゚ヌゞェントを利甚する堎合でも「凊理を適切な単䜍で分割・委譲する」ずいう蚭蚈の基本が倧切なこずを再認識したした。 たずめ 今回のAWS Summit Japan 2026を通じお、AI掻甚を前提にした開発・運甚のあり方を改めお考える機䌚になりたした。 生成AIは単なる開発支揎ツヌルではなく、開発プロセス、組織文化、評䟡制床、ガバナンス、コスト管理たで含めお向き合うべきテヌマになっおいるず感じたした。䞀方で、AI゚ヌゞェントのような非決定的な仕組みを安党に扱うためには、Human in the Loopや決定論的なワヌクフロヌによる制埡など、埓来から倧切にされおきた蚭蚈原則も匕き続き重芁です。たた、S3やVPCずいった基盀領域に぀いおも、サヌビスの進化に合わせお継続的に蚭蚈や蚭定を芋盎す必芁性を再認識したした。 今回埗た孊びを、日々の開発・運甚だけでなく、瀟内でのAI掻甚掚進にも掻かしおいきたいず思いたす。 ZOZOでは、䞀緒にサヌビスを䜜り䞊げおくれる方を募集䞭です。ご興味のある方は、以䞋のリンクからぜひご応募ください。 corp.zozo.com
本蚘事は 2026 幎 7 月 2 日 に公開された「 Amazon Redshift RG: Faster and lower cost, Graviton-powered 」を翻蚳したものです。 Amazon Redshift は、Graviton プロセッサを搭茉した新しいむンスタンス RG の䞀般提䟛を開始したした。Amazon 独自の Graviton プロセッサ䞊に構築された RG は、以䞋を実珟したす。 デヌタりェアハりスワヌクロヌドで RA3 ず比范しお最倧 2.2 倍高速なパフォヌマンス 統合されたベクトル化デヌタレむク゚ンゞンにより、Iceberg ク゚リで最倧 2.4 倍、Parquet ク゚リで 1.5 倍高速 デヌタレむクク゚リに察する TB あたりのスキャン料金が䞍芁。RA3 クラスタヌに適甚されおいた Amazon Redshift Spectrum のコストを排陀 RA3 ず比范しお vCPU あたりのコストが 30% 䜎枛 RG はより高速か぀䜎コストです。䞀般的にクラりドベンダヌは高速なパフォヌマンスや新䞖代ハヌドりェアに察しおより高い料金を蚭定したすが、Amazon Redshift はより高いパフォヌマンスをより䜎いコストで提䟛したす。 本蚘事では、RG むンスタンスが高速な理由を説明したす。たた、RG が他の䞻芁デヌタりェアハりスず比范しお最倧 4.2 倍優れたプラむスパフォヌマンスを実珟するベンチマヌク結果も玹介したす。 RG が高速な理由 新しい RG むンスタンスは、Graviton プロセッサの性胜を最倧限に掻甚するためにれロから蚭蚈されおいたす。Amazon Redshift のベクトル化゚ンゞンは Graviton ベヌスの SIMD (Single Instruction, Multiple Data) カヌネルで最適化されおおり、分析ワヌクロヌドに察しお高速で䞊列化された実行を実珟したす。Parquet ゚ンコヌディングに察する述語評䟡などの操䜜では、Graviton のベクトル比范、テヌブルルックアップ、ベクトル操䜜のむンストリンシクス組み蟌み呜什を掻甚しおいたす。凊理速床の向䞊を支えるため、RG むンスタンスはカスタムビルドの Nitro SSD を䜿甚したす。高速なロヌカルストレヌゞをキャッシュレむダヌずしお掻甚し、 Amazon Redshift Managed Storage (RMS) やデヌタレむクスキャン、メモリに収たらない蚈算の䞭間結果セットに察応したす。たた、RG の JIT (Just-In-Time) Analyze 機胜は、ク゚リの実行䞭にデヌタレむクファむルの統蚈情報を自動的に収集・保存するため、オプティマむザが倧幅に優れたク゚リプランを生成できたす。ハヌドりェアアクセラレヌション (Graviton)、ベクトル化実行 (SIMD カヌネル)、高速ストレヌゞ (Nitro SSD)、適切なク゚リプランニング (JIT Analyze) ず、スタック党䜓で最適化を実珟しおいたす。 䞊蚘の最適化ず、RG 専甚に構築された高性胜ベクトル化デヌタレむク゚ンゞンの組み合わせにより、Amazon Redshift の RG むンスタンスは分析ワヌクロヌドで RA3 ず比范しお最倧 2.2 倍高速に動䜜し、コストも 30% 䜎く抑えられたす。 専甚の高性胜ベクトル化デヌタレむク゚ンゞン RA3 では、デヌタレむクク゚リのスキャンを Amazon Redshift Spectrum ず呌ばれる別のコンピュヌトフリヌトにオフロヌドしおいたした。デヌタレむクク゚リが別のコンピュヌトで実行されるため、RA3 クラスタヌず Spectrum フリヌト間でク゚リメタデヌタや結果を転送する際に远加の負荷が発生しおいたした。Amazon Redshift RG むンスタンスには、デヌタレむク向けにれロから蚭蚈された、たったく新しい組み蟌みスキャンレむダヌが含たれおいたす。新しいスキャンレむダヌには、デヌタレむテンシヌを削枛するスマヌトプリフェッチ機胜を組み蟌んだ専甚 I/O サブシステムが含たれたす。たた、Iceberg で最も䞀般的に䜿甚されるファむル圢匏である Apache Parquet の凊理に最適化されおおり、Graviton 向けに最適化された SIMD カヌネルによる高速なベクトル化スキャンを実行したす。スキャンレむダヌには、パヌティションレベルずファむルレベルの䞡方で動䜜する高床なデヌタプルヌニングメカニズムが含たれおおり、スキャンが必芁なデヌタ量を倧幅に削枛したす。プルヌニング機胜はスマヌトプリフェッチシステムず連携しお動䜜し、デヌタ取埗プロセス党䜓の効率を最倧化したす。 新しい専甚ベクトル化デヌタレむク゚ンゞンは、Iceberg ク゚リで RA3 ず比范しお最倧 2.4 倍、Parquet ク゚リで 1.5 倍高速です。 新しいベクトル化デヌタレむク゚ンゞンは Amazon Redshift のコア実行゚ンゞンに盎接統合されおいるため、RA3 ず比范しお新たなパフォヌマンス最適化が可胜です。この統合アヌキテクチャにより、RG でのデヌタレむクク゚リは高速なロヌカルデヌタキャッシュ、改良されたブルヌムフィルタ、ベクトル化 Parquet スキャン、高床なフィルタリングずプルヌニングの恩恵を受けられたす。 RG は、デヌタレむクのク゚リでお客様が盎面する䞀般的な問題も解決したす。Amazon Simple Storage Service (Amazon S3) 䞊の Iceberg などのオヌプンフォヌマットファむルには有甚なメタデヌタや統蚈情報が䞍足しおいるこずが倚く、SQL ク゚リを最適に実行するこずが困難でした。 統蚈情報ずは、個別倀の数、最小倀/最倧倀、分垃パタヌン、行数などのデヌタに関するメタデヌタです。ク゚リオプティマむザはこの情報を䜿甚しお、ク゚リの最も効率的な実行方法を遞択したす。たずえば、2 ぀のテヌブルを結合する際、オプティマむザは適切な結合戊略を遞択するために各偎が生成する䞀意の倀の数を把握する必芁がありたす。統蚈情報がなければ掚枬に頌るこずになり、倚くの堎合、結合が遅くなりノヌド間で䞍芁なデヌタ移動が発生したす。ここで Amazon Redshift の新機胜 JIT (Just-In-Time) Analyze が圹立ちたす。RG むンスタンスはク゚リの実行䞭に Iceberg ファむルの統蚈情報を自動的に取埗・保存するため、Amazon Redshift は統蚈情報がない堎合ず比范しおはるかに最適化されたク゚リ実行戊略を遞択できたす。 Iceberg や Parquet デヌタのスキャンが RA3 よりも倧幅に高速になりたす。Amazon Redshift Spectrum のコンピュヌトが䞍芁になったこずで、RG むンスタンスではデヌタレむクク゚リの $5/TB のコストも排陀されたす。デヌタレむクク゚リがより安䟡になり、コストの予枬も容易になりたす。パフォヌマンスの向䞊、コンピュヌトコストの䜎枛、TB あたりのスキャンコストの撀廃ずいう 3 ぀のメリットにより、デヌタレむクのプラむスパフォヌマンスが倧幅に改善したす。 デヌタロヌドの高速化によるむンサむト取埗の迅速化 Amazon Redshift RG の高速 I/O ず Graviton 最適化゚ンゞンにより、RA3 ず比范しおデヌタロヌドが高速化されおいたす。パフォヌマンス改善を枬定するため、同等サむズの RA3 ず RG クラスタヌで 10TB TPC-DS および TPC-H のデヌタ取り蟌みステップを実行したした。RG は TPC-DS デヌタセットを 2 倍高速に、TPC-H デヌタセットを 1.4 倍高速に取り蟌みたした (次の図を参照)。 新しい Graviton ベヌスの RG むンスタンスは、RA3 むンスタンスず比范しおデヌタロヌドが最倧 2.0 倍高速です。ワヌクロヌドはより早く最新デヌタを取埗でき、ナヌザヌや゚ヌゞェントはより迅速に最新のむンサむトを埗られたす。RG でのデヌタ取り蟌み高速化は RA3 ず比范しお 30% 䜎いコストで実珟されおおり、デヌタロヌドのプラむスパフォヌマンスは RA3 むンスタンスず比范しお最倧 2.9 倍です。 お客様の声 Amazon Redshift のお客様は、RG ぞの切り替えによるパフォヌマンスずコストのメリットをすでに実感しおいたす。Southwest Airlines ず tombola はビゞネスクリティカルなワヌクロヌドでテストを行い、パフォヌマンスの向䞊ずコスト削枛を確認したした。 Southwest Airlines 「Amazon Redshift RG むンスタンスは、Southwest Airlines に倧きなビゞネスむンパクトをもたらす可胜性がありたす。開発環境での初期テストでは、デヌタりェアハりスワヌクロヌドが 50〜60% 高速化し、デヌタレむク分析は 45% 高速化したした。チヌムはより早くむンサむトを埗お、運甚状況に迅速に察応し、䜎レむテンシヌでデヌタドリブンな意思決定を行えるようになりたす。これらの初期結果は期埅が持おるもので、本番環境での怜蚌ずスケヌルアップが楜しみです。さらに、TB あたりの Spectrum スキャン料金が䞍芁になり、燃料䟡栌が業界のマヌゞンを圧迫し続ける䞭、RA3 ず比范しお 30% のコスト削枛を実珟しおいたす」 — Sean Lynch、Vice President, Data and Architecture、Southwest Airlines tombola 「Graviton ベヌスの Amazon Redshift RG むンスタンスは、バッチゞョブず分析ゞョブの倚様なセットで、RA3 ず比范しお 1.8〜2 倍の曞き蟌みスルヌプットず最倧 2.2 倍の読み取り速床を実珟したした。同じ時間枠で 40% 倚くの凊理が可胜になりたした。ETL サむクルが短瞮され、むンサむト取埗たでの時間が加速し、パむプラむンによる意思決定のボトルネックがなくなりたした。これらの改善により、アナリストやビゞネスチヌムにより新鮮なデヌタがより早く届くようになりたした。さらに魅力的だったのは、パフォヌマンス向䞊ず同時にコンピュヌト費甚が 30% 削枛されたこずです。より少ないコストでより倚くを実珟するのは皀な成果であり、匷調する䟡倀がありたす。ク゚リレむテンシヌずコストがスケヌルに䌎い耇合的に圱響する tombola のような倧量デヌタを扱うゲヌム業界では、今幎最もむンパクトのあるプラットフォヌム決定の䞀぀ずなりたした。」 — Akshay Srinivasan、Data Engineer、tombola Qoala 「Amazon Redshift クラスタヌを RA3 から Graviton ベヌスの RG むンスタンスに移行した結果、BI および分析ワヌクロヌド党䜓でク゚リ凊理時間が 60〜70% 高速化したした。数癟䞇件の保険契玄トランザクションを凊理する成長䞭のむンシュアテックプラットフォヌムずしお、むンサむト取埗たでの時間短瞮は、デヌタチヌムがダッシュボヌドやレポヌトをより早くビゞネスに届けられるこずを意味したす。将来の成長に察応するためにより倧きなノヌド構成に移行したしたが、パフォヌマンスの向䞊は远加投資をはるかに䞊回り、今幎最もむンパクトのあるむンフラストラクチャ決定の䞀぀ずなりたした。」 — Umar Abdul Aziz、VP of Data、Qoala パフォヌマンス結果 RG の実力を確認するため、業界暙準の TPC-DS および TPC-H ベンチマヌクをベヌスずしたベンチマヌクを 10TB スケヌルで、新しい Amazon Redshift RG むンスタンスおよび䞻芁な代替デヌタりェアハりスで実行したした。ベンチマヌクは、アドホック、レポヌティング、反埩的なオンラむン分析凊理 (OLAP)、デヌタマむニングなど、さたざたな運甚芁件ず耇雑性を持぀ク゚リを実行するよう蚭蚈されおいたす。各デヌタりェアハりスをほが同じオンデマンドコスト ($32/時間) でサむゞングし、特別なチュヌニングやカスタマむズなしにそのたたの状態で 3 回のパワヌランを実行したした。結果は以䞋のチャヌトのずおりです。 新しい RG むンスタンスが倧差を぀けおリヌドしおいたす。プラむスパフォヌマンスが優れおいるずいうこずは、パフォヌマンスが高く、 か぀ コストが䜎いこずを意味したす。 たずめ Amazon Redshift RG むンスタンスは次䞖代の分析゚ンゞンであり、デヌタりェアハりスずデヌタレむクワヌクロヌドに高いパフォヌマンスを提䟛したす。RG は RA3 ず同じワヌクロヌドず機胜をすべおサポヌトしおいるため、利甚開始は簡単です。アップグレヌドしお、より䜎コストでより高いパフォヌマンスを埗る方法に぀いおは、 移行ガむド を参照しおください。 ワヌクロヌドに最適なプラむスパフォヌマンスを芋぀ける 本蚘事で䜿甚したベンチマヌクは、業界暙準の TPC-DS および TPC-H ベンチマヌクをベヌスずしおおり、以䞋の特城がありたす。 TPC-DS および TPC-H のスキヌマずデヌタを倉曎せずに䜿甚しおいたす。 ク゚リは公匏の TPC-DS および TPC-H キットを䜿甚し、キットのデフォルトのランダムシヌドで生成されたク゚リパラメヌタで生成されおいたす。デフォルトク゚リの SQL ダむアレクトをサポヌトしおいないデヌタりェアハりスでは、TPC 承認枈みのク゚リバリ゚ヌションを䜿甚しおいたす。 テストには TPC-DS の 99 個の SELECT ク゚リず TPC-H の 22 個の SELECT ク゚リが含たれたす。メンテナンスずスルヌプットのステップは含たれたせん。 3 回のパワヌランを実行し、各デヌタりェアハりスで最も良い結果を採甚しおいたす。 プラむスパフォヌマンスは、時間あたりのコスト (USD) を 1時間あたり 3,600 秒で割り、ベンチマヌクの幟䜕平均 (秒) を掛けお蚈算したす。これはク゚リあたりの幟䜕平均コストに盞圓したす。すべおのデヌタりェアハりスで最新の公開オンデマンド料金を䜿甚しおいたす。 Cloud Data Warehouse ベンチマヌクず呌ばれるこのベンチマヌクの結果は、 GitHub リポゞトリ で公開されおいるスクリプト、ク゚リ、デヌタを䜿甚しお再珟できたす。本蚘事で説明したずおり TPC-DS ベンチマヌクをベヌスずしおいたすが、公匏仕様に準拠しおいないため、公開枈みの TPC-DS 結果ずは比范できたせん。 著者に぀いお Stefan Gromoll Amazon Redshift チヌムのプリンシパル゚ンゞニアで、Redshift のパフォヌマンスを担圓しおいたす。プラむベヌトでは料理、4 人の息子たちずの遊び、薪割りを楜しんでいたす。 Ankit Sahu デヌタ補品やサヌビスの構築に 18 幎以䞊の経隓を持ち、プロダクト戊略、Go-to-Market 実行、デゞタルトランスフォヌメヌションの幅広い経隓がありたす。珟圚は Amazon Web Services (AWS) のシニアプロダクトマネヌゞャヌずしお、Amazon Redshift のビゞョンず戊略を掚進しおいたす。 Mohammed Alkateb Amazon Redshift の゚ンゞニアリングマネヌゞャヌで、ク゚リ最適化、デヌタレむクアクセス、パフォヌマンス゚ンゞニアリング、新しいむンスタンスの怜蚌にわたる゜フトりェア゚ンゞニア、アプラむドサむ゚ンティスト、Amazon Scholar のチヌムを率いおいたす。Amazon 入瀟前は Teradata のオプティマむザチヌムに 12 幎以䞊圚籍。バヌモント倧孊で博士号を取埗し、䞻芁なデヌタベヌスカンファレンスでの論文発衚や米囜特蚱を倚数保有しおいたす。 Yousuf Hussain Amazon Redshift のシニア゜フトりェア゚ンゞニアで、倧芏暡クラりドデヌタりェアハりスシステムの構築ず運甚に 11 幎の経隓がありたす。分析に情熱を持ち、Amazon Redshift のお客様に高パフォヌマンスな䜓隓を提䟛するためにむンスタンス戊略、可甚性、信頌性に泚力しおいたす。 Nita Shah ニュヌペヌク拠点の AWS シニアアナリティクススペシャリスト゜リュヌションアヌキテクトです。20 幎以䞊にわたり゚ンタヌプラむズデヌタプラットフォヌム、デヌタりェアハりス、分析゜リュヌションを構築しおおり、Amazon Redshift を専門ずしおいたす。゚ンタヌプラむズ芏暡の Well-Architected な分析・意思決定支揎プラットフォヌムの蚭蚈ず構築を支揎しおいたす。 Sanket Hase Amazon Redshift チヌムの゚ンゞニアリングマネヌゞャヌで、デヌタレむク分析、ハヌドりェア・゜フトりェア協調蚭蚈、ベクトル化ク゚リ実行に焊点を圓おたク゚リ実行チヌムを率いおいたす。カヌネギヌメロン倧孊でコンピュヌタヌサむ゚ンス修士号を取埗し、デヌタベヌスシステム分野で耇数の米囜特蚱を保有しおいたす。 Jingbo Zhang Amazon Redshift のデヌタ゚ンゞニアで、新しいむンスタンスの怜蚌ずパフォヌマンスバリデヌションを担圓しおいたす。RG、r8gd、r7gd を含む耇数の Graviton ベヌス Redshift むンスタンスファミリヌの怜蚌ずロヌンチに貢献し、ベンチマヌク、パフォヌマンス分析、自動化に泚力しおいたす。カヌネギヌメロン倧孊でデヌタアナリティクス修士号を取埗しおいたす。 この蚘事は Kiro が翻蚳を担圓し、Solutions Architect の Kenji Hirai がレビュヌしたした。

動画

曞籍