Terraform

イベント

注目のイベント

マガジン

技術ブログ

AWS Glueを使ったETL処理をTerraformで構築してみた

はじめに AWS Glueとは 構築例 構成図 加工前データ 作成リソース Amazon S3 AWS Glue 加工スクリプト(Python) 結果 おわりに はじめに はじめまして、入社1年目の寺嶋です。現在私はAWSを使ったデータ分析基盤の構築、保守、運用を行っています。 本ブログでは、データ分析基盤構築に日々携わっている中で理解したAWS Glueの基礎と簡単な構築例を紹介します。最後にTerraformを使

DatadogのAWSメトリクス収集をCloudWatch GetMetric APIからMetric Streamsに移行してMTTDを短縮した話

はじめに こんにちは! タイミーでPlatform Engineerをしている @MoneyForest です。 今回は、弊社のDatadogにおけるAWSメトリクス収集を、従来のCloudWatch GetMetric APIからCloudWatch Metric Streams方式に移行することで高速化した取り組みについて紹介します。 背景 タイミーのワーカー様向けアプリケーションは、ピーク時に1分あたり十数万リクエストを処理するような規模で運用されて

BASE機械学習チームでより良い開発環境実現のために取り組んだこと

はじめに 初めまして。BASEのエンジニアの田中大貴です。お客様の安心安全な購入を実現するためデータ分析や不正決済検知モデルの開発・運用を頑張っています。 今回は、チームのより良い開発環境を作るために行ってきた施策の事例をご紹介します。(機械学習に特有の問題ではない施策が多いです。) 開発フロー BASEでは、ショップの開設から購入に至るまで、様々な

動画

書籍