機械学習を使用して統計的な異常や、異常なパターンを検出することにより、データ品質を向上させるのに役立つ新しい AWS Glue Data Quality 機能のプレビューを開始します。コードを書かなくても、データ品質の問題に関する深いインサイト、データ品質スコア、および異常を継続的に監視するために使用できるルールに関する推奨事項が得られます。 データ品質の重要性 AWS のお客様は、データを抽出して変換するためのデータ統合パイプラインをすでに構築しています。データ品質ルールを設定して、生成されるデータが高

はじめに Turing の Vehicle チームの徳弘 (@res_circuit) です。 Turing は、完全自動運転システムを搭載した車を商品として販売することを目指しており、量産を見据えた独自の車両システムの設計に取り組んでいます。Turing ではその一環として、ECU (Electronic Control Unit, 電子制御ユニット) の開発にも取り組んでいます。 車の制御装置であるECUの多くは、マイコンをベースに構成されています。しかし近年は、車に求められる機能が膨大になり、またそ

11月26日、 Application Load Balancer に X509 証明書を提示する相互認証クライアントのサポートについてお知らせします。この新機能により、クライアント認証をロードバランサーにオフロードして、信頼できるクライアントだけがバックエンドアプリケーションと通信できるようになります。この新機能は、強力な暗号化とゼロデイ脆弱性からの保護を提供するAWSのオープンソース Transport Layer Security (TLS) 実装である S2N に基づいて構築されており、開発者はこ

3月よりIE課（インターナルエデュケーション課） に異動しました山﨑です。 今回はre:Inventで発表された「AWS re:Post Private」を早速利用してみたので、その感想を書きたいと思います。 AWS re:Post と AWS re:Post Private とは 1. AWS re:Post について 2. AWS re:Post Private について 料金体系 3. AWS re:Post と AWS re:Post Private の比較 早速、AWS re:Post Priv

11月26日より、新しい AWS 無料利用枠 API を使用して、 AWS 無料利用枠 の使用状況を確認できます。API は AWS コマンドラインインターフェイス (AWS CLI) で直接使用することも、 AWS SDK を使用してアプリケーションに統合することもできます。 AWS 無料利用枠プログラムでは、各サービスに指定された上限まで、AWS サービスを無料で試用できます。AWS 無料利用枠には、 次の 3 種類のサービスが含まれます。 常時無料 オファーにより、お客様が AWS ユーザーである限

こんにちは、エンジニアリングマネージャーの山口（ @yamat47 ）です。 去る11月26日に、「技術的負債に向き合う Online Conference」というイベントが開催されました。 技術的負債に向き合う Online Conference (2023/11/21 12:00〜) 技術的負債に向き合う Online Conference 技術的負債は、サービスをグロースさせていく上でつきものです findy.connpass.com

こんにちは、クラウドエース SRE ディビジョン所属の茜です。 皆さんは、日々の運用においてどのようなログを活用していますか？ 運用の現場では、システムの健全性、セキュリティ、パフォーマンスのモニタリングに不可欠な多種多様なログが生成されます。これらのログを効率的かつ効果的に管理し活用することが、システム運用の成功には欠かせません。 本記事では、実運用で特に重要なアプリケーションログ、監査ログ、VPC フローログの取得と適切な管理方法について解説します。 Cloud Logging について Cloud

こんにちは、クラウドエース SRE ディビジョン所属の茜です。 皆さんは、日々の運用においてどのようなログを活用していますか？ 運用の現場では、システムの健全性、セキュリティ、パフォーマンスのモニタリングに不可欠な多種多様なログが生成されます。これらのログを効率的かつ効果的に管理し活用することが、システム運用の成功には欠かせません。 本記事では、実運用で特に重要なアプリケーションログ、監査ログ、VPC フローログの取得と適切な管理方法について解説します。 Cloud Logging について Cloud

Amazon CloudWatch を使用して、 ハイブリッド、マルチクラウド 、およびオンプレミスのデータソースからのメトリクスを統合し、一貫性のある統一された方法で処理できるようになりました。ソースに関係なく、あらゆるメトリクスでクエリ、視覚化、アラームを行うことができます。この新機能は、統一されたビューを提供するだけでなく、インフラストラクチャの複数の部分や側面にまたがる傾向や問題を特定するのに役立ちます。 この新機能について初めて聞いたとき、「待って、 PutMetricData でもそれはできる

この記事は「 株式会社メンバーズ Jamstack研究会主催 Advent Calendar 2023 」の10日目の記事です。

クロスリージョンデータレプリケーションを使用して、 Amazon WorkSpaces ユーザーにビジネス継続性を提供できるようになりました。スナップショットは 12 時間ごとに作成され、目的のターゲットリージョンにレプリケートされます。このスナップショットを使用して 12～24 時間の目標復旧時点 (RPO) が得られます。 マルチリージョンレジリエンスのレビュー 同僚のアリエルは、2022年の記事「 Amazon WorkSpaces マルチリージョンレジリエンスによる事業継続性の向上 」で、この機能

東北のサウナー小菅です。 2023年11月27日～30日でラスベガスで開催されたAWS re:invent 2023に参加してまいりました。 Keynote、数多くのブレイクアウトセッションがある中で コスト削減に関するワークショップに2つ参加しましたので、ワークショップのこと、コスト削減において個人的に大事と思ったことを紹介したいと思います。 やったこと 感じたこと 構築初期でタグ戦略は考える コストは可視化して定期的にウォッチする さいごに やったこと 参加したワークショップのタイトルは以下2つです。

はじめに

はじめに ※ Timee Product - Qiita Advent Calendar 2023 - Qiita の12月8日分の記事です。 okodooooooonです BigQueryの料金爆発。怖いですよね。 dbtでの開発が進んでたくさんのモデルを作るようになると、デイリーのビルドだけでも凄まじいお金が消えていったりします（僕はもう現職で数え切れないくらいやらかしてます）。 コストの対策として「パーティショニング」「クラスタリング」などが挙げられますが、今回は「増分更新」の観点で話せたらと思いま

この記事は「 株式会社メンバーズ Jamstack 研究会主催 Advent Calendar 2023 」の9日目の記事です。