3月よりIE課（インターナルエデュケーション課） に異動しました山﨑です。 今回はAWS Well-Architected Frameworks の1つである「Sustainability Pillar（持続可能性の柱）」について様々な観点から考察していきたいと思います 現在進行形で学習しているので、必要に応じて本ブログは加筆修正をしていこうと考えています。 続編もありますので、こちらも是非ご覧ください！ blog.serverworks.co.jp AWS Well-Architected Framew

ISID X（クロス） イノベーション 本部 の三浦です。 筆者の関わっている案件では、多数の AWS アカウント、ec2、ecsが存在しています。 で、大量のリソースがあるとSavings Plansの管理も大変であり、下記のようなツールを作成してSavings Plansの購入をしております（以後Savings PlansはSPと省略します）。 フェデレーションでアカウントの認証情報一括取得（200アカウント弱） ec2一覧、ecs task一覧を作成（SP購入不要の場合は、タグによって除外） 各アカ

ISID X（クロス） イノベーション 本部 の三浦です。 筆者の関わっている案件では、多数の AWS アカウント、ec2、ecsが存在しています。 で、大量のリソースがあるとSavings Plansの管理も大変であり、下記のようなツールを作成してSavings Plansの購入をしております（以後Savings PlansはSPと省略します）。 フェデレーションでアカウントの認証情報一括取得（200アカウント弱） ec2一覧、ecs task一覧を作成（SP購入不要の場合は、タグによって除外） 各アカ

こんにちは。メルカリのQAの____rina____です。メルカリShopsというサービスのQAをしています。今回は、メルカリShopsのQA活動に欠かせない技術についての紹介と、QAチームがどのような活動をしているかについて紹介します。 私はメルカリShopsのQAエンジニアとして2年超働いていますが、これらの多くの技術解決があることでより広いQAの活動ができました。 現在、QAの活動をもっとよくしたいと思っているQAエンジニアの方や、品質に課題を感じている開発者の方が、このブログを通じて技術面からQA

こんにちは。search infraチームのmrkm4ntrです。 我々のチームでは検索基盤としてElasticsearchクラスタをKubernetes上で多数運用しています。これらのElasticsearchクラスタを管理しているnamespaceはマルチテナントな我々のKubernetesクラスタの中で最大のリソースを要求しているnamespaceです。 一方でクラスタのサイズをピークタイムに合わせて固定していたため、そのリソース利用率は非常に低いという問題がありました。Elasticsearch

この記事は、 Merpay Tech Openness Month 2023 の11日目の記事です。 こんにちは。メルペイのデータマネージャー @katsukit です。 本日は、現在メルペイで取り組んでいる非エンジニアのためのデータ集計環境についてご紹介します。 はじめに データ活用には可視化、分析、調査、ML、CRMなど、さまざまな場面があると思います。エンジニアはもとよりデータアナリスト、マーケター、プロジェクトマネージャーなどと利用するユーザーもさまざまです。 これらの利用シーンで使用するデータに

AstroでSvelte使ってみた こんにちは(こんばんは)、Svelte不定期連載その4です。 過去の記事はこちら SvelteKit + Svelte を1年間くらい使ってみた知見など※SvelteKit メジャーリリース対応済み Svelteと他JSフレームワークとの比較 - Svelte不定期連載-01 Svelteでユニットテスト - Svelte不定期連載-02 SvelteでStorybookを使ってみる - Svelte不定期連載-03 今回はAstroでSvelte使ってみたの回です。

はじめに Turing 株式会社のリサーチチームでインターンをしている東京工業大学 B4 横田研究室の藤井(@okoge_kaz)です。 自然言語処理分野における大規模深層学習の重要性は日に日に高まっていますが、GPT-3, GPT-4 などのモデルの学習には膨大な計算コストがかかり、容易に学習できなくなっています。実際、モデルサイズが近年急速に大きくなっていることにより、学習に必要な計算量(FLOPs)は以下のように年々膨大になっています。近年の大規模モデルでは、NVIDIA H100 80GB であっ

はじめまして、株式会社Luup SREチームに所属しています、ぐりもお（@gr1m0h）です。 Nobl9社が主催する SLOconf というSLO（サービスレベル目標）にフォーカスしたカンファレンスのローカルなコミュニティーイベント、SLOconf Tokyo 2023 に登壇しました。このイベントは、Googleの渋谷オフィスで 5/16 に開催されました。 発表資料は以下になります。 はじめてのオフライン登壇でした。これについては個人のブログに記載しています。 https://weblog.grim

はじめまして、株式会社Luup SREチームに所属しています、ぐりもお（@gr1m0h）です。 Nobl9社が主催する SLOconf というSLO（サービスレベル目標）にフォーカスしたカンファレンスのローカルなコミュニティーイベント、SLOconf Tokyo 2023 に登壇しました。このイベントは、Googleの渋谷オフィスで 5/16 に開催されました。 発表資料は以下になります。 はじめてのオフライン登壇でした。これについては個人のブログに記載しています。 https://weblog.grim

こんにちは。AWS CLI が好きなテクニカルサポート課の市野です。 本日も、お客様からいただいたお問い合わせに対し社内検証した結果、得られた知見についての投稿です。 お客様のお困りごと AWS Control Tower で、東京リージョン、および、大阪リージョンを管理対象としている環境で、コントロールライブラリからコントロールを有効にした際に以下のようなエラーが発生する。 AWS Control Towerは、この OU で選択されたコントロールを有効にできません。 AWS Control Tower

はじめに BOXIL SaaSのChatGPTプラグインとは システム概要 開発にあたっての主な意思決定項目 開発の進め方 開発者申請 法務周りの対応 インフラ構成 カテゴリ検索APIの開発 ChatGPTプラグインのここがすごい３選 プラグインの使用を促してくれる 用意したAPI同士の連携ができる 申請から承認まで最短１日!? さいごに はじめに こんにちは。スマートキャンプでエンジニアをしている佐々木（社内ではピーターと呼ばれています）です。 2023年6月20日のプレスリリースの通り、スマートキャン

こんにちは。Data Engineeringチームの河野(@matako1124) です！ Airflowで依存関係の設定にExternalTaskSensorを使っているのですが、ExternalTaskSensorを使用する時は、以下2つを注意しなければいけません。 実行時間が同じでなければいけない DAG名、Task名も正確に記載しないといけない これを間違えてしまうと、Pokingし続けてしまいます。 特にリファクタでDAG名やTask名が変わるといったことはよく起こりうると思います。 今回は「D

こんにちは。Data Engineeringチームの河野(@matako1124) です！ Airflowで依存関係の設定にExternalTaskSensorを使っているのですが、ExternalTaskSensorを使用する時は、以下2つを注意しなければいけません。 実行時間が同じでなければいけない DAG名、Task名も正確に記載しないといけない これを間違えてしまうと、Pokingし続けてしまいます。 特にリファクタでDAG名やTask名が変わるといったことはよく起こりうると思います。 今回は「D