「SQL」に関連する技術ブログ
企業やコミュニティが発信する「SQL」に関連する技術ブログの一覧です。
全964件中 46 - 60件目
Dataform のアサーションを理解する
2025/01/16
ブックマーク
はじめに こんにちは、クラウドエース株式会社 第一開発部所属の工藤です。 本記事では、Dataform のアサーションについてまとめました。 この内容を詳しく書いている記事はあまりない印象なので、これから Dataform を使ってみようと考えている方はぜひご覧ください。 Dataform とは Dataform は、BigQuery Studio に含まれるプロダクトであり、BigQuery に格納しているデータの加工
BigQuery MLを徹底解説！
2025/01/14
ブックマーク
G-gen の佐々木です。当記事では BigQuery 上で機械学習モデルを作成、評価、実行するための機能である BigQuery ML について解説します。 概要 BigQuery とは BigQuery ML とは BigQuery ML の使用方法 ユーザーインターフェース BigQuery Editions クエリのドライラン BigQuery ML でサポートされるモデル 内部モデル 外部モデル インポートされたモデル リモートモデル ユーザーが Vertex AI でデ
Web アプリケーションにおける排他制御の実装例 (第二回)
2025/01/10
ブックマーク
SCSKの畑です。5回目の投稿です。 第一回 の続きです。今回は、前回説明した排他制御の仕組みをアプリケーションからどのように使用しているかが主な内容となります・・が、それだけだと書くことがほぼなくなってしまうので、使用するための前提条件などを補足しながらにしようと思います。 アーキテクチャ概要、及び排他制御に使用したサービス / コンポーネント
EventarcとWorkflowsでイベントドリブンにCloud Run jobsを実行してみた
2025/01/10
ブックマーク
G-gen の出口です。本記事では、Eventarc と Workflows を利用して イベントドリブンに Cloud Run jobs を実行する方法をご紹介します。 概要 Cloud Run functions と Cloud Run jobs 検証の概要 Eventarc Workflows Cloud Storage の準備 Cloud Storage バケットの作成 Cloud Strage サービスエージェントへの権限付与 BigQuery テーブルの作成 Cloud Run jobs の作成 サービスアカウントの作成 Docker コンテナの作成に必
株式会社ディー・エヌ・エーが Amazon Redshift Serverless と dbt を活用して匿名化データの品質テストを最大100倍高速化を実現
2025/01/09
ブックマーク
本ブログは 2024 年 12 月 17 日に公開された「 How DeNA Co., Ltd. accelerated anonymized data quality tests up to 100 times faster using Amazon Redshift Serverless and dbt 」を翻訳したものです。 本ブログは 株式会社ディー・エヌ・エー（以下 DeNA ） と Amazon Web Services Japan が共同で執筆しました。 DeNA は「一人ひとりに想像を超える Delight を」というミッションのもと、ゲーム、ライブコミュニティ、ヘ
Go初心者がアーキテクチャ設計から実装まで1ヶ月で行った話
2025/01/09
ブックマーク
はじめに 初めまして！2024年11月にCATechJOBプログラムで株式会社AbemaTV BD ...
Web アプリケーションにおける排他制御の実装例 (第一回)
2025/01/08
ブックマーク
SCSKの畑です。4回目の投稿です。 今回は、現在作成中の WEB アプリケーションにおいて、どのように排他制御を実装したのかについてまとめました。ただ、内容が長くなりそうなので、何回かに分けて記載していこうと思います。 排他制御が必要となる機能要件について 初回のエントリ に記載通り、現在作成中の WEB アプリケーションの主機能はデータベース/ DWH 上のテ
Zabbixで生成AIを使用したログ分析
2025/01/06
ブックマーク
こんにちは、SCSK株式会社の小寺崇仁です。 先日、複数サーバからログが大量に出力された場合に、生成AIを使って分析したいと要望頂きましたので、実現してみたいと思います。 具体的には、「同一ホストグループ」で発生した「直近1日のログ」を生成AIに分析してもらいます。 検証内容 APサーバ（ap_1229）とDBサーバ(db_1229)を準備します。 APサーバからは、DBに接続でき
AJE グループは AWS Solutions を活用しデジタルトランスフォーメーションを加速する
2024/12/30
ブックマーク
日進月歩の世界において、世界 20 カ国以上で事業を展開する多国籍消費財（ CPG ）企業は、どのようにしてイノベーションの最先端を走り続けているのでしょうか。 それが、世界最大級の飲料会社であるペルーの CPG 多国籍企業 AJE Group （ AJE ） が、本格的なデジタル変革に乗り出すことを決めたときに直面した課題でした。 2019 年まで、同社はタスクごとに分断されたオ
Amazon S3内にあるApplication Load BalancerのアクセスログをAmazon Athenaで確認する方法
2024/12/26
ブックマーク
この記事は、 ニフティグループ Advent Calendar 2024 23日目の記事です。 はじめに こんにちは、新卒1年目の後藤です。 今回は、S3内にあるALBのアクセスログをAthenaで確認する方法について、記載していこうと思います。 Amazon Athenaとは クラウドインフラの運用において、ログ分析は不可欠です。 AWSでは、多くのサービスがログをAmazon CloudWatchとAmazon S3で保存しています。 しか
データベースのテーブル変換をLLMで半自動化する : データエンジニアリング領域におけるLLMの活用
2024/12/26
ブックマーク
今回の記事ではデータエンジニアリングの領域において、チームで取り組んでいるLLM活用のアプローチにつ ...
コピペで即完成！Spring Batch (Spring Boot 3)
2024/12/25
ブックマーク
目次 はじめに この記事の対象者 GitHubリポジトリ スケルトンバッチの解説 JobとStepの基礎 コード解説JOBクラス 実際にバッチを動かしてみる DBとCSVのバッチ解説 概要 ローカルDBのセットアップ マルチデータベース設定 Repositoryクラスとjooqの解説 DBからCSVバッチ解説 CSVからDBバッチ解説 継続的インテグレーション 終わりに はじめに こんにちは。KINTOテクノロジーズの共通
マルチ AZ 展開における SAP ネットワーク パフォーマンスの自動化と最適化
2024/12/25
ブックマーク
はじめに Amazon Web Services（AWS）には、あらゆる規模の組織のニーズを満たす SAP の導入パターンが複数用意されています。AWS では、 AWS patterns for Resilience に従って、SAP のワークロードは AWS リージョン内の複数のアベイラビリティゾーン（AZ）にまたがって展開することができます。 当社の標準的な推奨事項は、SAP システム（例：S/4HANA または ECC ）に複数の SAP アプリケー
PHP Conference Japan 2024【参加レポート】 #phpcon
2024/12/25
ブックマーク
はじめに 配配メール開発チームの id:takaram です。 2024年12月22日に、東京・蒲田で PHP Conference Japan 2024 が開催されました。 ラクス はブロンズスポンサーとして協賛させていただいたのに加え、エンジニア3名の トーク を公募で採択いただき、登壇してきました。 今回は ラクス からの参加者によるレポートを紹介させていただきます！ はじめに 参加レポート PHPの今とこ
LINE公式アカウント友だち追加経路一覧機能開発（インターンレポート）
2024/12/25
ブックマーク
LINEヤフー Advent Calendar 2024の記事です。 はじめに こんにちは。オークランド大学工学部ソフトウェアエンジニアリング科の中根萌花と申します。2024年のサマーインターンシ...