「SQL」に関連する技術ブログ
企業やコミュニティが発信する「SQL」に関連する技術ブログの一覧です。
全802件中 106 - 120件目
AWS でスケーラブルな IoT アナリティクスを実現
2024/08/01
ブックマーク
モノのインターネット (IoT) は、日々テラバイトの情報を流す数十億のデバイスがあり、前例のないほどのデータを生成しています。IoT データから貴重な分析情報を得ようとする企業や組織にに対して、AWS が強力な分析サービスを提供しています。 AWS IoT Analytics は、IoT 分析に着手する多くの顧客にとって出発点となります。このフルマネージドサービスでは、IoT データ
2024年7月のイチオシGoogle Cloudアップデート
2024/08/01
ブックマーク
G-gen の杉村です。2024年7月のイチオシ Google Cloud アップデートをまとめてご紹介します。記載は全て、記事公開当時のものですのでご留意ください。 はじめに 新サービス「Dataplex Catalog」が公開(GA) Cloud Monitoring アラートポリシーの有償化 Google Meet で文字起こしや録画を事前設定できるように Spanner で Dual-region 設定が可能に Google Docs で Markdown のインポート・エクスポー
Looker の datagroup 活用ガイド: キャッシュ更新とパフォーマンス最適化のベストプラクティス
2024/07/31
ブックマーク
はじめに こんにちは、クラウドエース データソリューション部 の尾杉です。 最近、Looker の datagroup のトリガーに関する挙動が分からなかったので、調査しながらその知見を整理し、記事としてまとめることにしました。 datagroup は、Explore のキャッシュポリシーの定義や、永続化派生テーブル(PDT)の再構築を行うためのトリガー設定を可能にします。異なる Explore や PD
DeltaLake Universal Formatを使ったクロスプラットフォーム分析
2024/07/30
ブックマーク
本記事では6月に開催された DATA+AI Summit 2024 でGeneral Availabilityが発表された Databricks のDeltaLake Universal Formatの機能を使ってクロスプラットフォームでの分析を実現する方法について紹介します。 DeltaLake Universal FormatはDeltaLakeに保存されたデータをApache Icebergなどの異なるフォーマットで読み出すことができるようにする機能です。本記事では実際にDatabricks上でDeltaLake Universal F
週刊AWS – 2024/7/22週
2024/07/29
ブックマーク
みなさん、こんにちは。ソリューションアーキテクトの根本です。 今週も 週刊AWS をお届けします。 みなさん他国のAWS Summitはチェックされていますか?先日行われたAWS Summit New York 2024ではAmazon BedrockやAmazon Qに関連した多くの生成AI機能が発表されました。そこで発表された機能をいくつかのデモを交えてご紹介するセミナーが予定されています。ご都合つけばぜひご参加
DBREの行くdb tech showcase 2024レポート
2024/07/26
ブックマーク
こんにちは、技術本部 SRE部 基幹プラットフォームSREチームの斉藤です。普段はZOZOの持っている倉庫システムやブランド様が触る管理ページなどのサービスのオンプレミスとクラウドの構築・運用に携わっています。またDBREとしてZOZOTOWNのデータベース全般の運用・保守も兼務しております。 7月11日、12日に行われた「 db tech showcase 2024 」に、DBREから5名のエンジニアが参
BigQueryテーブルエクスプローラを試してみた
2024/07/26
ブックマーク
G-gen の奥田梨紗です。本記事では BigQuery の新しい機能である「テーブル エクスプローラ」の機能やユースケースについて紹介します。 テーブル エクスプローラとは 手順 想定されるユースケース 1. データの全体像を確認 2. 特定期間で確認(パーティション分割テーブルのみ) 3. クエリ作成を簡略化 注意点 プレビュー段階である クエリ費用が発生 テーブル エクスプロ
NATゲートウェイの通信内容を調査して対策し、コストを約60%削減した話
2024/07/26
ブックマーク
はじめに こんにちは。WEARバックエンド部SREブロックの 春日 です。普段は WEAR というサービスのSREとして開発・運用に携わっています。本記事では、約60%のコスト削減に成功した NATゲートウェイ の通信内容の調査方法と通信量の削減方法についてご紹介します。 目次 はじめに 目次 背景 コストの把握 NATゲートウェイの通信内容の把握 CloudWatchメトリクスでの確認 VPCフ
Amazon RDS for SQL Server における Performance Insights でのクエリ性能のモニタリング
2024/07/24
ブックマーク
Amazon RDS Performance Insights は Amazon Relational Database Service (Amazon RDS) の強力な機能で、データベースのパフォーマンスに関するリアルタイムおよび過去のインサイトを提供します。パフォーマンスボトルネックのトラブルシューティング、遅いクエリの特定、システムの最適化など、どのような目的でも Performance Insights は役に立ちます。Performance Insights を使用するとデータベー
10年目 GOサービスの運用について(ビルド、スケーリング、監視)
2024/07/22
ブックマーク
2024年6月8日(土)に開催された、Go Conference 2024 Springにて、ミイダスは"Go"ld スポンサーを務めさせて頂き「 10年目 GOサービスの運用について(ビルド、スケーリング、監視) 」というタイトルで、弊社の磯崎が発表をしました。 転職サービス「ミイダス」ではリリース当初からGoを採用し、現在運用10年目です。この10年目のGoサービスをどのように運用しているか詳細を共有
Snowflake x dbt 環境で改善したデータ分析・指数開発体験を大公開!
2024/07/19
ブックマーク
はじめまして!ナウキャストでデータエンジニア / データサイエンティストをしている大森 (X: @yukimooori )です。普段はオルタナティブデータを活用した民間統計の作成や、データパイプラインの構築などを行なっています。 ナウキャストでは2023年から Snowflake x dbt の環境を導入し、全社の各プロジェクトで利活用を進めています。 今回の記事ではこの Snowflake x dbt 環境 を
Google Cloud で簡単に分散処理 〜Dataflow job builder のご紹介〜
2024/07/17
ブックマーク
はじめに こんにちは、クラウドエース データソリューション部の伊藤です。 普段は、データ基盤や機械学習基盤の構築だったり、Google Cloud 認定トレーナーとしてトレーニングを提供しております。 クラウドエース データソリューション部 について クラウドエースのITエンジニアリングを担う システム開発統括部 の中で、特にデータ基盤構築・分析基盤構築からデー
Amazon Q Developer (IDE 内) をプライベートコードベースでカスタマイズ
2024/07/17
ブックマーク
7月10日、 Amazon Q Developer (IDE 内) のカスタマイズ機能をインラインコード補完で一般利用できるようにし、チャットのカスタマイズ機能のプレビューをローンチしました。 Amazon Q をカスタマイズして、IDE コードエディタとチャットにおいて、プライベートコードリポジトリから特定の推奨コードを生成できるようになりました。 Amazon Q Developer は人工知能 (AI) コーディング
Cloud SQL Proxy Operator を使ったプライベート IP の Cloud SQL インスタンスへの接続
2024/07/16
ブックマーク
要約 クラウドエースの北野です。 Cloud SQL Proxy Operator を使って、GKE からプライベート IP のみを有する Cloud SQL インスタンスに接続する方法を紹介します。 以下のような GKE 上の Pod から Cloud SQL への接続を実現させます。 構築の手順は以下の通りです。 Google Cloud 上で GKE クラスター、 Cloud SQL インスタンス、Pod 用の Service Account の作成 Kubernetes に Cloud SQL Proxy Operator のイン
【二卒】IT完全未経験の第二新卒が、入社から1年で案件管理者になった話(後編)
2024/07/16
ブックマーク
おさらい