「Google BigQuery」に関連する技術ブログ

企業やコミュニティが発信する「Google BigQuery」に関連する技術ブログの一覧です。

PyCon JP 2024参加レポート

みなさんこんにちは。タイミーのデータエンジニアリング部 データサイエンスグループ所属の菊地と小関です。 2024年9月27日(金)、28日(土)に開催された PyCon JP 2024 に参加してきました。今回はPyCon JP 2024の雰囲気と、特に興味深かった&勉強になったトークセッションをいくつかピックアップしてお届けしようと思います! PyCon JPとは PyConJPは1年に1度開催されてい

dbt Coalesce 2024 のKeynote「Innovating with dbt」現地レポート

2024年10月7日から10日(現地時間)にかけて、dbt Coalesce 2024がラスベガスで開催されています。 私たち株式会社タイミーからは、4名が現地参加しました (※)。 今回は、カンファレンスの最初のKeynoteについてご紹介したいと思います。 このKeynoteでは、dbtのビジョンや今後の新機能リリースに関する熱いトピックが多く取り上げられ、非常に刺激的な内容となりました。

Gemini in Looker:自然言語でデータと会話!Conversational Analytics 体験レポート

はじめに こんにちは、クラウドエースに所属している篠田です。 本記事では、2024年9月12日にパブリックプレビューとなったLooker Studio Pro の新機能 Conversational Analytics (会話分析) についてご紹介します。 Conversational Analytics (会話分析) とは Conversational Analytics は、Gemini in Looker (機能群の総称) のひとつの機能で、生成 AI (Google Cloud の Gemini) を活用したデータクエリツールです

INSERT SELECTやCREATE TABLE ASでWITH句を使う時の注意点

こんにちは、 エニグモ 嘉松です。 BUYMA のプロモーションや マーケティング を担当している事業部に所属しており、その中のデータ活用推進室という部署で会社のデータ活用の推進や マーケティング ・オートメーションツール(MAツール)を活用した販促支援、 CRM などを担当しています。 さて、SELECT文で得た結果のデータを(そのまま、直接)テーブルに挿入する INSE

【Vertex AI】AI エージェント開発の実践から学んだ設計と最適化のポイント

こんにちは、クラウドエース CTO 室所属の茜です。 今回は、Vertex AI を活用した AI エージェント開発で得た知見を共有します。 この開発で直面した課題とその解決策を紹介することで、皆さんの AI エージェント開発の一助となれば幸いです。 はじめに 本記事では、社内 PoC として取り組んだ「ニュース記事から企業のリスク分析を行う AI エージェント」の開発プロセス

2024年9月のイチオシGoogle Cloudアップデート

G-gen の杉村です。2024年9月のイチオシ Google Cloud アップデートをまとめてご紹介します。記載は全て、記事公開当時のものですのでご留意ください。 はじめに Cloud Run の Deterministic URL が Preview → GA BigQuery の VECTOR_SEARCH() と vector index が Preview → GA AppSheet で管理者コンソールが利用可能に(Preview) VPC SC のルールで Googleグループが利用可能に(Preview) Firestore でベクトル検

【初学者向け】Vertex AI の使い方と機能の紹介

はじめに クラウドエースの SRE 部に所属している安田です。 この記事では Google Cloud が提供するフルマネージドの機械学習プラットフォームである Vertex AI についてご紹介します。 私は、以前から AI に興味があり、機械学習や AI 機能に触れてみたいと思っていましたが、専門的な知識や技術が必要でハードルが高くチャレンジできずにいました。そこで、学習済みモデル

Professional Machine Learning Engineer 認定試験範囲の解説

こんにちは。クラウドエース株式会社で Google Cloud 認定トレーナーをしている廣瀬 隆博です。皆さんは新しい事にチャレンジしていますか?私は昔から得意ではなかったスラッシュ メタルというヘヴィメタルのサブジャンルに再チャレンジしましたが、やはり得意ではありませんでした。とはいえ、それを再認識できたことはチャレンジしたおかげだなと感じています。

Google DriveのデータをDocumentAIとGASでSpreadSheetに出力する

はじめに こんにちは。クラウドエース バックエンド エンジニアリング部の中井です。 この記事では、Google Cloud が提供している Document AI を使って Google Drive に保存されたファイルを解析し、その結果を Google SpreadSheet に出力する方法について解説します。 クラウドエースの別の記事ではBigQueryでDocumentAIを利用する方法も紹介しているのでぜひ一読してみてください。 https

Cloud Asset Inventoryを徹底解説!

G-genの杉村です。Google Cloud(旧称 GCP)のリソースインベントリサービスである Cloud Asset Inventory を解説します。 Cloud Asset Inventory とは 料金 用語 アセット アセットタイプ アセット関係 フィード エクスポート 代表的なユースケース アセット履歴の確認 プリンシパルの検索 有効な IAM 権限を表示 アセット変更の通知 Asset Insight Cloud Asset Inventory とは Cloud Asset Inventory とは、Go

KPIのモニタリング自動化と運用体制の整備

はじめに こんにちは。データシステム部/推薦基盤ブロックの佐藤 ( @rayuron ) です。私たちはZOZOTOWNのパーソナライズを実現する推薦システムを開発・運用しています。推薦システムごとにKPIを策定していますが、データの欠損やリリース時の不具合によってKPIが意図しない値を取ることがあるため定常的に確認する必要があり、これをKPIのモニタリングと呼んでいます。

【GCP】👑Google Cloud認定資格 全冠までの2年間を振り返る👑

こんにちは。SCSKの山口翔平です。 最近、大谷翔平選手の活躍が凄まじいので便乗してフルネームで名乗ってみました。 2024年9月20日。大谷翔平選手が前人未到の 【50-50】 を達成した裏で、私、山口翔平がひっそり GCP認定資格【11冠】 を達成しました。 2022年9月にGoogle Cloud の部署に新人として配属され、ちょうど二年後の2024年9月に 認定資格11冠(全冠) を達成しまし

BigQueryで大きなテーブルを扱う際のTips~高額課金を防止したい~

こんにちは。SCSKの磯野です。 BigQueryでTBレベルの大きなデータを扱うとき、意図しない高額課金のリスクを抑えたいと思ったことはありませんか? 今回は、大きなテーブルを扱う上で、コスト削減につながるTipsをいくつかご紹介します。 BigQueryの課金体系 BigQuery の料金は主に次の 2 つの要素で構成されています。 コンピューティングの料金  は、SQL クエリ、ユーザ

BigQueryのパーティションフィルタを必須にするとどうなるのか

こんにちは。SCSKの磯野です。 BigQueryのパーティションフィルタについて、気になったことをいくつか調べてみました。 パーティションフィルタとは パーティションフィルタを有効にすると、パーティション列を適切に指定したWHERE句が存在しないときに、エラーとすることができます。これにより、必ずパーティションが効くクエリしか実行できなくなるため、フルスキ
技術ブログを絞り込む

TECH PLAY でイベントをはじめよう

グループを作れば、無料で誰でもイベントページが作成できます。情報発信や交流のためのイベントをTECH PLAY で公開してみませんか?