「データ分析」に関連する技術ブログ

企業やコミュニティが発信する「データ分析」に関連する技術ブログの一覧です。

BigQueryにおけるポリシータグを用いた秘密情報管理とデータ連携の仕組み

こんにちは、データ基盤の開発・運用をしている谷口( case-k )です。 本記事では、BigQueryで秘密情報を守るためのリソースである、ポリシータグをご紹介します。ポリシータグの概要から採用理由、仕様を考慮したデータ連携の仕組みや運用における注意点まで幅広くお伝えします。 ポリシータグとは ポリシータグを採用した理由 匿名化による機密性の高さ 機密性と

内製ソフトウェアアーキテクチャでレガシーシステムを刷新し技術的負債を削減するまでにやったこと

事業基盤ユニットアーキテクトグループのyoshikawaです。 今回のブログではLIFULL HOME'Sを構成するレガシーシステムのリアーキテクティングについて書いていきます。 2年前にリアーキテクティングプロジェクトが発足し、ソフトウェアアーキテクチャのベースにClean Architecture、言語にTypeScriptを採用し 新たなAPI(Backend For Frontend)を開発してきました。 「コードの品質」と「プ

改めてサービスアカウントとVMのアクセススコープを理解する

G-gen の渡邉@norry です。Compute Engine (GCE) にアタッチする サービスアカウント と VM の アクセススコープ の概念について整理してみました。 はじめに 前提知識 サービスアカウントとアクセススコープ Cloud IAM 検証 アクセススコープ = デフォルトのアクセス権を許可 アクセススコープ = すべての Cloud API に完全アクセス権を許可 サービスアカウントの権限を変更 まとめと補

タイミーのデータ基盤品質。これまでとこれから。

はじめに 以前のデータ基盤 3つの問題解決と振り返り 問題1: データパイプラインの更新遅延 解決策 実装 振り返り 問題2: 分析チームへのクエリ修正依頼の増加 解決策 実装 振り返り 問題3: ETLパイプラインにおける加工処理の負債 解決策 実装 振り返り これからの品質に関する改善 はじめに 初めまして、タイミーのDRE (Data Reliability Engineering) チームの土川( @tvtg_24 )です。

Google WorkspaceのFrontlineエディションを解説!

G-genの渡邉@norryです。皆さん、コラボレーションツールのGoogle Workspaceは利用されていますか?全社でGmailを利用したいけれど、現場スタッフの全員にライセンスを割り当てるには料金が...利用する端末どうしよう...どうやって契約すればいいの...などといったお悩みはありませんか?当記事では、そういった方に向けて Google Workspace Frontline をご紹介します。 Google Workspaceと

Google Workspace Frontlineエディションとは何か

こんにちは株式会社G-genの渡邉@norryです。 皆さんコラボレーションツールのGoogle Workspaceは利用されていますか? 今現在企業で利用されているGoogle WorkspaceのエディションとしてはGoogle Workspace BusinessやEnterpriseエディションを利用されている方も多いのでは無いかと思います。 全社でGmailを全員利用したいけど、現場スタッフ全員にライセンスを割り当てるには料金が...利用

IoBが拓く、身体とネットの新結合

IoBが拓く、身体とネットの新結合 2022.1.23 株式会社Laboro.AI マーケティング・ディレクター 和田 崇 概 要 2021年頃から急速に注目を集めている戦略的テクノロジーのトレンドのひとつ「IoB」。“身体や振舞いのインターネット化”を意味し、人々の状態や行動をデータとして取得することを目指すIoBとは、どのような概念で、今後どのような活用が見込まれるのでしょ

ログ解析によるアクセスログの可視化で運用を楽にしたい!

はじめまして。rks_mnkiです。 ラク スでひっそりとインフラエンジニアやってます。 特技は、蚊に刺されないことです。 さて今回は、 「 Apache アクセスログ に関するログ解析手法」 について、実際に検証を行った一例も踏まえながらご紹介したいと思います。 目次: 1.Apacheのアクセスログとは 2.「ログ解析」の必要性 3.確認したい具体的な情報 4.利用するツ

介護求人広告サービスのマッチングにディープラーニングを導入した話

はじめに 医療・介護・ヘルスケア・シニアライフの4つの領域で高齢社会の情報インフラを構築している株式会社エス・エム・エスのAnalytics&Innovation推進部( 以下、A&I推進部)でデータ分析基盤開発を担当している長谷川です。 A&I推進部はエス・エム・エス社内のデータを横断的に収集し、データの分析や加工から、データに基づく施策までを行う部門で、現在

ABテストとは?タイミーでのABテスト事例紹介

はじめに プロダクトチームの克海です。PdMの補佐をしながらプロダクトのデータアナリストをしています。 本記事ではアプリでのABを始めようといしている方に向けてのABテストの実施の流れと事例についてまとめた記事になります。 ABテストとは? ABテストとはランダム化比較試験ともいれる実験手法です。検証対象をランダムにグループ化して別々の介入をすること

OSS「Coppe」の公開 〜 BigQuery基盤のデータ監視ツールによるデータ品質担保

はじめに こんにちは、データシステム部データ基盤ブロックの纐纈です。9月から22卒内定者として、チームにジョインしました。 本記事では、弊社のデータ基盤チームが抱えていた課題と、その解決のために公開したOSSツール「Coppe」を紹介します。Coppeは、以下のような方にお勧めできるツールです。 BigQueryを使用したデータ基盤の監視に興味がある BigQueryの監視ツー

社員がやりたいスキルアップに取り組める仕組みを作ってみたお話

この記事は、 NTT Communications Advent Calendar 2021  25日目の記事です。 はじめに こんにちは、データプラットフォームサービス部(以下DPS部)白土です。 普段は企画部門で部内メンバーの業務支援やスキルアップ支援を行っています。 今回は、DPSとして行っているスキルアップ支援の具体的な取り組み内容を紹介します。(NTT Com全社施策ではなく部署独自の取り組みです。)

【これからデジタル広告業界に進みたい方へ!】デジタル広告運用担当者の1日の過ごし方と3つの大切なスキル

本記事はNRIネットコム Advent Calendar 2021 24日目の記事です。 ✨ 23日目 ▶▶ 本記事 ▶▶ 25日目 🍰こんにちは、デジタルマーケティングコンサルタントの山川です。私は、デジタルマーケティング関連プラットフォームの導入活用支援や、データ分析業務、デジタル施策の企画、立案などデジタルマーケティングに関する様々な業務を行ってきました。 現在はデジタル広告

モダン実装でステキな DNS フルリゾルバ Knot Resolver を紹介するよ

この記事は NTTコミュニケーションズ Advent Calendar 2021 23日目の記事です。 はじめに こんにちは。デジタル改革推進部の髙田( @mikit_t )です。 業務では社内向けのデータ分析基盤の設計・開発および運用を行なっています。 データドリブン経営を推進するため、社内に散らばる様々なデータを収集・蓄積。データサイエンティストはもちろんのこと、各部署でのデータドリブ

KEELでURI毎のサクセスレートを可視化してみた話

LIFULL札幌開発拠点で働くエンジニアの村田です。 本エントリーは LIFULL Advent Calendar2021 、12月20日の記事になります。 私が働く札幌では、この時期雪が積もり始め寒さも厳しくなってきます。 東京本社から札幌に職場を移してから早3年が経ちましたが、ようやく札幌の寒さにも慣れてきた今日この頃です。 私が所属する部署は東京本社と札幌支社のエンジニアで構成され
技術ブログを絞り込む

TECH PLAY でイベントをはじめよう

グループを作れば、無料で誰でもイベントページが作成できます。情報発信や交流のためのイベントをTECH PLAY で公開してみませんか?