「ビッグデータ」に関連する技術ブログ
企業やコミュニティが発信する「ビッグデータ」に関連する技術ブログの一覧です。
全154件中 31 - 45件目
プロダクト開発にデータ職責として浸かってみて思ったこと
2024/08/14
ブックマーク
はじめに 背景 業務フロー 1. 分析の準備 KPIとログの設計 A/Bテストによる効果検証の準備 2. データの準備 エンジニアリング目線も加味しつつログ設計を最適化出来る データのニーズの変化に臨機応変に対応できる 3. データの分析 終わりに はじめに DELISH KITCHENでデータサイエンティストをやっている山西です。 今回は「データサイエンティストとしてプロダクト開発プ
Cloud FunctionsのCloud Storageトリガーをフォルダレベルで指定したい！！
2024/08/05
ブックマーク
こんにちは！SCSKの江木です。 先日、Dialogflow CXのAgentからのテストケース作成を自動化していて、「あるフォルダにファイルがアップロードされたら起動するCloud Functionsを作りたい」とふと思いました。（テストケース作成自動化について知りたい方は以下のブログを参照ください。） Dialogflow CX Agentからの単体テストケース作成を自動化してみる 今回はテストケース作成
BigQuery × Apache Iceberg で実現するデータレイクハウス構築
2024/08/02
ブックマーク
はじめに こんにちは、クラウドエース データソリューション部の松本です。 普段はデータ基盤や機械学習システムの構築を行なっており、Google Cloud 認定トレーナーとしてトレーニング提供もしています。 クラウドエース データソリューション部 について クラウドエースのITエンジニアリングを担う システム開発統括部 の中で、特にデータ基盤構築・分析基盤構築か
Google Cloud Next Tokyo '24 速報レポート（プロジェクト間での分析を可能にした高セキュリティな企業データ分析基盤の構築と生成 AI の活用）
2024/08/02
ブックマーク
G-gen の堂原です。当記事では、Google Cloud Next Tokyo '24 セッション「 プロジェクト間での分析を可能にした高セキュリティな企業データ分析基盤の構築と生成 AI の活用 」に関する速報レポートをお届けします。 他の Google Cloud Next Tokyo '24 関連記事は Google Cloud Next Tokyo '24 の記事一覧 からご覧いただけます。 概要 事業紹介 初期の課題とアプローチ 企業データ分析基盤 生成 A
デジタル時代のサバイバルガイド：運用保守とグローバルリスク
2024/07/24
ブックマーク
はじめに
医療へのAI導入。いのちを守るための壁を越えるには
2024/07/22
ブックマーク
医療へのAI導入。いのちを守るための壁を越えるには 2021.8.15公開 2024.7.22更新 概 要 AIはさまざまな分野で導入が進んでいますが、「精度の高さ」が特に求められるのが医療現場です。もちろん、人の命を扱うためです。医療現場へのAIの導入を目指す方に向け、活用事例やメリット、課題、関連分野でのAI活用の状況についてお伝えします。 目 次 ・ 医療現場でのAI導
AWS Weekly Roundup: Amazon Bedrock と Amazon Q の高度な機能など (2024 年 7 月 15 日)。
2024/07/18
ブックマーク
予想されていたとおり、 AWS Summit ニューヨーク では、たくさんのエキサイティングなリリースやアップデートが発表されました。 AWS Summit ニューヨーク 2024 年注目の発表 のハイライトをご覧ください。 私の同僚で、AWS ニュースブログのライター仲間でもある Veliswa Boya と Sébastien Stormacq は、先週 AWS Community Day カメルーン に出席しました。クラウドテクノロジーについて
データドリブンカルチャーの作り方
2024/07/16
ブックマーク
本記事は 2019年9月9日に公開された ”How to Create a Data-Driven Culture” を翻訳したものです。 「もしデータがあるなら、データを見ましょう。もし皆さんに意見しかないのなら、私の意見に従ってください。」 ― ジム・バークスデール データドリブンな企業について語られるとき、多くの場合、ツールやビッグデータ、データの蓄積/加工/分析をより迅速かつ安価にした技術
AWS Graviton4 ベースの Amazon EC2 R8g インスタンス: Amazon EC2 史上最高のコストパフォーマンス
2024/07/11
ブックマーク
7月9日、 re: Invent 2023 からプレビュー版として 提供されていた新しい AWS Graviton4 ベースの Amazon Elastic Compute Cloud (Amazon EC2) R8g インスタンスが一般公開されたことをお知らせします。AWS は、150 種類以上の AWS Graviton 搭載の Amazon EC2 インスタンスタイプを世界中で大規模に提供し、200 万個以上の Graviton プロセッサを構築してきました。また、5 万社を超えるお客様が AWS Graviton
AWS Summit Japan 2024: SCSKメンバー3名によるセッションまとめレポート
2024/07/04
ブックマーク
こんにちは。SCSK 稲葉・川原・間世田です。 6月20日と21日に幕張メッセで開催された「 AWS Summit Japan 2024 」に参加してきました！本イベントは、日本最大のAWSに関する学びの場であり、2日間にわたってさまざまなセッションや展示が行われました。 私たち3名で各セッションやブースを回りましたので、その感想やレポートを共有したいと思います。 イベント概要 AWS Summit
開発生産性カンファレンス 2024に参加してきました！
2024/07/02
ブックマーク
こんにちは、中嶋です！ 先日の2024年6月28日〜29日に開催されたファインディ株式会社が主催する開発者生産性カンファレンス 2024に参加してきたので、本記事では参加したセッションの中で印象に残ったところや全体を通しての感想などをお伝えできればと思います！ 会場の様子 参加したセッションの感想 価値創造と開発生産性 開発組織の生産性を加速させる: 継続的
Snowflake x dbt: クエリの並行実行で直面した課題と並行数のコントロール
2024/07/02
ブックマーク
はじめに こんにちは！ Nowcast (株式会社ナウキャスト, Finatextグループ)でデータエンジニアをしているマサ(Masahiro Fukui, Linkedin )と申します。求人広告データやクレジットカードの決済データをはじめとする様々なデータを処理するパイプラインとデータプロダクトの開発に携わってきました。 HRog賃金Now : 求人広告から作成される募集賃金指数や求人数指数 JCB消費NOW : クレ
【概説】Frank-Wolfe法により誘導されるスパース性
2024/06/18
ブックマーク
init_mathjax = function() { if (window.MathJax) { // MathJax loaded MathJax.Hub.Config({ TeX: { equationNumbers: { autoNumber: "AMS", useLabelIds: true } }, tex2jax: { inlineMath: [ ['$','$'], ["\\(","\\)"] ], displayMath: [ ['$$','$$'], ["\\[","\\]"] ], processEscapes: true, processEnvironments: true }, displayAlign: 'left', CommonHTML: { linebreaks: { automatic: true } } }); MathJax.Hub.Queue(["Typeset", MathJax.Hub]); } } init_mathjax(); addEventListener("DOMContentLoaded",function(){var a=do
Amazon MSK が Raft モードの Apache Kafka (KRaft) をサポートしました
2024/06/05
ブックマーク
企業はリアルタイムでデータをキャプチャして分析するために、Apache Kafka と Amazon Managed Streaming for Apache Kafka(Amazon MSK) を採用しています。 Amazon MSK は、Kafka のインフラ管理の専門知識や Apache Kafka を自分で設定して実行することに伴う複雑なオーバーヘッドへの対処なしに、Apache Kafka 上で本番アプリケーションを構築および実行できるよう支援します。 リリース当初から
責任共有モデルを踏まえた管理目的と管理策の考え方ー次世代医療基盤法ガイドラインを参考にしてー
2024/05/27
ブックマーク
セキュリティは私たちにとっての最優先事項であり、お客様にとっても重要な関心事となります。一方、セキュリティのコントロール（管理策）が妥当性をもって評価されなければ、不要な管理策の導入や、ビジネスの進展の妨げとなる場合もあります。本Blogでは、医療のビッグデータ活用をうながす 「医療分野の研究開発に資するための匿名加工医療情報に関する法律