「ビッグデータ」に関連する技術ブログ
企業やコミュニティが発信する「ビッグデータ」に関連する技術ブログの一覧です。
全154件中 91 - 105件目
製造業に求められる「しなやかさ」。AI活用のスマートファクトリーで実現へ
2023/05/17
ブックマーク
製造業に求められる「しなやかさ」。AI活用のスマートファクトリーで実現へ 2023.5.17 株式会社Laboro.AI リードマーケター 熊谷勇一 概 要 製造業において「スマートファクトリー」化を進めることは、国家レベルの方針でも示されていることもあり、今後変わらないであろう流れであり、推進している企業は少なくありません。生産性を高めるだけでなく、人材不足の
kintoneとBigQueryをリアルタイム連携してみた
2023/05/16
ブックマーク
こんにちは。ML・データ部 データ基盤ブロックの塩崎です。最近はつちのこフェスタが4年ぶりに開催されたというニュース 1 でアフターコロナの訪れを感じています。 さて、データ基盤のためのデータ転送パイプライン構築といいますと、多くの方はMySQLなどのデータベースからのデータ連携を思い浮かべるかと思います。実際にシステムの保有する多くのデータはデ
Dataprocを利用してPySparkを触ってみた(feat.Jupyter Notebook)
2023/05/12
ブックマーク
はじめに こんにちは、クラウドエース データ/MLディビジョン所属の金です。 最近ビッグデータの重要度が高くなっているのでビッグデータ処理ができるさまざまな方法の一つのPySparkを試してみます。 今回はGoogle CloudサービスのDataprocでクラスタを起動し、そこからJupyter Notebookを起動してPySparkを試してみます。 Cloud Dataprocとは？ Dataprocは、「Apache Hadoop、Apache Sparkなどの
【第1回】ブロックチェーンとは
2023/05/10
ブックマーク
はじめに みなさんは、「ブロックチェーン」という言葉を聞いたことがあるでしょうか？ ブロックチェーンとは、ビットコインやイーサリアムなどの「暗号資産」と呼ばれるデジタルな通貨や資産を実現するために使われている技術です。 暗号資産は、銀行の預金や企業発行の電子マネーなどとは異なり、暗号技術を用いて誰でも自由に通貨を発行できる点に特徴があ
Google Cloud Digital Native Leader’s Meetup に参加しました
2023/04/21
ブックマーク
Google Cloud Digital Native Leader’s Meetup に参加しましたチーフデータサイエンティストの Mario です！ 2023年3月24日（金）、Google Cloud Japan 様より Digital Native Leader’s Meetup にご招待頂き、参加してきましたのでレポートします。とてもありがたいことに Lightning Talk のスピーカーとして登壇させて頂きましたので、その内容についても触れていきます。 日本のデータ活用のリーダー
『Beacon Bank x ChatGPT で叶えるパーソナルコンシェルジュ』を作ってみた
2023/04/17
ブックマーク
チーフデータサイエンティストの Mario です！ 皆さん、ChatGPT、使ってますか？毎日何かと話題に事欠きませんね。私も日々 ChatGPT を使い倒しています。この記事も ChatGPT のサポートを得ながら書いています。unerry 社員も個人的に ChatGPT の活用する人が増え、度々 Slack が盛り上がっています。 ビッグデータと掛け合わせての活用方法は無限にあり、積極的に取り入れて行
新卒エンジニアにおすすめの技術本は？セーフィーエンジニアにアンケート！
2023/02/13
ブックマーク
こんにちは！エンジニアの大林です。 先日セーフィーのエンジニアにアンケートを取ったので、今回はその内容をお届けします。 アンケートのテーマは「新卒エンジニアにおすすめの〇〇は？」ということで、以下の3つについて聞いてみました！ 技術本 技術以外の本 本以外の学習媒体 新卒エンジニアにおすすめの技術本は？ 新卒エンジニアにおすすめの技術以外の本
分間10万リクエストを捌く、メール/プッシュ通知 大量配信AWSアーキテクチャ
2023/02/02
ブックマーク
こんにちは。 株式会社ココナラで技術戦略室を担当しているKと申します。 本記事では、ココナラで使用しているメール/プッシュ通知の配信基盤についてお話ししたいと思います。 この基盤は2年ほど前に構築したものです。 今回記事に取り上げたのは、今後AWSにコストを抑えた上で高速に処理する仕組みを構築する際の参考になるかもしれないと思ったためです。 本記
セッショナイズで機械学習モデルの精度を改善した話
2022/12/16
ブックマーク
こんにちは、データサイエンティストの堀部です。 この記事は Enigmo Advent Calendar 2022 の16日目の記事です。 普段の業務では情報検索(検索/レコメンド)、不正検知、ユーザー属性の推定などを BUYMA にプロダクトとして組み込むことを行っています。その中でも モデリング 以前のタスク設計や探索的データ分析( EDA : Explanatory Data Analysis)、データのクレンジング・前処理、特
BigQuery上の地理情報を可視化する方法 3選
2022/12/05
ブックマーク
こんにちは。Insight Edge引越し好き(?)Data Scientistの中野です。 最近は1年半のペースで引越してるので、免許書の住所記入欄が足りなくなり付箋のようなものに住所を記入しています！ 新しいエリアに引っ越す時は近隣のカフェや本屋情報を調査しているのですが毎回イマイチ綺麗に可視化できないので、 今回は地理情報データを可視化できるツールの比較や、その際のち
AI導入企業の初の過半数越え。高品質AIを支えるデータセントリックとは
2022/11/17
ブックマーク
AI導入企業の初の過半数越え。 高品質AIモデルを支えるデータセントリックとは 2022.11.17 株式会社Laboro.AI リードマーケター 熊谷 勇一 概 要 「AI導入は当社には早い、まだ様子見だ」とは言っていらない状況になってきました。日本企業はなんとなくも含めて「導入が遅い」と言われてきたが、過半数の53％が既に導入していることが判明。いつまでも導入を検討しな
分析基盤BIツールにQuickSightを選んだ理由
2022/09/28
ブックマーク
医療・介護・ヘルスケア・シニアライフの4つの領域で高齢社会に適した情報インフラを構築している株式会社エス・エム・エスのAnalytics&Innovation推進部（ 以下、A&I推進部）でデータ分析基盤開発を担当している長谷川です。 A&I推進部はエス・エム・エス社内のデータを横断的に収集し、データの分析や加工から、データに基づく施策までを行う部門で、現在は介
LuupのSREチーム紹介
2022/09/06
ブックマーク
こんにちは。Luup Developers Blog編集部の堀内 (@shinya_h) です。 この記事では弊社SREチームの役割や達成したいこと (ゴール) を紹介します。本記事を通じて弊社のSREチームの様子を少しでもお伝えできると嬉しいです。 なお、SREとはサイト・リライアビリティ・エンジニアリング (Site Reliability Engineering) の略称です。Google社が提唱、実践しているシステム管理とサービス運用の
LuupのSREチーム紹介
2022/09/06
ブックマーク
こんにちは。Luup Developers Blog編集部の堀内 (@shinya_h) です。 この記事では弊社SREチームの役割や達成したいこと (ゴール) を紹介します。本記事を通じて弊社のSREチームの様子を少しでもお伝えできると嬉しいです。 なお、SREとはサイト・リライアビリティ・エンジニアリング (Site Reliability Engineering) の略称です。Google社が提唱、実践しているシステム管理とサービス運用の
AIは「善」か、それとも「悪」か。倫理と進歩の境界線
2022/07/21
ブックマーク
AIは「善」か、それとも「悪」か。倫理と進歩の境界線 2022.7.21 監 修 株式会社Laboro.AI マーケティング・ディレクター 和田 崇 概 要 “AI” と画像検索すると、表示結果に並ぶのは白い顔のヒューマノイドたち。また、オバマ前米大統領のぼやけた顔画像をアルゴリズムに投入し高解像度画像に再現した結果、白人男性の顔になってしまった…など、 AI のバイアスを