「Apache Spark」の検索結果

ETL処理がシンプルになる!AWS Glue 3.0で使えるようになったPySparkの関数紹介

KAKEHASHI の、Musubi Insight チームのエンジニアの横田です。 KAKEHASHI では BI ツールの Musubi Insight という Web アプリケーションを提供しています。 BI ツールでは薬剤師さんの業務データを可視化しておりますが、そのデータの集計処理には AWS Glue を使っています。 今年 AWS Glue 3.0 が使えるようになり、できることが増えました。 チームのデータ基盤の概要と、AWS Glue 3.0 になっ

#AWS #MySQL #Docker #Apache Spark 

会社の非効率を無くす - エンジニア合宿に向けたテーマ決定までのプロセスを公開します

スマートキャンプでPMをしている郷田です! 10月に毎年恒例の開発合宿に行ってきました! 私たちチームは4日間で社員同士のコラボレーションを目的とした SPARK(スパーク) というプロダクトを作りました。 合宿記事第3弾として、この記事ではSPARKができるまでに行った課題抽出〜プロダクト立案までのプロセスをご紹介します! ▼過去の2本はこちら tech.smartcamp.co.jp te

#Apache Spark #Ruby on Rails #Nuxt.js #Vue.js #PWA #API