Apache Spark
イベント
注目のイベント
人気
04/24(木)
12:00〜13:45
オンライン
251
/ 260
人
マガジン
技術ブログ
Docker コンテナを使って AWS Glue 5.0 のジョブをローカルで開発・テストする
2025/04/14
ブックマーク
AWS Glue は、さまざまなデータソースからのデータを大規模に処理・統合できるサーバーレスのデータ統合サービスです。Apache Spark ジョブ用の最新バージョンである AWS Glue 5.0 は、バッチ処理とストリーム処理に最適化された Apache Spark 3.5 ランタイム環境を提供します。AWS Glue 5.0 を使えば、パフォーマンスの向上、セキュリティの強化、次世代の Amazon SageMaker のサポート、
BigQueryの新発表を解説（Google Cloud Next '25速報）
2025/04/11
ブックマーク
G-gen の杉村です。当記事では、Google Cloud Next '25 で発表された BigQuery の新機能について紹介します。 概要 BigQuery と AI の統合 全体像 BigQuery data preparation データセットレベルのインサイト（BigQuery データキャンバス） BigQuery pipelines にデータエンジニアリングエージェントが組み込み Colab Notebook にデータサイエンスエージェントが組み込み BigQuery AI query engine BigQuery DataFrames
氷山を穿つ - Apache Icebergに大量データを投入するTopic -
2025/03/31
ブックマーク
こんにちは、柴犬がかわいい。Tech本部の前多です。 先日、弊社でApache IcebergとTrinoによる活用事例についての記事を上げました。 caddi.tech 記事では、Icebergへのデータ投入について次の記述がありました。 ユーザがアップロードしたCSVファイルをパースしてIcebergに保存する 図面の解析結果を一定間隔のバッチで受け取りIcebergに保存する 実際のところ、ファイルからIceberg
書籍
発売日 : 2025年04月18日
発売日 : 2025年05月28日
発売日 : 2025年03月19日
