「SQL」に関連する技術ブログ(146件)

企業やコミュニティが発信する技術ブログから「SQL」に関連するものを表示しています。

Apache Hudi を用いてレコード単位で削除可能なデータレイクを構築した話

2022/05/25
Yahoo!広告のデータレイクに Apache Hudi を導入し、削除・更新が可能なデータレイクを実現した事例を紹介します。

#AWS #オンプレミス #Presto #Apache Spark #Apache #Avro #SQL #Hadoop #機械学習 #データ分析 

ZOZOTOWNで最大級のイベントである新春セールを乗り越えるための負荷試験とその効果

はじめに こんにちは、SRE部の秋田と伊藤です。普段はZOZOTOWNのオンプレミスとクラウドの運用・保守・構築に携わっています。 新春セールはZOZOTOWNの中でも最も力を入れているイベントの1つであり、セール開始直後は毎年最大級のアクセスやトラフィックが発生しています。この新春セールを無事に乗り越えるために2020年度から負荷試験を実施しています。負荷試験のシ

#Splunk #Microservices #AWS #SQL #インフラ #フロントエンド #データベース #アーキテクチャ #設計 #オンプレミス 

新卒エンジニアからマーケティング部に異動して気づいたエンジニアとして経験して良かったこと

2022/05/13
こんにちは。新卒2年目のRYOBALです。 僕は入社後サーバーサイドエンジニアとして配属され、一年後にあたる今年4月から マーケティング 部に異動しました。 元々、 マーケティング 部の業務には興味を持っており、タイミングよくこの機会に希望した部署に異動となりました。 今回は マーケティング 部に移動して1か月が経ったので、エンジニアから マーケティング 部

#Google BigQuery #SQL #Laravel #Metabase #PHP #サーバーサイド #データベース #プログラミング 

開発環境のAurora Serverless費用節約術(CDKサンプルコード付き)

こんにちは。X(クロス) イノベーション 本部の耿です。 Amazon Aurora Serverlessは、コンピューティングとメモリのキャパシティ(Aurora 容量ユニット = ACU)をリク エス ト数に応じて自動で変化させることができるデータベースサービスです。事前のスケーリング計画が不要になるほか、実際のワークロードに合わせてキャパシティを増減させるため、費用の最適化に向いて

#AWS Lambda #JavaScript #AWS #TypeScript #MySQL #Node.js #SQL #データベース 

PostgreSQL + TimeScaleDBでログ管理検討 - TimeScaleDBについて

TimeScaleDBの特徴 TimeScaleDBの機能とライセンス TimeScaleDBの開発状況 TimeScaleDBのデータ管理 こんにちはヤマウチです。 ラク スではいろいろなサービスで PostgreSQL を使っていますが、ログのような時系列データを PostgreSQL で効率的に管理する方法について調査しました。 ログのような時系列データには以下のような特徴があります。 追記と削除のみで更新は必要ない 時間が経

#PostgreSQL #SQL #データベース #アーキテクチャ #OSS 

簡単にできる! データベースアプライアンスのバージョンアップ

はじめに さくらのクラウドには、データベースのインストールやセットアップ作業が不要で即座に利用を開始できる 「データベースアプライアンス」 があります。この記事では、データベースアプライアンスで使用しているデータベースのバージョンアップ方法をご紹介します。 作業の概要 最新バージョンより古いバージョンのデータベースアプライアンスを作成して

#SQL #PostgreSQL #MariaDB #API #データベース #ネットワーク 

SHOPLISTで5年ぶりに新入社員向けにプログラミング研修を再開した話

2022/04/21
こんにちは。クルーズ株式会社CTOの鈴木です。 今回は開発の話とは少し話がずれるのですが、5年ぶりに新入社員向けプログラミング研修をしましたという話をしたいと思います。 CROOZ では2013年度から2016年度のエンジニアとして配属する新入社員までは新入社員向けの教育としてプログラミング研修を配属前の3カ月間行っていました。 その後紆余曲折あり2017年度以降は

#SQL #プログラミング #設計 

未経験エンジニアが社内の管理画面をMetabaseに移行してみた

2022/04/15
こんにちは。新卒1年目のRYOBALです。 SHOPLISTでは社内のMDやプロモーション部、開発部などが使用している管理画面が存在するのですが、今回はその管理画面の一部をMetabaseというツールに移行する業務を行ったので、その内容について発信していきます。 これまで Metabase を使ったことがある方、これから使う方、 SHOPLIST でどんな業務をしているのか気になる方はお楽しみ

#Metabase #SQL #PHP #OSS 

入社後、研修でじゃんけんゲームの開発することになったが絶望した件

2022/04/01
こんにちは。今日から2年目に突入したエンジニアのKEN☆YAMAGUCHIです。 今回のテーマは、僕がちょうど1年前に経験した開発研修についてです。開発研修とは具体的に言うと、SHOPLISTに4月に入社してから、開発部に配属されるまで行った、3か月間の研修のことです。この3か月間の開発研修ではいくつかの研修を行いましたが、その中でも最初に行った研修である「じゃんけ

#PHP #SQL #ゲーム #テスト #プログラミング #初心者 

SQL Serverのバージョンアップ時に必要なクエリ互換性に関する検証精度を向上させた話

こんにちは。技術戦略部の廣瀬です。 弊社ではサービスの一部にSQL Serverを使用しています。SQL Serverの各バージョンにはMicrosoftのサポート期間が設定されています。直近ではSQL Server 2012のサポートが、2022年7月12日に終了します。サポートが切れる前にSQL Serverのバージョンを上げる必要がありますが、既存環境で実行中のSQLがバージョンアップ後も正常に動作するか事前検

#SQL #SQLServer 

オンプレのreadonlyデータベースをクラウド化した話

はじめに こんにちは、技術本部SRE部ZOZOSREチームの堀口/柳田です。普段はZOZOTOWNのオンプレミスとクラウドの構築・運用に携わっています。 ZOZOTOWNではSQL Serverを中心とした各種DBMSが稼働しています。 その中で検索処理における参照に特化された役割を持つデータベース群をReadOnlyデータベース(以下、RODB)と呼んでいます。これらは日々増加するZOZOTOWNのトラフィック

#Windows #SQL #SQLServer #AWS #SRE #PaaS #DX #オンプレミス #インフラ #データベース 

DynamoDBによるOutboxパターンとCDCを用いたCQRSアーキテクチャの実装〜ZOZOMOでの取り組み

こんにちは。ブランドソリューション開発部プロダクト開発ブロックの岡元です。普段は Fulfillment by ZOZO とZOZOMOのブランド実店舗の在庫確認・在庫取り置きサービスの開発、保守をしています。 本記事では、ブランド実店舗の在庫確認・在庫取り置きサービスで実装したCQRSアーキテクチャについて紹介させていただきます。 CQRSの実装においては、データベース(以下、D

#ドメイン駆動 #SQL #AWS #データベース #アーキテクチャ #CS #設計 

スマキャンが新データ分析基盤のBIツールにLookerを選んだ理由

こんにちは!スマートキャンプエンジニアの井上(エース)です! 皆さんは自社プロダクトに対してどのようにデータ分析をされていますか? データ分析基盤は構築されているものの、少なからず課題を抱えている企業も多いかと思います。 今回は弊社の BOXIL SaaS に 新しいデータ分析基盤を導入することになった ので、その背景や導入にあたって課題だったこと、その

#Looker #Redash #Google BigQuery #SaaS #Git #SQL #テスト #データ分析 #スクール #アーキテクチャ 

SHOPLISTの新卒エンジニアが新卒研修を振り返ってみた

2022/03/18
こんにちは。2021年4月にCROOZ SHOPLIST株式会社に入社した新卒のRYOBALです。 元々、自分自身がファッション系 ECサイト をよく利用しておりその中でSHOPLISTというサービスを知って、より多くの人にサービスを使ってもらいたいと思い入社し、現在、サーバサイドエンジニアとして主に社内管理ツールのシステム改修を行っております。 今回はCROOZ SHOPLIST株式会社に入社して約

#Linux #SQL #Shell #Git #PHP #データベース #ゲーム #テスト #ネットワーク #設計 

新卒総合職採用・プログラミング未経験の僕が開発部に配属された話

2022/03/11
こんにちは。2021年4月にCROOZ SHOPLIST株式会社に新卒入社した「 KEN☆YAMAGUCHI 」です。 現在、開発部に所属しておりサーバーサイドエンジニアとして、主にサイト内の販促プロモーションの機能開発をしています。 今回は、私が開発未経験でエンジニアになって感じたことや、実際の開発研修内容についてお話しさせていただければと思います。 少し長いですが、最後まで

#SQL #サーバーサイド #ゲーム #プログラミング #キャリア