「Python」に関連する技術ブログ

企業やコミュニティが発信する「Python」に関連する技術ブログの一覧です。

【ONE CAREERエンジニアのホンネ vol.5】全方位で取り組むデータエンジニアの成長とやりがい

みなさんこんにちは! ワンキャリアでデータエンジニアをしている中村 (GitHub: lugen4ro )です。 入社して3ヶ月が経ちましたので、振り返りを行いたいと思います! 自己紹介

大規模ネットワークトポロジーシステムの設計・構築(インターンレポート)

概要 はじめに 東京大学情報理工学系研究科修士1年の山根那夢達です。普段はネットワークパケットの冗長化に関する研究を行っています。2024年8月19日から9月27日までの6週間、ネットワーク領域にて就...

Azure Functions 環境を Terraform で構築する

はじめに はじめまして。株式会社ビットキー Cross Incubator チームの酒井です。 Cross Incubator チームは開発チームを横断して SRE・Backend・Frontend の垣根なく拾いきれなかった課題を解決するために組織され、高度な雑用係(!)として日々タスクをこなしています。 その中で Azure Functions 環境を一から構築する機会があり、得られた知見を共有します。 Terraform に関連する記事が

駆け出しエンジニアのための新規領域の学習方法と実装の流れ

はじめに こんにちは、クラウドエース第一開発部所属の上原です。 本記事では、駆け出しデータエンジニアである私が、会社からの課題である データ分析基盤構築課題 (以下、基盤構築課題) に取り組む中で感じたり実践したりした おすすめの学習方法と、実際の課題への取り組みについて紹介していきます。 この記事の目的は、新規領域全般に触れる際のおすすめの

Dataplex の Managed connectivity pipelines が一般提供(GA)になりました

はじめに こんにちは、クラウドエース株式会社 第一事業部の梅木です。 今回紹介するのは、2024年9月30日に GA となった Dataplex の「Managed connectivity pipelines」についてです。 Managed connectivity pipelines により、サードパーティソースのデータベースから Dataplex Catalog へメタデータをインポートする Workflows のパイプライン テンプレートが提供されました。 サードパーティソー

RAGはどのように進化しているのか?RAGのパラダイムと改善手法を体系的にご紹介!

生成AIの分野でもRAGは特に注目を集めており急成長している分野です。あまりに多くの情報に溢れており、各手法をどう捉えてよいか分かりにくい状況にあります。このブログではRAGがどのように成長し、どのような改善が試みられているのかを整理して、包括的で体系的に理解できるような説明を試みました。読んでいただいた方の理解の助けになれば幸いです。 RAGの

aquaとlefthookでREADME.mdを簡素に保つ

SREのクラシマです。 皆さんのREADME.mdには何が書いてありますでしょうか? トラーナでは、以下を書くようにしています。 開発を始めるために必要なツールのinstallについて ローカル開発環境について (Option)外部のツールのcredentials周り (Option) アーキテクチャ 図 基本的には Mac で開発しているのですが、ある人はローカル開発環境を起動できるのに別の人はできない、み

Associate Data Practitioner試験対策マニュアル

G-genの杉村です。Google Cloud(旧称 GCP)の認定資格である Associate Data Practitioner 資格の試験対策に有用な情報を記載します。 基本的な情報 Associate Data Practitioner とは 難易度 出題傾向 試験対策 ETL と ELT ETL と ELT の基本 オープンソースツールとフルマネージドサービス Cloud Data Fusion イベントドリブンアーキテクチャ データベースの選択 BigQuery BigQuery の基本 ELT と ETL 半構造化

OBS WHIPを使用してAV1映像を送受信するビデオプロセッシングAIサーバの構築

こんにちは、テリーです。OBS 30.2でWHIPという新機能の配信方式が追加されました。OBSというとRTMPでの配信が基本ですが、近年はそれ以外の配信プロトコル・コーデックも増えていました。今回はWHIPの紹介と、P […]

LangChainのサンプルコードを作ってみた

こんにちは、 PS-SL アプリチーム新卒 1 年目の織田です。 今回はLLM開発向けのフレームワークであるLangChainのサンプルコードを作成してみました。 コチラ から参照できますので、よろしければご活用ください。 サンプルコードを作成した理由 LangChainは非常に多種多様な機能を提供しており、どこから触れば良いのか分からず困ってしまう方もいらっしゃると思います。

BigQuery + Looker Studioでt検定した話

こんにちは!タイミーでデータアナリストをしているkantaと申します。 普段はマーケティングの皆様とCM施策やCRM関連の分析を担当したり、他部署向けの講習会を企画したりしております。11月から半年ほど育休を取得予定のため、育休前最後の仕事(?)として当ブログの執筆を担当いたします。 さて、今回は 「BigQuery + Looker Studioでt検定した話」 と題しまして、その方

企業変革の加速 ~AWS DeepRacerで社内DXを推進する MUFG~

MUFG(三菱UFJフィナンシャル・グループ)は、企業の成長を支える3本柱の一つに「企業変革の加速」を掲げています。社長挨拶にもあるように、これまでのカルチャー改革をさらに進展させるとともに、「スピード」を新たな共有価値観に加え、人材・システム・AIなどの経営基盤を強化していくとのことです。 このような取り組みの一環として、三菱UFJ銀行の市場企画部

Llama 3.x モデルのファインチューニングを Amazon SageMaker Pipelines の新しいビジュアルデザイナーで自動化する

Amazon SageMaker Pipelines のビジュアルデザイナーを使用して、生成AIモデルのトレーニング、ファインチューニング、評価、登録、デプロイを行うエンドツーエンドのワークフローを作成できるようになりました。SageMaker Pipelines は、基盤モデルの運用 (FMOps) のために特別に構築されたサーバーレスワークフロー オーケストレーションサービスです。専門的なワークフローフレ

Amazon ElastiCache と Amazon MemoryDB の Valkey サポートを発表

本記事は 2024 年 10 月 8 日に公開された “ Amazon ElastiCache and Amazon MemoryDB announce support for Valkey ” を翻訳したものです。 AWS は設立以来、お客様がクラウドでオープンソースソフトウェアを構築・実行するための最適な場所となっています。AWS は、オープンソースプロジェクト、財団、パートナーを支援することを誇りにしています。私たちは、オープンソースが誰にとって
技術ブログを絞り込む

TECH PLAY でイベントをはじめよう

グループを作れば、無料で誰でもイベントページが作成できます。情報発信や交流のためのイベントをTECH PLAY で公開してみませんか?