「Python」に関連する技術ブログ
企業やコミュニティが発信する「Python」に関連する技術ブログの一覧です。
全1345件中 436 - 450件目
AWS CloudFormationテンプレートからparameter-overridesのJSONファイルを生成する
2024/02/13
ブックマーク
この記事について AWS CloudFormation（以下、CloudFormation）テンプレートファイルを渡すと、Parametersセクションを読み取り、AWS CLIでデプロイする際に使えるパラメーター（parameter-overrides）のJSONを生成するPythonスクリプトの紹介です。（ファイル名はparameters.json固定） 動作環境 Poetry表記で書いておきます。 [tool.poetry.dependencies] python = "^3.12" pyyaml = "^6.0.1" なぜ作ったのか？ デプ
Amazon QuickSight による更新失敗したデータセットの再取り込み自動化
2024/02/13
ブックマーク
Amazon QuickSight は、共同作業の場所を問わず、わかりやすいインサイトを提供することができるクラウドネイティブのビジネスインテリジェンス (BI) サービスです。ユーザーはスケジュールされた方法、またはプログラムされた方法で、 SPICE (Super-fast, Parallel, In-memory Calculation Engine) にデータをインポートできます。 QuickSight データセットの更新を設定する場合、更新が失敗
Document AIを徹底解説
2024/02/12
ブックマーク
G-gen の片岩です。当記事では文書のデジタル化と解析を自動化するサービスである Document AI について解説します。 概要 Document AI とは ユースケース 利用方法 対応フォーマット プロセッサ プロセッサとは 汎用プロセッサ OCR プロセッサ Form パーサー 専用プロセッサ カスタムプロセッサ カスタムドキュメントエクストラクタ カスタムドキュメント分類器 カスタムドキュ
負荷テストツール選定のすすめ
2024/02/09
ブックマーク
はじめに 「ようやくリリースだ！」
機械学習に CD を活用する: デプロイ、監視、再トレーニング
2024/02/08
ブックマーク
機械学習に CI を活用する: ビルド、テスト、トレーニング
2024/02/08
ブックマーク
【生成AI】AWS Lambda(Python) と LangChain(LCEL) を使ってストリーミング出力したい
2024/02/07
ブックマーク
こんにちは。AWS CLIが好きな福島です。 はじめに 結論 AWS Lambdaでストリーミングレスポンスを扱う方法 Lambda Web Adapter FastAPI と Uvicorn 実装方法 ①GirHubからClone ②template.ymlの編集 ③requirements.txtの編集 ④app/main.pyの編集 LangChainを使わない場合 LangChainを使う場合 ⑤リソースのデプロイ ⑥動作確認 コードの解説 FastAPIからのストリーミングレスポンス 受け取るリクエスト Amzon Be
CloudFormation IaC ジェネレーターでLambda関数をIaC化する
2024/02/06
ブックマーク
こんにちは、IaCお姉さんです。 CloudFormationにIaC ジェネレーターという新しい機能が出たので使っていきます。 IaC ジェネレーターについては、以下の公式ページをご覧ください。 https://docs.aws.amazon.com/AWSCloudFormation/latest/UserGuide/generate-IaC-write-only-properties.html 今回はLmabda関数をIaC化します。 コンソールからLambda関数を作成 言語はPythonを選んで、デフォルトのソースコードの
サービス終了する AutoML Tables の代わりに Vertex AI を使う
2024/02/06
ブックマーク
はじめに こんにちは。クラウドエース データソリューション部の池上有希乃です。 クラウドエース データソリューション部 について クラウドエースのITエンジニアリングを担う システム開発統括部 の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門とするのが データソリューション部 です。 弊社では、新たに仲
最新！この一週間でもっとも読まれた記事｜2024.1.30~2.5 PV数ランキングTOP10
2024/02/06
ブックマーク
こんにちは！「SHIFTGroup技術ブログ」編集部です。 先日の関東の大雪、すごかったですね！ 過去の経験から、早め帰宅や翌日のリモートワーク推奨など 職場の働きかけもさまざまだったのではないでしょうか？ 皆さまご無事ですごされていますように。 さて、本日もこの一週間でもっとも読まれた記事の週間ランキングと、編集部が特にオススメする記事をピックアッ
Flask + API Gateway + Lambda構成でServerless Frameworkのプラグインを利用せずに画面遷移をさせる方法
2024/02/05
ブックマーク
こんにちは。サーバーワークスの松井です。 API Gateway + Lambda + Flaskといったwsgiのアプリケーションを構築する際にServerless Frameworkを利用しています。 Serverless Frameworkがv4から有料化するとの情報を得たので、無料で利用できるAWS AWS Serverless Application Model(AWS SAM)などの別のデプロイ用のフレームワークにて同様の構成のアプリケーションが構築できるかを検証してみました。
2024年のPythonプログラミング
2024/02/02
ブックマーク
ソーシャル経済メディア「NewsPicks」で推薦や検索などのアルゴリズム開発をしている北内です。Pythonは頻繁に新機能や便利なライブラリが登場し、ベストプラクティスの変化が激しい言語です。そこで、2024年2月時点で利用頻度の高そうな新機能、ライブラリ、ツールなどを紹介したいと思います。 この記事では広く浅く紹介することに重点を置き、各トピックについて
Kubeflow Pipelines の local 実行で開発効率を上げる
2024/02/01
ブックマーク
はじめに AI Team MLOps エンジニアの西原です。2024 年 1 月にローカル環境で Kubeflow Pipelines を実行するドキュメントが公式から 公開 されました。今回はそのドキュメントを参考にローカル環境で Kubeflow Pipelines を実行する方法を紹介します。 はじめに Kubeflow Pipelines とは kfp を使った開発の課題 kfp を手元の開発環境で実行する ローカル環境でコンポーネント実行 アーティフ
Amazon CodeWhispererを使ったプロンプトエンジニアリングのベストプラクティス
2024/02/01
ブックマーク
生成 AI コーディングツールは、開発者の日々の開発作業の仕方を変えています。関数の生成からユニットテストの作成まで、これらのツールはお客様のソフトウェア開発の加速に役立っています。 Amazon CodeWhisperer は、開発者の自然言語のコメントと周囲のコードに基づいてコードのレコメンデーションを提供することで、開発者の生産性を向上させる IDE とコマンドライ
AWSマネコン操作時のうっかり事故を防止する為のChrome拡張作ってみた
2024/02/01
ブックマーク
pre.code { / 行番号の基準をpreの左上にする / position: relative; / コードの左側を空ける / padding: .25em 0 0 3em; / 横スクロールバーを出して、コードが改行しないようにする / white-space: pre; overflow-x: scroll; } pre.code::before { / 行番号。\aで改行している / content: "1\a 2\a 3\a 4\a 5\a 6\a 7\a 8\a 9\a 10\a 11\a 12\a 13\a 14\a 15\a 16\a 17\a 18\a 19\a 20\a 21\a 22\a 23\a 24\a 25\a 26\a 27\a 28\a 29\a 30\a 31\a 32\a 33\a 34\a 35\a 36