「Python」に関連する技術ブログ

企業やコミュニティが発信する「Python」に関連する技術ブログの一覧です。

PaLM 2で同じ文章が何度も繰り返される事象への対処法

G-gen の佐々木です。当記事では、生成 AI モデルである PaLM 2 のチャットボットを構築した際に、モデルからの回答文で同じ文章が何度も繰り返されてしまう事象の解決策を紹介します。 前提知識 事象 解決策 Frequency Penalty パラメータ サンプルコード Frequency Penalty の調整 前提知識 PaLM 2 は Google が開発した生成 AI モデルです。Google Cloud の機械学習サービスである Vertex AI

ブランドロゴチェックを画像処理で自動化する社内での取り組み

こんにちは。DS統括本部で画像処理エンジニアをしている上野です。LINEヤフー株式会社の企業ロゴやサービスロゴなどのブランドロゴには、ブランドガイドラインと呼ばれるロゴ使用時に守らなくてはならないルー...

LangChainのAgentExecutorを使って生成AIのAgentにデータ分析をさせてみた

はじめに こんにちは!昨年9月からInsight Edgeの開発チームに参画した広松です。Insight Edgeでは生成AI案件を担当しています。 参画してからまだ間もないですが、技術選定や顧客との調整を含む多くの業務を裁量を持って自由にできるところが良いと感じています。また、Insight Edgeでは業務時間の10%を勉強会などの自己啓発に充てることが奨励されています。この文化のおか

AWS CloudFormationテンプレートからparameter-overridesのJSONファイルを生成する

この記事について AWS CloudFormation(以下、CloudFormation)テンプレートファイルを渡すと、Parametersセクションを読み取り、AWS CLIでデプロイする際に使えるパラメーター(parameter-overrides)のJSONを生成するPythonスクリプトの紹介です。(ファイル名はparameters.json固定) 動作環境 Poetry表記で書いておきます。 [tool.poetry.dependencies] python = "^3.12" pyyaml = "^6.0.1" なぜ作ったのか? デプ

Amazon QuickSight による更新失敗したデータセットの再取り込み自動化

Amazon QuickSight は、共同作業の場所を問わず、わかりやすいインサイトを提供することができるクラウドネイティブのビジネスインテリジェンス (BI) サービスです。ユーザーはスケジュールされた方法、またはプログラムされた方法で、 SPICE (Super-fast, Parallel, In-memory Calculation Engine) にデータをインポートできます。 QuickSight データセットの更新を設定する場合、更新が失敗

Document AIを徹底解説

G-gen の片岩です。当記事では文書のデジタル化と解析を自動化するサービスである Document AI について解説します。 概要 Document AI とは ユースケース 利用方法 対応フォーマット プロセッサ プロセッサとは 汎用プロセッサ OCR プロセッサ Form パーサー 専用プロセッサ カスタムプロセッサ カスタムドキュメントエクストラクタ カスタムドキュメント分類器 カスタムドキュ

【生成AI】AWS Lambda(Python) と LangChain(LCEL) を使ってストリーミング出力したい

こんにちは。AWS CLIが好きな福島です。 はじめに 結論 AWS Lambdaでストリーミングレスポンスを扱う方法 Lambda Web Adapter FastAPI と Uvicorn 実装方法 ①GirHubからClone ②template.ymlの編集 ③requirements.txtの編集 ④app/main.pyの編集 LangChainを使わない場合 LangChainを使う場合 ⑤リソースのデプロイ ⑥動作確認 コードの解説 FastAPIからのストリーミングレスポンス 受け取るリクエスト Amzon Be

CloudFormation IaC ジェネレーターでLambda関数をIaC化する

こんにちは、IaCお姉さんです。 CloudFormationにIaC ジェネレーターという新しい機能が出たので使っていきます。 IaC ジェネレーターについては、以下の公式ページをご覧ください。 https://docs.aws.amazon.com/AWSCloudFormation/latest/UserGuide/generate-IaC-write-only-properties.html 今回はLmabda関数をIaC化します。 コンソールからLambda関数を作成 言語はPythonを選んで、デフォルトのソースコードの

サービス終了する AutoML Tables の代わりに Vertex AI を使う

はじめに こんにちは。クラウドエース データソリューション部の池上有希乃です。 クラウドエース データソリューション部 について クラウドエースのITエンジニアリングを担う システム開発統括部 の中で、特にデータ基盤構築・分析基盤構築からデータ分析までを含む一貫したデータ課題の解決を専門とするのが データソリューション部 です。 弊社では、新たに仲

最新!この一週間でもっとも読まれた記事|2024.1.30~2.5 PV数ランキングTOP10

こんにちは!「SHIFTGroup技術ブログ」編集部です。 先日の関東の大雪、すごかったですね! 過去の経験から、早め帰宅や翌日のリモートワーク推奨など 職場の働きかけもさまざまだったのではないでしょうか? 皆さまご無事ですごされていますように。 さて、本日もこの一週間でもっとも読まれた記事の週間ランキングと、編集部が特にオススメする記事をピックアッ
技術ブログを絞り込む

TECH PLAY でイベントをはじめよう

グループを作れば、無料で誰でもイベントページが作成できます。情報発信や交流のためのイベントをTECH PLAY で公開してみませんか?