「大規模言語モデル（LLM）」に関連する技術ブログ
企業やコミュニティが発信する「大規模言語モデル（LLM）」に関連する技術ブログの一覧です。
全150件中 76 - 90件目
🦜️🔗 LangChainとRAG: Embeddingで外部データを利用する
2023/12/11
ブックマーク
この記事は CyberAgent Developers Advent Calendar 2023 1 ...
子ども向けプログラミング学習サービスの多言語翻訳における生成AI活用の可能性
2023/12/08
ブックマーク
はじめに この記事は CyberAgent Developers Advent Calendar 2 ...
生成AI初心者がAmazon BedrockのKnowledge baseを使ってRAGを試してみた
2023/12/07
ブックマーク
本記事は TechHarmony Advent Calendar 12/7付の記事です。 こんにちは。SCSK石原です。 AWS re:Invent2023にて、 Amazon BedrockのKnowledge baseとAgentsがGA されたと発表がありました。今回はこのうちKnowledge baseを利用して、RAG（Retrieval Augment Generation）を試してみたいと思います。 RAGにより、データストアから情報を取得して大規模言語モデル (LLM) によって生成された応答を拡張することがで
AWS Audit Manager が生成系 AI 向けに AWS のベストプレクティスフレームワークを提供開始
2023/12/06
ブックマーク
生成系 AIの急速な成長は、有望な新しいイノベーションをもたらすともに、新たな課題も提起しています。お客様がお客様の環境のセキュリティに関する保証を規制当局や監査人に提供できるよう、AWS では責任を持って AI を開発することに全力を注いでいます。 AWS Audit Manager は、 Amazon Bedrock におけるエビデンス収集を自動化する生成系 AI の AWS ベストプラクティスフレ
LabbaseにおけるLLMsの活用について
2023/12/02
ブックマーク
アドベントカレンダー2日目 本記事はLabBase テックカレンダー Advent Calendar 2023 2 日目です。 イントロダクション こんにちは、Labbaseのリサーチエンジニアの松井です。 リサーチエンジニアチームでは新しい技術を自社のプロダクトに反映させるにはどうしたら良いかを検証しています。今回は、大規模言語モデルの適応可能な事例や、Labbaseにおける活用について紹介いた
日本経済再生と「少子化問題」にアジャイルが効くって本当なのか？Day.2
2023/12/02
ブックマーク
★SHIFTGroup技術ブログ（公式note）でアドベントカレンダー★ SHIFT公式ブロガーによるブログ版アドベンドカレンダーで、SHIFTらしい多彩な最新記事をクリスマスまでの25日間に毎日お届けします！ 《まとめ記事も公開中》 SHIFT公式アドカレ2023まとめ記事 SHIFT公式アドカレ2022はじめます SHIFTGroup技術ブログTOP ★★SHIFT公式ブログでアドベントカレンダー★★ 昨日の記事は、
【re:Invent 2023】AWS Step FunctionsにAmazon BedrockのAPIが追加されたので、LLMの出力をLLMにチェックさせてみた
2023/11/28
ブックマーク
サーバーワークスの村上です。 re:Invent 2023、今年も始まりましたね。 さっそくBedrock関連のアップデートを紹介します。 結論 AWS Step Functionsとは？ AWS Step Functionsに追加されたAmazon BedrockのAPIは2つ LLMの出力をLLMにチェックさせてみた 全体概要 まずはステートを追加する Claude 2をinvokeする設定 入力 出力 Jurassic-2 Ultraでチェックする設定 入力 出力 動作確認 他にも様々な使い
自然言語処理におけるファインチューニング【ビジネス成長のためのAI用語】
2023/11/28
ブックマーク
自然言語処理におけるファインチューニング【ビジネス成長のためのAI用語】 2023.11.16 株式会社Laboro.AI 機械学習エンジニア 趙 心怡 リードマーケター 熊谷勇一 用語解説 ファインチューニングとは、ニューラルネットワークにおける機械学習の中で、あるデータセットを使って事前学習した訓練済みモデルの一部または全体を、別のデータセットを使って再訓練・微
Kubernetesクラスタの可観測性の隙間を埋めるeBPF
2023/11/21
ブックマーク
KEELチーム の相原です。 今回はeBPFを利用してKubernetesクラスタの可観測性の隙間を埋めている話です。 前回のエントリではLLMにうつつを抜かしていたので本業(?)の話をしようと思います。 www.lifull.blog LIFULLの可観測性の現在地 eBPFとは 可観測性の隙間 NAT Loopback eBPFを実行するには BPF CO-RE libbpf-rsを利用したNAT Loopbackの検知 1. (ユーザ空間) コマンドライン引数として受け取っ
Amazon Comprehend の新機能 – 毒性検出
2023/11/17
ブックマーク
Amazon Comprehend を使用すると、機械学習の専門家でなくても、テキストからインサイトを引き出すことができます。Comprehend では、組み込みモデルを使用して入力文書の構文を分析し、エンティティ、イベント、キーフレーズ、個人を特定できる情報 (PII)、および特定のエンティティ (ブランドや製品など) に関連付けられた全体的なセンチメントまたは複数のセンチメント
AI業界でのキャリアを考える。共催キャリアイベントをレポート
2023/11/14
ブックマーク
AI業界でのキャリアを考える。共催キャリアイベントをレポート 2023.11.14 概 要 Laboro.AIでは、2023年10月16日（月）、大手製造メーカーであるオムロン株式会社（以下、オムロン）と、最新のAI技術の研究開発で価値を創出するオムロンサイニックエックス株式会社（以下、OSX）と共催キャリアセミナー「 AI業界でのキャリアを考える ～ 大企業AI研究所とAIスタートアップ そ
Vertex AI Searchで外部Webサイトから要約回答を生成するRAGを構築してみた
2023/11/14
ブックマーク
G-gen 又吉です。当記事では、LangChain と Vertex AI Search で Google Cloud 公式ドキュメントから回答を生成する LLM を構築してみたいと思います。 はじめに Vertex AI Search and Conversation とは LangChain とは 今回の構成 環境構築 API の有効化 Vertex AI Search データストア アプリ 実行環境 初期設定 ライブラリインストール ユーティリティ関数 モデルの初期化 Vertex AI Search 関数 テキスト分
先読みを用いたLLMの文章生成の高速化
2023/11/14
ブックマーク
こんにちは、イノベーションセンターの加藤です。普段はコンピュータビジョンの技術開発やAI/機械学習（ML: Machine Learning）システムの検証に取り組んでいます。一方で、兼務 1 で大規模言語モデル（LLM: Large Language Model）について調査を行なっており、特にLLMの推論や学習の高速化に関心を持っています。 今回は、小さな言語モデルによる先読みを活用してLLMの文章生成
SageMaker Studio Lab と 生成系 AI の OSS で始める画像に対する日本語での対話型問合せ
2023/11/13
ブックマーク
背景 生成系 AI の応用の幅が広がる技術としてマルチモーダルなモデルがあります。マルチモーダルではモデルの入出力に複数の異なるデータ形式を用いることができます。例えば Amazon Bedrock の Stable Diffusion ではテキストを入力に画像を生成することができます。画像とテキストという異なるデータ形式の入出力をするためマルチモーダルなモデルといえます。他にも入
大規模言語モデルの自動評価における冗長バイアスの調査
2023/11/10
ブックマーク
はじめに こんにちは、筑波大学大学院情報理工学位プログラム修士１年の齊藤啓太と申します。私は2023年夏にLINE株式会社（現LINEヤフー株式会社）の就業型インターンシップに参加し、MLのプライバシ...