「TECH PLAY 技術ブログまとめ」では様々な企業やコミュニティが発信する技術ブログの更新情報をまとめてお届けしています。 プログラミングやインフラ、アーキテクチャといった技術情報はもちろん、マネージメントや開発プロセスなどIT業界で働く皆様のヒントや刺激になる情報が日々蓄積されています。 知りたい分野がある場合はタグから選択して絞り込むこともできますし、気になる企業やグループはお気軽にフォローしてみてください。
本記事は「 How We Learned to Trust an AI Agent to Triage Production Incidents 」を翻訳したものです。 ある日曜日の午前 2 時 33 分(PDT)、フロンティアモデルの可用性アラームが発報しました。本番のレスポンスがストリームの途中で止まりはじめ、監視システムが自動でチケットを起票しました。 その 13 分 35 秒後、午前 2 時 46 分(PDT)には、根拠のある診断がチケット上に載っていました。ストリームが本番バグかキャパシティのス
本記事は「 Continuous Prompt Evaluation: How We Use LLM Judges and Live Signals to Improve Kiro Agent Quality 」を翻訳したものです。 課題: システムプロンプトの挙動は予測が難しい プロンプトの挙動を網羅的に検証するのは困難です。システムプロンプトは、モデル・ツール・コードベース・タスク・ユーザーのあらゆる組み合わせにまたがって動作しますが、どんなテストスイートでもそれをすべてカバーすることはできません。単
皆さんこんにちは。 株式会社ユーザベース スピーダ事業Business Process Management(以下BPMと称する)チームのLeeと申します。 チームのR&Rとしては、UBグループ全体の受注以降の販売プロセスの企画・設計を通して販売/契約管理の安定運用の実現とガバナンスの担保しております。普段のSFDCとの接続は「業務としてSFDCをどう使うか」を考える側の人間で、開発経験はありません。 そんな私が、今年1月から横のチームにあるSales System Engineeringチームに兼務とい