AWSが生成AI基盤Amazon Bedrock向けの自動運用監視ツールAmazon Bedrock Ops Alertを公開した。3層構成で運用問題を予兆検知し、アラームのしきい値を動的に調整し、文脈付きのサポート申請を自動作成する仕組みである。3層は重大エラーの検知、使用率の監視、CloudWatchの機械学習による異常検知を分担する。

上限引き上げ申請を文脈付きで自動作成し、同種の未解決案件があれば重複申請を抑制する点が現場の運用設計に直結する。あわせて、別地域のサーバーをまたいでAI推論を振り分けるクロスリージョン推論で地域版比約10%、プロンプトキャッシュで最大90%のコストと85%の遅延削減という最適化手法が提示されている。

ツールはCloudFormationベースで提供され、サンプルコードがGitHubで公開されている。Amazon Bedrockは10万以上の組織で使われており、障害をユーザー報告で初めて知る後手の運用から、予兆検知による先手の運用への転換が狙いとなる。