エージェント API のエラー 率が増加
11月4日 22:42 UTC 解決 - この事件は解決しました。11月4日 20:58 UTC更新 - 影響を受けたサービスは回復し、我々は問題を監視し続けます。11月4日 20:05 UTCモニタリング - 回復が見られ 現在影響を受けたサービスを監視しています11月4日 19:13 UTC 捜査 - エージェントAPIの誤差率を調査しています
11月4日 22:42 UTC 解決 - この事件は解決しました。11月4日 20:58 UTC更新 - 影響を受けたサービスは回復し、我々は問題を監視し続けます。11月4日 20:05 UTCモニタリング - 回復が見られ 現在影響を受けたサービスを監視しています11月4日 19:13 UTC 捜査 - エージェントAPIの誤差率を調査しています
11月4日 06:36 UTC 解決しました - 何かおかしいことに気付きました現時点では調査中です。 速やかに更新します。11月4日 06:17 UTC調査 - 客のサブセットで エージェント APIの遅延とエラー率が増加しています現在調査中です 状況が更新され次第 報告します
11月4日 00:07 UTC 解決 - 回復が見られ 遅延が正常に戻りました11月3日 22:56 UTCモニタリング - 受信Webフックの処理とビルド作成の遅延が影響を受けた顧客のために改善しています。ウェブフック処理を 拡張し 処理遅延が減りました残りの物件を 整理する中で 回復を監視しています11月3日 22時38分 UTC 調査中。..
11月3日 20時22分 UTC 解決 - 回復が確認され 遅延は正常に戻りました11月3日19時43分 UTCモニタリング - 受信Webフックを処理するリソースをスケールアップし、回復が見られます。現在、待機中の仕事について調べています。 更新日: 11月3日 18:54 UTCこの問題は ほんの少しだけ。..
11月3日 20:12 UTC 解決しました - APIのエラーが減少し 回復が見られます11月3日 19:59 UTC 確認 - 以前は API エラー率が高く 回復しているようです11月3日 19:42 UTC更新 - 我々はこの問題を調査し続けています。11月3日 19時40分 (UTC) 捜査 - APIで誤差率が高いことを調査しています
10月29日 21:58 UTC 解決しました - 派遣時間は正常に戻ったようです10月29日 21:41 UTC更新 - 緩和措置を講じ、回復が見られます。この問題を監視し続けています 10月29日21時15分 UTCモニタリング - 何かおかしいことを発見しました緩和措置を講じています 問題を監視しています すぐ更新します10月29日 20時33分 UTC 識別。..
10月28日 23:49 UTC 解決 - 大半の影響が単一の顧客に起因し データベースの故障によって引き起こされたことを確認しました原因を調査し 影響を受けた顧客と協力します10月28日 23時17分 UTCモニタリング - RESTとGraphQLの遅延とエラー率が増加しましたプラットフォームは。..
10月26日 17:07 UTC 解決しました - 17:07-17:19 UTC 間に、私たちの API エンドポイントは、共有サービスの問題により遅延とエラーが増加しました。監視システムはこれらの問題を検知し 自動的なシステム修復を誘発し サービスが自動回復しましたAPIが安定したものの 短時間の停電の原因は 捜査中です
10月24日 23:40 UTC 解決しました - 23:16~23:27の間、予定されたデータベースアップグレードにより、プラットフォーム全体でエラー率が上昇しました。このアップグレードは何の影響も及ぼそうとはしなかったが、このデータベースへの予測不可能な依存により、顧客はこの期間中に平均2.5%の誤差率を経験した。
10月22日 17:37 UTC 解決 - ホストされたエージェントの処理はもはや遅延しません。10月22日 17:22 UTCモニタリング - 改善が見られ続けており、ホストエージェントのバックログの処理を監視しています。10月22日 17:09 UTC 確認しました - 問題を確認し 補正を行いました影響を受けたカスタムで 処理時間が回復し始めています
10月21日 22:38 UTC 解決しました - Buildkite を動かすすべてのサービスが、影響を受ける証明書への信頼を疑うように更新され、顧客インフラストラクチャで実行される私たちが配布するコンポーネントに対して更新されたリリースが利用可能になっています:Buildkite エージェント: v4.7.0 と v3.138.2Buildkite CLI: v3.64.2bktec: v3.3.1弾性-ci-stack-for-aws: v7.8.0agent-stack-k8s: v0.52.0これらのバージョンへの更新を推奨します。
10月21日 18:00 UTC 解決しました - APIの要求が処理に異常時間がかかると報告されました調査によると これは2026年10月22日 01:50 - 08:30 UTCの間に衝突した 単一の顧客断片に 隔離されていることが判明しました
10月20日 21:05 UTC 解決 - 追加容量を追加することで通知の遅延が解決しました。20月20日 20時15分 UTCモニタリング 問題を確認し 追加能力を追加しました通知の遅延は 普通のレベルに戻った安定性を監視しています10月20日 19:57 UTC調査 - 建設の遅延と 顧客の一部の雇用通知を調査しています
10月19日 15:45 UTC 解決 - ホストエージェントの仕事が開始に遅れているといういくつかの顧客からの報告を得ています。捜査中だ
10月6日 23:59 UTC 解決 - 問題が解決しました。ネットワークのメンテナンスが 予期せぬ副作用を引き起こし ホストエージェントからの 出発トラフィックに影響を及ぼしました10月6日 19:07 UTC 確認 - チェックアウトパフォーマンスが低下している我々のエンジニアチームは ネットワークの性能問題を軽減するために 代替的なネットワークトランジット経路を確立することに 取り組んでいます10月6日18時
10月1日 06:57 UTC 解決 - エラー率は正常レベルに戻りました。10月1日 06:33 UTCモニタリング - 緩和措置が実施され、回復が見られます。我々は監視し 更新していきます10月1日、06:10 UTC 特定 - 9月30日 2026-09-30 20:52:36 UTC から、Buildkiteパイプラインへの入荷する少量の GitHub webhook 配信が拒否されています。
UTC 02:32 解決 - 出発通知の遅延は 期待値のままですある顧客は、根本的なエラーが解決される前に、重複した通知を受け取った可能性があります。UTC監視 - 影響を受けたすべての顧客のために出荷通知のキューが完全に追いつきました。確認しました 根本的なエラーを解決しました
9月28日、01:30 UTC 解決 - 9月28日11時45分から15時00分 (GMT+10) の間に、macOS でホストされたエージェントのジョブが誤った設定のエージェント画像更新により起動できませんでした。この問題は解決され 新しい仕事も 正常に動いています予定されている状態で待っていますが 単独で始まらないでしょうキャンセルして再試してください。
7月22日 20時50分 UTC 解決 サービスが完全に回復しましたWebhookの摂取は19:09 UTC~19:32 UTCの間に影響を受けた。9月22日 20時26分 UTC 確認 - エンジニアは問題を解決し 回復を監視していますWebhook の入力と GraphQL のクエリの実行に影響する問題を確認し、原因を調査しています。
AWS us-east-1の切断で 顧客に影響はありませんでした9月21日 23時47分 UTCモニタリング
9月21日 23:46 UTC 解決 - この事件は解決しました。7月21日 23時12分 UTCモニタリング - わずか数人の顧客に孤立したビルド作成の遅延がわずかに増加したことを観察しましたが、これは現在過ぎ去り、改善の兆候が見られます。9月21日 22時35分 UTC調査 - 顧客の一部で遅延とエラー率が増加しています我々は現在調査中です そして提供します。..
9月10日 01:54 UTC 解決しました - 20時28分以降、顧客が完全に回復しました。自動スケーリングのフィードバックループを経験し 応答能力を超えた 接続数を増やしましたこれは Web UI,エージェント API,REST API と 18時43分~19時21分 UTC の間、また 20時02分~20時28分 UTC の間、すべての顧客に広範な影響を及ぼしました。完全なポ。..
ホストされたエージェントで実行されている仕事は、すぐに送信されます。監視 - 緩和措置を講じ、ホストされたエージェント全体で回復を観察しました。我々は監視を続けます7月4日 01:42 UTC調査 - 宿主エージェントの遅延とエラー率が増加しています。現在調査中です 状況更新は。..
7月4日 01:40 UTC調査 - 顧客の一部で遅延とエラー率が増加しています現在調査中です 状況が更新され次第 報告します
7月3日 07:06 UTC 解決 - ホストされたエージェントで実行されている仕事は、すぐに送信されます。7月3日 06:44 UTCモニタリング - 宿主職のスケジューリング率が回復しています仕事が進めるはずだが 遅延があるかもしれない7月3日 06:09 UTC更新 - 宿主エージェントへのいくつかの仕事派遣はタイムアウトしており、仕事が遅くなっています。現在調査中です
9月2日 15:51 UTC 解決しました - ホストエージェントの派遣はもう遅延していません。7月2日 15:43 UTCモニタリング - 遅れた仕事やモニタリングの処理を継続しています。9月2日 15:29 UTC 確認 - 宿主エージェントの派遣が遅れて回復が始まっています現在 遅れている作業を 処理しています7月2日 15:16 UTC更新 - オ。..
9月1日 16:52 UTC 解決しました - 送信中のメールの配線はメール通知は成功しました。7月1日16時38分 UTCモニタリング - メールの配達が成功し、出荷メールの処理を監視しています。9月1日16時19分 UTC更新 - 担当エンジニアは 代替的なアップストリームメールへの 移行に取り組んでいます
8月27日 11:47 UTC 解決 - アップロードされたテスト実行データの処理が正常に戻りました。8月27日 11:23 UTC更新 - 追いつく処理が継続し、残された大部分が処理され、摂取遅延が減少しています。8月27日 10:56 UTCモニタリング - アップロードされたテスト実行データの内部処理が遅れており、現在追いついています。データは漏れていません
8月26日 03:13 UTC 解決 - 緩和戦略は予想通り機能し、現在代理人の登録は正常に戻りました。すべてのシステムは安定している。回復が進行中です。 回復が完了するまで監視を続けます。根本的な問題を解決するためにいくつかの変更を展開し、回復の兆候が見られます。
8月26日 00:18 UTC 解決しました8月25日 23:38 UTCモニタリング - システムは回復し、新しいビルドが作成されています。内部 DNS サービスが故障したため、新しいビルドは作成できませんでした。この間、ビルドの要求はなく、 処理が続いています。