レイテンシの増加やエラー率の上昇などの問題が発生した場合は、Cloud Storage がバケットを拡張する時間を確保するために、ランプアップを一時停止するか、リクエストレートを一時的に下げてください。次のような場合は、指数バックオフを使用してリクエストを再試行する必要があります。
5xxおよび429の応答コードを含むエラーを受信して​​います。
再開可能なアップロードを実行する際に、408レスポンスコードのエラーが発生する。
https://cloud.google.com/storage/docs/request-rate#ramp-up

説明
https://kubernetes.io/docs/tasks/configure-pod-container/configure-liveness-readiness-startup-probes/#configure-

https://cloud.google.com/run/docs/deploying

参考資料：https://livebook.manning.com/book/kubernetes-in-action/chapter-10/46
トピック1、HipLocalの事例研究：企業概要
HipLocalは、近距離にいる人々の間のコミュニケーションを促進するために設計されたコミュニティアプリケーションです。
イベント企画やスポーツイベントの運営、そして企業が地域社会とつながるために利用されています。HipLocalは最近ダラスのいくつかの地域でサービスを開始し、急速に世界的な現象へと成長しています。その独自の超地域密着型コミュニティコミュニケーションと企業向けアウトリーチのスタイルは、世界中で需要が高まっています。
エグゼクティブ・ステートメント
私たちは地域コミュニティアプリでナンバーワンです。今こそ、地域コミュニティサービスをグローバルに展開する時です。当社のベンチャーキャピタル投資家は、急速な成長と、メンバー同士が10マイル離れていても1万マイル離れていても、新たにオンラインになる地域コミュニティやバーチャルコミュニティで、同じように素晴らしい体験を提供することを望んでいます。
解決策のコンセプト
HipLocalは、既存のサービスを最新の機能で新たな地域に拡大し、世界中の顧客により良いサービスを提供したいと考えています。そのため、これらの地域をそれぞれのタイムゾーンに合わせてサポートする新しいチームを採用・育成する予定です。
アプリケーションがスムーズに拡張でき、明確な稼働時間データを提供できることを保証する必要がある。
既存の技術環境
HipLocalの環境は、オンプレミスのハードウェアとGoogle Cloud Platform上で稼働するインフラストラクチャが混在しています。HipLocalチームは自社のアプリケーションをよく理解していますが、グローバル規模のアプリケーションに関する経験は限られています。既存の技術環境は以下のとおりです。
* 既存のAPIは、GCPでホストされているCompute Engine仮想マシンインスタンス上で実行されます。
* 状態はGCPの単一インスタンスMySQLデータベースに保存されます
* データはオンプレミスのTeradata/Verticaデータウェアハウスにエクスポートされます
* データ分析はオンプレミスのHadoop環境で実行されます
* アプリケーションにはログ記録機能がありません
* 稼働時間に関する基本的な指標があります。API が応答しない場合は、アラートが頻繁に発生します。ビジネス要件 HipLocal の投資家は、事業規模を拡大し、増加している需要に対応したいと考えています。彼らの要件は次のとおりです。
* アプリケーションの提供地域を拡大する
* 同時接続可能なユーザー数を増やす
* ユーザーが異なる地域を旅行する際に、一貫したエクスペリエンスを保証する
* ユーザーアクティビティ指標を取得して、製品の収益化方法をより深く理解する
* 新しい地域における規制（例：GDPR）への準拠を確保する
インフラ管理の時間とコストを削減する
* Googleが推奨するクラウドコンピューティングの実践方法を採用する
技術要件
* アプリケーションとバックエンドは、使用状況の指標と監視機能を提供する必要があります。
* APIには強力な認証と認可が必要です
ログ記録を強化し、データをクラウド分析プラットフォームに保存する必要がある。
* 柔軟なスケーリングを容易にするために、サーバーレスアーキテクチャに移行する
* 内部アプリへの承認済みアクセスを安全な方法で提供する