テーマ別の解説テーマ:S3:版・保存期間・複製・費用
S3 Replicationとは?CRR・SRRと複製される対象を理解する
S3 Replicationは、条件に合うオブジェクトを別のバケットへ非同期で複製する仕組みです。別リージョンへ送るCRRと、同じリージョン内のSRRがあります。設定を保存したことと、必要なデータの複製が完了したことを分けて考えます。
新規と既存の対象、両側のVersioning・権限・暗号化、削除とLifecycleの扱いを区別し、複製結果を何で確認するか説明できる。
S3のVersioning、ACLとポリシー、Lifecycle。合成例は一般用途バケットAからBへの一方向の複製。両側のVersioningは有効で、図のレポートはルール設定後に保存され対象条件を満たすものとします。実AWSへ接続しません。
コピー元・対象ルール・複製先を対応させる
- 元バケットA → 複製ルールルール作成後の対象版を選ぶ。以前の全データを自動収集する線ではない。
- 複製ルール → 先バケットB必要な権限等を満たして複製する。逆方向の複製やアプリの切替は別設定。
- 元バケットA
- Versioning有効。対象の新規レポート版を保存。
- 複製ルール
- 対象条件、複製先、S3が使うロールを指定する。
- 先バケットB
- Versioning有効。非同期に複製。完了と読取り条件を確認する。
| 呼び方 | 用途の違い |
|---|---|
| CRR | 異なるリージョンのバケットへライブ複製 |
| SRR | 同じリージョンの別バケットへライブ複製 |
| Batch Replication | 既存データ等を、対象を選んだジョブで複製 |
選択すると、正誤と理由が表示されます。
作成する人の権限と、S3が使う権限を分ける
複製ルールを作る主体と、複製処理のためにS3が引き受けるロールは別です。ロールの信頼と、元の版を読む許可・先へ複製する許可を対応させます。別アカウントなら、複製先側のbucket policy等による許可も必要です。
| 項目 | 確認内容 |
|---|---|
| Versioning | 元と先の両バケットで有効か。先で停止すれば複製が失敗する |
| 対象条件 | prefix/タグ等が一致するか。設定前からあった対象と混ぜない |
| 所有者 | 元の版を読む権限、先の所有権設定と必要な権限が整合するか |
| 保護 | 元がObject Lock有効なら先にも要件がある。保持条件を確認 |
別アカウントへ送る場合、複製先が所有するのか、元側の所有関係を保つのかを意識します。Bucket owner enforced等の所有権設定やowner overrideによって扱いが変わります。データが到着したことだけで、複製先のアプリが読めるとは決まりません。
KMSで暗号化した版は、明示設定とキー権限まで確認する
AWS KMSは暗号鍵を管理するサービスです。そのキーを使うサーバー側暗号化がSSE-KMS、二層にするものがDSSE-KMSです。これらで暗号化された対象は、複製を明示的に有効にする設定が必要です。元のキーでの復号と、先のキーでの暗号化に対応した権限、キーのポリシーと対象リージョンを確認します。「S3を読めるからKMSも使える」とは限りません。
選択すると、正誤と理由が表示されます。
削除の種類で、複製先に伝わるものが違う
| 元での変化 | 先への扱い |
|---|---|
| version IDなしのDELETE | 既定では削除マーカーを複製しない。対応ルールで明示的に有効化できる |
| 特定のversion IDを完全削除 | その完全削除は複製先へ伝わらない |
| Lifecycleによる削除マーカー | delete marker replicationを有効にしても複製しない |
| バケットのLifecycle設定を変更 | 複製先へ設定自体をコピーしない |
削除マーカーの複製はタグで対象を絞るルールでは使えません。古いV1形式は扱いが異なるため、既存設定にこの表を無条件で当てはめません。マーカーが先でも現行になれば、先の通常の読取りも削除扱いになりますが、残るデータ版とは区別します。
選択すると、正誤と理由が表示されます。
PENDING・COMPLETED・FAILEDを、必要な版に対応させる
| 状態 | 読み方 |
|---|---|
| PENDING | 複製が未完了。遅延と失敗の確定を同一視しない |
| COMPLETED | 対象版の複製が完了。複数先ならすべての先の完了条件を確認 |
| FAILED | 権限やキー等の原因を調べる。修正しただけで失敗済みの全版が再送されるとは考えない |
| REPLICA | 複製先のレプリカを示す。アプリの切替完了という意味ではない |
FAILEDの対象は、原因を修正した上でBatch Replication等の再処理を検討します。PENDING/FAILEDの複製状態は元のLifecycleにも影響します。また、複製先のLifecycleは到着時刻ではなく元オブジェクトの作成時刻を基準にするため、先の保持期間も別に確認します。
- 必要な対象と復旧要件を決め、リージョン/アカウント/既存データを分ける。
- 両側のVersioning、ルール、S3用ロール、所有権と暗号化条件を確認する。
- 対象版の状態と複製先を確認し、失敗原因と再処理対象を記録する。
- 複製先の保持・削除権限・読取り・アプリ切替と費用を別に設計する。
確認して、自分の言葉で説明する
- CRRとSRR、ライブとBatchの違いを読む。
- 対象・Versioning・権限・暗号化を確認する。
- 削除の種類と先の保持を区別する。
- 版ごとの完了と再処理対象を確認する。
理解を確かめる: 複製をONにすれば、既存データと削除と復旧もすべて自動でそろう?
いいえ。対象時期・削除設定・権限・保持・完了結果を別々に確認する。
複製は設定された対象の非同期コピーです。必要な版を読めることや復旧できることは、複製先も含めた設計と確認が必要です。
出典と確認した条件
説明に用いた公式資料を、確認した内容・条件と本文の参照箇所に分けてまとめています。専門家による監修・実際のAWSとの比較検証は行っていません。
確認した内容・条件CRR/SRR、ライブとBatch、非同期の複製、所有権と復旧の役割分担。
確認した内容・条件両バケットのVersioning、所有権とObject Lock、複製先Lifecycleの元の作成時刻、リージョン間の違い。
参照した本文コピー元・対象ルール・複製先を対応させる 作成する人の権限と、S3が使う権限を分ける PENDING・COMPLETED・FAILEDを、必要な版に対応させる
確認した内容・条件設定する主体とS3用ロール、信頼と元/先の権限、別アカウントの複製先。
確認した内容・条件新規バケットのBucket owner enforced既定、所有権の3設定、アップロード時に受け付けるACL。所有権と一般公開を区別。
参照した本文作成する人の権限と、S3が使う権限を分ける
確認した内容・条件KMS対象の明示設定、元/先のキー権限とリージョン、有効なキー。設定保存と複製完了を区別。Bucket Keyは追加確認。
確認した内容・条件版指定削除とマーカー、Lifecycle設定。現行Filter形式と旧V1を区別。暗号化対象は専用資料の条件を優先。
参照した本文削除の種類で、複製先に伝わるものが違う
確認した内容・条件現行形式での既定と明示設定、タグ対象の制限、Lifecycleが作ったマーカーは複製しない。
参照した本文削除の種類で、複製先に伝わるものが違う
確認した内容・条件元の版ごとの状態と先のREPLICA、失敗時の再処理、複数先とLifecycleへの影響。