[B! s3] t-akihitoのブックマーク

t-akihito id:t-akihito

s3に関するt-akihitoのブックマーク (3)

[Update] AWS DataSyncによるストレージサービス間のデータ転送にエージェントが不要となりました! | DevelopersIO
こんにちは。サービスグループの武田です。 AWS DataSyncというサービスをご存じでしょうか？オンプレミスのストレージ、Amazon S3、Amazon EFS、Amazon FSx for Windows File Serverとの間でデータ転送をするためのサービスです。これまではデータ転送に、仲介するDataSyncエージェントが必須でした。今回のアップデートで、ストレージサービス間であればエージェントが不要になりました！素敵！ドキュメントに比較できるわかりやすい図がありましたので引用します。日本語のドキュメントから。アップデート前はS3-EFS間でもエージェントが必要でした。引用元：How AWS DataSync Works（日本語）こちらは英語のドキュメントから。アップデート後はストレージサービス間ではエージェントが不要に。引用元：How AWS DataSync
t-akihito 2025/05/04
aws

efs

s3

storage
リンク
オリジナルのS3バケットのバックアップシステムをCross Region Replicationに移行したはなし - KAYAC Engineers' Blog
SREチームの長田です。 Tech Kayac Advent Calendar Migration Trackの15日目です。 S3バケットのバックアップ Lobiでは投稿された画像ファイルをS3に保存しています。 S3に保存しているだけでは、S3から誤って削除した場合に復元することができません。主に読み書きするS3バケットとは別に、バックアップ用のS3バケットを用意し、そちらに画像ファイルのコピーを保存しています。バックアップの仕組みを用意した当時はAWS内にこれを実現する機能がなく、自前のLambda functionでコピーを行っていました。 Backup S3 objects with Lambda function S3バケットに画像ファイルがPUTされたイベントをLambda functionに通知し、対象ファイルをダウンロードして別リージョンにあるバックアップ用のS3バ
t-akihito 2019/12/16
kayac

Lambda

s3

aws
リンク
Amazon S3 Signature V2 廃止対応にまつわるあれこれ - KAYAC Engineers' Blog
SRE チームの藤原です。Tech Kayac Advent Calendar Migration Track 13日目の記事です。 AWS を使っていれば、ほぼ100%なんらかの形で S3 と関わっているでしょう。仮に自分で明示的に S3 にアクセスしなくても、EC2 などのスナップショットは実際には S3 に保存されますし、Aurora も裏ではストリーミングバックアップを S3 に保存し続けていたりします。個人的には、AWS のパワーの根本は S3 の盤石さが支えていればこそ、と思ってもいます。そんな AWS の最初期から存在する超重要コンポーネントである S3 ですが、2019年6月24日をもって署名バージョン2を廃止するとのアナウンスが2018年末にありました。署名バージョン2を使用しているクライアントは全てアクセスできなくなる、ということでした。社内での対応アナウンスを受
t-akihito 2019/12/13
なかの人たちも大変そうだなと

kayac

aws

s3
リンク
1