Amazon CloudFrontの従来のOAIから新しくなったOACに移行してみた | DevelopersIO
Amazon CloudFrontからS3へのアクセス制御として、新たにOrigin Access Controlが利用できるようになったので、従来のOrigin Access Identityから移行してみました。 はじめに みなさん、こんにちは。 ネクストモードのあゆです。 Amazon CloudFrontにOrigin Access Control(以下、OAC)の機能が追加されました。従来のOrigin Access Identity(以下、OAI)ではS3側のSSE-KMSに対応していない、 S3に対する動的なリクエストがサポートされていない、などの制限事項がありましたがOACによりそれらをカバーしています。 詳細は下記エントリーをご覧ください。 本記事では新規でOACを作成し、既存環境で使用しているOAIと差し替えて問題なくアクセスできるところまでやってみようと思います！ 書
こんばんは、菅野です。 仕事で Google スプレッドシートを使う機会があるのですが、そのデータを AWS のサービスで使いたくなったので Google Apps Script（GAS）を使って S3 に CSV ファイルとして保存してみました。 はじめに Google スプレッドシートは使ったことあるけど、Google Apps Script（GAS）は使ったことが無いという人がいるかもしれませんので始め方について書いておきます。 まず、ブラウザは Google Chrome を用意してください。 次に Google Apps Script アプリをインストールしましょう。以下の URL で見つかります。 https://chrome.google.com/webstore/search/Google%20Apps%20Script?hl=ja 作業の流れ 細かい事は追って説明しますが
複数AWSアカウントを使用していると、「１つのAWSアカウントのS3にデータを集約したい。」なんてニーズがでてきます。 S3のバケットポリシーのPrincipalを設定する際、アクセスができなくてハマったので本ブログはその備忘録です。 S3はデータ置き場としてとても使えるやつで、他のアカウントと共有することも多いです。 複数AWSアカウントを使用していると、「１つのAWSアカウントのS3にデータを集約したい。」なんてニーズがでてきます。 S3のバケットポリシーのPrincipalを設定する際、アクセスができなくてハマったので本ブログはその備忘録です。 S3がリクエストを許可する方法 S3がバケットオペレーションのリクエストを許可する方法は、公式ドキュメントに記載されています。 Amazon S3 がバケットオペレーションのリクエストを許可する方法 - Amazon Simple Stora
最近では『マルチクラウド』環境で仕事を回すというのも珍しい話では無くなって来ました。クラウドプラットフォーム間を連携するというのも普通に挙がってくるテーマかと思います。 そんな『マルチクラウド』の環境間で『データの移動』という部分について考えてみた場合、ざっと見てみた感じだと『AWS』から『GCP』については比較的情報量が多いなという印象を受けました。GCPが公式で『AWS向け』のドキュメントを展開しているというのも大いに関係しているかと思います。 ですが一方で、『GCP』から『AWS』という逆のパターンだとどうでしょう。AWSが個別に『GCP向け』の情報を展開しているというのは現状無さそうです。また、その他情報源についてはどうでしょうか？感覚値的には『AWS→GCP』程は情報量的に多くないのでは、という感じがします。 そこで当エントリでは、『GCP(Google Cloud Platfo
コンバンハ、千葉（幸）です。 S3 のライフサイクルやバージョニング、使ってますか？ 私は「あぁそれね、4年くらい前に完全に理解しましたよ」という気分でいたのですが、いざ きちんと思い出そうとすると 90分ほどかかってしまいました。 3歩あるくと大抵のことを忘れる私としては、都度 90分かけて思い出すわけには行きません。今後は 3分くらいで思い出せるよう、まとめてみることにします。 まとめ バージョニング はバケット単位で設定する ステータスは以下のいずれか 無効 有効 停止 「以前のバージョン」のオブジェクトは復元できる 削除マーカーによる論理的な削除という状態が生まれる ライフサイクルはスコープを限定可能で、ルールを複数設定できる 選択できるアクションは以下 現行のバージョンのストレージクラスの移行 以前のバージョンのストレージクラスの移行 現行のバージョンの失効 以前のバージョンの完
こんにちは、イムチェジョンです。 今回のブログではAmazon S3の暗号化について調べてS3で提供してくれる二つの暗号化を実際にしてみようと思います。 アジェンダ Amazon S3の暗号化とは？ Amazon S3の暗号化４種類 SSE-S3の設定方法 SSE-KMSの設定方法 まとめ 1. Amazon S3の暗号化とは？ 暗号化を使用することで転送時と保管時にデータをもっと安全に保護できる 転送時：Amazon S3 との間でデータを送受信するとき 保管時：Amazon S3 データセンター内のディスクに格納されているとき 大きくサーバー側の暗号化とクライアント側の暗号化に分けている サーバー側の暗号化：SSE-S3、SSE-KMS、SSE-C データセンターのディスクに保存する前にオブジェクトを暗号化し、オブジェクトをダウンロードする際に解読するようAmazon S3に要請 クラ
こんにちは、イムチェジョンです。 今回のブログではS3バケットのオブジェクトを開くためにAWS CLIを利用してpre-signed urlsを取得してみました。 アジェンダ pre-signed urlsとは？ pre-signed urlsの取得方法 まとめ 1. pre-signed urlsとは？ pre-signed urls すべてのオブジェクト及びバケットは基本的にプライベートだが、pre-signed urlsを使用して選択的にオブジェクトを共有できる 顧客/ユーザーがAWSセキュリティ資格証明や権限なしに、バケットにオブジェクトをアップロードすることを許容できる pre-signed urlsの構成 pre-signed urlsは下のように構成されてます。 https://s3.amazonaws.com/examplebucket/test.txt? X-Amz-Al
【新機能】Amazon ElastiCache – RedisのスナップショットをS3にエクスポートする | DevelopersIO
こんにちは、せーのです。今日はElastiCacheの新機能をご紹介します。 現時点でも稼働中のElastiCacheからスナップショットを取ることが可能でしたが、このスナップショットをS3に吐くことが出来るようになりました。 用途 ElastiCacheからスナップショットを取る理由は言うまでもなくバックアップのため、なわけですが、これがS3に出力できると何ができるでしょうか。 S3に出力する、ということはつまり「別の環境でキャッシュデータが使える」ということを意味します。つまり主な用途としては DR対策: 災害時等にスナップショットデータを別環境にて使用する 分析: スナップショットデータを分析してキャッシュパターンを抑えることができるようになります 分配: スナップショットをとったキャッシュデータをすぐに他の環境にて使用することで連続したデータを使用したシステムの構築ができるようにな
西澤です。S3 Transfer Accelerationの利用を検討する為、みんな大好きAWS CLIから試してみたのでご紹介したいと思います。 S3 Transfer Accelerationとは？ S3 Transfer Accelerationとは、海外リージョン等の送信元から遠く離れたS3へのデータ転送を、AWSのエッジロケーションとネットワークプロトコルの最適化を利用して高速化するサービスです。詳細については、下記の「よくある質問」がわかりやすいかと思います。 よくある質問 - Amazon S3 Transfer Acceleration S3 Transfer Accelerationを有効にする S3 Transfer Accelerationは、バケット単位で有効にすることができます。設定そのものでは課金は発生しませんが、GBアップロードあたり$0.04が課金対象となり
こんにちは、イムチェジョンです。 今回のブログではAmazon S3のオブジェクトのレプリケーションを保存するバケット作成してみました。 アジェンダ オブジェクトのレプリケーションとは？ レプリケーションバケットの作成 まとめ 1. S3のレプリケーションとは？ レプリケーションを使用しますと、Amazon S3のバケット全体のオブジェクトを自動で非同期的にコピーする オブジェクトの複製のために構成されたバケットは同じAWSアカウントまたは他のアカウントが所有可能 オブジェクトは単一の対象バケットまたは複数の対象バケットに複製できる 基本的に、複製は活性化された新しいAmazon S3オブジェクトのコピーのみサポートする 複製を使って既存のオブジェクトを他のバケットにコピーするためには、AWS Support Centerに問い合わせる必要がある 2. レプリケーションバケットの作成 S3
ども、大瀧です。 大事なファイルを誤って消してしまった経験、誰しもありますよね。AWSのオブジェクトストレージサービス S3には、ファイルの誤削除を防ぐ仕組みとしてバージョニングという機能があります。バージョニングはその名の通り、ファイルごとにバージョンIDを付与し、ファイルを上書き・削除するときに元のファイルを保持する機能です。ただしバージョニングを有効にしても、バージョンIDを指定して削除操作を行うとそのデータは削除されてしまう恐れがあります。そこで、S3 MFA Delete機能を利用しデータを保護することができます。 S3 MFA Deleteとは S3 MFA Deleteは、バージョニング機能のオプションとして動作します。バージョンIDを指定しない通常のファイル操作(作成、変更、削除)は通常通りで、バージョンIDを指定する削除操作のみ、MFAデバイスによる認証を必須とするオプシ
ベルリンの半瀬です。 はじめに 題名の通りですが、アカウントを跨いだS3転送についてEc2からコマンドラインでの実行確認を行いましたので、そのメモを残します。 以下の過去記事とAWSドキュメントを元にしました。 How do I transfer ownership of Amazon S3 objects to a different AWS account? | AWS クロスアカウントで S3 sync するための権限設定 | Developers.IO やってみます 以下のような形で実行します。EC2は送り先で起動。 簡単です。と言いつつもポリシーの記述間違いでハマったことは内緒です。 送信元(Source)の情報 AWS Account ID : 111111111111 S3 Bucket : test-s3-sync-src (Frankfurt) 送信先(Destinati
はじめに こんにちは。DI部の大高です。 わたしはなかなかのうっかり者なのですが、そんなうっかり者に気になる新機能「S3オブジェクトロック」の情報が入ってきました。 S3オブジェクトロックとは S3オブジェクトロックの詳細については、濱田さんの記事をご参照ください。 S3オブジェクトのロック（なにをどうやっても改竄削除が不可）がリリースされました！ #reinvent ｜ DevelopersIO ここでうっかり者としてとても気になったのは「間違って設定したらどうなるのか？」です！ まずはさっそく試してみます。 S3バケットの作成 S3バケットを作成します。 バケット名を入力して「次へ」をクリック。 「バージョニング」と「オブジェクトのロック」を有効にします。あとはデフォルトのまま作成です。 ファイルのアップロード では、ファイルをアップロードしてみます。 ファイルを追加して、まずはそのま
![[小ネタ]S3オブジェクトロックを誤って設定したらどうなるのか？ ｜ DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/69d5e5df38c6d27d133baa3f894a2379a68db070/height=288;version=1;width=512/https%3A%2F%2Fsiteproxy.ruqli.workers.dev%3A443%2Fhttps%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2018%2F11%2Feyecatch_reinvent-2018-city_1200x630.jpeg)
S3では、昨日ごっつ凄そうなアップデートが発表されました。 S3が数十億におよぶ大量オブジェクトへのバッチ処理機能を発表！（プレビュー） #reinvent ｜ DevelopersIO それ以外にも11月26日で、S3のドキュメントヒストリーが5個更新されています（参考：Document History - Amazon Simple Storage Service）。 そんな進化を止めないS3ですが、新たにオブジェクトの変更・削除を完全に制限するオブジェクトロックの機能が発表されていたので、その機能を紹介いたします。 Amazon S3 オブジェクトロックの概要 ドキュメントはこちらを参照。 Introduction to Amazon S3 Object Lock - Amazon Simple Storage Service Amazon S3 オブジェクトロックは、いわゆる「Wr
What is Jamstack? ここ数年でよく聞くようになったワード。 Jamstackとはウェブサイトを構築および運用するための、技術の組み合わせです。 JavaScript・API・事前にレンダリングされたMarkupの組み合わせでJamStackとのこと。 (以前はJAMStackといってたけど、最近はJamstackだったりする) Jamstackは、 「ウェブをより速く・より安全に・より簡単に拡張できるように設計されたアーキテクチャ」であり、 生産性を最大化するツールやフレームワーク、ライブラリやワークフローなどを 組み合わせて構築されるもの、とのことです。 ※jamstack.orgより 従来のCMSではアクセスがあったとき動的にページを生成しますが、 Jamstackではデプロイ以前に必要なページを生成します。 具体的には、下記。 Webサイトのフロントエンド全体(HTM
Amazon S3 のバージョン管理について | DevelopersIO
ObjectにバージョンIDを持つ ファイル名の最後にタイムスタンプの文字列を付けて簡易的なバージョン管理を行ったことはありませんでしょうか？そのうち最新とか付けて混沌としてしまうことってありますよね（笑）。 Amazon S3 は、Bucketのオプション指定をすることでObjectファイルに複数バージョン持たせることができます。BucketでVersioning指定をEnableにすると、そのBucket内の全てのObjectがバージョン管理対象となります。管理されたObjectはユニークなVersion ID を持つこととなり、IDを指定して取り出したり消したりできます。 Versioning指定をEnableにする AWS Management Console は、未だVersioning機能を操作するUIに対応していません。そこで、Amazon S3 の管理ツールとして有名なCl
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Amazon S3 の署名付き URL (presigned URL) をマネジメントコンソールからお手軽に生成できるようになっていた | DevelopersIO
