SHOEISHA iD

※旧SEメンバーシップ会員の方は、同じ登録情報(メールアドレス&パスワード)でログインいただけます

CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。

CodeZineニュース

AWS、Amazon S3にチェックサムアルゴリズムを追加

  • このエントリーをはてなブックマークに追加

  • このエントリーをはてなブックマークに追加

 米Amazon Web Servicesは、クラウドストレージサービスAmazon Simple Storage Service(Amazon S3)に、4つのチェックサムアルゴリズムのサポートを追加したことを、2月25日(現地時間)に発表した。

 Amazon S3におけるPutObject関数では、オブジェクトのMD5チェックサムが利用可能となっており、指定した値がS3によって計算された値と一致する場合にのみ操作を受け入れる。この機能によって、Amazon S3はデータ通信エラーを検出できる。一方で、PutObjectを呼び出す前、またはGetObjectを呼び出した後にチェックサムを計算する必要があり、ファイルサイズの大きなオブジェクトのチェックサムは計算量が多く、ボトルネックにつながる可能性もあった。

 今回の、新たなチェックサムアルゴリズムのサポートによって、Amazon S3に保存されているデータのチェックサムを計算して保存し、チェックサムを使用してアップロードとダウンロードのリクエストの整合性をチェックすることがこれまで以上に容易となっており、各オブジェクトをAmazon S3にアップロードする際には、広く使用されているチェックサムアルゴリズムである、SHA-1、SHA-256、CRC-32、CRC-32Cのいずれかを使用できる。

 AWS SDKの最新バージョンでは、指定されたチェックサムをアップロードの一部として計算し、アップロードの終了時にHTTPトレーラに送ることが可能になっている。事前に計算されたチェックサムを指定するオプションも用意されており、HTTPトレーラと組み合わせることでクライアント側の整合性チェックを大幅に高速化できる。

 さらに、AWS SDKではクライアント側の並列処理を利用して、マルチパートアップロードの各パートのチェックサム計算が可能になっており、すべてのパートのチェックサム自体のチェックサムが計算され、アップロードが完了するとチェックサムのチェックサムがAmazon S3へ送信される。

 検証されたチェックサムは、指定されたアルゴリズムとともにオブジェクトのメタデータの一部として保存され、オブジェクトに対してKMSキーを使用したサーバ側の暗号化が要求された場合、チェックサムは暗号化された形式で保存されることになる。

 さらに、オブジェクトおよび各パートのチェックサムを返す、GetObjectAttributes関数も用意されている。

 今回追加された4つのチェックサムは、すべての商用AWSリージョンにおいて、追加料金なしで使用できる。

関連リンク

この記事は参考になりましたか?

  • このエントリーをはてなブックマークに追加
この記事の著者

CodeZine編集部(コードジンヘンシュウブ)

CodeZineは、株式会社翔泳社が運営するソフトウェア開発者向けのWebメディアです。「デベロッパーの成長と課題解決に貢献するメディア」をコンセプトに、現場で役立つ最新情報を日々お届けします。

※プロフィールは、執筆時点、または直近の記事の寄稿時点での内容です

この記事は参考になりましたか?

この記事をシェア

  • このエントリーをはてなブックマークに追加
CodeZine(コードジン)
https://codezine.jp/article/detail/15644 2022/03/02 16:45

おすすめ

アクセスランキング

アクセスランキング

イベント

CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。

新規会員登録無料のご案内

  • ・全ての過去記事が閲覧できます
  • ・会員限定メルマガを受信できます

メールバックナンバー

アクセスランキング

アクセスランキング