FIXER Tech Blog - Cloud

最大10倍高速な「Amazon S3 Express One Zone」！ AWS re:Invent 2023で発表

　本記事はFIXERが提供する「cloud.config Tech Blog」に掲載された「AWS re:Invent 2023 in Las Vegas いよいよスタート！」を再編集したものです。

　皆さま、お久しぶりです！FIXER ヘルスケア・イノベーション領域の千賀です！

　今年の AWS re:Invent 2023 がラスベガスでいよいよ始まりました。

　Amazon S3 Standard ストレージクラスより最大10倍高速という「Amazon S3 Express One Zone」ストレージクラスが基調講演（キーノート）の中で発表され、東京リージョンでもGA（General Availability - 一般公開）されましたので、早速お伝えしたいと思います。

　これまで、データ分析やMLでS3を既に利用していらっしゃる方々、レイテンシーが気になってEBSを使っていらっしゃった方々に朗報です！　1桁ミリ秒という極めて低いレイテンシーでアクセスできる、新しいS3のサービス「Amazon S3 Express One Zone」の登場です。

Amazon S3 Express One Zoneの特長

とっても速い！

・一貫した1桁ミリ秒という低レイテンシで毎秒数十万のリクエストを処理可能

・低レイテンシのため、特に小さなオブジェクトはS3 Standardより最大10倍速く読取り可能

インフラコストが下がる！

・アクセスが速くコンピューティングリソースの稼働時間を減らせるためS3 Standardよりも50%安い

→ストレージのコストがそのものが今までより安いということではなく、EMRやRedshift、SageMakerなどのデータ待ち時間短縮 → 全体の処理時間が短くなる → インスタンスの稼働時間が短縮 → 課金が安くなる、ということです。

可用性は注意が必要！

・オブジェクトは単一のAZ内の専用ハードウェアに保存

→高速化のため、単一AZ内にデータが保存されますので、そのAZが火災等で失われた場合にはデータを消失する可能性があります。SLAは99.9％です。

対応するAWSサービス

　Amazon EMR、Amazon Redshift、Amazon SageMaker、Amazon BedrockなどのAWSサービスから利用することができます。

　データ分析系ですね。Bedrockが対応しているということなので、LLMにも使ってみたいところです。

　Mountpoint for Amazon S3にも対応しているようなので、クライアント端末からのアクセスもこれまで通り可能ですね。

最適なユースケース

　AI/MLトレーニング、金融モデリング、メディア処理、リアルタイム広告配信、ハイパフォーマンスコンピューティングなど、頻繁にアクセスされるデータや最も要求の厳しいアプリケーションに最適と説明されている通り、いわゆるクラウドネイティブなアーキテクチャに向いていそうです。

　スループットについての言及は今のところ見当たりませんが、レイテンシーが極めて小さくなるため、大量に小さなサイズのデータがある場合の並列分散処理に向いていると思われます。同時アクセスについても毎秒数十万リクエストに対応しているとのことですので、そういったユースケースで、今までレイテンシーが気になってEBSをEC2にマウントして処理していたといったような場合に、直接S3上に置いて高速で並列処理するということができるようになりそうです。

　処理時間が短縮され、これまでより早く結果を得ることができるとともに、コンピューティングリソースの稼働時間を減らしてコストを低減することができます。非常に大量のコンピューティングリソース（とコスト）が必要となるLLMにも向いているように思います。

　但し、単一AZにデータが保存される（マルチAZ構成にできない）ため、現実にはめったなことでは起こらないと思いますが、利用しているAZに大規模な災害等が発生した場合にはデータが失われる可能性があります（ホストやラックレベルの障害については99.999999999%の可用性で設計されています）。ミッションクリティカルな基盤というよりも、データ分析を素早く実施したいといった場合に利用に向いているかもしれません。

　もしミッションクリティカルな基盤に利用したい場合や、SaaSの基盤などとして利用する場合には、オリジナルのデータをS3 StandardにマルチAZ構成で保存しておき、そこからS3 Express One Zoneに複製して利用するのが良いと思います！

　公式アナウンスの中でもキャッシュソリューションが不要になるという言及もありましたので、S3 Express One Zoneをキャッシュとして利用するというユースケースもありそうですね。

アプリケーション開発者向け留意事項

・「ディレクトリバケット」という新しいバケットタイプとなります。

・名前付けが階層構造となり、パスは "/" で区切られる必要があります。

・CreateSessionがバケットに対する5分間のアクセス権を許可するセッショントークンを返す、新しい認証方式となりますので、最新のAWS SDKを使いましょう。

・バケット名にリージョン名とAZ名を含め、AZ内でユニークとなるように命名する必要があります。

公式情報はこちら

▼ ニュースリリースはこちら（英語）
https://press.aboutamazon.com/2023/11/aws-announces-the-general-availability-of-amazon-s3-express-one-zone

▼ 公式ブログはこちら（英語）
https://aws.amazon.com/jp/blogs/aws/new-amazon-s3-express-one-zone-high-performance-storage-class/

★AWS re:invent 2023 の基調講演とイノベーショントークは、オンラインで無料で視聴できますよ。
https://aws.amazon.com/jp/events/reinvent-2023/

千賀 大司／FIXER

ヘルスケア・イノベーション領域 領域責任者。
金融SEとして国内外の銀行、年金システムの開発に携わり、株式分析サービスのスタートアップCTO、東証一部上場企業のR&D 部門責任者を経て、現職。
政府・官公庁向け大規模システムのクラウドマイグレーションや、クラウドネイティブなシステムの開発でのアーキテクト、プロジェクトマネージャー等に従事。
機械学習を用いた金融・証券分野のデータ分析やマーケティングオートメーション、大規模・並列分散システムのアーキテクチャ、高セキュリティ対応のクラウドデザイン等を担当。また、証券・金融業向けFinTechソリューションの開発や人型ロボット向けクラウドAI開発、AIによるコールセンター支援システムの開発などを推進。

■関連サイト

• cloud.config Tech Blogのエントリー
• cloud.config Tech Blog
• FIXER