Amazon S3 Tables でつくるログ分析基盤¶
──CloudWatch Logs からのコスト最適化
利便性とのトレードオフはあるが、費用削減効果が高い。— @pospome
移行の背景¶
-
カミナシ ID 管理基盤の CloudWatch Logs コストが増大(取り込みコストが主因)
-
Amazon S3 Tables(Apache Iceberg)への移行でコストを大幅削減
Amazon S3 Tables とは¶
| 特性 | 内容 |
|---|---|
| 実体 | Apache Iceberg 実装の AWS マネージドサービス |
| クエリ | SQL(Athena)でクエリ可能 |
| 管理 | マネージドコンパクション(小さなファイルの自動統合) |
| スキーマ | スキーマ進化(カラム追加・変更)に対応 |
移行アーキテクチャ¶
(図: SVG)