- 2024年6月12日
CUR2.0をAthenaに統合してみた
この記事では、AWSのCUR2.0をAthenaに統合する方法について解説します。CUR2.0の特徴と設定方法、Athena統合の具体的な手順やパーティション射影の設定方法を紹介し、実装のポイントや注意点を詳述します。CUR2.0を初めて使用する方やAthena統合に興味がある方に最適なガイドです。
この記事では、AWSのCUR2.0をAthenaに統合する方法について解説します。CUR2.0の特徴と設定方法、Athena統合の具体的な手順やパーティション射影の設定方法を紹介し、実装のポイントや注意点を詳述します。CUR2.0を初めて使用する方やAthena統合に興味がある方に最適なガイドです。
AWS SDK V3を使ってS3からGetObjectCommandを使ってCSVファイルを取得し、1行ごとにパースする。
AWS JamでSNSの暗号化に取り組んだ際、AWS マネージド型キーではなく、カスタマー管理型のキー(CMK)を使用する必要があることが明らかになった。マネージドキーではキーポリシーを修正できないためである。また、SNSトピックを作成する際の暗号化には特定のKMSを指定し、キーポリシーとアクセスポリシーを適切に設定する必要がある。しかし、SNSの暗号化にマネージドキーを指定した際のエラーが明確でなく、デバッグ方法が不明であるため、問題解決が困難であった。
LocalStackを利用してローカル環境に本番環境に近い環境を作成し、S3からのデータ取得をする方法を紹介します。
CDKを使用してS3静的ウェブサイトホスティングとCloudFrontを組み合わせたWebサイトを実装する方法を説明します。主なポイントは、S3の静的ウェブサイトホスティングを有効にするための`website_index_document`の指定、パブリックアクセスを可能にするための`public_read_access`の設定、そしてCloudFrontとS3静的ウェブサイト間の通信をHTTPのみに設定するための`origin_protocol_policy`の設定です。また、ブロックパブリックアクセスを無効化する際のエラーとその解決策についても触れています。
S3 Object Lambdaを触ってみたことについて記事にまとめてます。 AWSドキュメントを参考にしながら、基本的なチュートリアルをやってます。 シナリオは、ファイルのテキストをS3 Object Lambdaを使うことで全て大文字に変換して取得するというものになります。