lunaplus*

Find hints in all sort of places

Athena Federated QueryでCloudwatchにSQL実行する

Athena Federated Queryとは… 突然ですが、S3以外のデータソースに対してAthenaからSQLを実行したい場合がありますよね。 前回紹介したAWSサービスの「セキュリティログ」だけでなく、LambdaやFargateといったサービスのログは Clowdwatch Logsに直接出力されていたりします

AWSのセキュリティログをAthenaで検索する

セキュリティログの活用 セキュリティインシデントの発生時の対応や各種証跡の保全のためにログを取得することは、これまでも一般的に行われてきました。 特にクラウドでは、セキュリティに関する各種のログが簡単に取得できる各種のサービスやツールが公開されており、企業や個人でも活用されている方は

Amazon Athenaを使ってみよう

AWSを利用したデータ分析の話です。 蓄積されたログをはじめとする各種のデータを傾向分析や障害調査などでちょっと集計するような ことはよくあると思います。”ファイルを集めてきて必要な情報を切り取って平均値を求める” だけなのですが、数万のファイルを集めてその後Grepする?(マジで&h

IPアドレスからアクセス元の国名を割り出す

グローバルIPアドレスの管理 グローバルIPアドレスは、Internet Assigned Numbers Authorityによって管理され、 その下部組織によって国ごとに割り当てが決められています。 この割り当て表を使って、Webサイトへアクセスしてきたユーザーの国を割り出してみるという データに関連するTipsを