のんびりSEの議事録

プログラミング系のポストからアプリに関してのポストなどをしていきます。まれにアニメ・マンガなど

AWS

Twitterの`created_at`をAthenaのdatetimeに変換する

Twitterのデータを分析用にS3に保存して、AthenaでSQLを投げたりしてるのですが、created_atの形式がAthenaでのdateに対応した形式では無いので、それをフォーマット出来るSQLを考えました。

AthenaでS3のデータをSQLで操作する

AWS

この記事はAmazon Web Services Advent Calendar 2017 24日目の記事です。

Amazon EMRでSparkをやってみて

EMRを利用したSparkについて、紹介と、チューニングのポイントを記載しています。

Developers.IO 2017に参加してきました

今年も開催された、Developers.IO 2017に参加してきましたので、ざっくり感想をまとめました。 dev.classmethod.jp

Developers.IO 2016参加レポート

本日行われたDevelopers.IO 2016に参加してきました! 会場はSAPJapanで行われ、雨の中ではありましたが、半蔵門駅直通ということもあり、たくさんの方々が集ったイベントとなりました。