RDSのmySQLにCSVを一括入力する
AWSのRDSで立ち上げたmySQLサーバーに、大量のデータが入っているCSVファイルを一括で追加するまでの流れをまとめてみたいと思います。今回は踏み台サーバーのEC2にCSVファイルをSCPコマンドで転送し、RDSのmySQLでEC2にあるCSVファイルをLOAD DATA LOCAL INFILEで一括追加してみたいと思います。
EC2からRDSに接続してmySQLを操作。EC2踏み台サーバー構築メモ
EC2からRDSに接続してmySQLを操作したいと思いましたので、構築までの流れを備忘録として残したいと思います。EC2は通常のWebサーバーではなく、mySQLを操作する一時的なサーバー(踏み台サーバー)として立ち上げます。
ローカルにある画像をS3にアップロードしてみた
ローカルにある画像をnode.jsのnode-s3を使ってS3へ画像をアップロードしてみました。とてもシンプルな方法ですが、簡単にまとめてみたいと思います。
サーバーレスに画像リサイズとDB構築。LambdaからS3とRDSを同時に扱うには
S3のイベントをフックして画像処理を走らせたり、RDSのMySQLを操作するLambda Functionを作りたいと思いました。画像アップロートのタイミングでリサイズ画像を生成したり、画像検索データベースを自動で構築してくれたら非常に楽ですよね。
S3で有効期限付きのページを作る
業務向けのサービスで、任意の時間内に限定してアクセス可能なサインアップページを用意する必要がありました。こういったケースではS3の期限付きURL(pre-signed url)を発行させるのが便利そうです。ということで早速nodeで試してみました。
