2017-01-01から1年間の記事一覧

awkでデータの絞り込み

やりたかったこと 本番RDSから割と大きめのデータをエクスポート 負荷がかからないローカルDBでそのデータをこねくる 割とデータ量が多いのである程度はawkなどを駆使してデータを絞る (adsbygoogle = window.adsbygoogle || []).push({}); 実践 [必要なデー…

今更ながGitHubのカンバン機能「Project」を使って見る

GitHub Projects http://dev.classmethod.jp/tool/git/github-projects/ 目的 プロジェクトで、ClientとServer間のコミュニケーションの効率化/作業の見える化をしたかった 概要 ディレクターとデザイナーとのコミュニケーションは別ツールを使用。 Project…

気軽にRDSの負荷分散

RDSの負荷分散にnginxのstream機能を使った話。やりたいイメージ 前提 RDSのマスターとレプリカで負荷分散させたい ELBでやろうとしたけどEC2にしか対応していない HAproxy MySQLproxyちゃんと構築する時間がない (adsbygoogle = window.adsbygoogle || []).…

fluentdによるlogの集約とS3への保存

業務でログ収集をやることになったのでその時のメモやりたいイメージ A B C Dのnginxのログはltsv形式 A B C DのログをEに集約 Eに集約したログを大dailyでzipしてs3に保存 各サーバーのHDのスペックは以下A B C D - 8G E - 100G まずは各サーバーの設定とtd…