負荷テストツールGatlingを触ってみた

負荷ツールとしてGatlingのことを少し前から耳にする機会が増えたので、利用してみることにした。色々既出だとは思うが、公式のQuickstartに従って試してみたのでメモ。 GUIが必要だったので、今回は手元のMacで実行。 Gatlingとは Java/Scala製の負荷テス…

2015-06-11

Embulkではてなブログの記事をparseしてElasticsearchに入れてみる

embulk elasticsearch

Embulk良さそうだね、と言いつついじったことなかったので。先日ちょっと近所で話題に上がったので、仕事中に息抜きでやってみた。on mac 先にまとめ input / parser / execute / outputと、細かく分けてpluginになっており、一般的な形式ならほぼ組み合わ…

2015-06-03

Norikra meetup #2 に参加してきた

Norikra fluentd

https://atnd.org/events/65969 Norikraをつかいたいなーという気持ちを主張するためにとりあえずmeetupに参加してきた。画面黄色かっただいたいみんな監視系で使ってただいたいみんなSPOFで困ってた Gunosyさんは処理量もあってか冗長化してたもようや…

2015-06-03

AWS Summit 2015 - Day2 行ってきたまとめ

AWS

昨日に引き続き、AWS Summit 2015のDay2に行ってきた。昨日のまとめはこちら AWS Summit 2015 - Day1 行ってきたまとめ - 絶品ゆどうふのタレyudoufu.hatenablog.jp 今日のリンクまとめ今日の分も、数が多いので個別記事にしてます AWS Summit 2015 - Day2…

2015-06-03

AWS Summit 2015 - Day2 - 新サービス解説セッション EFS と ML

AWS

EFS AWS 辻さんストレージのポートフォリオ S3 EBS Glacier EFS <- new! NFSでファイルアクセスできるストレージ NASのようなサービス NFSv4を利用 EFSはファイル単位アクセス EBSはブロックアクセス EFSにはマウントターゲットを通じてアクセス幅ひろいユ…

2015-06-03

AWS Summit 2015 - Day2 - クラウドを活用したIoT/M2Mソリューション

AWS

AWS 榎並さん IoT/M2Mとは Internet of things machine to machine communications このセッションの中では同じような扱いで話す IoT市場の規模今後、スマートフォン/タブレットを超えて広がると言われている様々なマーケットで利用可能 Amazonでも色々 Dr…

2015-06-03

AWS Summit 2015 - Day2 - AWS セキュアデザイン(IAM) Deep Dive

AWS

AWS 瀧澤さん AWSのセキュリティ AWSのセキュリティ方針最優先されるべき事項専門部隊を作り、継続的な投資責任共有モデル AWSと利用者の2者で確保 AWSのクラウド基盤部分をAWSが担当その上につくるシステム・コンテンツ・ネットワーク設定を顧客が担当 …

2015-06-03

AWS Summit 2015 - Day2 - AWS System Operation Deep Dive

AWS

AWS 酒徳さん AWS上での運用をどうやって行くべきかシステム運用で考えるポイントクラウドだからといって考える事の基本は同じ Monitoring 死活監視キャパシティ監視 Logging 誰が、いつ、どのような変更をしたのか Configuration 構成管理 Chef / Puppet…

2015-06-03

AWS Summit 2015 - Day2 - ネットワークDeep Dive

AWS

AWS 吉田さん VPCベストプラクティス Marketplaceを活用するファイアウォールやロードバランサ、WAF、ルータ、ネットワーク高速化などの製品が利用可能 EC2のMarketplaceから検索 VPC Peeringを利用する 2つのVPCの間でネットワークをpeeringする企業間コ…

2015-06-03

AWS Summit 2015 - Day2 - 今日から始められる、機械学習！Amazon Machine Learningのご紹介

AWS

AWS 今井さん機械学習の例スパムメール判定二値判定、二項分類教師データ別の方法でSpam判定ずみのデータを元に学習それを元に判定商品カテゴリの判定マルチクラス分類この商品はどのカテゴリのものか？明日の売上の予測回帰分析過去のデータ群…

2015-06-03

AWS Summit 2015 - Day2 - keynote

AWS

昨日と同じ話は省略 AWS Mobile Service Mobile SDK Mobileの中から直接AWSにアクセスすることが出来るモバイルの中で使いやすいSDK ネットワークが途切れていても大丈夫な作り、バッテリーにやさしい作り Mobile SDK for Unity Machine Learningのサポート…

2015-06-02

AWS Summit 2015 - Day1 行ってきたまとめ

AWS

AWS Summit 2015 に行ってきた！とりあえず自分の参加したセッションの内容を全部記事化した(一つに書くには長すぎた)ので、まとめ用Index記事をつくったよ！(｀・ω・´) AWS Summit 2015 - Day1 - keynote - 絶品ゆどうふのタレ AWS Summit 2015 - Day1 - …

2015-06-02

AWS Summit 2015 - Day1 - EBSパフォーマンスベンチマーク2015

AWS

AWS 小林さん EBSのおさらいブロックレベルのストレージスナップショットを使ってバックアップ暗号化 99.999%の可用性特徴容量は1G単位で16TBまでマグネティックは1TBまで AZごとに独立スナップショットから任意のAZに復元可能 1つのEBSを複数のイン…

2015-06-02

AWS Summit 2015 - Day1 - 自動デプロイ

AWS

Elastic Beanstalk, Opsworks, CodeDeploy, CloudFormation AWS 舟崎さんどう使い分けたらいいか、どう組み合わせるか Intro EC2 / ELB / RDS / S3 を組み合わせる事が非常に多い設計としては多いが、デプロイを自動化する点まで考えられていることは少な…

2015-06-02

AWS Summit 2015 - Day1 - デベロッパーが切り拓く、次の時代

AWS

この先生きのこるにはモデレータ AWS 松尾さん Kaizen Platform 伊藤直也さん CrowdWorks 大場さんプラットフォームの変遷 5年スパンぐらいで、なにか起きている感じまた今年辺り、なにか新しいムーブメントが来るのではテーマ１: 外部環境が変わる中で…

2015-06-02

AWS Summit 2015 - Day1 - Redshift Deep Dive

AWS

AWS 八木橋さん Redshiftをどうやって他システムと連携していくか Redshiftの概要 LeaderNodeと並列のComputeNode 超並列演算 CPU / disk /network /ioの並列化データの格納列思考(カラムナ) 各CPUコアにプロセスを張り付けていくような形で実行していく …