初めてのAWSメモ(2):CloudWatchからSNS→SQS、AWS SDK for RubyでQueue取り出し

■やりたいこと

■参考にしたURL
・AWS CloudWatch と Alarm を試してみる
・SQSってなんじゃ？（AWSコンソールにSQS登場）
・Rubyを使ってAmazon SNSとSQSを操作する：fanoutパターン
・AWS SDK for RubyでSQSを操作する

■やったこと
1.SQSの設定
　　SNSから通知するためのSQSを、先に作っておく。
　　-- SQS NavigationからCreate new Queueをクリック
　　 -- 適当に名前付けてQueueを作っておく
　　 -- Detail画面からARNをメモしておく
　　 -- PermissionからAdd a Permissionで追加
　　  -- Allow Everybody Sendmessage(送信元をSNSに縛れるか？確認)

2.SNSの設定
(1)SNS NavigationからSNSのTopicを作る
　　-- Create New Topic
　　 -- Nameを付与して作る
(2)作成したTopicに対してSubscriptionを設定する
　　-- Create Subscription
　　 -- ProtocolはEmail、Endpointはメールアドレス
　　 -- 登録したメール宛に認証メールが来るので対応する
　　-- もいっちょCreate Subscription
　　 -- ProtocolはAmazon SQS、Endpointは1.で作ったSQSのARN。
　　    (後で気づいたんだけど、Queue側からSubscribe Queue to SNS Topicで紐つけが出来た)
　　-- TopicからPublish to this Topicでテストメッセージが送信可能。

3.CPU監視される側のEC2立ち上げ
(1)EC2からSNSにアクセスするために、IAM roleの設定を行う。
　　なお、Launch済のEC2のIAM Roleを変更することは出来ないみたい。
　　-- IAM Dashboard
　　 -- Roles -> Create New Role
　　  -- Amazon EC2に対しPower Usersを付与。
(2)IAM roleを設定したEC2を立ち上げる。
　　-- EC2 Dashboard
　　 -- Instances -> Launch New Instance
　　  -- ほぼDefault、IAM Roleだけ(1)で作ったRoleを設定する。
　　-- Elastic IPsでGlobal IPも振っておく。
(3)CloudWatchの設定。今回は「1分に1回CPU使用率を通知」したいんだけど、
　　基本モニタリングでは5分に1回しか出来ないため、Deailed Monitoringを使う。
　　追加料金かかります。
　　-- EC2 Dashboardで対象のEC2を選択、Monitorningタブを表示
　　 -- Enable Detailed Monitoringをクリック
　　 -- Create AlermからAverage of CPU Utilizationを1分単位で通知にする。
　　  -- 負荷はテストなので10%以上に。
　　  -- send a notification toは1.で作成したSNSを指定。
(4)試しに負荷を上げてみる。yum installとか。


4.CPU監視する側のEC2立ち上げ
(1)EC2 DashboardからLaunch EC2でもう1台立ち上げる。
　IAM Roleの設定だけ忘れずに。
(2)このEC2からSQSをPollingして、Queueがあったらコンソールに表示したい。
(3)AWS SDK for Rubyのセットアップ
　　$ sudo yum install ruby-devel rubygems gcc make libxml2-devel libxslt-devel
　　$ sudo gem install aws-sdk
(4)AWS SDK for Ruby経由でSQSからMessageを拾って表示。一度表示したらQueueから削除。
　Access_keyとSecret_keyはアカウントオプションのSecurityから取得できる。
　　(※追記:IAM Roke for EC2を設定してればアクセスキーとシークレットキーはいらない)

　　$ vi get_sqs.rb

#!/usr/bin/ruby

require 'rubygems'
require 'aws-sdk'

access_key = 'アクセスキー'
secret_key = 'シークレットキー'
sss_endpoint = 'SQSのURI'
queue_url = 'queueのURL'
queue_name = 'queueの名前'

sqs = AWS::SQS.new(:access_key_id => access_key,
                   :secret_access_key => secret_key,
                   :sss_endpoint => sss_endpoint,
                   :queue_url => queue_url  ).client

while true
  message = sqs.receive_message(:queue_url => queue_url)[:messages][0]
  if message
    puts message[:body]
    sqs.delete_message(:queue_url => queue_url, :receipt_handle => message[:receipt_handle])
    puts "Waiting"
  end
  sleep 5
end


(5)$ ruby ./get_sqs.rb　で実行。

(6)SNSからPublish to this Topicsでテストメッセージを送って、コンソールにMessageが表示されることを確認。

(7)監視される側のサーバでyumとか使って負荷を上げて、SNS→SQS→コンソールにメッセージが表示されることを確認する。



■感想

・CloudWatchを使った監視はとてもお手軽。5分より短い間隔で監視したいほどシビアな案件なんてそんなに無いので、基本モニタリング充分使えると思う。

・SQSとAWS SDKを使ってイベント駆動のアプリ作るのもなかなか面白そう。

・AWS SDKはもっといろんなことできそうなのでもっと調べたい。








Amazon Web Services クラウドデザインパターン実装ガイドAmazon Web Services クラウドデザインパターン実装ガイド

大澤 文孝,玉川 憲,片山 暁雄,鈴木 宏康



日経BP社

売り上げランキング : 17216



Amazonで詳しく見る by AZlink


















































このブログの人気の投稿









転職のお知らせ




















イメージ







退職のお知らせ 2024年6月末をもって クラスメソッド株式会社 を退職致しました。 本来であればお世話になった皆様に直接ご挨拶すべきところではございましたが、退職後までお伝えすることが出来ず、大変申し訳ございません。 略儀ながらブログでのご挨拶にて失礼致します。 在籍中について 2014年1月に入社してから丸10年半、勤めさせて頂きました。 当初はソリューションアーキテクトとして入社し、AWSに関するコンサルティングや環境構築に従事させて頂きました。当時のクラスメソッド株式会社はまだ東京オフィスしか無い小さな会社で、僕も北海道から半年間単身赴任で東京に滞在しました。 その後2014年7月に北海道に戻って来るのと同時に札幌オフィスを立ち上げ、以降は部長->本部長->執行役員->取締役と、幅広い経験を積ませて頂きました。また海外子会社にも役員として関わらせて頂きましたので、何度も海外出張する機会も頂きました。 これもひとえに横田社長の度量の広さと、たくさんサポートして頂いた同僚の皆さん、そして協業させて頂いたパートナーの皆さんのおかげです。長い間お世話になりました。 ありがとうございました！ 退職の経緯について 私事ではありますが、今年の3月で45歳になりました。一般的な定年年齢である60歳まで残りたった15年、65歳だとしても20年しかありません。この短い時間で、僕はどれくらい新しいチャレンジが出来るんだろう、どのくらい新しい知見や経験を得ることが出来るんだろう、と最近ずっと考えていました。もちろん最初から転職を考えていたわけではなく、今いる会社の中で新しいチャレンジをすることも視野に入れていました。 しかし、たまたま良い出会いがあり、退職という選択をするに至りました。快く受け入れてくれた社長と同僚の皆さんには感謝しかありません。本当にありがとうございます。 退職後のクラスメソッドとの関わりについて 社員としてはクラスメソッド株式会社を退職しましたが、2024年7月以降も社外取締役として関与させて頂くこととなりました。合わせて関係子会社の役員も継続致します。今までのような濃密な関係ではないものの、今後もクラスメソッドの事業成長に少しでも貢献出来たらと考えておりますので、皆様よろしくお願い致します。 入社のお知らせ 2024年7月から 株式会社サッポ...








もっと読む










妻と長女とスキーしてきた





















今日は妻と長女とスキーに行ってきました。今期3回目、妻と行くのは初めてです。場所は初心者に優しいセントレジャー北広島スキー場。一日券を購入し、10:00～17:00まで滑ってきました。 長女はさすがに慣れてきたので、ボーゲンでの滑走は問題なし。あとは重心移動とか、基礎を何度かやれば大分良くなりそうです。妻は元々運動が苦手なのですが、やっぱりスキーも「とりあえず滑れる」というレベルだったので、基礎練習をしました。 妻が長女を見てくれる時間を作ってくれた為、合計2時間ほど僕に自由時間がもらえましたので、全速力スラロームと、ジャンプを繰り返し練習しました。普通にジャンプするのは問題無いんだけど、スプレッドするとちょっとバランスが危うい。もう若くない証拠か...でも学生時代より恐怖感が薄れて大胆に飛べる気がします。それはそれでマズイのかも知れないけど(笑) 子供に付き添って滑るのも楽しいけれど、やっぱり自分の滑りが出来るのは楽しかったので、今期もう一回くらい、自分のスキーを滑りに行きたいです。








もっと読む










40代の減量戦略 〜体重-14kg、体脂肪率-12%を実現した具体的な方法〜




















イメージ







コロナ禍はもちろん辛い時期ではあったけど、生活習慣が良い方へ大きく変わた時期でもあった。具体的には食生活がほぼ自炊になり、酒量が減り、ジム通いを再開し、マラソン大会にも定期的に参加した。そんな中で一念発起し、きちんと減量に取り組んで、体重75kg→61kg（-14kg）、体脂肪率25%→13%（-12%）を実現した。  具体的な体重遷移は以下。2020年12月がMAXの75kg、その後減量とリバウンドを繰り返しつつ70kg前後を推移、2022年後半で一気に落とし、2023年1月30日時点で61kgとなった。   そこで、その具体的な方法をお伝えしたい。減量とは3つの要素の組み合わせだ。 食事 運動 休養 この順番はそのまま優先順位でもある。それぞれについて以下に説明する。 0.プロにアドバイスをもらう 3つの要素と言ったがあれは嘘だ。すまない。もっと重要なことがある。それはプロにアドバイスをもらうことだ。 WHO NOT HOWという本がある。   	  		  			  		  	  	  		  			 WHO NOT HOW　「どうやるか」ではなく「誰とやるか」　  			 posted with  				 AmaQuick at 2023.01.21 			  		  		 ディスカヴァー・トゥエンティワン (2022-05-27T00:00:01Z) 			 ダン・サリヴァン(著), ベンジャミン・ハーディ(著), 森由 美子(翻訳) 			  		  		  			  				 Amazon.co.jpで詳細を見る  			  		  	  	    要約すると、起業家や経営者がやるべきことはビジネスを成功させることだけれど、人は皆スーパーマンではなく、得意なことと不得意なことがあるんだから、得意なことは得意な人に一任することが大事なんだよ、という内容の本。 これは減量についても同じ。本を読んだりYoutubeで動画を見て、実際に減量出来たのであればそれはそれで構わないし、そういう人はこのブログ投稿を読まないだろう。 自分で学んで、自分でチャレンジして、それでも減量出来ないのであれば、素直に投資してプロのアドバイスをもらったほうが効率が良い。具体的にはパーソナルトレーナーだ。パーソナルトレーナーは運動生理学やスポーツ栄養学などについて学び実践してきた人...








もっと読む