PackerBuild and manage images as code
This document summarizes an organization's journey to creating a highly available PostgreSQL cluster using etcd for consensus and automation. They initially used MongoDB but required more data exploration capabilities. They investigated tools like repmgr with pgpool II and PostgreSQL streaming replication but these did not meet their requirements for automated failover without human interaction. T
With so many new technologies coming out every year (like Kubernetes or Habitat), it’s easy to become so entangled in our excitement about the future that we forget to pay homage to the tools that have been quietly supporting our production environments. One such tool we've been using at Stripe for several years now is Consul. Consul helps discover services (that is, it helps us navigate the thous
The /kv endpoints access Consul's simple key/value store, useful for storing service configuration or other metadata. It is important to note that each datacenter has its own KV store, and there is no built-in replication between datacenters. If you are interested in replication between datacenters, please view the Consul Replicate project. In order to perform atomic operations on multiple KV pair
Consul Casual Talks #1 http://connpass.com/event/35836/
こんにちは。Lorentzcaです。3月ですがまだまだ寒いのでなかなか釣りに行けずテンションさげぽよです！ ↑↑ この度DBサーバー(物理マシン、MySQL)の引っ越しを行いました。 そのついでに、冗長化の仕組みをmhaとconsulを使った方法に変えたので紹介します。 はじめに まずは簡単に引っ越し前と引っ越し後の構成を比べてみます。 引っ越し前は以下の様な構成でした。 サーバー台数: 2台 MySQLフェイルオーバーの仕組み: 自作シェルスクリプト アプリの参照先を切り替える仕組み: keepalivedでvipを張り替えることで実現 引っ越し後は以下の様な構成になりました。 サーバー台数: 3台 MySQLフェイルオーバーの仕組み: mha アプリの参照先を切り替える仕組み: consulのdns機能を使って実現 なぜこのような構成にしたのか、話していきます。 引っ越し前に持っていた
このエントリは HashiCorp Advent Calendar 2015 - Qiita 14日目の記事です。 consul-templateは、consulの様々なイベントをトリガーに指定したテンプレートファイルを元に指定したファイルを更新するためのデーモンです。ユースケースは、HAProxy や Nginx などロードバランサやリバースプロキシのバックエンドを、状態に応じて動的にクラスタ（ロードバランサやリバースプロキシ）へ追加・削除し、可用性や拡張性を高めたい場合などです。今回、同様にnginxとconsul-templateを使って動的リバースプロキシを作ってみましたが、それぞれをsystemdで管理するという点で幾つか学ぶことがありました。私が最初に書いたconsul-templateのconfは以下です。commandによって、nginxのリロードとslackに通知をするス
このエントリは HashiCorp Advent Calendar 2015 - Qiita 1日目の記事です。 Consul クラスタは一度稼働を始めたら基本的に落とせないため、いわゆるローリングアップグレードによってクラスタ全体を停止せずにバージョンを上げることが考慮されています。 consul.io ということで基本的には上記のURLを参照して、順番にagentを新しいバイナリで起動し直すことによって新しいバージョンに切り替えられるわけですが、Consul 0.5.0, 0.5.1 についてはいくつか留意点がありますので記録しておきます。 consul.io 0.5.0 未満から 0.5.0 以上にする場合 acl 機能を使っている場合、あらかじめ acl_policy を設定してからアップグレードする必要があります が、自分は使用していなかったのでスルー Leader が Cons
ども、かっぱです。 お詫び 上記の記事中で... consul はマルチキャストでノードを探索して勝手にクラスタを組んでくれる と書いておりますが、これは Serf のマルチキャスト通信を利用したノードの自動探索機能と混同した為の誤りとなります。正しくは... consul はクラスタを構成する際にはジョイン先の IP やホスト名を知っておく必要がある -join オプションを利用してクラスタにジョインする となります。この場を借りてお詫び申し上げます。 さて、今回は... 最大の鬼門、最も知りたいのだけどドキュメントを読めどなかなか理解できない Consul クラスタの Leader ノード選出に迫ってみたい。 ※尚、内容に関しては不正確な部分も多々あるかもしれませんのでご注意下さい。誤りに気づけば随時修正していきます...。 参考 LEADER ELECTION CONSENSUS P
京都市内を走る電車に乗って通勤していると、以前より観光客を多く見かけるようになってきました。 秋は過ごしやすく、観光にはとてもよい季節ですね。 今週のMackerelアップデートです。 mackerel-check-plugins 0.0.2 をリリースしました mackerel-check-plugins 0.0.2 をリリースしました。 プラグインの仕様についてはNagiosやSensuのチェックプラグインとほぼ同じ仕様となり、 Consulのscript checkとも互換があります。また、逆にmackerel-check-pluginsは、SensuのプラグインやConsulのscript checkとしてもご利用いただけます。 今回のリリースで提供されるチェックプラグインは以下のとおりです。 check-file-age check-http check-procs それぞれのプ
我々はどのように冗長化を失敗したのか
3. アジェンダ 1. HashiCorpとは？ HashiCorpの歴史 The Tao of HashiCorp – HashiCorp 道 2. HashiCorpの提供するツール群 Vagrant … 開発環境自動構築 Packer … マシンイメージ自動作成 Terraform … インフラ環境の自動構築 Serf … オーケストレーション Consul … サービス検出と運用自動化 Atlas … DevOps プラットフォーム Vault … シークレット管理 3. まとめ・質疑応答 開発と運用が一枚岩となって戦うDevOps スタイルが広まりつつある昨今。これは開 発者視点だけではありません。運用として も、避けて通れない課題。それを解決する ためにDevOpsツール群の使用と、自動化 が必要とされています。 しかし、「運用の
カヤックが運営しているスマートフォン向けSNS Lobi は、Amazon Web Services(AWS)上でHashicorp社が開発しているオーケストレーションツール Consul を活用し、EC2インスタンス100台規模のサーバと、AWSのマネージドサービスを利用して運用しています。 Consulの機能と、それを活用するために開発したOSSとともに実践的に運用している事例をご紹介します。 Consulとは 機能の紹介 Consulを本番環境で運用するために 構成 監視 高可用性のためのノウハウ クラスタ障害時のリカバリ手法 オートスケール環境で動的に増減するサーバを扱う DNS interface によるホスト、サービスの名前解決 コマンドのホスト名補完 自前オートスケールやjob管理へのconsul execの応用 Stretcherを利用したデプロイ 自作OSS Consul
＠ペパボテックカンファレンス http://pepabo.connpass.com/event/13208/Read less
Google グループでは、オンライン フォーラムやメール ベースのグループを作成したり、こうしたフォーラムやグループに参加したりすることで、大勢のユーザーと情報の共有やディスカッションを行うことができます。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
