[B! elasticsearch] taketyanのブックマーク

taketyan id:taketyan

elasticsearchに関するtaketyanのブックマーク (8)

Advanced tuning: finding and fixing slow Elasticsearch queries
Search and analytics, data ingestion, and visualization – all at your fingertips.
taketyan 2020/01/06
あとで読む

elasticsearch
リンク
AWS News Blog
New — File Release for Amazon FSx for Lustre Amazon FSx for Lustre provides fully managed shared storage with the scalability and high performance of the open-source Lustre file systems to support your Linux-based workloads. FSx for Lustre is for workloads where storage speed and throughput matter. This is because FSx for Lustre helps you avoid storage bottlenecks, increase utilization of compute
taketyan 2015/10/02
Elastic Elasticsearch だ！！

aws

elasticsearch
リンク
Cardinality aggregation | Elasticsearch Guide [8.15] | Elastic
A single-value metrics aggregation that calculates an approximate count of distinct values. Assume you are indexing store sales and would like to count the unique number of sold products that match a query: resp = client.search( index="sales", size="0", aggs={ "type_count": { "cardinality": { "field": "type" } } }, ) print(resp) response = client.search( index: 'sales', size: 0, body: { aggregatio
taketyan 2014/08/25
Elasticsearch で COUNT(DISTINCT user_id) 相当のことができるようになってるっぽい！Kibana でも使えるようになってたら最高だ

elasticsearch

kibana
リンク
Elasticsearch, Fluentd, and Kibana: Open Source Log Search and Visualization | DigitalOcean
Featured Partner Articles Cloud cost optimization best practices Read moreHow to choose a cloud provider Read moreDigitalOcean vs. AWS Lightsail: Which Cloud Platform is Right for You? Read more
taketyan 2014/08/13
EFK って略すのカッコいい

elasticsearch

fluentd

kibana
リンク
ログ収集や可視化で話題のFluentd、Elasticsearch、Kibanaを徹底解説したムック本が発売となります - Y-Ken Studio
2014年8月8日、ログ収集や可視化を始めたいエンジニア必携の書籍が技術評論社より刊行されます。本邦初公開となる、全編書き下ろしの特集で構成された本書を読むことで、ログ解析の有用性からログ収集、保存、可視化手法を習得できます。私はこの第2特集「ログ収集ミドルウェアFluentd徹底攻略」の執筆を担当しました。サーバ/インフラエンジニア養成読本ログ収集~可視化編 [現場主導のデータ分析環境を構築!] (Software Design plus) それでは、それぞれの特集について簡単に紹介したいと思います。サーバ/インフラエンジニア養成読本ログ収集〜可視化編特集1 ログ解析からはじめるサービス改善 (鈴木健太) 第1特集では、ログを蓄積して解析する意義とは何か、コーヒーショップのECサイトを例に、データ分析のケーススタディと共に解説されています。第1章はじめに第2章サー
taketyan 2014/07/28
買おう

fluentd

elasticsearch
リンク
転職しました
ということで、転職しました。どーしてもやりたいことが出てきたので、無理を言って転職することにしてみました。サムライズムではなく、Elasticsearchにジョインします。（というか、しました。）初出社 #サムライズム — Jun Ohtani (@johtani) 2014, 7月 1 冗談でツイートしたのですが、その前に英語アカウントのツイートがRTされてしまっていまいちでした。。。先週、アムステルダムに行っていたのも退職前に休みをいただき、Elasticsearchの全社会議に参加していたためです。とてもエキサイティングな経験（英語漬けとか）ができ、もっと精進しないとなという気持ちにもなり、ますます頑張らないとなと。ということで、今後は日本中にElasticsearchやLogstash、Kibanaを広めるべく、いろいろな場所で話をしたいと思います。興味のある方は、声
taketyan 2014/07/01
おめでとうございます！！！

elasticsearch
リンク
Elasticsearchで日別のユニークユーザ数を取得する「elasticsearch-timefacets-plugin」 - Qiita
Elasticsearchで日別のユニークユーザ数を取得する「elasticsearch-timefacets-plugin」Elasticsearchkibana3 はじめに Elasticsearchにアプリケーションのイベントログを突っ込んで、Kibana3でいじるということをしています。イベントログを見ているとやはりGoogle Analytics、Mixpanel、SLASH-7のようにユニークユーザ数を見たくなります。ですが、Elasticsearchではdistinctした値のcountを時系列に取得することができません。 Date Histogram Facetは近いけど、件数を取るか、指定したフィールドの合計を取るかしかできません。 elasticsearch-timefacets-pluginというElasticsearchのプラグインを使うと上記のことが実現できま
taketyan 2014/03/18
こんなのあったんだ。Kibana に組み込みたい。

elasticsearch
リンク
fluentd -> Elasticsearch 大量データ転送でトラブル | diaspora
概要 fluentd でサービスの情報を転送し、Kibana で分析したいこれまでの過去データを一度に放り込みたいデータの件数が合わない Kibana でエラーが発生する各種設定を見直すことで対応可能背景長い長いミーティングに疲れ、集中力を擦り減らしたアナタは無意識のうちにブラウザを起動していました。去年まで勤めていた会社の同僚がシェアした記事が目に止まります。「fluentd + Elasticsearch + Kibana で今どきのログ分析！」感化されやすいアナタはおもむろに VM を立ち上げ環境を構築します。 Web サーバから吐き出されたログはオシャレでイイ感じにチャート化され、満足したアナタは VM を落とし、再び仕事に戻りました。しばらく経ったある日のこと、ふと気づきます。「ログだけじゃなくて、ユーザ属性の分析にもコレ使えそう。」毎度オレオレ管理ペー
taketyan 2014/02/03
過去データを良い感じにバルクインサートするツール必要っぽい / Fluentd からのリトライで重複する問題は mod_unique_id とかで予め UUID 振っておいて、fluent-plugin-elasticsearch に id_key 振っておけば解決しそうな気はする

fluentd

ElasticSearch
リンク
1