Taste of Tech Topics

Taste of Tech Topics

Acroquest Technology株式会社のエンジニアが書く技術ブログ

Elasticsearch

JJUGナイトセミナーで「はじめてのElasticsearchクラスタ」を発表しました

こんにちは、@snuffkinです。昨日、JJUGナイトセミナー「Elasticsearch特集」が開催されました。 jjug.doorkeeper.jpこの会で「はじめてのElasticsearchクラスタ」 と題したセッションを発表しました。 はじめてのElasticsearchクラスタ from Satoyuki Tsuka…

第23回 Elasticsearch勉強会で発表して来ました

こんにちは。 Elastic Certified Engineerになりました、@shin0higuchiです 第23回 Elasticsearch勉強会で発表して来たので、内容をまとめました。 コンテンツ What's new in Elastic Stack 6.3 + Demo / 大谷さん & 大輪さん @ Elastic Elasticsearch SQLで…

Elastic Stack 6.3がリリースされました

こんにちは。 @shin0higuchiです昨日Elastic Stackの6.3がリリースされました。 前回のElastic{ON}から3ヶ月経ち、その中で紹介された機能が徐々に盛り込まれて来た形です。 6.3での変更点をざっくりまとめます。 X-Packの追加インストールが不要に これまで…

Elasticsearchの圧縮方式の比較

こんにちは。 2年目エンジニアのノムラです。 普段はElasticStackを用いた分析基盤の開発等を行っています。Elasticsearchを使っているとストレージの使用量を節約したいと思う方は多いのではないでしょうか。Elasticsearchはデータを格納するときにデフォル…

Kibanaのマルチテナント運用について考えてみた(後編)

こんにちは。 @shin0higuchiですこの記事は Kibanaのマルチテナント運用について考えてみた(前編) - Taste of Tech Topics の後編となります。事前にそちらをご一読ください。さて、前回の記事では データが入っているindexに対してアクセス制限をかけること…

Kibanaのマルチテナント運用について考えてみた(前編)

こんにちは。 @shin0higuchiです最近Elasticsearch + Kibanaをマルチテナントで利用する方を多く見かけます。 そういったときに問題になってくるのが、セキュリティですね。たとえば 「一部のダッシュボードだけを見せたい」 「編集できないようにしたい」 …

ElasticsearchのShrink APIを検証した

こんにちは。 最近暖かくなってきて春を感じている新人エンジニアの片岡です。 elasticsearch運用時には、indexのライフサイクルマネジメントとして、 書き込みせずに参照だけになるindexに対してshard数の変更やforcemergerを実行してメンテナンスする必要…

言語処理学会2018の「形態素解析の今とこれから」で発表してきました!

こんにちは!新人エンジニアの佐々木です。 私は3/15,16と岡山に行っていました。何をしに行ったかというと、言語処理学会2018の最終日の 「形態素解析の今とこれから」というワークショップで一般発表をするために行きました。私が今回発表したのは、 「検…

Elastic{ON} 2018 最終日セッションレポート LogsとMetricsとAPMをElastic Stackで統合 #elasticonjp

こんばんは。@muraken720です。3日間に渡るElastic{ON}があっという間に終わってしまいました! 伝えたいことが多すぎて困ってしまいますが、少しでも雰囲気をお伝えできればと思います。Elastic社APMチームのPMであるRasmusさん、Tech leadのRonさんらと共…

Elastic{ON} 2018 最終日セッションレポート k8sのモニタリングとSQLの話を聞いてきた! #elasticonjp

西海岸の風を浴びた同僚が「シークェール !(SQL)」「マイシークェール! (MySQL)」などと連呼するのを見て泣いている @cero_t です。海外カンファレンスに参加した人なら誰もが一度は掛かるハシカみたいなもんですよね、これ。 さて、Elastic{ON}も今日で最…

Elastic{ON} 2018 最終日セッションレポート 時系列データ以外も機械学習で異常検知 #elasticonjp

こんばんは。100TBのElasticsearchクラスタを運用している @snuffkin です。実は、サンフランシスコに居ながらクラスタの状況報告を受けたり、日本と会議していました。 今回のElastic{ON}でクラスタ管理の話がいろいろ出たので、それらの機能が使えるように…

Elastic{ON} 2018 初日セッションレポート Logstashのクラスタ化 #elasticonjp

こんばんは。@snuffkinです。AMA(Ask Me Anything)でElastic社のエンジニアの方と直接話せるのは良いですね。 いろいろと助かります。 今日参加したセッション さて、Elastic{ON} 2018もいよいよ、セッションが始まりました。 いろいろ聞きたいことはあるの…

Elastic{ON} 2018 初日セッションレポート オーバーウォッチの運用チームに知見をもらった! #elasticonjp

いよいよ2月も終わって3月になりましたが、皆さんいかがお過ごしでしょうか。 こちらサンフランシスコも先ほど日付が変わって3月となり、サンガツフランシスコ!! ・・・みたいな感じのボケも考えたのですが、どうにも滑りが悪いですね、@cero_t です。 Ela…

Elastic{ON} 2018 初日セッションレポート Kibanaは優しさの強化と再構築 #elasticonjp

こんばんは。@muraken720です。初日のセッションがあっという間に終わってしまいました。 セッションに参加しつつ、デモブースやAMAを回っていると時間が足りない!というのが正直な感想です。Elastic社のAaronさんとAMAにて記念写真。 今日参加したセッショ…

Elastic{ON} 2018 キーノートレポート Elastic goes more open! #elasticonjp

いよいよ始まりました、Elastic{ON} 2018 サンフランシスコ。キーノートセッションで開幕です。 日本では花粉症に悩まされ、サンフランシスコに来たら治るのかなと思ったら全く症状が変わらず、風邪ひいてるのかも知れない @cero_t です。もしかして風邪ひい…

Elastic{ON} 2018 San Francisco 始まります! #elasticonjp

みなさん、こんばんは。@muraken720です。今は、Elastic社の年間通して最大のイベント、Elastic{ON} 2018 San Franciscoに参加すべく、社員4名でサンフランシスコに来ています! 今日はKeynoteが夕方16時から開催され、興奮冷めやらぬまま先ほどホテルに帰っ…

Elastic APM + ML(Machine Learning) でwebアプリの異常検知をしてみる

こんにちは。 今年もバレンタインチョコがもらえなかった 新人エンジニアの佐々木@Ssk1029Takashiです。Elasticsearch 6.0で Elastic APM が追加され、前回(※)6.0の時点で alpha 版の概要やセットアップ方法を説明しました。 (※前回については当社、樋口…

Elastic Stack 6.2がリリースされました

こんにちは@shin0higuchiです。ついにElastic Stack 6.2.0がリリースされました。 マイナーバージョンアップとは思えないほど、非常に多くの追加機能があったのでまとめ記事を書いてみます また、このバージョンからJava9に対応しました!6.2.0のリリースに…

Elasticsearch 6.1から追加されたMachine Learningの新機能を使ってみた。予測機能が面白いっ!

皆さんこんにちは。 @tereka114です。 最近、1年1年が早く感じられて、びっくりしています。本題ですが、Machine Learningにバージョン6.1から追加された新機能を試してみました。 気がついたら様々な機能が追加されており、面白そうだったので、試した記録…

KubernetesをElastic Stackで可視化する。

皆さんこんにちは あっという間に年末になってびっくりしている@tereka114です。本記事は「Elastic Stack」のアドベントカレンダー19日目の記事です。qiita.comアドベントカレンダーで本日公開しようと思ったら、 偶然にも公式のアドベントカレンダーもKuber…

Elastic{ON} TOUR Tokyo 2017に参加・出展しました

こんにちは、 @muraken720です。昨日、Elastic{ON} TOUR Tokyo 2017に参加してきました。会場は満員で、Elastic Stackに対する期待の高まりを感じます。 ちなみに、昨年の様子はこちらです。 acro-engineer.hatenablog.comElastic社のCountry Manager藤田さ…

Kibana Canvasを使ってみた

こんにちは。 @shin0higuchiですElastic Stack 6.0 GAがリリースされて半月ほど経ちました。 皆さん既に使ってみたでしょうか? このブログにも6.0の紹介記事(Elastic Stack 6.0GAがリリースされました。 - Taste of Tech Topics)があるので、是非そちらも読…

分散システムとしての #Elasticsearch

こんにちは、 @snuffkin です。こちらはDistributed computing Advent Calendarの12日目の記事となります。 qiita.comElasticsearch6.0も登場し、使っている方も増えつつあるのではないかと思います。 進化が速く、どんどん機能が増えていますが、基本的なと…

#Elasticsearch の cat APIs にまじめに入門する話

こんにちは、 @muraken720 です。こちらはElastic stack Advent Calendarの9日目の記事となります。 qiita.comElasticsearchを構築・運用する際に頻繁に使うことになる cat APIsについて、その使い方をちゃんと知ってほしいとプロジェクトのメンバに思うこと…

あなたの知らないElasticsearch設定トップ5

こんにちは、 @snuffkin です。こちらはElastic stack Advent Calendarの5日目の記事となります。 qiita.com当社では、Elastic StackとX-Packの導入支援サービスを行っていますが、様々な事例に触れるにつれ、「この設定を知っていれば。。。」と思うことが…

Packetbeatをカスタマイズしてみた

こんにちは、イガラシです。Acroquestでは社内勉強会がいくつかありますが、 その中の一つに、具体的に実践した内容を発表する会があります。 その会で先日、プロジェクトで取り組んだ「Packetbeatのカスタマイズ」を発表したのですが、 マニアックな内容に…

はてなブログをPython+Elasticsearch+Kibanaで可視化してみる

こんにちは。 普段はデータ分析している新人の佐々木です。このブログに投稿したいと思いましたが、どんなトピックで書くか悩んでいました。 そこで、この記事ではどのようなトピックが今まで投稿されているのかを見てみたいと思います。そこで、今回はこの…

Elastic Stack 6.0GAがリリースされました。

皆さんこんにちは IBIS2017に参加した@tereka114です。本日、Elastic Stack 6.0のGAがリリースされました。 そこで、今回の記事では、Elastic Stack 6.0GAの注目の機能を簡単に紹介します。ちなみに、以前、Elastic Stack 6.0に関係する記事として、Elastic …

Elastic APM の alpha版がリリースされました!

こんにちは。 @shin0higuchiです着々とElastic Stack 6.0の正式リリースが近づいている感じがしますね! 次回のElasticsearch勉強会では、@johtaniさんよるElastic Stack 6.0の紹介があるそうです。 www.meetup.comまた、このブログでも、Elastic Stackの6.0…

ElasticStack 6.0 betaがリリースされました!

皆さんこんにちは @tereka114です!昨日、8/9にElastic Stackの6.0.0-beta1がリリースされました。 Elastic Stack 6.0 alphaを触っていなかったのですが、これを機にbetaを使ってみました。 そこで、Elastic Stack 6.0.0-beta1の機能をピックアップしてご紹…