Taste of Tech Topics

Taste of Tech Topics

Acroquest Technology株式会社のエンジニアが書く技術ブログ

Elasticsearch

最初に知っておけば良かったFilebeatの設定

こんにちは。最近、Filebeatによるログ収集について興味を持ちつつ、 いろいろと調べながら使っているsawaです。この記事は、Elastic stack (Elasticsearch) Advent Calendar 2018 - Qiitaの、13日目の記事になります。 はじめに Elastic Stackを使ったログ…

Vega利用時によくある7つの疑問

こんにちは、今年7月にElastic Certified Engineer認定を取得したHiroshi Yoshioka です。 この記事は Elastic stack (Elasticsearch) Advent Calendar 2018 の11日目の記事になります。 はじめに 今日のお題はVegaです。 VegaはKibanaの可視化の幅を拡大す…

KibanaのVisualizeでExcelっぽい表現をする

はじめまして、kareyamaですアップデートの度にオシャレなグラフが増えるKibanaのVisualizeですが、Excelに慣れ親しんだ日本人にはシンプルな表形式がウケるようで。 Data Tableに対して「全体に対する割合を見たい」「異常値を強調表示してほしい」などの要…

技術書典5でElasticsearch本を販売しました!

皆さんこんにちは。 @tereka114です。10/8(月)に技術書専門の同人誌即売会である技術書典5に、初めて出展サークルとして参加しました。techbookfest.org 頒布物 今回、Acroquestの有志で「Elasticsearch NEXT STEP」という同人誌を執筆し、販売しました。t…

技術書典5でElasticsearch本を販売します!

皆さんこんにちは、@tereka114です。いよいよ10/8(月・祝)に技術書典5が開催されます! 今回、当社の有志で初めて出展することになりました。出展場所は「か78」です!今回執筆したタイトルは「Elasticsearch NEXT STEP」です。techbookfest.orgElasticsea…

ElasticStack 6.4がリリースされました!

皆さんこんにちは@tereka114です。 昨日、Elastic Stackの6.4がリリースされました。 6.4で追加された機能のうち、面白いと思う機能をご紹介します。 今回のリリースは、開発者に優しい機能追加が多いように見えます。 データ準備 6.4からElasticsearch、Kib…

JJUGナイトセミナーで「はじめてのElasticsearchクラスタ」を発表しました

こんにちは、@snuffkinです。昨日、JJUGナイトセミナー「Elasticsearch特集」が開催されました。 jjug.doorkeeper.jpこの会で「はじめてのElasticsearchクラスタ」 と題したセッションを発表しました。 はじめてのElasticsearchクラスタ from Satoyuki Tsuka…

第23回 Elasticsearch勉強会で発表して来ました

こんにちは。 Elastic Certified Engineerになりました、@shin0higuchiです 第23回 Elasticsearch勉強会で発表して来たので、内容をまとめました。 コンテンツ What's new in Elastic Stack 6.3 + Demo / 大谷さん & 大輪さん @ Elastic Elasticsearch SQLで…

Elastic Stack 6.3がリリースされました

こんにちは。 @shin0higuchiです昨日Elastic Stackの6.3がリリースされました。 前回のElastic{ON}から3ヶ月経ち、その中で紹介された機能が徐々に盛り込まれて来た形です。 6.3での変更点をざっくりまとめます。 X-Packの追加インストールが不要に これまで…

Elasticsearchの圧縮方式の比較

こんにちは。 2年目エンジニアのノムラです。 普段はElasticStackを用いた分析基盤の開発等を行っています。Elasticsearchを使っているとストレージの使用量を節約したいと思う方は多いのではないでしょうか。Elasticsearchはデータを格納するときにデフォル…

Kibanaのマルチテナント運用について考えてみた(後編)

こんにちは。 @shin0higuchiですこの記事は Kibanaのマルチテナント運用について考えてみた(前編) - Taste of Tech Topics の後編となります。事前にそちらをご一読ください。さて、前回の記事では データが入っているindexに対してアクセス制限をかけること…

Kibanaのマルチテナント運用について考えてみた(前編)

こんにちは。 @shin0higuchiです最近Elasticsearch + Kibanaをマルチテナントで利用する方を多く見かけます。 そういったときに問題になってくるのが、セキュリティですね。たとえば 「一部のダッシュボードだけを見せたい」 「編集できないようにしたい」 …

ElasticsearchのShrink APIを検証した

こんにちは。 最近暖かくなってきて春を感じている新人エンジニアの片岡です。 elasticsearch運用時には、indexのライフサイクルマネジメントとして、 書き込みせずに参照だけになるindexに対してshard数の変更やforcemergerを実行してメンテナンスする必要…

言語処理学会2018の「形態素解析の今とこれから」で発表してきました!

こんにちは!新人エンジニアの佐々木です。 私は3/15,16と岡山に行っていました。何をしに行ったかというと、言語処理学会2018の最終日の 「形態素解析の今とこれから」というワークショップで一般発表をするために行きました。私が今回発表したのは、 「検…

Elastic{ON} 2018 最終日セッションレポート LogsとMetricsとAPMをElastic Stackで統合 #elasticonjp

こんばんは。@muraken720です。3日間に渡るElastic{ON}があっという間に終わってしまいました! 伝えたいことが多すぎて困ってしまいますが、少しでも雰囲気をお伝えできればと思います。Elastic社APMチームのPMであるRasmusさん、Tech leadのRonさんらと共…

Elastic{ON} 2018 最終日セッションレポート k8sのモニタリングとSQLの話を聞いてきた! #elasticonjp

西海岸の風を浴びた同僚が「シークェール !(SQL)」「マイシークェール! (MySQL)」などと連呼するのを見て泣いている @cero_t です。海外カンファレンスに参加した人なら誰もが一度は掛かるハシカみたいなもんですよね、これ。 さて、Elastic{ON}も今日で最…

Elastic{ON} 2018 最終日セッションレポート 時系列データ以外も機械学習で異常検知 #elasticonjp

こんばんは。100TBのElasticsearchクラスタを運用している @snuffkin です。実は、サンフランシスコに居ながらクラスタの状況報告を受けたり、日本と会議していました。 今回のElastic{ON}でクラスタ管理の話がいろいろ出たので、それらの機能が使えるように…

Elastic{ON} 2018 初日セッションレポート Logstashのクラスタ化 #elasticonjp

こんばんは。@snuffkinです。AMA(Ask Me Anything)でElastic社のエンジニアの方と直接話せるのは良いですね。 いろいろと助かります。 今日参加したセッション さて、Elastic{ON} 2018もいよいよ、セッションが始まりました。 いろいろ聞きたいことはあるの…

Elastic{ON} 2018 初日セッションレポート オーバーウォッチの運用チームに知見をもらった! #elasticonjp

いよいよ2月も終わって3月になりましたが、皆さんいかがお過ごしでしょうか。 こちらサンフランシスコも先ほど日付が変わって3月となり、サンガツフランシスコ!! ・・・みたいな感じのボケも考えたのですが、どうにも滑りが悪いですね、@cero_t です。 Ela…

Elastic{ON} 2018 初日セッションレポート Kibanaは優しさの強化と再構築 #elasticonjp

こんばんは。@muraken720です。初日のセッションがあっという間に終わってしまいました。 セッションに参加しつつ、デモブースやAMAを回っていると時間が足りない!というのが正直な感想です。Elastic社のAaronさんとAMAにて記念写真。 今日参加したセッショ…

Elastic{ON} 2018 キーノートレポート Elastic goes more open! #elasticonjp

いよいよ始まりました、Elastic{ON} 2018 サンフランシスコ。キーノートセッションで開幕です。 日本では花粉症に悩まされ、サンフランシスコに来たら治るのかなと思ったら全く症状が変わらず、風邪ひいてるのかも知れない @cero_t です。もしかして風邪ひい…

Elastic{ON} 2018 San Francisco 始まります! #elasticonjp

みなさん、こんばんは。@muraken720です。今は、Elastic社の年間通して最大のイベント、Elastic{ON} 2018 San Franciscoに参加すべく、社員4名でサンフランシスコに来ています! 今日はKeynoteが夕方16時から開催され、興奮冷めやらぬまま先ほどホテルに帰っ…

Elastic APM + ML(Machine Learning) でwebアプリの異常検知をしてみる

こんにちは。 今年もバレンタインチョコがもらえなかった 新人エンジニアの佐々木@Ssk1029Takashiです。Elasticsearch 6.0で Elastic APM が追加され、前回(※)6.0の時点で alpha 版の概要やセットアップ方法を説明しました。 (※前回については当社、樋口…

Elastic Stack 6.2がリリースされました

こんにちは@shin0higuchiです。ついにElastic Stack 6.2.0がリリースされました。 マイナーバージョンアップとは思えないほど、非常に多くの追加機能があったのでまとめ記事を書いてみます また、このバージョンからJava9に対応しました!6.2.0のリリースに…

Elasticsearch 6.1から追加されたMachine Learningの新機能を使ってみた。予測機能が面白いっ!

皆さんこんにちは。 @tereka114です。 最近、1年1年が早く感じられて、びっくりしています。本題ですが、Machine Learningにバージョン6.1から追加された新機能を試してみました。 気がついたら様々な機能が追加されており、面白そうだったので、試した記録…

KubernetesをElastic Stackで可視化する。

皆さんこんにちは あっという間に年末になってびっくりしている@tereka114です。本記事は「Elastic Stack」のアドベントカレンダー19日目の記事です。qiita.comアドベントカレンダーで本日公開しようと思ったら、 偶然にも公式のアドベントカレンダーもKuber…

Elastic{ON} TOUR Tokyo 2017に参加・出展しました

こんにちは、 @muraken720です。昨日、Elastic{ON} TOUR Tokyo 2017に参加してきました。会場は満員で、Elastic Stackに対する期待の高まりを感じます。 ちなみに、昨年の様子はこちらです。 acro-engineer.hatenablog.comElastic社のCountry Manager藤田さ…

Kibana Canvasを使ってみた

こんにちは。 @shin0higuchiですElastic Stack 6.0 GAがリリースされて半月ほど経ちました。 皆さん既に使ってみたでしょうか? このブログにも6.0の紹介記事(Elastic Stack 6.0GAがリリースされました。 - Taste of Tech Topics)があるので、是非そちらも読…

分散システムとしての #Elasticsearch

こんにちは、 @snuffkin です。こちらはDistributed computing Advent Calendarの12日目の記事となります。 qiita.comElasticsearch6.0も登場し、使っている方も増えつつあるのではないかと思います。 進化が速く、どんどん機能が増えていますが、基本的なと…

#Elasticsearch の cat APIs にまじめに入門する話

こんにちは、 @muraken720 です。こちらはElastic stack Advent Calendarの9日目の記事となります。 qiita.comElasticsearchを構築・運用する際に頻繁に使うことになる cat APIsについて、その使い方をちゃんと知ってほしいとプロジェクトのメンバに思うこと…