この記事は Elastic stack (Elasticsearch) Advent Calendar 2020 の 22日目の記事になります。こんにちは、@shin0higuchiです 今回のテーマは、「Elasticsearchで教師あり機械学習」ということで、Data Frame Analyticsの機能を紹介します。 はじめに 2017…

こんにちは。 初登場になります、普段はフロントエンドの開発をしている長野です。 本記事は、Azure Advent Calendar 2020の19日目の記事になります。 最近、Angular+FastAPIでアプリを実装したのですが、 そのアプリを、仮想マシンではなく、サーバレス・コ…

皆さんこんにちは、QA部門のカヤ（@kareyama_r）です。 この記事はソフトウェアテスト Advent Calendar 2020の16日目です。 つい先日、ソフトウェアテスト自動化カンファレンス2020が開催され、テスト自動化に関する様々な取り組みやフレームワークが紹介さ…

こんにちは。機械学習エンジニアをしている古賀です。 最近は愉快な上司@tereka114 のもと、精度の上がらないモデルに四苦八苦しています。 そんな私が普段データ分析をする際に難しいことの一つとして、特徴量エンジニアリングがあります。 特徴量エンジニ…

Ver.7.11からElasticsearchのスキーマ設計が大きく変わる

こんにちは。アキバです。この記事は、Elastic Stack (Elasticsearch) Advent Calendar 2020 - Qiita の12日目です。 qiita.com当社ではリモートワークに移行し始めて9～10か月になろうかというこの頃ですが、リモートワークをされている皆さんはどのような…

こんにちは。@Ssk1029Takashiです。 この記事は、Elastic Stack (Elasticsearch) Advent Calendar 2020の11日目です。 qiita.com はじめに Kibanaでアプリのログ管理をしていると、KibanaのDashboardだけを見ているだけではなく、実際のWebアプリの画面も確…

皆さんこんにちは。 @tereka114です。 今年末はKaggleで開催される面白いコンペも多くて日々、エンジョイしています。最近は巨大なデータを扱うことが増えており、Pandasだと時間がかかりすぎて効率が悪いと感じています。 そのため、データを高速に処理でき…

こんにちは、ノムラです。 この記事はElastic Stack (Elasticsearch) Advent Calendar 2020 の7日目になります。目次は以下です。 はじめに 環境情報 Elasticsearchをビルドする ソースを github から clone する Elasticsearchをビルドする Elasticsearchを…

2020年のElastic Stackを振り返ってみました。

皆さんこんにちは。@Ssk1029Takashiです。 気づけば今年もあとわずかになってきて、一年の早さを感じますね。以前、GiNZA＋Elasticsearchを使って固有表現抽出を使ったタグ検索のデモを作成しました。 acro-engineer.hatenablog.comただ、デモというのは何よ…

こんにちは、@shin0higuchiです今回のテーマは、「Azure Cognitive Searchでの画像検索」ということで、 写真から似たものを探す類似検索の仕組みを作ってみます。 背景として、アクロクエストではElasticsearchを使い込んでおり、テキスト検索を扱う機会は…

こんにちは、ノムラです。Elastic社のイベントである、「ElasticON Security Japan」が11/05に開催されました。 最近は各ソリューション毎のElastic社のイベントが多く開催されており、新しい知識や刺激を得る機会が多く、とても充実しています。今回のイベ…

こんにちは アルゴリズム関係の勉強が趣味のmaron8676です。今回は、Rustでトライ木のベンチマークをとってみた結果を紹介します。プログラムの速さを考える際に、アルゴリズムやデータ構造は重要な要素となります。 自然言語処理を勉強している中だと、トラ…

こんにちは、ノムラです。以下の最速レポートの続きになります。 acro-engineer.hatenablog.com私からは「ElasticON Global 2020」のセッションのうち、Keynote以外の各セッションのうち面白かったものをご紹介します。 セッション内容 Security analytics w…

こんにちは、@shin0higuchiですElastic最大のイベントである、「ElasticON Global 2020」が 10/13~10/15で開催されました。 今年はオンラインでの開催となり、専用のウェブサイト上で配信を観たりコミュニケーションを取ったりする形式となっていました。 早…

皆さんこんにちは @tereka114です。9/12（土）にISUCON10が開催され、当社から3チーム参加しました。 ISUCONはLINE株式会社さんが主催でお題となるWebサービスをレギュレーションの中で高速化を図るチューニングバトルです。開催案内 : ISUCON公式Blog残念な…

皆さんこんにちは @tereka114です。先日まで開催された物体検出のコンペティション「Global Wheat Detection」で6位になりました。 これまでチームではGoldを2度獲得したことがありましたが、ソロゴールドを獲得しました。 Kaggleはじめて6年目でようやく獲…

こんにちはElastic Certified Engineerのノムラです。昨日、Elastic Stackの7.9がリリースされました。 今回も魅力的な機能が追加されました。そこで、追加された機能のうち特に面白いと思う機能をご紹介します！ EQL(Event Query Language) エンタープライ…

こんにちは。最近シェアハウスのネットワークをIPv6に切り替えたら快適になった@Ssk1029Takashiです。最近は学習済み単語分散表現が日本語でも充実してきており、語彙の多いもの・ドメインに特化しているものなど選択肢の幅が広がってきています。 日本語処…

皆さんこんにちは @tereka114です。 CVPRの本会議が一通り終了して落ち着いたので、その内容を紹介していきます。※CVPR2020については、次のリンクをご覧ください。 acro-engineer.hatenablog.com Opening Openingでは、参加者の統計情報やAwardなどが紹介さ…

皆さんこんにちは。 @tereka114です。今週からCVPR2020がはじまりました。 本記事では初日と2日目に参加したWorkshop/Turtorialを紹介します。 CVPR2020 CVPR2020の正式名称は「Computer Vision and Pattern Recognition」です。 6月14日〜19日まで開催され…

こんにちは @maron8676です今回は、RustプロジェクトでのCI環境構築について紹介します。 最近、自然言語処理のエンジン開発をRustで行っており、その中で実際に試した内容となっています。 Rust Rustは安全性を担保しつつ、高速なアプリケーションを開発す…

こんにちは。@Ssk1029Takashiです。 最近は家でもどうにかラーメンを食べられないかと試行錯誤しています。タグ検索とは、キーワード検索とは違い、検索する前からユーザーが選択肢からキーワードをセレクトボックスなどで選んで、検索できる検索方法です。 …

こんにちは、Elastic Certified Engineerの@shin0higuchiです 日本時間4/23(木)22:00から、Elastic{ON} Americas Eastが、Webinar形式で開催されました。 例年、Elatic{ON} Tourという形で開催されていましたが、今年はCOVID-19の影響でオンライン開催に変更…

こんにちは、DevOpsエンジニアの横山です。今回は、LINE BotとAWSの画像分析サービスを使って社員のワーク＆ライフハックを行った内容を紹介したいと思います。 一緒に飲みに行きたい！ ※ここで紹介する件は、2019年12月頃のことで、今はコロナのため、会社…

こんにちは！ 2年目エンジニアの古賀です。先日ブログで紹介したANGEL Dojoですが、 2020年3月6日、最終発表があり、AWSの審査員の方々が選ぶ「アライアンス賞」を受賞しました！ 上位３チームに選ばれると貰える賞の１つで、 今回がんばってきたことが１つ…

皆さん、こんにちは！ 最近機械学習エンジニアからDevOpsエンジニアにキャリアチェンジをしつつある渡邊(@move_fastest)です。 月日が流れるのが早く、昨年3月に入社して、早くも1年が経とうとしています。実は昨年の年末からAWSジャパン様で企画された、「A…

hayakawaです。 今回はJavaでディープラーニングを実装できるOSSであるDeep Java Library(DJL)を使ってみました。 ディープラーニングで何かをやるとしたら、現状ではPythonで開発するケースが多いですが、 システム全体としてはJavaで開発をしたいが、ディ…

こんにちは。@Ssk1029Takashiです。最近、タスクを設定して、データセットを与えれば勝手にモデルまでいい感じにしてくれるAutoMLを使うための様々なサービス・ライブラリが出てきています。 先輩の@tereka114がAutoGluonを使っているのをみて触発されたので…