Taste of Tech Topics

Taste of Tech Topics

Acroquest Technology株式会社のエンジニアが書く技術ブログ

新しいデータ基盤アーキテクチャである「データレイクハウス」について調べてみた

最近ソーダストリームを買い、炭酸水を飲むのにはまってます。機械学習エンジニアの@yktm31です。 以前に「AWS Lake Formationでデータレイク体験!」という記事を書いてみて、データ基盤アーキテクチャに興味が湧いてきました。 データレイクハウスは、「デ…

AWS Lake Formationでデータレイク体験! #3 きめ細かな権限管理

機械学習アプリケーションエンジニアの@yktmです。 AWSで構築するデータレイクがテーマの本連載、今回は第3回目、最終回です。 前回は、AWS Lake Formationで構築したデータレイクとAmazon Athenaの連携を確認しました。今回は、Lake Formationの権限管理で…

AWS Lake Formationでデータレイク体験! #2 Athenaで簡単データ連携

機械学習アプリケーションエンジニアの@yktmです。 AWSで構築するデータレイクがテーマの連載、今回は第2回目です。 前回は、AWS Lake Formationの概要と基本となるデータレイクの構築を確認しました。今回は、Amazon Athenaを利用し、前回構築したデータレ…

AWS Lake Formationでデータレイク体験! #1 何がうれしいのか?

機械学習アプリケーションエンジニアの@yktmです。 最近、実際の仕事でも、データレイクに関する話を耳にするようになってきました。私自身、あまり経験がない分野だったので、「安全なデータレイクを数日で簡単にセットアップできる」という、うたい文句に…

AWSでお手軽時系列データの異常検知 ~Lookout for Metricsを試してみた~

はじめに 機械学習アプリケーションエンジニアの@yktmです。 本記事では、2020年12月のAWS re:Inventでアナウンスされ、2021年3月にGAとなった、Amazon Lookout for Metricsを、実際に利用してみて、使い勝手を確認してみたいと思います。 Amazon Lookout fo…

【イベントレポート】PRODUCT LEADERS 2021に参加してきました!

TorrentioVideoの開発に携わっている、3年目MLアプリケーションエンジニアの@yktm31です。 7/9(金)に開催された、PRODUCT LEADERS 2021というイベントに参加したので、レポートしたいと思います。 japancpo.org イベント概要 印象に残ったセッション Keynote…