FLINTERS Engineer's Blog

FLINTERSのエンジニアによる技術ブログ

SQL

SQL分析を爆速で実現するDuckDBの魅力!

爆速分析SQLエンジンのDuckDBを紹介したいです。

BigQuery ML のモデル作成機能を使ってレポートの推移を予測してみた

TL;DR 本日はBigQuery MLの時系列モデルを用いてレポートデータの予測をしてみました。 時系列モデルを使ってモデルの作成からモデルの作成までをSQLライクにできて非常にかんたんでした。 今回はそちらのやり方・内容・料金面についてご紹介させていただき…

logica で readable, testable な SQL の夢を見る

SQL

こんにちは。河内です。 Logica はデータ操作のための論理プログラミング言語で、Google のオープンソースプロダクトです。 今年の4月に Google Open Source Blog でも紹介されています。 opensource.googleblog.com Logica のターゲットユーザとして次の3つ…

SQL パイプライン開発に便利な Dataform 7つのお気に入りポイント

こんにちは。河内です。 最近はデータ基盤の構築も取り組んでいたりします。 社内では他の DWH が使われている事例がありますが、今回の基盤ではデータソースとの親和性や価格面などを考慮し BigQuery で行くことにしました。 BigQuery 上で多くのデータを順…

BigQuery で複数の配列をフラット化する

こんにちは、中途で入社してからちょうど丸 1 年がたちました田邊(@emaggame)です。最近は React + TypeScript を利用したフロントエンドや Scala による Web API 開発もそこそこに、Akka Stream によるデータ収集や BigQuery での集計といったこともしてお…