Yamotty Blog

プロダクトマネージャーの雑記

まだBIツールで消耗してるの? ~ サーバレス・KPI分析ダッシュボードをGAS + Slackで

f:id:yamo3:20161114002818p:plain

背景

データはコミュニケーションツールである。

  • webサービスではGoogle Analyticsや、Big Query、その他数多くのデータ集計ツール上に集積しているログを都度取り出し、分析を行うことは一般的。
  • 特にプロダクトマネージャーはこれらのデータを加工し、コミュニケーション・ツールとして『良い塩梅に』使用することが求められる。

しかしながらデータをチームに共有したり、毎日目に触れるようにするカロリーはいまだに高い。

Google AnalyticsやBig Queryからログを収集し・加工し、chartを作成、その上でchartをチームのコミュニケーションの場である「Slack」へポストする、ということを日常的に行っているわけだが、

  • 毎日定点観測したい
  • 都度SQLクエリを叩くのが手間
  • データを取得しに行く場所が複数

などの要因から非常にカロリーが高い。

そこで、集計・分析・チャート作成・Slack共有までをノンストップで定期処理する仕組みをGSheet + Google Apps Scriptで構築した。もちろんサーバレス・無料である*1

f:id:yamo3:20161113234135p:plain
KPIチャートをSlackへ定期ポスト*2


事前準備

  • Google AnalyticsやBig Queryへのアクセス権を管理者からもらっておく
  • ここから投稿したいSlack TeamのSlack tokenを調べておく
    • xoxo-....という文字列のはず。
  • (できれば)javascriptについての基礎的な文法を学ぶ

処理の流れ

以下のような手順で処理を実施する。

  1. Big Query(orGoogle Analytics) -> GSheetへ数字を更新する*3
  2. GSheet上で任意の示唆を取り出すために、chartを作成する
  3. chartをSlackの特定のチャネルへポストする ※
  4. 1~3を束ねてトリガーを設定する ※

※Google Apps Scriptを用いて1, 3, 4の工程を自動化する。

1 / Big Query(or Google Analytics) -> GSheetへ数字を更新する

例えば、

  • DAU
  • PV
  • コンバージョン数

などの基礎的なデータを取得するためにBig Query上で毎日同じクエリを叩いている場合は以下のGoogle Apps Scriptを利用して自動化してしまうと良い(トレタさんありがとうございます🙏)。

toreta.blog.jp

詳細は記事に預けるが、たったの2ステップでBig QueryからGSheetへのデータ更新を自動化できる。

  1. GSheetを用意。Queriesというシートを作成し、シート名, クエリ, タイトルを記入する。f:id:yamo3:20161113234507p:plain
  2. Google Apps Scriptを作成する。以下のコピペでOK。
  3. GASおよびGCPのBigquery APIEnableにしておく。

工程2 / GSheet上で任意の示唆を取り出すために、chartを作成する

  • GASのrunAllQueriesを実行すると、シートに記載されているSQLクエリが全て実行され、結果が各シートへ更新される。
  • このデータを使ってchartを一度創っておくと、あとはデータが更新される度、chartの内容も最新状態に更新される。
  • chart内のマージンや、色、データラベルの有無なども反映されるため、見やすいように始めに作り込んでおくと良い。
f:id:yamo3:20161113233819p:plain

ちなみに個人的には1枚のchartで多くの情報が得られるものが好きなため、サンプルのような多軸グラフや、バブルチャートが好き。ここは好みの世界。

工程3 / chartをSlackの特定のチャネルへポストする

qiita.com

この記事を参考に作成した。

この工程は「chartを画像化する」「Slackへ画像をポストする」という2つに分けられる。

実は「chartを画像化する」という機能を結構長い期間諦めていたのだが、Google Apps ScriptのSheet Classがデフォルトで持つgetChartsを使用することでいとも簡単にクリアできた。

2つのchartを取得し、Slackへ送るケースでのサンプルコードを掲載しておく。

var slack = {
  postUrl : 'https://slack.com/api/files.upload',
  token : "xoxp-hogehoge",// Slackのtoken
  channelId : "blog" //投稿したいSlackのチャネル名
}

var uploadFile = function(data){
  UrlFetchApp.fetch(slack["postUrl"], {
    "method" : "post",
    "payload" : {
      token: slack["token"],
      file: data,
      channels: slack["channelId"]
    }
  });
}

/* 1. UU&PVを投稿 */
function postSlack_PVperUU() {
  var sheet = SpreadsheetApp.openById("1Z11zbyYPpH_mfc9RMxRyoW450WlgQuThogehoge").getSheetByName("test");
  var chart = sheet.getCharts()[0];
  uploadFile(chart.getAs("image/png").setName("PV&UU.png"));
}

/* 2. Channel別UUを投稿 */
function postSlack_Channel() {
  var sheet = SpreadsheetApp.openById("1Z11zbyYPpH_mfc9RMxRyoW450WlgQuThogehoge").getSheetByName("Channel");
  var chart = sheet.getCharts()[0];
  uploadFile(chart.getAs("image/png").setName("Channel.png"));
}

補足

  • openByIdは開きたいGSheetのIDを引数に使用する。調べ方は簡単で、GSheetのURLの以下の囲い部分。f:id:yamo3:20161114000649p:plain
  • getSheetByNameにはその名の通りシート名を引数に入れてあげよう。
  • getAsで画像のフォーマットを指定、setNameで画像名を指定する。

1~3を束ねてトリガーを設定する

クエリの実行からchartをSlackへポストするところまでを一気通貫で実行できるよう、各functionを束ねよう。以下ではdoAllというfunctionで全て実行できるようにしてある。

/* GSheetのクエリを全て実行し、全chartをSlackへ投稿 */
function doAll(){
  runAllQueries(),
  postSlack_PVperUU(),
  postSlack_Channel()
}

あとはGoogle Apps Scriptのリソース > 現状のプロジェクトのトリガー よりdoAllを毎日定時に実行するよう設定することで、自動化完了。

f:id:yamo3:20161114001450p:plain


出社の前後あたりに設定するとスマホで確認が完結し、大幅に生産性をUPできたりする。

さいごに

この一連のすごいところは、『GSheetを介すことができればあらゆるチャートをSlack上で可視化できる』という点にある

僕は妻とのメッセージも全てSlackに集約しているが、昨今流行するIoTなどのサービスからGSheetへ連携することができれば、以下のような体験も全て自動化することができるはずだ。

  • 毎日の睡眠時間をSlackでチェックして、不足時には「寝ろ」アラートを上げる
  • 歩数をSlackでチェックして、不足時には「運動しろ」アラートを上げる
  • 家計の予実推移をSlackでチェックして、節約したり奮発したりできる

...あまりいい例が思い浮かばなかったが、もう少しいい感じにHackできるよ、というアドバイスが有ればぜひお待ちしております。

*1:なお特定のicon(たとえばサービスのキャラクター)を付与したBotにKPIチャートを投稿させることを試みたが、今回の構成ではコスパが悪く割愛した。チャートを画像化してSlackへアップロードするにはSlackのユーザーアカウントが必須なため。

*2:サンプルサイトのデータ

*3:今回はBig Queryからログを抽出する工程を紹介する。GAの場合はこちらのQiita記事を参考に。