manmanrai’s diary

勉強記録ブログ

自社サイトのABテスト事情

マーケティングの部署に入ってもうすぐ3か月が経つが、 自社サイトのABテストずっと傍観者という謎の立ち位置でミーティングに参加していて、 正直自社と外部パートナーさんの仕事の差があまり分からなかった。

自社のマーケティンググループと外部のパートナーさんの仕事:
【アイデア出し】→【工数検討】→【テスト実施】→【本番反映する】
ページごとに分けて一部は自社の人間がテスト回している。
たまに、外部パートナーさんがやった後に、引き続きは自社でやる、また、逆の場合もある。

毎週定例ミーティング(パートナーさん出てもらってる)はうちのボスに報告する会
「このページはベース案が勝ちましたねー」「これは新しい作った案が勝ってますねー」
こんな風に報告を受け、ボスがふむふむと聞いている、たまに中断して意見を出す。
ほかの社員みんなほぼずっとぼーっとしている。なぜかというと、みんな決定権がないから。

どうしてこうなったのって、まだ入社日が浅い私には言えないけど、
でも多分誰がこのミーティング入っても同じこと思うんでしょう。
おかしい、このミーティング絶対おかしい。

外部パートナーさんはあまり提案してくれないし、コーディングも別の人に依頼しているし、ただアイデアリスト(スプレッドシート)を整理してくれて、「このテストなら御社の○○さんならできそうですね」って言ってくれるだけ(このテストパートナーさんやらないのか?)、
どうしてこのパートナーさんと付き合うことになったんだろうとずっと疑問を感じていて、ある日、この疑問をボスにぶつけてみた。
「どうしてその会社さんとそのミーティングをやってるんですか?社内でもできれば毎月〇百万円を節約できるじゃないですか?」
「今おれ以外誰も今までの歴史分からないし、人手も足りないから」という返答が返ってきた。

テスト積み重ねてきた歴史を守りたい、重複したテストは時間の無駄かも、過去にはそのテストをやってコンバージョンすごく下げたことも分からない人間にテスト勝手に回す権利なんて与えてはいけない。
ボスの考えは分からなくはない、リスクは確かに避けれるなら避けたい。
しかし、ほぼボス一人のためのミーティング、パートナーさんの社長さん、ディレクター4人出席してもらうの、
うちらの社員たちのお時間も抑えてるし、無駄が多いと思う。

まして、パートナーさんと仲が良いので、最初の会社の節約のためのパートナーさん排除計画はもう諦めてた。
でも、この現状やはり変えたい。(平社員の野望)

ボスは社歴14年で、HPに関して一番詳しいかもしれないが、ABテストに関わっている社員たちみんな社歴1年未満。分からないって当たり前。
使ってるツールはKaizenPFとKARTEで、一覧性がないので、一ラウンド一ラウンドのデザインを開いて調べるの時間かかるし、得られる情報も少ないので、忙しいみんなさんは無理。
だから誰も過去を知らない、知りたいならボスに聞くしかない。いざこのページにテスト自分が担当することになったら、初めてそのKaizenのページを開く。非常に非効率的。

そして、自分からボスに提案してみた。
【改善可視化プロジェクト】
問題:
途中で改善プロジェクトに入ってきた人がすぐ全体を把握できない。
1人ひとりが俯瞰的な視点持たずに進むとサイト全体の方向性がバラバラになる。
既存メンバーが今までの改善の歴史を共有する時間がないので、新しい入ってきた人は自力で探るしかない。

具体的に言うと、どのページは何をやってきたのか(せめて、今はどんな施策を行っているのか)、最後にどの案をやって止まってるのか、止める理由は何(キャパがない、急ぎではない、新しいアイデアがない)

そしていくつ提案した。
ページ単位でカードを作る、項目埋め込んでもらう、そしてそれをチームメンバーに共有する。
パッと見てパッと分かるようなものを作りたい。(壁に貼るやつもあったら最高だけど、うちの会社にはそういうのできないみたい)
社内ABテストのwikipediaを作ってみる。一覧性はないけど、誰でも手軽に更新できる。
などなど。

これでよい方向に向かってるかどうか自分でも分からないけど、ぼちぼち色んな方法試してみたいと思う。
まずwikipediaを作ってみた。seesaa wiki無料なので、これを選んだ。

wiki.seesaa.jp

軸は二つ「仮説」と「ページ」
仮説を立てて、そしてその仮説に関わる全てのページを結び付ける。
エクスペリエンス、ラウンドを「ページ」内に記述する。
書き方完全自分流だけど、一旦今実施してる「仮説」の中身を充実させる、どういう背景があって、今回はどういう試みとか、そしてKaizenPFでのデザイン変更点もwikiに持ってくる。 同じページに今まで実施してきたものを同じところに入れたいけど、絶対大変な作業なると思う。 この段階終えたら、一回ボスに見せようか。

【追記】

wiki試作して出したが、ボスからの反応がよくて、しかし実際に進めるかどうか怪しい。

問題はどこにあるか分かった。
もしかして、ボスはプレイヤーでいたいということを気づきました。
手放したくないかもしれないので、情報共有に積極ではない。難航。