正確な検証って？

私の会社でもSNSを利用したPRの１つとしてフェイスブックページを利用しているのですが、それぞれのコンテンツに対する反応の違いを検証するのってやはりすごく難しいなと感じています。

単純に内容の問題なのか、はたまたそのコンテンツを投下した時間帯の問題なのか、最初に内輪でシェアし拡散をはかった人や数の違いなのかなど、色々な項目が上げられます。

更に内容の問題とひとくちに言っても、そのコンテンツがユーザーにどうとられたのか？というレベルで考えると、単に面白くなかったという話なのか、面白いと思ってもいいね！やシェアをしづらい内容だったのか、反感を買う内容だったのか、あるいは、写真やイラストのちょっとしたタッチの差、文章の差だったのかなど、まだまだ細かく分けられます。

そしてこれら１つ１つテストマーケティング的に全て検証したとしても実際はそれらの組合せが結果として表れているわけですから、簡単にこれが問題だったと決めつけてしまう事は間違った結果を導き出し、もっと重要な何かに気付く妨げになる可能性があります。

たまたま反応が悪かったとき、影響力のあるユーザーが見ていなかっただけというような問題もあるかもしれません。

これはSNSやインターネットだけのことではないと思います。
実行した広告やプロモーションの検証は、規模の大小はありますが上記の様に要素を色々な項目に分解してそれぞれを調査し、またその組合せを可能な限り検証し結果を導き出していくということをするのですが、そこから導き出された結果だけを見ると「ん？」って疑問に感じることや経験的に「間違っている」と感じることがよくあります。
酷い時には明らかな原因を認めたくないために、ある要素をスケープゴートに仕立てるべく恣意的に操作している？って思っちゃう様なものもあり、そういうやり方にも使えそうなくらい元々微妙で判断の難しいものだと思います。

とかく数字になっていると信憑性が高く感じられたりレポートするのが楽だったりするので、その結果をするっと受け取り事実としてしまうことが多いと思うのですが、そこは簡単に決めつけてしまうのではなく、いったん注釈付にするなどし少し長い時間をかけ粘り強く検証し続ける事が必要なのではないかと感じています。