FB v.s. IG: 簡單的AB testing(Paired T-test)


Posted by ar851060 on 2023-09-08

因為我想在發布繁體中文的部落格文章,所以我在思考到底是Instagram還是Facebook較適合發布這種文章。因此,我利用IG和FB之間的連結同時發布相同的文章。

文章的假設或設定如下:

  • 所有貼文都是用繁體中文。
  • 每篇貼文的字數都少於350。
  • 文章後必須跟著一張圖片。
  • 朋友的數量:FB - 981, IG - 180

FB

IG

因為我同時在IG和FB發布相同的文章,所以我認為我可以進行簡單的A/B測試。我在這裡使用的方法是配對T檢定。我只是使用線上的配對T檢定計算器。我收集的數據是每篇貼文的按讚/愛心數量。最新的貼文是5天前的。

這裡是數據:

文章 Facebook Instagram
無限小 (書評) 7 3
藍色巨星 (電影評價) 8 5
code intepreter介紹 21 7
code intepreter應用 13 3
閃電俠 (電影評價) 1 2
不可能的任務7 (電影評價) 6 3
芭比 (電影評價) 8 7
蜘蛛人-穿越新宇宙 (無雷電影評價) 9 4
奧本海默 (無雷電影評價) 21 9
蜘蛛人-穿越新宇宙 (有雷電影評價) 5 8
奧本海默 (有雷電影評價) 6 2
問神明和問AI有什麼差異? 8 6
從網上得到答案的最佳方法是發布一個錯誤的答案 2 7

使用線上配對T檢定計算器,我的假設 $H_0: FB = IG$。結果如下:

參數
P值 0.03079
t值 -2.4464
樣本大小 (n) 13
平均差異 ((\hat{x_d})) -3.7692
差異的標準差 ((S_d)) 5.5551

由於p值為0.03 < 0.05,我們在 $alpha=0.05$ 的情況下拒絕H0。結果是FB與IG不同

然而,從這個結果中,我無法知道哪一個更好,所以我改變我的假設 $H_0: FB <= IG$。結果如下:

參數
P值 0.0154
t值 -2.4464
樣本大小 (n) 13
平均差異 ((\hat{x_d})) -3.7692
差異的標準差 ((S_d)) 5.5551

由於p值為0.03 < 0.05,我們在 $alpha=0.05$的情況下拒絕H0。結果是FB不同於或小於IG

因此,結論是:帶有圖片的文章在FB上發布比在IG上更好

順便說一下,我還有一些發現:

  • 如果在FB上分享貼文而不是撰寫貼文,按讚的數量會大幅下降。
  • 如果在IG上使用一系列的資訊圖表,按讚的數量與最多按讚的正常貼文相同。但是,它仍然無法顯示正常貼文和資訊圖表之間的差異。(順便說一下,我的下一個side project是自動製作IG資訊圖表)
  • 如果想在IG上收集最多的按讚,最好的方式是使用限動,而不是貼文。也許這就是為什麼TikTok現在這麼受歡迎...

#project









Related Posts

來寫個氣象機器人吧!(Part 1)

來寫個氣象機器人吧!(Part 1)

webpack 5 入門:pnpm + webpack5

webpack 5 入門:pnpm + webpack5

Class Notes -2

Class Notes -2


Comments