實驗設計過程：
確定業務所需的metric
設定baseline的資料以及最低提公升期望（5%）
呼叫power analysis計算所需樣本
根據歷史樣本採集量，估算採集的時間
在資料進來的過程中，隨機分配到對照組和實驗組
對於比例型指標，可以使用t檢驗，如果對於平均值類的指標，可能滿足其他分布，則需要使用別的檢驗方法。
統計量含義：
power analysis
主要繪製power和sample size的曲線從而得到所需power，如80%所需要的sample size。
舉個例子比如計算轉化率的顯著性：
檢驗選擇
aa實驗：在ab測試前為了驗證人群相似性，可以將人群分為5個組，隨機選取兩組驗證指標是否相近。
一些參考。
其他內容
壓力測試相關之ab命令
1.短時壓力測試工具 ab 命令 apache的工具 關鍵指標 requests per second 98.52 sec mean 平均每秒的請求數 time per request 30449.217 ms mean 平均每個請求消耗的時間 time per request 10.150 ms ...
壓力測試相關之ab命令
1.短時壓力測試工具 ab 命令 apache的工具 關鍵指標 requests per second 98.52 sec mean 平均每秒的請求數 time per request 30449.217 ms mean 平均每個請求消耗的時間 time per request 10.150 ms ...
測試相關知識
在我看來，測試開發工程師，是屬於測試的。測試還是測試，只是在工作中會用到很多開發知識，codereview，單元測試加強，自動化測試，開發測試工具。測試最重要的是思想，開發技能只能是技術手段。現在這個測試自動化極其重要。但如果是不懂測試的人，給測試開發工具，極有可能難用又沒效果，所以最好是有一批懂測...