什么是拆分對比實(shí)驗？| 騰訊廣告平臺

功能介紹

拆分對比實(shí)驗是面向廣告主的自助實(shí)驗工具，通過實(shí)驗系統(tǒng)實(shí)現(xiàn)待測廣告的競爭隔離，得到有效實(shí)驗結(jié)論。通過該工具，廣告主可以了解到不同的投放策略對廣告表現(xiàn)的影響，從而依據(jù)實(shí)驗結(jié)論有效進(jìn)行后續(xù)的廣告投放優(yōu)化。

新策略測試、新賬戶測試和合約投放前測試，這三種情況下都強(qiáng)烈建議使用拆分對比實(shí)驗。通過實(shí)驗系統(tǒng)實(shí)現(xiàn)隔離競爭，避免多條對比策略之間的內(nèi)部擠壓，營造公平環(huán)境。可以讓不同策略快速積累足量、無偏的實(shí)驗數(shù)據(jù)，得到有效實(shí)驗結(jié)論。

1. 拆分對比實(shí)驗原理

拆分對比實(shí)驗將實(shí)驗中的廣告進(jìn)行流量隔離，每個廣告只能獲得自身的1/n流量（n=實(shí)驗廣告數(shù)）。如您創(chuàng)建的實(shí)驗中有2條實(shí)驗廣告，則每條廣告可以獲得自身50%的流量。通過實(shí)驗廣告間的流量隔離保證實(shí)驗廣告處于相同的競爭環(huán)境中，得到公平的測試結(jié)果。需要說明的是，實(shí)驗廣告只會相互隔離，和賬戶中的其他廣告還是具有競爭關(guān)系的。

2. 拆分對比實(shí)驗的優(yōu)勢有哪些？

（1）操作簡單：通過一次實(shí)驗創(chuàng)建，最多同時驗證5種投放策略，無需分別創(chuàng)建廣告，節(jié)省實(shí)驗操作時間，提高實(shí)驗效率。

（2）專屬報表&系統(tǒng)判定實(shí)驗結(jié)論：實(shí)驗數(shù)據(jù)采用單獨(dú)報表展示，方便廣告主直接對比實(shí)驗效果。同時，隨著實(shí)驗進(jìn)程的發(fā)展，廣告主可以借助“全量推薦度”了解目前的實(shí)驗數(shù)據(jù)是否充分，借助“優(yōu)勝廣告”的判定輔助進(jìn)行結(jié)果解讀。

（3）隔離競爭，結(jié)果無偏：實(shí)驗工具通過隔離多條待測廣告間的競爭關(guān)系，讓多條廣告面臨完全一致的競爭環(huán)境，保證效果數(shù)據(jù)可比，得到無偏的實(shí)驗結(jié)論。

（4）實(shí)驗后優(yōu)勝廣告一鍵全量：對于投放效果好的廣告，實(shí)驗工具提供直接全量功能讓廣告持續(xù)投放。通過實(shí)驗驗證投放策略，快速觀察策略情況進(jìn)而全量表現(xiàn)好的廣告，可以保證廣告在全周期內(nèi)合理分配流量，提升投放效果。

使用指引

1. 拆分對比實(shí)驗如何創(chuàng)建？

（1）拆分對比實(shí)驗支持的變量：

定向、出價方式、創(chuàng)意等廣告策略均可以成為拆分對比實(shí)驗支持的測試變量。

a. 單一變量模式：

創(chuàng)意—每天新上多套素材、文案，到底哪個創(chuàng)意方向更適合您？

定向—新標(biāo)簽（標(biāo)簽組合）測試、人群包測試均可支持，哪種定向設(shè)置效果更好？

出價方式—用oCPA還是CPC？用哪種優(yōu)化目標(biāo)進(jìn)行優(yōu)化？出多少價格更適合您平衡量和成本？

為保證實(shí)驗結(jié)果有效性，選擇上述變量測試時，一次實(shí)驗僅支持一個變量的測試。同時需要說明的是，出價價格為默認(rèn)變量，廣告主在選定任意變量時，均可對不同廣告出相同/不同價格來進(jìn)行實(shí)驗驗證。

b. 自由變量模式：

想要進(jìn)行變量間的組合測試？想要設(shè)置廣告創(chuàng)建過程中的其他信息為變量？

您可以選擇自由變量方式測試：

自由變量—支持將廣告設(shè)置中任意信息作為變量控制（可以是創(chuàng)意、定向、出價方式，也可以是其他信息，還可以用來測試新產(chǎn)品功能），且無需嚴(yán)苛控制單一變量，達(dá)到快速創(chuàng)建自由變量對照實(shí)驗，快速觀察自由變量/組合策略下，廣告效果的目的。

（2）具體使用步驟：

Step1了解實(shí)驗：

通過工具箱-投放輔助-拆分對比實(shí)驗路徑，進(jìn)入拆分對比實(shí)驗頁面。

Step2新建實(shí)驗：

設(shè)置想要測試的實(shí)驗變量、實(shí)驗廣告數(shù)和其他廣告設(shè)置

Step3觀察效果：

到達(dá)實(shí)驗時間自動開啟實(shí)驗，積累實(shí)驗數(shù)據(jù)，通過拆分對比實(shí)驗?zāi)K中的報表隨時查看各實(shí)驗廣告的數(shù)據(jù)對比。

Step4全量實(shí)驗：

積累充分的實(shí)驗數(shù)據(jù)后得到實(shí)驗結(jié)論，選擇實(shí)驗全量，將投放效果更佳的實(shí)驗廣告保持繼續(xù)投放。

常見問題

1. 如何查看實(shí)驗結(jié)論，全量推薦度和優(yōu)勝廣告分別是什么？

當(dāng)實(shí)驗開啟后，廣告主可以通過在廣告列表，點(diǎn)擊管理實(shí)驗廣告，訪問實(shí)驗詳情頁；也可以到工具箱-拆分對比實(shí)驗中查看到已創(chuàng)建的實(shí)驗詳情：在同一個報表頁面，可以查看到實(shí)驗開啟到現(xiàn)在的全部數(shù)據(jù)，廣告主可以選擇自己關(guān)注的指標(biāo)進(jìn)行直觀便捷的對比。同時，也可以參考系統(tǒng)給到的指引來輔助進(jìn)行結(jié)果判斷，包括“全量推薦度”及“優(yōu)勝廣告”兩項指標(biāo)。

全量推薦度：根據(jù)目前的實(shí)驗數(shù)據(jù)充分性，系統(tǒng)會給到全量推薦度指標(biāo)，分為1星到5星五個等級。實(shí)驗數(shù)據(jù)越充分，實(shí)驗對比結(jié)論越可信，此時全量推薦度越高，反之則全量推薦度越低。當(dāng)全量推薦度達(dá)到4星及以上時，此時已得到的實(shí)驗結(jié)論具備統(tǒng)計意義；當(dāng)全量推薦度在3星及以下時，建議廣告主繼續(xù)實(shí)驗，待全量推薦度提升后再觀察實(shí)驗結(jié)論，一般需要1-3天。

優(yōu)勝廣告：依據(jù)實(shí)驗數(shù)據(jù)，當(dāng)某條/某幾條實(shí)驗廣告顯著優(yōu)于其他實(shí)驗廣告時，會判定該條/多條廣告為優(yōu)勝廣告，建議廣告主全量實(shí)驗并將優(yōu)勝廣告置于開啟狀態(tài)。

智能全量：如果在實(shí)驗創(chuàng)建初期，授權(quán)了“智能放量”，則在系統(tǒng)判斷出優(yōu)勝廣告后，會自動為優(yōu)勝廣告傾斜更多流量：僅在此條實(shí)驗計劃背后流量不再等分，整個實(shí)驗廣告加和仍為100%流量，其中優(yōu)勝廣告拿到更多流量，劣勢廣告逐步減少流量分配。

同前，當(dāng)觀察到優(yōu)勝廣告的顯著優(yōu)勢后，建議通過全量實(shí)驗并將該條廣告置于開啟狀態(tài)，來放大優(yōu)勢。

2. 拆分對比實(shí)驗支持修改嗎，推薦使用編輯功能修改的情況有哪些？

可以修改。普通列表視圖下，支持觀察實(shí)驗，不可編輯；轉(zhuǎn)入管理實(shí)驗廣告列表后，現(xiàn)已支持編輯，操作方式與普通廣告一致，靈活方便。

以下場景推薦使用編輯功能，幫助實(shí)驗順利啟動、觀察數(shù)據(jù)：

a)審核未通過，實(shí)驗無法進(jìn)行時，通過編輯對創(chuàng)意、和落地頁等予以優(yōu)化；

b)App類推廣，需配置、或更新渠道包跟進(jìn)轉(zhuǎn)化效果時，通過編輯選取應(yīng)用渠道包進(jìn)行推廣；

c)必須對某些投放內(nèi)容進(jìn)行優(yōu)化，如修改投放時間、活動細(xì)則、定向更新等非實(shí)驗變量條件時：將所有實(shí)驗廣告均予以同樣編輯修改（此時請注意：不要因編輯修改增加實(shí)驗變量因素，使得差異復(fù)雜化，難以得到有效結(jié)論）。

為控制投放風(fēng)險，也可以隨時通過快捷編輯入口修改廣告出價，以及隨時暫停或開啟實(shí)驗中的任一條廣告。

3. 拆分對比實(shí)驗支持復(fù)制嗎？

普通列表視圖下，支持觀察實(shí)驗，不可復(fù)制；轉(zhuǎn)入管理實(shí)驗廣告列表后，現(xiàn)已支持復(fù)制，操作方式與普通廣告一致，靈活方便。

拆分對比實(shí)驗廣告復(fù)制后，是一條普通廣告，并非在實(shí)驗條件下新增。在實(shí)驗廣告列表中，選中一條實(shí)驗廣告點(diǎn)擊復(fù)制后，會和復(fù)制普通廣告操作一樣，進(jìn)入廣告的創(chuàng)建流程：

復(fù)制后的廣告默認(rèn)位于當(dāng)前實(shí)驗廣告所在計劃內(nèi)，可以選擇放入其他計劃、或者新建計劃放入。

復(fù)制后的廣告名稱默認(rèn)是“原實(shí)驗廣告名稱”-副本。

4. 對于不同種類的廣告主，建議的實(shí)驗方案分別是什么？

對于初期使用拆分對比實(shí)驗的廣告主來說，建議選定明確的測試目標(biāo)（如測試A/B兩個標(biāo)簽的效果，或測試兩個素材的效果），并將測試目標(biāo)設(shè)置成唯一變量，價格保持相同。在測試過程中，如需調(diào)整價格，保證實(shí)驗中的廣告同時調(diào)整并調(diào)整為相同價格。通過嚴(yán)格的控制變量法得到有效的實(shí)驗結(jié)果。建議通過實(shí)驗驗證7天以上時間，全量后選取效果較好的實(shí)驗廣告繼續(xù)投放。

對于有經(jīng)驗的廣告主來說，價格可以成為您調(diào)整實(shí)驗的關(guān)鍵。在實(shí)驗開始后，您可以通過對價格的調(diào)整將多條實(shí)驗廣告的轉(zhuǎn)化成本或轉(zhuǎn)化量調(diào)平，來在相同成本的情況下對比轉(zhuǎn)化量的大小或在相同轉(zhuǎn)化量的情況下對比成本的高低。

以上講解了“什么是拆分對比實(shí)驗？” 對于廣告投放，廣告主可通過該實(shí)驗了解到不同的投放策略對廣告表現(xiàn)的影響，從而依據(jù)結(jié)果有效進(jìn)行廣告投放優(yōu)化。如有需要了解更多關(guān)于騰訊廣告投放的問題，歡迎您咨詢巨宣網(wǎng)絡(luò)！

公司優(yōu)勢

開戶流程

注意事項