火山引擎DataTester MAB落地頁調(diào)優(yōu)功能升級(jí)，可快速提升活動(dòng)收益

　　近日，火山引擎AB測(cè)試與智能優(yōu)化平臺(tái)DataTester，對(duì)其MAB(Multi-armed Bandit)功能進(jìn)行了升級(jí)，以更好地滿足企業(yè)營銷決策的需求。MAB是一種通過不斷嘗試不同的選擇來找到最優(yōu)決策的算法，廣泛應(yīng)用于營銷領(lǐng)域。DataTester的MAB功能已經(jīng)在內(nèi)部和外部得到了成功的驗(yàn)證。此次升級(jí)后，該功能將更加符合業(yè)務(wù)使用場(chǎng)景，幫助企業(yè)更快地找到最佳的營銷策略。

　　在營銷活動(dòng)中，落地頁是用戶點(diǎn)擊廣告后進(jìn)入的頁面，是營銷活動(dòng)的重要環(huán)節(jié)之一。MAB算法可以通過動(dòng)態(tài)調(diào)整進(jìn)入到各個(gè)落地頁的流量，從而提高轉(zhuǎn)化率和投資回報(bào)率。

　　DataTester的MAB功能在設(shè)計(jì)之初就考慮到了實(shí)際應(yīng)用場(chǎng)景。如果活動(dòng)的投放落地頁很多，同時(shí)活動(dòng)周期比較短，需要快速引來更多的流量完成支付轉(zhuǎn)化，那么MAB是合適的。如果活動(dòng)會(huì)持續(xù)較長時(shí)間，想先用流量測(cè)試落地頁方案，則選用傳統(tǒng)的AB實(shí)驗(yàn)合適。

　　通過MAB算法，動(dòng)態(tài)調(diào)整進(jìn)入到各個(gè)落地頁的流量，轉(zhuǎn)化率高的落地頁將拿到更高的流量。因此，在最終整體收益上，會(huì)超越每個(gè)方案隨機(jī)分流量。這部分就是MAB動(dòng)態(tài)調(diào)優(yōu)的超額收益。

　　在正式開啟調(diào)優(yōu)之前，業(yè)務(wù)團(tuán)隊(duì)需要完成流量方案的設(shè)計(jì)。明確目標(biāo)需要明確營銷活動(dòng)的目標(biāo)，例如提高轉(zhuǎn)化率、提高用戶留存率、提高下單率等;設(shè)計(jì)實(shí)驗(yàn)在確定策略后，就可以具體設(shè)計(jì)不同的落地頁版本，測(cè)試不同策略的效果。

　　在火山引擎DataTester產(chǎn)品中，針對(duì)落地頁可選擇的調(diào)優(yōu)場(chǎng)景為「可視化優(yōu)化」和「多鏈接調(diào)優(yōu)」兩種場(chǎng)景，如果落地頁變化內(nèi)容較少、研發(fā)資源緊張，「可視化優(yōu)化」可以快速生成不同的落地頁版本測(cè)試;如果已經(jīng)有設(shè)計(jì)好的落地頁，那么可以使用「多鏈接調(diào)優(yōu)」。

　　MAB智能調(diào)優(yōu)實(shí)驗(yàn)創(chuàng)建頁面

　　MAB智能調(diào)優(yōu)實(shí)驗(yàn)的創(chuàng)建也非常簡單，根據(jù)實(shí)驗(yàn)設(shè)計(jì)方案將基本的信息依次按照提示創(chuàng)建好后，就可以將不同的營銷落地頁的url輸入在不同的實(shí)驗(yàn)版本中，調(diào)優(yōu)開始后，DataTester將會(huì)按照不同落地頁的轉(zhuǎn)化，動(dòng)態(tài)調(diào)整流量。

　　MAB智能調(diào)優(yōu)實(shí)驗(yàn)創(chuàng)建頁面

　　當(dāng)調(diào)優(yōu)開始后之后會(huì)看到哪些數(shù)據(jù)呢?

　　常規(guī)實(shí)驗(yàn)更關(guān)注的是優(yōu)勝組的選擇，而MAB實(shí)驗(yàn)相更關(guān)注的是，整個(gè)實(shí)驗(yàn)期間整體核心指標(biāo)達(dá)到最優(yōu)，所以實(shí)驗(yàn)報(bào)告首先會(huì)關(guān)注整體收益的情況。比如落地頁的核心調(diào)優(yōu)指標(biāo)為App的啟動(dòng)轉(zhuǎn)化，那么報(bào)告中會(huì)呈現(xiàn)整個(gè)調(diào)優(yōu)過程中MAB相對(duì)于AB實(shí)驗(yàn)，到底提高了多少收益。

　　智能調(diào)優(yōu)實(shí)驗(yàn)整體收益提升折線圖

　　除整體收益提升外，企業(yè)通常還需要觀察一些明細(xì)數(shù)據(jù)。DataTester同時(shí)提供了核心指標(biāo)明細(xì)表、核心指標(biāo)明細(xì)圖和實(shí)驗(yàn)流量分配圖，便于分析更多內(nèi)容。比如下圖，核心指標(biāo)絕對(duì)趨勢(shì)圖中，版本指標(biāo)之間的大小關(guān)系對(duì)應(yīng)到流量分配圖上的流量分配，該時(shí)刻核心指標(biāo)越大的版本，會(huì)在流量分配圖上呈現(xiàn)越多的流量。

　　核心指標(biāo)明細(xì)絕對(duì)趨勢(shì)圖

　　實(shí)驗(yàn)流量分配趨勢(shì)圖

　　“核心指標(biāo)明細(xì)絕對(duì)趨勢(shì)圖”顯示了不同實(shí)驗(yàn)版本在各時(shí)間點(diǎn)的表現(xiàn)，有助于發(fā)現(xiàn)哪個(gè)版本在整體表現(xiàn)上更優(yōu)秀;“實(shí)驗(yàn)流量分配趨勢(shì)圖”則展示了各版本在不同時(shí)間點(diǎn)的流量分配情況，這有助于了解哪些版本更受用戶歡迎。通過這些數(shù)據(jù)企業(yè)將可以更好地理解用戶需求和市場(chǎng)變化，從而制定更有效的營銷策略。

　　此次DataTester升級(jí)后的MAB功能，將為企業(yè)營銷決策提供更強(qiáng)大的支持，幫助企業(yè)快速找到最佳的營銷策略，實(shí)現(xiàn)更高的投資回報(bào)率。

　　據(jù)了解，火山引擎DataTester源自字節(jié)跳動(dòng)AB實(shí)驗(yàn)的長期沉淀，2023年中數(shù)據(jù)顯示，字節(jié)已通過DataTester累計(jì)做過240萬余次AB實(shí)驗(yàn)，日新增實(shí)驗(yàn) 4000余個(gè)，同時(shí)運(yùn)行實(shí)驗(yàn)5萬余個(gè)。DataTester目前服務(wù)了包括美的、得到、博西家電、凱叔講故事等在內(nèi)的上百家企業(yè)，為業(yè)務(wù)的用戶增長、轉(zhuǎn)化、產(chǎn)品迭代、運(yùn)營活動(dòng)等各個(gè)環(huán)節(jié)提供科學(xué)的決策依據(jù)，將成熟的“數(shù)據(jù)驅(qū)動(dòng)增長”經(jīng)驗(yàn)賦能給各行業(yè)。(作者：唐明)