日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

A/B測試-編程實驗

0.功能概述

編程實驗是通過代碼編程進行的A/B實驗。可廣泛應(yīng)用于前端優(yōu)化、策略優(yōu)化和后端算法優(yōu)化多種實驗場景。本文為您介紹編程實驗的創(chuàng)建和管理方法。

1.功能路徑

您可以在首頁點擊“A/B測試”按鈕進入本產(chǎn)品,或者在應(yīng)用列表中點擊“A/B測試”進入產(chǎn)品。

image

image

2.實驗創(chuàng)建

實驗管理>實驗列表中,您可以點擊“新建實驗”按鈕,創(chuàng)建一個新的實驗。

image

本產(chǎn)品當前支持創(chuàng)建編程實驗,您可以在“新建編程實驗”頁面,進行實驗創(chuàng)建,創(chuàng)建實驗需完成“輸入基本信息-設(shè)計生效策略-實驗組配置”三個步驟。

image

(1)輸入基本信息

  • 實驗名稱:必填,長度不超過100字符,同一應(yīng)用下實驗名稱必須唯一

  • 實驗描述:非必填,長度不超過1000字符

  • 實驗類型:必填,支持選擇客戶端或服務(wù)端

  • 實驗時長:必填,默認為30天,可修改,最長不超過365天

  • 實驗負責人:必填,默認為當前用戶

image

(2)設(shè)計生效策略

輸入基本信息之后,點擊“下一步”,可繼續(xù)設(shè)計實驗的生效策略:

  • 是否互斥默認為否。流量不互斥,即為正交實驗;流量互斥,即為互斥實驗。

  • 分流主體:支持選擇實體ID、用戶ID和設(shè)備ID。

  • 流量層:正交實驗時,無需選擇流量層;互斥實驗時,需要選擇流量層,同一流量層中的各實驗組的流量互斥,流量層按照分流主體進行選擇。

  • 實驗流量:默認為100%;正交實驗時,可以在 1%到 100%中調(diào)整;互斥實驗時,上限為當前流量層的剩余流量。

  • 全局篩選:支持設(shè)置用戶受眾規(guī)則。若設(shè)置規(guī)則,僅規(guī)則生效的用戶會命中實驗,即:若設(shè)置流量為50%且設(shè)置受眾規(guī)則,則實際命中的用戶為50%用戶分流后再判斷符合受眾規(guī)則用戶可設(shè)置的范圍同當前應(yīng)用分析全局篩選和用戶分群。

  • 體驗一致性:默認開啟。開啟后,實驗期間用戶生效版本不隨流量、受眾條件調(diào)整而發(fā)生變化,可保障在實驗期間同一用戶只進入一個實驗組,即用戶只要進入當前實驗組就不再出實驗(除非暫停、關(guān)閉實驗)。不開啟時,每次都會實時判斷用戶命中的實驗組。

image

設(shè)置完成后,點擊“下一步”,開始配置實驗組。

(3)配置實驗組

在此步驟中,您可以配置實驗組參數(shù):

image

  • 測試用戶命中條件:默認關(guān)閉,關(guān)閉時測試用戶不考慮受眾條件默認進組,開啟時需滿足受眾條件才能進組。

  • 實驗參數(shù)配置:

    • 編程實驗至少需要一個實驗參數(shù)

    • 參數(shù)支持四種類型:number、string、boolean、json

    • 同一個實驗內(nèi),參數(shù)key需唯一

    • 同一個實驗內(nèi),添加實驗參數(shù)key后,每個實驗組默認添加對應(yīng)的參數(shù)key

    • 對于編程實驗,sdk通過接口可獲取當前命中實驗的參數(shù)對應(yīng)的值

  • 對照組/實驗組設(shè)置:

    • 類型:分為對照組和實驗組。一個實驗有且僅有一個對照組,可以設(shè)置多個實驗組;默認為1個對照組和1個實驗組,可以點擊添加實驗組添加新的實驗組

    • 實驗組名稱:默認名稱為實驗組+自增序號

    • 測試用戶:默認進組的用戶。手工輸入對應(yīng)ID,輸入的ID類型和分流主體一致;支持掃碼進組,使用測試設(shè)備掃碼,自動獲取當前設(shè)備的分類主體ID并錄入

    • 描述:可對實驗組進行描述

    • 參數(shù)配置:同一個實驗內(nèi)的每個實驗組默認添加對應(yīng)的參數(shù)key,可設(shè)置不同的參數(shù)值

    • 操作:可以收起或展開實驗組信息,支持查看樣例代碼、刪除實驗組、添加實驗組image

      • 查看樣例代碼:根據(jù)當前配置的實驗參數(shù),生成樣例代碼

      • 刪除實驗組:刪除當前實驗組

      • 添加實驗組:新增一個實驗組

  • 流量分配:默認為平均分配,各組平均分配流量,關(guān)閉后,可以手工調(diào)整每個組的流量分配(總計為100%)。image

3.實驗管理

3.1實驗列表

實驗列表下包含“全部實驗”、“我的收藏”、“草稿箱”三個Tab。

  • "全部實驗":當前應(yīng)用下的除了狀態(tài)為"草稿"的所有實驗列表。

    • 顯示實驗名稱、狀態(tài)(調(diào)試中/運行中/已暫停/已結(jié)束)、設(shè)定流量、進組用戶數(shù)、運行時間、負責人、操作欄(啟動/停止、刪除、顯示詳情)。

    • 已完成配置的實驗,若點擊“完成”,則創(chuàng)建的實驗?zāi)J狀態(tài)為調(diào)試中。

      image

  • "我的收藏":當前應(yīng)用下當前用戶主動收藏的實驗列表。

    • 顯示實驗名稱、狀態(tài)(調(diào)試中/運行中/已暫停/已結(jié)束)、設(shè)定流量、進組用戶數(shù)、運行時間、負責人、操作欄(啟動/停止、刪除、顯示詳情)。

  • "草稿箱":當前應(yīng)用下當前用戶創(chuàng)建的狀態(tài)為"草稿"的實驗列表。

    • 顯示名稱、進度、負責人、操作欄(刪除、編輯)。image

3.2啟動實驗

在操作欄或在詳情頁點擊“啟動”,可啟動實驗;上線方式可選擇立即上線或指定時間上線;啟動后,實驗變?yōu)?b>運行中狀態(tài)。image

image

image

3.3查看實驗詳情

在實驗列表中,點擊對應(yīng)實驗的操作欄中的“顯示詳情”,即可進入實驗詳情頁,查看當前實驗的具體配置信息。同時,在實驗詳情頁的右上角,可對當前實驗進行收藏/取消收藏、停止、啟動、暫停、編輯:

image

  • 收藏icon:收藏/取消收藏當前實驗

  • 停止:關(guān)閉當前實驗,關(guān)閉后立即生效,不再有正常用戶命中實驗,僅對測試用戶生效

  • 啟動:啟動當前實驗,上線方式可選擇立即上線或指定時間上線;啟動后,實驗變?yōu)?b>運行中狀態(tài)

  • 暫停:暫停當前實驗,暫停后立即生效,不再有正常用戶命中實驗,僅對測試用戶生效;暫停期間該實驗無數(shù)據(jù),會影響整體分數(shù)據(jù)分析(建議分段數(shù)據(jù))。

  • 編輯:支持對當前實驗的基礎(chǔ)配置和生效策略等進行編輯修改

4.流量層管理

您可以在A/B測試>流量總覽中,進行流量層管理。每個分流主體默認有一個正交實驗層,非互斥實驗?zāi)J歸屬此流量層。

image

4.1新建流量層

點擊“新建流量層”按鈕,進入流量層配置頁面。

image

  • 名稱:必填,流量層名稱,不超過100字符。

  • 描述:選填,對該流量層的描述,不超過1000字符。

  • 實驗類型:必填,單選,支持選擇客戶端或服務(wù)端。

  • 分流主體:必填,單選,支持選擇實體ID、用戶ID和設(shè)備ID。

image

4.2流量層列表

顯示流量層名稱、實驗類型、實驗數(shù)量、分流主體、可用流量、描述、操作。支持以下操作:

  • 詳情:查看該流量層詳情

    image

  • 修改:編輯該流量層具體信息

    image

  • 刪除:刪除該流量層