任務(wù)管理
數(shù)據(jù)集質(zhì)檢是以數(shù)據(jù)集為數(shù)據(jù)源發(fā)起質(zhì)檢任務(wù),可以對(duì)數(shù)據(jù)集中的文件進(jìn)行質(zhì)檢分析。
任務(wù)列表
在進(jìn)入任務(wù)管理后可以查看到當(dāng)前已創(chuàng)建的全部質(zhì)檢任務(wù),若需要新的任務(wù)可以前往創(chuàng)建質(zhì)檢任務(wù)中進(jìn)行操作。
執(zhí)行狀態(tài):藍(lán)色待執(zhí)行、綠色已執(zhí)行、紅色有錯(cuò)誤。
任務(wù)結(jié)果
點(diǎn)擊已完成任務(wù)右側(cè)的 任務(wù)結(jié)果 按鈕即可查看當(dāng)前任務(wù)的執(zhí)行結(jié)果。
任務(wù)結(jié)果頁展示當(dāng)前任務(wù)所使用的質(zhì)檢任務(wù)相關(guān)的統(tǒng)計(jì)數(shù)據(jù)。
會(huì)話名稱:表示當(dāng)前質(zhì)檢數(shù)據(jù)集中的對(duì)話名
任務(wù)名稱:當(dāng)前質(zhì)檢任務(wù)的名稱
質(zhì)檢方案:進(jìn)行質(zhì)檢的質(zhì)檢方案名稱
所屬數(shù)據(jù)集:表示當(dāng)前會(huì)話所屬數(shù)據(jù)集名稱
任務(wù)時(shí)間:當(dāng)前質(zhì)檢任務(wù)執(zhí)行的時(shí)間
命中檢測項(xiàng):會(huì)話命中的檢測項(xiàng)名稱。綠色正確,檢測項(xiàng)正確命中;紅色錯(cuò)誤,檢測項(xiàng)未命中;灰色,該檢測項(xiàng)還未進(jìn)行復(fù)核。
質(zhì)檢得分:命中檢測項(xiàng)后的得分情況
錄音時(shí)長:當(dāng)數(shù)據(jù)集為語音數(shù)據(jù)集時(shí)會(huì)顯示當(dāng)前會(huì)話的錄音時(shí)長
對(duì)話輪數(shù):當(dāng)前會(huì)話的對(duì)話輪次,客服和客戶交互一次算一輪
復(fù)核準(zhǔn)確性:復(fù)核準(zhǔn)確性是根據(jù)文件人工復(fù)核后,或系統(tǒng)自動(dòng)復(fù)核(命中規(guī)則勾選了"自動(dòng)審核")后,命中規(guī)則的"是否正確命中"勾選情況來判定的。
正確:所有命中規(guī)則的"是否正確命中"全部選擇為"是"時(shí),復(fù)核準(zhǔn)確性為正確。
錯(cuò)誤:所有命中規(guī)則的"是否正確命中"全部選擇為"否"時(shí),復(fù)核準(zhǔn)確性為錯(cuò)誤。
部分正確:部分命中規(guī)則的"是否正確命中"選擇為"是"時(shí),復(fù)核準(zhǔn)確性為部分正確。
待復(fù)核:該文件還未進(jìn)行復(fù)核,包括人工復(fù)核以及自動(dòng)復(fù)核。
未命中規(guī)則:未命中任何規(guī)則,所以不存在復(fù)核準(zhǔn)確性。
分配的質(zhì)檢員:指的是該文件分配的質(zhì)檢員的名稱,若未做分配,則顯示為空。
復(fù)核員:指的是最后一次對(duì)該文件進(jìn)行復(fù)核保存的人員名稱。
復(fù)核時(shí)間:復(fù)核員進(jìn)行復(fù)核的時(shí)間。
執(zhí)行狀態(tài):表示當(dāng)前會(huì)話檢測的執(zhí)行狀態(tài)。
復(fù)核狀態(tài):對(duì)于已經(jīng)復(fù)核過的文件,會(huì)顯示復(fù)核的類型,分為兩種類型。
自動(dòng):命中的規(guī)則中有規(guī)則勾選了"自動(dòng)審核",那么系統(tǒng)就會(huì)自動(dòng)將該規(guī)則進(jìn)行復(fù)核確認(rèn),同時(shí)該文件的復(fù)核狀態(tài)也會(huì)變?yōu)?已復(fù)核"。
人工:管理員/質(zhì)檢員角色的賬號(hào)登錄后,手動(dòng)進(jìn)行復(fù)核。
大模型質(zhì)檢規(guī)則復(fù)核
進(jìn)入質(zhì)檢任務(wù)-數(shù)據(jù)集任務(wù)-任務(wù)管理中選擇大模型質(zhì)檢方案的任務(wù),點(diǎn)擊任務(wù)結(jié)果,再點(diǎn)擊復(fù)核。
選擇大模型質(zhì)檢規(guī)則,可以查看大模型機(jī)檢結(jié)果,選擇查看詳情。
通義曉蜜大模型算子:
規(guī)則名稱:xxxx
命中邏輯:a||b||c||d
條件b:在新建這個(gè)檢測任務(wù)時(shí),所選擇的質(zhì)檢方案中配置的質(zhì)檢規(guī)則,具體可參考質(zhì)檢方案創(chuàng)建流程。
通義曉蜜質(zhì)檢大模型
檢測角色:【客服、客戶、所有角色】,根據(jù)業(yè)務(wù)需求選擇。
檢測范圍:全文,默認(rèn)為全文。
所選維度:服務(wù)質(zhì)檢的檢測維度列表,包含質(zhì)檢維度名稱和定義,即需要大模型以什么樣的標(biāo)準(zhǔn)判斷該維度是否命中。維度名稱與維度描述均為新建規(guī)則時(shí)的配置。
維度名稱:xxx
維度描述:xxx
命中原因:xxx
對(duì)規(guī)則是否正確、對(duì)話輪次的命中條件情況的機(jī)檢是否正確做判斷,勾選完成后,點(diǎn)擊提交完成復(fù)核。