遠程雙錄場景指的是異地線上展業,并對展業過程進行錄音錄像。遠程雙錄質檢功能為該類型的展業雙錄活動提供實時交互式檢測。
檢測原理
智能雙錄質檢為移動端 App 提供了智能檢測 SDK。通過 SDK,為終端 App 提供實時檢測能力,即支持在聯網條件下,對線上各方進行錄音錄像,并實現實時交互式檢測。
在遠程雙錄質檢過程中,智能檢測 SDK 根據質檢流程,調用相應的檢測模型,并根據模型返回的檢測結果,提供實時交互式檢測。質檢流程在智能雙錄質檢控制臺中進行創建,遠程雙錄質檢流程創建過程請參見 基于通用保險質檢流程創建流程 或 基于空白模板創建流程。
檢測特點
遠程雙錄質檢功能具有如下特點:
多角色分離:支持如保險代理人、投保人等不同角色的人員進行遠程展業。
有網即可展業:只要有網絡即可遠程展業。
針對角色的實時交互檢測:按照展業角色對會議各端分別設置檢測項目。
檢測結果多端同步:各端檢測結果實時同步,協同交互控制和流程驅動。
云端視頻錄制:云端錄制各端視頻和合流視頻,無需本地錄制和上傳。
遠程屏幕共享:支持更復雜的保險代理業務操作和協同。
檢測能力
遠程雙錄是將音視頻通話能力與雙錄質檢服務相結合,當對話的雙方身處異地時,可以音視頻通話過程進行實時的通訊,同時進行音頻視頻的錄制,并且結合了實時質檢的能力。其主要能力單元分為音視頻通話、錄制服務與本地智能檢測能力。
音視頻通話
遠程雙錄 SDK 中的音視頻通話能力由螞蟻集團移動開發平臺(mPaaS)團隊提供,可實現一對一通話及多人會議。通話過程中支持屏幕錄制、屏幕共享、截圖等功能,同時支持即時文字消息和文件傳輸。關于音視頻通話的更多信息請參見 產品簡介。
錄制服務
遠程雙錄 SDK 檢測能力中提供了音視頻錄制服務,可對遠程音視頻通話全程錄音錄像,包括音視頻通話、截圖、語音播報、交互式白板、屏幕共享、交易操作過程、文字聊天內容、簽字畫面等。對遠程雙錄中的音視頻通話進行錄制和存儲,是為了后續對業務辦理流程進行回溯。
錄制中支持設置主、備雙錄模式,滿足高可用的要求,從而保障雙錄的穩定性。
檢測能力
遠程雙錄 SDK 中的檢測能力如下:
人臉檢測和信息采集
檢測和采集視頻中的所有人臉及人臉信息。
支持采集 4 張人臉信息。
從輸入視頻流到返回視頻,SDK 的處理時間不超過 100ms,且檢測耗時控制在 50ms 以內。
支持動態設置檢測頻率,比如每秒鐘 5 次。
人臉匹配和追蹤
檢測視頻中的人臉信息與預設的人臉信息是否匹配,并持續追蹤該人臉。
支持檢測和追蹤四組預置人臉信息(人臉圖像+角色名稱)。
支持設置人臉匹配相識度。
支持在視頻中把匹配到的人臉進行標記。
提示人臉上線消息。當第一次在視頻中檢測到預設的人臉圖像信息時,返回人臉上線消息。
提示人臉離線消息。如果在指定的時間間隔內檢測不到已標記的人臉,返回人臉離線消息。
支持動態設置檢測頻率,比如每秒鐘 5 次。SDK 根據檢測頻率調用模型 SDK 進行檢測并將結果返回給 App。
從輸入視頻流到返回視頻,SDK 的處理時間不超過 100ms,且檢測耗時控制在 50ms 以內。
特定詞語識別
檢測語音流中的特定激活詞,并返回該激活詞,檢測耗時控制在 50ms 以內。
預置識別 6 個激活詞。
支持擴展、修改和刪除激活詞。
活體檢測
檢測視頻中的人臉是不是活體,以防用照片或視頻等進行仿冒,檢測耗時控制在 50ms 以內。
檢測完成后,返回檢測結果和結果置信度。
翻屏動作識別
檢測視頻中是否存在手機屏幕上滑動翻屏的動作,檢測耗時控制在 50ms 以內。
簽名動作識別
檢測視頻中是否存在手機或 iPad 中簽字的動作,檢測耗時控制在 50ms 以內。
使用流程
遠程雙錄質檢的使用流程:
在智能雙錄質檢控制臺中創建遠程雙錄質檢流程,創建過程請參見 基于通用保險質檢流程創建流程 或 基于空白模板創建流程。
發布創建完成的流程,使流程可用。
下載 SDK,并將發布完成的流程 ID 寫入 SDK。
企業或軟件開發商基于 SDK 開發終端 App。
使用終端 App 進行遠程雙錄。
在智能雙錄質檢控制臺中查看遠程雙錄質檢結果,更多信息請參見 查看結果。