智能標簽,是通過分析視頻中視覺、文字、語音、行為等信息,結合多模態(tài)信息融合及對齊技術,實現高準確率內容識別,自動輸出視頻的多維度內容標簽,將非結構化信息轉化為結構化信息,適用于媒資檢索、個性化推薦、智能廣告投放等場景。
功能概覽
應用場景
準確高效的媒體資源檢索。通過準確豐富的視頻標簽體系,對視頻、圖像、文本等媒體文件進行內容編目,支持通過關鍵詞或標簽文本,對素材庫中的內容進行快速檢索,提升視頻資源檢索效率與準確性。
個性化推薦:精準、個性化的內容推薦。根據媒體文件內容標簽,結合用戶信息、行為數據及用戶畫像分析,進行內容精準匹配,實現視頻個性化推薦,解決推薦冷啟動問題,提升推薦準確率。
智能廣告投放:智能化、場景化的廣告投放。根據媒體文件多模態(tài)內容分析及視頻標簽結果,自動識別廣告位,與廣告資源庫內容進行匹配,實現廣告智能投放,精準觸達受眾人群,提升廣告轉化率。
功能特性
使用限制
使用準備
在使用前需要進行一些設置確保功能能夠正常使用,如已設置請忽略。
創(chuàng)建管道。如果管道列表中沒有智能標簽管道,請先開啟智能標簽管道。
上傳視頻。
如果直接提交任務:將需要處理的視頻上傳至OSS。具體操作,請參見上傳視頻。
如果使用工作流自動提交:請先添加媒體Bucket,完成工作流創(chuàng)建后再上傳視頻。將OSS的Bucket在媒體處理MPS中綁定為輸入媒體Bucket、輸后媒體Bucket后,媒體處理MPS才有權限監(jiān)聽該Bucket上傳完成的消息,以實現觸發(fā)工作流執(zhí)行和回寫處理完成的文件。具體操作,請參見添加媒體Bucket。
(可選)配置消息通知。如果您需要在任務完成后接收消息通知,請先配置MNS。具體操作,請參見設置消息通知。
控制臺提交智能標簽任務
登錄媒體處理控制臺。
在頂部菜單欄左側選擇地域。
在左側導航欄,選擇任務管理。
選擇智能標簽,單擊創(chuàng)建任務。
設置參數。
參數 | 說明 |
待處理文件地址 | 單擊選擇,在Bucket下拉列表中,選擇Bucket名稱。路徑下方會顯示對應Bucket已經創(chuàng)建好的文件夾,在文件夾下選擇一個文件作為輸入路徑。 |
智能標簽管道 | 在下拉列表中選擇管道名稱。 說明 如果智能標簽管道下拉列表中沒有管道名稱,請先開啟智能標簽專用管道。詳細操作,請參見創(chuàng)建管道 。 |
標題 | 單擊輸入框,輸入文件標題,標題內容會參與多模態(tài)識別進行視頻分類分析。 |
模板 | 在下拉列表中選擇模板名稱。 說明 如果智能標簽模板下拉列表中沒有模板名稱,請先創(chuàng)建智能標簽模板。具體操作,請參見智能標簽模板。 |
返回OCR文字識別原始結果 | 單擊開關按鈕,切換是否返回文字識別結果。開啟后,標簽任務可返回OCR文字識別原始結果。 |
返回ASR語音識別原始結果 | 單擊開關按鈕,切換是否返回語音識別結果。開啟后,標簽任務可返回ASR語音識別原始結果。 |
單擊提交任務,完成創(chuàng)建智能標簽任務。
API提交智能標簽任務
通過模板配置分析類型。
智能標簽作業(yè)可以通過模板設置分析類型,在提交作業(yè)時指定模板ID。模板ID可以通過添加模板獲取。
自定義人臉庫設置。
智能標簽作業(yè)支持配置分析使用的公共人臉庫或自定義人臉庫范圍,在提交作業(yè)時指定人臉庫參數。自定義人臉庫的具體操作,請參見注冊?定義?臉。
提交智能標簽作業(yè)。
對于已成功上傳到OSS的視頻、圖片、語音文件,或第三方站點的視頻URL,或視頻點播(Vod)媒資地址,可以通過API/SDK方式提交智能標簽作業(yè),詳細參數信息請參見提交智能標簽作業(yè)、智能標簽SDK。
接收回調信息。
智能標簽作業(yè)完成后,如果配置了管道MNS消息隊列事件通知,會向輕量消息隊列(原 MNS)指定的隊列或主題發(fā)送消息。詳細信息請參見接收消息通知。
查詢作業(yè)結果。
通過API/SDK方式查詢智能標簽作業(yè)的狀態(tài)結果,按照智能標簽任務ID進行查詢。詳細參數信息請參見查詢智能標簽作業(yè)。