本文介紹如何配置存量掃描任務,對指定OSS Bucket中的已有圖片或視頻文件進行一次性違規檢測,并在檢測完成后查看掃描結果和統計數據。
背景信息
關于OSS違規檢測的使用限制(例如支持的OSS Bucket、檢測場景、文件格式等),請參見使用限制。
前提條件
已經開通OSS對象存儲服務并授權內容安全讀取您的OSS Bucket。具體操作,請參見授權內容安全訪問OSS存儲空間。
已完成配置回調通知。具體操作,請參見配置消息通知。
步驟一:創建存量掃描任務
登錄內容安全控制臺。
在左側導航欄,選擇 。
單擊創建掃描任務,配置存量掃描任務。
按照配置向導,完成以下配置。
選擇Bucket。
從左側待選擇框,選中需要檢測的Bucket,添加到右側的已選擇框,然后單擊下一步。
設置過濾條件。
配置說明:
過濾或排除:默認掃描已選Bucket中的所有文件,如果您需要指定掃描Bucket中的哪些文件或者不要掃描哪些文件,則可以單擊Bucket右側的設置過濾條件,并在過濾條件對話框,按照頁面提示完成過濾條件配置,然后單擊確定。
表 1. 過濾條件參數說明
配置項
說明
過濾條件
支持包含(表示掃描指定的路徑)或排除(表示掃描時排除指定的路徑)。
必須且只能選擇一種方式。
路徑
輸入要包含或排除的路徑。
單擊添加可以添加多個路徑。最多允許添加10個。
配置示例(以包含條件為例):
添加
img/test_
,表示只掃描Bucket中以img/test_為前綴的文件。如果要掃描的文件在特定目錄下,您可以在文件名前加上目錄路徑,以整體作為前綴。例如,您要掃描的文件在img/202011目錄下,且前綴為test_,您可以添加
img/202011/test_
作為路徑。
時間范圍(必填):設置文件上傳時間范圍。內容安全只掃描在指定時間范圍內上傳的文件。
然后單擊下一步。
配置檢測場景。
OSS違規檢測為您提供8個推薦配置,每種推薦配置包含大類場景(圖片、視頻、語音)和細分場景(每種推薦配置的細分場景均不相同)。如果推薦的配置與您業務不符,您可以關閉或者開啟大類場景,但不支持修改細分場景。
然后單擊下一步。
配置掃描范圍。
掃描范圍根據您配置的檢測場景顯示。例如,您只勾選圖片,那么只顯示圖片的配置信息。如果當前配置與您業務不符,您可以自定義掃描范圍。
說明至少選擇一類檢測場景進行掃描,即圖片、視頻、語音中至少開啟一項。
表 2. 掃描配置參數說明
掃描范圍
配置項
說明
圖片
圖片掃描上限
掃描的圖片張數默認為10,000張/Bucket。如果設置了掃描上限,掃描數量超出限制后將會停止掃描,因此會存在巨大違規圖片外露的風險。常規情況下,不建議您設置掃描上限。
檢測無后綴文件
開啟檢測無后綴文件后,會掃描無后綴的圖片文件,檢測速度會降低,根據HTTP頭的content-type判斷是否為圖片,支持content-type有:image/jpg,image/jpeg,image/png,image/gif,image/bmp,image/webp。
視頻
視頻掃描上限
掃描的視頻個數默認為1,000個/Bucket。如果設置了掃描上限,掃描數量超出限制后將會停止掃描,因此會存在巨大違規視頻外露的風險。常規情況下,不建議您設置掃描上限。
截幀頻率
截幀頻率默認為1幀/秒,您可以設置截幀頻率(每多少秒截取一幀)。取值范圍1~60幀/秒。截幀頻率越高,識別準確率越高。
單視頻幀數上限
單視頻幀數默認為200幀,您可以設置單個視頻的最大截幀數量。取值范圍:5~20,000幀。
單視頻大小上限
單視頻大小默認為500 MB,您可以設置單視頻大小上限,取值范圍:1~2,048 MB,超過部分不會被檢測。
語音
語音掃描上限
掃描的音頻個數默認為1,000個/Bucket。如果設置了掃描上限,掃描數量超出限制后將會停止掃描,因此會存在巨大違規音頻外露的風險。常規情況下,不建議您設置掃描上限。
單音頻大小上限
單音頻大小默認為200 MB。您可以設置單音頻大小上限,取值范圍:1~2,048 MB,超過部分不會被檢測。
然后單擊下一步。
可選:其它。在回調通知區域,您可以選擇一個已有的回調通知方案,通過指定的通知方案接收存量掃描的結果。
您必須先創建回調通知方案才可以進行設置。如果您未創建過回調通知方案,可以單擊新增通知方案去添加通知方案。具體操作,請參見配置消息通知。
在頁面最下方,單擊提交。
OSS違規檢測功能會根據您的配置為您預估出掃描費用的上限,您可以根據實際業務選擇按量付費或者資源包抵扣方式。
然后單擊確定。
存量掃描任務提交后,將立即開始掃描。掃描所需時間取決于存量文件的數量和開啟的掃描場景。您可以在存量掃描任務列表中查看當前任務的狀態。
OSS違規檢測為您提供如下功能。您需要根據實際需要,選擇合適的操作。
暫停掃描
如果您因為其他原因,需要暫停掃描任務時,單擊操作列暫停掃描。只有掃描任務未結束時可以執行該操作,支持掃描任務暫停后7天內可以繼續掃描。
數據統計
如果您需要查看當前任務的調用量統計信息,單擊操作列數據統計,進入OSS違規檢測調用量頁面,查看最近7天的調用量。您可以設置掃描的時間、任務等條件自定義查詢統計信息。
終止掃描
如果您不再需要掃描當前任務時,單擊操作列終止掃描,終止掃描后存量的文件將不再執行掃描動作。只有掃描任務未結束時可以執行該操作。
掃描結果
如果您需要查看當前任務的掃描結果,在操作列選擇
(任務未掃描完成)或者單擊操作列掃描結果(任務已掃描完成)。您可以設置掃描的時間、任務等條件自定義查詢結果信息。查看配置
如果您需要查看當前任務的配置信息,在操作列選擇
(任務未掃描完成)或者單擊操作列查看配置(任務已掃描完成),展開任務配置詳情面板查看。用量說明
如果您需要查看當前任務的用量,在操作列選擇
,展開任務用量說明面板查看。
步驟二:查看掃描結果
OSS違規檢測服務為您提供查看掃描結果的功能,當您完成增量掃描任務后,您可以隨時在內容安全控制臺查看掃描結果,并根據檢測結果執行自助審核。
在存量掃描頁面,查看您的任務概覽、任務狀態以及任務結果。
單擊操作列掃描結果,查詢掃描結果并進行自助審核。
默認顯示最近7天的掃描結果和處理的違規內容。您可以設置掃描范圍篩選,導出掃描結果。少于50條記錄時將導出所有結果,否則只導出違規和疑似違規的結果。
說明通過單擊掃描結果的圖片或視頻,可以查看詳細信息,具體包括文件創建時間、Key值(OSS掃描的文件名)、所在Bucket。
如果掃描結果不符合您的業務需要,您可以對掃描結果進行自助審核,自助審核包含如下操作:
違規并刪除
通過單擊違規并刪除,可將圖片或視頻從內容安全控制臺和OSS Bucket中一并刪除。支持單選或者多選。
正常并忽略
通過單擊正常并忽略,則忽略該檢測結果。忽略后該圖片或視頻將不再在控制臺展示,并不影響存儲在OSS Bucket中的圖片或視頻。支持單選或者多選。
正常并解凍
若您設置了自動凍結功能,則還可以在選中圖片或視頻后單擊正常并解凍,將已凍結的圖片或視頻解凍。
您可以搜索您重點關注的結果,或者將掃描結果導出進行查看(少于50條記錄時將導出所有結果,否則只導出違規和疑似違規的結果)。
步驟三:查看統計數據
OSS違規檢測服務為您提供數據統計功能,當您完成存量掃描任務后,您可以隨時在內容安全控制臺查看數據統計信息。您可以通過監控一段時間的統計數據,根據網站的之前數據的違規情況,對網站的存量內容加以調整。
在存量掃描頁面的操作列,單擊數據統計。
在數據統計頁面,通過單擊圖片、視頻和語音頁簽查看最近7天掃描的統計信息。
支持查看的數據統計信息如下表所示。
查詢對象
支持的統計信息
圖片
圖片總量:表示檢測的圖片總數量。
鑒黃場景檢測量:包含違規、疑似、正常結果的數量。
暴恐涉政場景檢測量:包含違規、疑似、正常結果的數量。
廣告場景檢測量:包含違規、疑似、正常結果的數量。
不良場景檢測量:包含違規、疑似、正常結果的數量。
視頻
視頻總量:表示檢測的視頻總數量。
截幀總量:表示檢測的視頻截幀總數量。
鑒黃場景視頻量:包含違規、疑似、正常結果的數量。
暴恐涉政場景視頻量:包含違規、疑似、正常結果的數量。
廣告場景檢測量:包含違規、疑似、正常結果的數量。
不良場景檢測量:包含違規、疑似、正常結果的數量。
語音反垃圾檢測量:包含違規、疑似、正常結果的數量。
語音
語音總量:包含違規、疑似、正常結果的數量。
語音總時長:包含違規、疑似、正常結果的數量。
語音反垃圾檢測量:包含違規、疑似、正常結果的數量。