阿里研發(fā) AI 黑科技,有望替代人工鑒黃師
互聯(lián)網(wǎng)內(nèi)容越來越朝著視頻化方向發(fā)展,短視頻處于爆發(fā)期,一些不法分子試圖利用視頻風口牟利。3月底,深圳警方打掉了一起以短視頻APP為載體,大肆從事淫穢傳播、網(wǎng)絡****博以及網(wǎng)絡詐騙等犯罪活動。
最近,阿里安全圖靈實驗室發(fā)布了一項關于社會文化的研究,這是一種新型視頻描述方法(SGR),可用于視頻內(nèi)容安全和視頻檢索等場景,助力建設互聯(lián)網(wǎng)清朗環(huán)境。該研究成果已經(jīng)被人工智能國際頂會CVPR2021(oral)收錄。
讓AI做“閱讀理解”
現(xiàn)有的密集型視頻描述生成方法采用自底向上的方式,即先生成大量的事件候選片段,再為每個片段獨立的生成描述,從而組合得到密集型視頻描述。然而,視頻中事件具有很強的多樣性,既可以簡單到是一個動作,也可以復雜到是若干事件的組合,這導致事件候選片段的生成目標不明確,對應的密集型描述不夠連貫和準確,且充斥著大量冗余。
對此,研究者提出了自頂向下的密集型視頻描述方法,即SGR。
SGR可以實現(xiàn)兩類基本功能,一是讓AI對視頻內(nèi)容做“閱讀理解”,生成一段長文本描述視頻中心內(nèi)容,二是可以根據(jù)描述性的文本精準匹配視頻中的相關片段。
此前,必須人工定義關鍵詞詞庫后才能“指揮”AI命中檢索,這項AI技術的目標是僅通過輸入自然語言就能實現(xiàn)檢索,對AI“說句話”,就能找到相應片段。
“視頻中如果有人拿起鼠標,點擊電腦,然后脫掉衣服,呈現(xiàn)黃****毒等相關違規(guī)信息,以前的技術路徑上,AI可能還要分析脫掉衣服之前的動作,其實拿鼠標和點擊電腦與后面的違規(guī)內(nèi)容沒什么關聯(lián),無需提取這些信息?!痹撗芯康谝蛔髡?、阿里安全圖靈實驗室實習算法工程師青崧介紹道。
SGR解決了這個問題。給定一個視頻,AI可對視頻的關鍵候選片段無縫銜接成一個完整的故事,保證了密集型描述的連貫性,且減少了冗余。
為了進一步增加視頻片段的描述細節(jié),研發(fā)人員設計了描述提升模塊,以初步得到的密集型視頻描述和視頻片段為基準,提出專用于描述質(zhì)量提升的強化學習策略,來生成細節(jié)更豐富的密集型視頻描述。方法結(jié)構(gòu)如下圖所示:
輸入一段視頻,本方法首先使用一個視頻編碼器()來為所有視頻幀提取表征。接著,段落****()根據(jù)視頻幀的表征生成一段由多句描述組成的段落。然后,由描述定位器()對段落中的每句描述在視頻中的發(fā)生時刻進行定位。最后,描述提升模塊,即描述****()接受由輸出的視頻片段描述和由定位出的視頻片段表征,并輸出細節(jié)更豐富的視頻片段描述。
該項研究的共同作者、阿里安全圖靈實驗室高級算法工程師雍秦介紹,雖然目前這個技術還無法做到“1分鐘講清楚一部電影”,但可做到“兩句話講清楚一個10分鐘以內(nèi)的短視頻”,這意味著通過該技術未來可迅速判斷整個視頻的關鍵信息是否包含黃****毒等違規(guī)內(nèi)容。
更快更準識別違規(guī)風險內(nèi)容
通過這兩個功能,AI能快速識別、準確定位違規(guī)片段,無需人類鑒黃師反復回看確認。
雍秦透露,在SGR技術研究基礎上,阿里安全近期還將研發(fā)低門檻、高可用的“鑒黃”AI工具,讓AI對視頻不同片段打出“危險指數(shù)”,依賴信息提取直接關聯(lián)高亮風險片段,讓AI鑒黃更智能、高效。
未來,在實際應用場景中,通過AI來進行不良內(nèi)容識別的研判準確性和效率將大幅提高,比如判斷視頻內(nèi)容中是否有“一個穿著暴露蘿莉裝的女孩鴨子坐著在錄吃播”,以往要形成“暴露蘿莉裝”“鴨子坐”“吃播”三個標簽,每次依據(jù)一個標簽進行一輪審核,判斷視頻內(nèi)容是否涉嫌低俗,三輪審核交叉驗證。創(chuàng)新工具應用后,AI只用輸入“一個穿著暴露蘿莉裝的女孩鴨子坐著在錄吃播”這句話進行一輪研判,準確性也更高。
圖說:阿里安全近期將研發(fā)低門檻、高可用的“鑒黃”AI工具,該圖為示意模型。
阿里安全圖靈實驗室資深算法專家華棠指出,阿里安全一直希望從源頭守護安全,這是阿里安全方法論“新一代安全架構(gòu)”的核心理念?!盎ヂ?lián)網(wǎng)上每天產(chǎn)生海量視頻,單靠人力無法維護互聯(lián)網(wǎng)清朗環(huán)境,違規(guī)視頻危及大眾心理健康和財產(chǎn)安全,創(chuàng)新算法可以有更多用武之地,構(gòu)建美好安全的網(wǎng)絡生活?!?/p>
作者簡介:鄧超睿,阿里安全實習生,阿德萊德大學一年級博士,主要研究視頻理解、圖像理解,物體檢測等方向,在TPAMI、CVPR、ECCV等學術期刊和會議上發(fā)表多篇文章,目前從事視頻物體檢測和檢索的研究工作,利用創(chuàng)新算法提升視頻內(nèi)容安全的審核技術。
*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點,如有侵權(quán)請聯(lián)系工作人員刪除。