Facebook釋出了一個名為“從影片中學習”的專案。它使用人工智慧來理解和學習社交網路上公開使用者影片中的音訊、文字和視覺表示。從影片中學習有很多目的,比如改進 Facebook 與內容推薦和政策執行相關的 AI 系統。雖然該專案處於早期階段,但已經結出了果實。
Facebook 表示,它已經利用這項技術來增強 Instagram Reels 的推薦功能。比如將人們在相同的音樂下跳相同的舞蹈的影片顯示出來。該系統在語音識別錯誤方面也顯示出了改進的結果,這可以加強自動字幕功能,使其更容易檢測影片中的仇恨言論。
Facebook 表示,該專案將幫助人工智慧研究人員避免依賴有標籤的資料,這是構建與人類學習方式相似的系統而努力的一部分。因此,“從影片中學習”將啟用全新的體驗,除了一個可能的功能,該公司沒有透露更多細節。
該功能將允許人工智慧找到數字記憶,包括由增強現實眼鏡捕捉的記憶。例如,你可以要求這樣一個系統向你展示“每一次我們給奶奶唱歌”,它可以顯示這些片段。值得注意的是, Facebook 正在研發自己的智慧眼鏡。
該公司表示,該專案正在研究來自幾乎所有國家的數百種語言的影片。該專案的這一方面將使人工智慧系統更加精確,並使它們能夠“適應我們快速變化的世界,識別不同文化和地區之間的細微差別和視覺線索”。
Facebook表示,當談到從影片中學習時,它會考慮隱私問題。“我們正在建立和維護一個強大的隱私基礎,使用自動化解決方案,以加強隱私的規模。透過在基礎設施層面嵌入這項工作,我們可以在系統中始終如一地應用隱私需求,並支援人工智慧等。這包括在整個資料生命週期中實施技術保障。”蘋果公司在一篇部落格文章中寫道。
理解影片中發生的事情對人工智慧系統來說是一項非常困難的任務。其中可能包括背景噪音等障礙,使人難以理解語音和語言轉換。然而,在啟動“從影片中學習”專案不到一年後, Facebook 正在把系統學到的東西應用到其他領域。
最近 Facebook 宣佈,現在將允許其內容創作者為其短影片內容投放廣告。他們在一篇博文中表示,他們的目的是幫助內容創作者在平臺上實現收入多元化。“內容創作者(如數字酒吧、影片創作者、遊戲創作者、媒體公司、文化機構、各種規模的企業等等)在 Facebook 上建立充滿活力的社群。我們希望他們擁有賺錢和茁壯成長所需的工具和支援。無論創造和分享內容都是一項主要業務,不僅是眾多收入來源之一,還是在疫情期間維持業務的生命線。”