成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

看與說同享 虎牙采用人景分離技術打造不遮臉智能彈幕

原創
人工智能 人臉識別
近日,游戲直播平臺虎牙發布了AI智能彈幕功能,滿足了用戶“看”與“說”同時進行的需求,當用戶在彈幕設置中選擇該功能后,彈幕就會自動躲避人像。也就是說,在直播過程中,用戶可以清晰的看到主播的整個臉以及整個輪廓。

【51CTO.com原創稿件】“(Dan)幕”這個詞源于射擊游戲,彈幕網站也源于此, Niconico視頻網站是相對較早擁有彈幕功能的網站。隨后,彈幕網站憑借共鳴性、易操作性,及人人都能享受的再創作娛樂化與對話語權等特性風靡。時至今日,我們在觀影、追劇、直播時,發彈幕已成為大部分用戶的行為習慣。常規彈幕目前實現了彈幕與視頻分離,用戶可二選一,很好的規避了彈幕滿天飛的混沌狀態。但在直播、二次元等諸多的場景中,用戶更希望在不壓縮視頻質量的情況下同時享受“看”與“說”。

自動躲避人像的彈幕

近日,游戲直播平臺虎牙發布了AI智能彈幕功能,滿足了用戶“看”與“說”同時進行的需求,當用戶在彈幕設置中選擇該功能后,彈幕就會自動躲避人像。也就是說,在直播過程中,用戶可以清晰的看到主播的整個臉以及整個輪廓。

虎牙AI產品總監徐子豪表示,在“大主播直播間、上電視玩法進行時”等場景下,常常會出現高密度彈幕的現象,高密度彈幕會遮擋住主播,對于希望看到主播的用戶來說是一種干擾,而關閉彈幕又讓用戶無法看到精彩彈幕內容且無法與其他用戶進行互動交流。為了改善這種現狀,許多視頻企業開發出了精簡彈幕、半屏顯示以及調節彈幕透明度等多種手段,但這些依然不是最***的解決方案。

虎牙直播采用背景分割技術,能較好處理人和背景分離,實現智能彈幕。這項功能在虎牙娛樂品類得以實踐,而在有效分割了游戲主角和背景方面,虎牙表示后續該功能會繼續在游戲品類進行嘗試拓展。

AI智能彈幕背后的那些技術

虎牙AI技術負責人吳曉東表示,AI智能彈幕功能背后有兩大核心技術,智能識別人像和人像掩碼的智能壓縮。

實時端上智能識別人像。實時端上智能人像動態識別的技術原理是利用計算機圖像分析、模型理論、人工智能及模式識別技術的非接觸性高端模式識別技術,從復雜的圖像場景中檢測出特征人臉信息,并進行匹配識別的智能分析過程。

人像掩碼的智能壓縮。 利用人工智能技術識別出 “人像”區域像素集掩碼(mask),把掩碼用智能壓縮技術 壓入視頻流,觀眾端再把掩碼跟視頻幀同步解壓。幀跟掩碼一一對應,就可以知道幀中人像的精確位置。

在專訪中,虎牙AI技術負責人吳曉東向我們介紹了AI智能彈幕功能的特點:

  1. 常規處理彈幕的做法是“離線(Offline)”和云上處理,需要面對的只是識別問題;而虎牙是針對直播進行實時端上處理;
  2. 有的網站采用類似PS蒙版技術,采用人工方式為特定視頻添加蒙版來模糊彈幕;而虎牙則采用人景分離技術,讓人物與場景分離,讓彈幕在人物之后,場景之前;
  3. AI智能彈幕與傳統直播彈幕相比,在幾乎不增加帶寬的前提下,把每幀的mask隨視頻流編碼。而常規方法在視頻點播的中則需要大量的流量來支撐彈幕傳輸;

用“黑科技“營造***用戶體驗

當問及識別、掩碼壓縮、幀與掩碼對應等一系列操作,尤其在直播環境下,運維方面是不是要花費很大精力,也就是說,怎樣確保用戶體驗不受到智能彈幕功能的影響?

虎牙AI技術負責人吳曉東這樣回答,端上對AI體驗***的影響是計算量。 在虎牙設計AI彈幕功能時,就考慮到了算力受限的問題。故把人像識別,mask編碼放在主播端進行實時計算,不會影響到用戶的體驗。在用戶端,僅需要增加計算解碼mask和mask掩碼生成,計算量非常小。但是涉及到AI背景分割技術,游戲直播中落地的可能性還有待研究。

當前,AI技術已經在直播行業內容的生產、分發、消費、商業變現等多個關鍵環節進行嘗試和落地。前期主要的貢獻在于提升內容分發的效率,未來則會進一步變革直播內容的生產方式,提升生產效率。AI的核心技術包括語音識別、圖像識別、自然語言處理,虎牙也會進一步把這些技術落地到直播視頻的生產和分發中。

直播行業發展至今,從“千播大戰”到“大浪淘沙”,再到“激烈廝殺”,直播平臺簽約頭部主播從來都不惜重金。經過很長時間爭奪,游戲直播市場格局逐漸穩定,AI智能彈幕功能更是為虎牙直播錦上添花。

【51CTO原創稿件,合作站點轉載請注明原文作者和出處為51CTO.com】

責任編輯:王雪燕 來源: 51CTO
相關推薦

2023-05-10 07:32:27

2019-09-12 15:03:44

2021-06-02 10:03:20

人工智能AI試點項目

2024-01-05 07:44:22

人工智能用戶隱私AI

2020-01-10 11:13:23

人工智能大數據IT

2022-07-07 10:11:37

人工智能物聯網

2023-06-25 14:33:10

人工智能AI

2020-06-23 10:47:39

人工智能AI技術

2019-09-10 10:14:34

Great Wolf人工智能IT領導者

2018-07-13 16:19:02

人工智能AI聊天機器人

2023-11-13 10:17:56

2022-06-13 14:10:26

區塊鏈貿易金融供應鏈

2021-07-23 09:53:02

人工智能機器學習技術

2015-03-27 10:09:28

WLAN建設高密度IoT技術

2022-01-07 08:59:51

企業團隊人工智能AI

2024-09-04 01:30:14

2022-02-23 14:37:55

區塊鏈技術數字化

2024-02-02 09:50:59

2022-10-14 11:10:48

人工智能智能建筑技術

2023-05-30 14:25:36

IT自動化人工智能
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 少妇一区二区三区 | 你懂的免费在线 | aaaa日韩| 国产精品成人一区二区 | 在线中文av | 天堂成人国产精品一区 | 一级欧美一级日韩片免费观看 | 成人高潮片免费视频欧美 | 国产精品亚洲视频 | 国产一区高清 | 91精品国产综合久久久久 | 久久黄色网 | 久久久久久高潮国产精品视 | 操视频网站 | 色综合色综合色综合 | 99久久久久国产精品免费 | 丝袜美腿一区二区三区动态图 | 天堂一区二区三区 | 午夜视频一区二区 | 国产1区2区3区 | 亚洲一区在线日韩在线深爱 | 国产精品一区久久久 | 特级丰满少妇一级aaaa爱毛片 | 北条麻妃一区二区三区在线视频 | 国产区精品在线观看 | 一区二区三区中文字幕 | 一级片av| 国产91在线 | 欧美 | 国产精品久久久久久久久久久免费看 | 国产高清视频一区 | 免费观看一级特黄欧美大片 | 国产精品一区二区日韩 | 欧美一级片 | 成年视频在线观看福利资源 | 欧美在线激情 | 欧美日韩精品 | 成人免费视频在线观看 | 久久精品成人 | 精品视频在线观看 | 久久精品在线 | 91资源在线观看 |