正在阅读:虎牙AI弹幕大不同:从视频到直播的进阶虎牙AI弹幕大不同:从视频到直播的进阶

2018-11-09 17:58 出处:其他 作者:佚名 责任编辑:linshaomin
  近日,游戏直播平台虎牙正式上线了AI智能弹幕功能。该功能采用了AI人景分离技术,用户在虎牙观看直播时,只需要在弹幕设置中选择后,弹幕就会自动躲避人像,呈现出从人体身后穿过的效果,成功解决了弹幕遮挡人脸影响观看体验的问题。
 
  据了解,此前B站也推出类似的“不挡脸弹幕”,用户在点播一些特定的视频时,里面呈现的弹幕会与主播分离。这看似相似的功能里,其实大不同。

 
  针对两者的不同,虎牙相关负责人表示:“首先与B站在已有视频上‘离线’(Offline)处理不同,虎牙是针对直播‘实时’处理。此外B站采用类似PS蒙版技术,人工为特定视频添加蒙版;而虎牙采用的是人景分离技术,让人物与场景分离,让弹幕在人物之后,场景之前。与此同时,AI智能弹幕与传统直播弹幕相比,几乎不增加带宽,而在视频点播的话需要大量的流量来支撑弹幕传输。”
 
  而对于AI弹幕背后的技术原理,虎牙相关负责人也给出了详细的解释:“该功能主要基于智能识别人像和人像掩码的智能解锁两个技术点,利用AI技术 识别出 ”人像“区域像素集掩码(mask),把掩码用智能压缩技术压入视频流,观众端再把掩码跟视频帧同步解压。帧跟掩码一一对应,就能识别帧中人像精确位置。”
 
  值得一提的是,相对于视频而言,直播因其实时性和交互性的特点,使得弹幕的重要性更为突出。弹幕不仅是观众抒发感受的载体,同时也是粉丝和主播互动主要方式。直播过程中弹幕的数量和质量反映了主播和直播内容的受欢迎程度。比如虎牙最近圆满落幕的自制赛事天命杯期间,虎牙主直播间日弹幕人数最高25万,弹幕总量达到280万,直接使得该直播间订阅数增长24万,弹幕的重要性不言而喻。
 
  而此次虎牙 “AI智能弹幕功能”的推出,也将直播弹幕带入智能识别的新阶段,开创了直播行业运用该类技术完善用户体验的先河。这也是AI技术赋能直播行业,将AI人景分离技术首次运用到直播中,在弹幕功能上的一次积极探索。目前产品功能已经正式在虎牙直播秀场、二次元板块上线,未来还将探讨将该技术运用在游戏直播中,例如《绝地求生:大逃杀》中展开。

关注我们

最新资讯离线随时看 聊天吐槽赢奖品