输入您感兴趣的主播昵称,查询数据…

直播行业数据调研报告

站内及定制化广告投放

直播大数据咨询

商务活动通告

主播招募推广

公会管理工具定制

寻求报道及投稿

如果您想寻求以上服务或其他服务,请联系:谢先生发
tel:18627079303 email: 303490126@qq.com
请注明公司名称、联系方式、具体合作需求,我们将在24小时之内尽快与您联系。
我知道了
QQ好友 QQ空间 微信好友 新浪微博 评论
虎牙率先推出直播弹幕黑科技,不挡脸的AI弹幕了解一下?
平台 |  2018-11-13   | 来源:原创   | 阅读:3648
01

大气、排面、老铁、扎心了、前方高能、素质三连、666、2333…

看到这些词语,你会联想到什么呢?其实许多类似网络语言,很多都是发源于直播中的弹幕,经过网友的发酵传播,成为一个个的网络热词。

有水友曾经说过,没有弹幕的直播索然无味。吐槽文化作为网络文化中特有现象,深受新世代用户喜爱。那么弹幕到底发源自哪里,未来又会如何发展呢?

通过检索网上的资料发现,弹幕视频系统源自日本弹幕视频分享网站(niconico动画),当时的弹幕叫做“live comment”(实时动态评论)。国内首先引进者为AcFun(内容大众多元)以及后来的bilibili(二次元向弹幕网)以及各大直播平台。弹幕模式在日本兴起的直接原因是当时日本的动画和视频制作资金紧张。

当时日本自制视频拍摄环境简单,同时日本产动画普遍帧数少,经常是只有在说话的人才有动作,其他人和背景全部静止。单位时间内传递信息量低,导致视频信息量远低于人脑处理上限,客观上给弹幕留下了信息量空间。同时单看视频相对无聊,弹幕正好在主观上补充了趣味性。

这在直播兴起前的日本,直接帮助日本本地视频网站niconico,以相比YouTube更低劣的画质体验的前提下依旧短时间胜出竞争。

其实说到底弹幕文化就是孤独的每个人,在选定的欣赏作品之上,温暖玩梗的交流和表现方式。

发展到后来的直播弹幕,作为一对多信息输出方式,提供了主播和水友的即时反馈途径。直播弹幕一般分为两类:一种体现是我是狂欢中的一份子,另外一种是尝试带领一波其他弹幕,这其中就很容易形成各种如文章开始的特殊词语,从而形成特殊的弹幕“梗”文化。

好的弹幕文化可以使内容得到提升,带来更高的用户粘性和参与度,因此也能增加直播平台对主播的溢价空间。

02

1、弹幕虽好,然而遮挡却很烦恼

在大主播的直播间,常常会出现高密度的弹幕;高密度弹幕会遮挡住主播,对于希望看到主播的用户来说是一种干扰,而关闭弹幕又让用户无法看到精彩弹幕内容,并且无法与其他用户进行互动交流。

为了改善这种现状,许多视频企业开发出了精简弹幕,半屏显示以及调节弹幕透明度等多种手段,但这些依然不是最完美的解决方案。

问题的解决有时候需要应用新的技术。

2018年11月8日,虎牙直播官宣了其推出的直播黑科技,号称不挡脸的“AI弹幕”。目前此功能已经正式在虎牙直播秀场、二次元板块上线。

什么虎牙直播的“AI弹幕”,举一个例子来帮助理解。

就在几天前,有着香港四小天王之称,在影视剧《乌龙闯情关》中饰演刘病已的孙耀威在虎牙的直播间中现身说法,亲自介绍了虎牙开发的这一新功能,让网友们夸“黑科技”“666”。

如下面的图片所示,在开启相关设置之后,弹幕可以从主播孙耀威的“身后”飘过。用户使用该功能后,既能够看到弹幕进行互动,又不影响观看主播的表演,弹幕能识趣不遮挡主播的身体,因而也被不少网友称为“识趣弹幕”。

孙耀威直播展示“AI弹幕”

难道是这些弹幕真的有“智慧” 吗?显然其背后AI识别黑科技发挥了作用。

直播观察从虎牙直播相关人士了解到,虎牙的不挡脸“AI弹幕”利用人景分离技术,实时识别真实场景中的人体,使弹幕从人的“身后”飘过。

AI弹幕主要有两个技术点:

1、智能识别人像;2、人像掩码的智能压缩。利用AI技术识别出“人像”区域像素集掩码(mask),把 “掩码”用“智能压缩技术”压入视频流,观众端再把“掩码”跟视频帧同步解压。帧跟掩码一一对应,就知道帧中人像精确位置。

虎牙主播AI弹幕演示

虎牙AI识别技术领先的地方,通过人工智能的深度学习技术,实现了2大技术革新——实时识别+精准识别。通过AI人工智能,实时地沿着人体的轮廓将人像图层分割出来,从而实现弹幕从人身后穿过的特效。

虎牙在实时识别领域,单品类每秒可以做到100+内容识别,同步实现场景识别(跳舞),语音识别(唱歌),视频结构化分析(吃鸡游戏游戏)等多项黑科技,保证延迟控制在5秒以内的行业领先水平,精准识别可以达到95%以上识别率。

2、‘实时’处理远高于离线处理

说到弹幕遮挡,其实B站也有类似的功能。用户在开启此功能之后,也可以实现类似的弹幕从主播“身后”穿过效果。然而直播作为要求极高的内容形式,‘实时’处理难度远高于“离线”处理。

据虎牙技术人员介绍,与B站在已有视频上“离线”(Offline)处理不同,虎牙是针对直播‘实时’处理。B站采用类似PS蒙版技术,人工为特定视频添加蒙版。

B站已有视频弹幕:给观众一种“实时互动”的错觉。用户在不同时间发布弹幕,会在视频中特定的一个时间点出现;虽然有相同的主题,在参与评论时就会有与其他观众同时评论的错觉,而没有“实时互动”的感觉。

虎牙主播AI弹幕演示

虎牙采用人景分离技术,让人物与场景分离,让弹幕在人物之后,场景之前,并非是普通的嵌套。此外,AI智能弹幕与传统直播弹幕相比,几乎不增加带宽,而B站在视频点播的中需要大量的流量来支撑弹幕传输。”

3、AI加直播,未来产生更多可能

据虎牙直播技术负责人介绍,虎牙已经开始研究和应用AI技术,涉及内容生产、分发、消费、商业变现等几个环节,AI技术已经在这些关键环节都有尝试和落地。

AI技术对于直播行业,前期主要的贡献在于提升内容分发的效率,后面会进一步变革直播内容的生产方式,提升生产效率。AI的核心技术包括语音识别、图像识别、自然语言处理,虎牙后面会进一步把这些技术落地到直播视频中的生产和分发中。

随着AI背景分割技术的发展,虎牙还在进一步研究AI弹幕在游戏直播中落地的可能性。如果有足够的多的特定场景的物体和背景的训练样本,不管是真人主播还是虚拟形象,都有可能达到同样的效果。一旦此技术成熟:你甚至可以在“绝地求生”直播中看到弹幕从游戏人物身后穿过或者弹幕从某个旋转跳舞的虚拟二次元主播身后穿过。

03

直播观察从据虎牙直播相关人士了解到,为了观众体验,虎牙直播在技术层面一直在不断探索,以技术驱动运营,提升观众体验。

除了本次推出的弹幕黑科技,此前虎牙技术创新之举频频,例如在6.0版本更新时实现了AI智能识别,在唱歌、跳舞内容中,提供热舞中、唱歌中标签,吃鸡类游戏(刺激战场、绝地求生、堡垒之夜等)提供击杀实时数量标签,方便用户识别,避免错过精彩内容。

在观看体验方面:2014年,虎牙推出1080P高清码率直播服务;2016年,启用HTML5直播技术,让用户可以享受到秒开的畅快体验;2017年,与英特尔达成战略合作,推出蓝光画质;2018年,虎牙率先推出20M蓝光,成为游戏直播平台最高传输码流。

在刚过去的英雄联盟S8决赛之中,虎牙也以快10秒的传输速度+蓝光秒开技术帮助众多粉丝,更快的见证了LPL的夺冠瞬间。

04

真正的改变,从来都是不露声色!虎牙正在用技术驱动着运营,用AI为直播赋能,成为直播行业技术创新探索者。科学技术是第一生产力,直播观察也持续关注直播领域新技术的发展,为广大读者带来最新报道。  

返回顶部