登陆注册
50152100000192

第192章 人景分离

每一次挫折,都是一次新的机遇。

眼下的白垩纪正是如此,在吃瓜网民的注视下,白垩纪顺势发起对流量户的名誉权反诉讼,并借势开始招募线下加盟商,布局线下销售行业。

紧跟着,白垩纪发布了Android操作系统版本2.02,新的操作系统中剔除了企鹅的两款语音聊天工具,新加入了天猫商城APP。

企鹅立马发起了不正当竞争诉讼,白垩纪直接就发了声明:结束合作,赔钱退股!

反正就是不想跟你玩了。

(流量户这一设定参考腾百和几个手机的合作历史和诉讼史,我感觉我又走在了404的边缘,李飞飞千万保佑我……)

白垩纪下一代手机战略,在具体机型有了目标后,整体战略也多了一个目标:实现盈利,尤其是在高端手机上,增加差异化,提高利润比。

对高通的诉讼,一时半会儿也出不了什么结果,着急也没用。工作组来了几天,调查盘问了一些问题,又取走了一些资料,表示接下来还会对其他手机和生产单位调查取证,而后就走了。

即使知道工作组和国产手机在利益上是“一家人”,但是还是要有事实依据,最终拿证据说事的。

天网的开源计划定了,霍蓓蕾的“任性”是一方面,也有一些出于其他方面的考量。

随之而来的开发人员不足的问题,却是让人觉得头都大了几圈。

移动式机械手的研发还是要继续进行下去的,哪怕研发速度减缓,还是不能停,这关乎到天网的“饭碗”问题。

其他的许多动作,只能被迫停下来了,这里面就有关于连杆机械足的研发计划。

而保留下来的项目,除机械手外只有一个,仍然还是视觉领域的项目:人景分离。

再具体一点:视频场景的人景分离。

更具体一点:为新A站打造人景分离弹幕。

技术本身不复杂,仍然还是基于神经网络的深度学习。

一个完整的视频网站或者直播网站,其技术流程包含了采集、处理、编码、封装、推流……还需要了解RTMP等协议、H264等格式,掩码(mask)……

以上都是唬人玩的。

视频网站的真实开发场景就是客户端一套代码,服务端一套代码,按照规范和手册做下来即可。有些东西并不需要特别深究,是前人已经封装好的。保护脑细胞健康,从忽视原理开始。

卡住中小企业的关键问题之一仍然还是服务器架构问题,这里面cdn的运用和服务器分发规则等负载均衡问题算是个学问。

就视频本身而言,其本质仍然还是图片,以快速刷新屏幕的方式,欺骗人的视觉,让人以为视频中的人物和场景在移动,而直播则是被分割成的一个个短小视频的衔接。

视频中的每一张图片被称之为“帧”。

既然是图片,那么神经网络和深度学习这对组合,就能够派上用场了。

对大量包含人物的样本图片进行监督学习,可以得到关于人物轮廓的特征库以及语意库,作为分离标准。

对静动像素的神经网络进行算法分析,可以得到需要处理的目标区域。

此外还有远近景的区分等等,这又是一个长长的课题清单。

监督学习和深度学习不再表述,总之这就是个黑盒模式。黑盒就是人类看不懂也无法解释的意思,其过程是个有目的的随机碰撞的过程,依赖于高速GPU的计算能力。

静动分析更好说,如果图片四角是静止的,那么目标可能就是动的。如果图片四角是移动的,那么目标可能是静止的。

远近景就不说了,有些时候并不是所有图片中动的物体都需要切割。

这里面临一个问题:英伟达支持AI计算的显卡目前还没发布,所以这一项目想要实现,仍然还是依赖于服务器。

所以整个项目流程被定为,AI服务器从新A站服务器得到视频数据,将视频数据解码变为图片集,对像素进行标记,处理好的图片集再次打包成视频吐回服务器,视频网站设置对应的人、景、弹幕三者的z-index,在网站上和移动端把弹幕置于人景之间,最终呈现给用户的就是一个人景分离的弹幕了。

因为依赖于服务器的原因,算力是有限的,能从这一项目得到受惠的up主必然不会太多。因此这一成果将用于吸引优秀up主加入,作为优秀视频的奖励。

当然这些扯远了,眼下八字还没一撇。好端端的突然跳到这个科研树,原因是因为需要强化语意分割。

语意分割,其目标是知道图片中的物体是什么。

以微软识图为例,一张绿草如茵的图片,可能会被识别为“羊”。原因是,有关羊的训练库都和草地有关,所以看到草地,计算机就会自动认为这是“羊”。这就是无语意分割。

语意分割就是要搞清楚,“羊”是什么,“羊”长什么样,“羊”在哪。

机械手识别商品并进行抓取,用到是就是有语意分割的深度学习神经网络,但是存在着一些缺陷。

新开的这个项目就是为了强化语意分割的概念,进一步增加对图片的辨识度,并为图片中的物体赋予含义。

并不涉及到未知技术,叶晓奇也没打算插手。人景分离项目继天网课堂的人脸识别项目后,成为了新的可选实训项目。而人景分离,也将为天网课堂的考核教程提供素材。

叶晓奇点了一个人,做这个项目负责人,老实巴交的刘浩然,上一次刘浩然的展示给叶晓奇留下了深刻的印象。

校企合作那边也相应的提了要求,近期需要侧重提供包含人物的图片,以供学习。

(这个技术的灵感来源是b站的蒙版弹幕,早在蒙版弹幕出来的时候我就在搞这个玩了,FNC在这方面做的很好,再后来发现可以不用这么玩,谷歌在2月份发布了deeplabv3+可以直接做这个东西。这个技术真的很简单,当下的条件,一个人就能写了,只是跟团队比起来会有效率高低开发快慢的不同,具体用到的工具和库也会不一样,有几个库可供选择,效果也不一样。到目前为止,本书中出现过的东西,都是现实里已经有的。AI弹幕,按道理来说,其实早就应该有了,可能是研发AI的企业关注点都在别的方面,比如汽车和VR什么的,所以拖到2018年才有。未来,本书也许会略带科幻元素,原则仍然还是以现有技术能否实现为基准,不会科幻的很离谱。)

同类推荐
  • 佛城因缘

    佛城因缘

    女友田媖生日这天,安涌灏本打算炫耀一番。突如其来的意外不仅在田媖心中留下痛楚的阴影,两人的关系也告一段落。当安涌灏回老家临水休学了一年,再次回到须埠时,一个清纯的女孩偶然走进他的生活。随着交往,安涌灏发现,在女孩非同寻常的身世背后,还有一连串连她自己也未曾察觉的谜团,而那些谜团竟隐约指向田媖生日那天的突发事件。围绕这些谜团的人,竟和文物走私,象牙猎杀有着纠缠不清的关系……与此同时,美国回来的干练青年高翯被聘请到宏万集团担任高管。他与一个神秘合作者有着不同寻常的关系。在扫除公司一名内奸后,他还要面对一个犯罪团伙安插在公司的眼线……善与恶,爱与恨。在这个历史悠久的城市,因与果的剧目将不断上演……
  • 遇见地质美景

    遇见地质美景

    大山说:“人弃你于地下,我视你若宝藏!”小萌说:“丢我进湿冷死亡洞穴?我当到暖阳洞天旅行!”意外掉进死亡岩洞里,他与她在地下相遇,因祸得福,获得感知距离大小和影像记忆的天赋技能,走出山洞,走出山村,游四方,看世界,长见识,施展天赋才华,在地质美景中找到人生的温暖!
  • 都市最强医圣

    都市最强医圣

    刚刚大学毕业不久的医师韩磊工作业绩很差,在一个晚上他意外的获得了一位修真者的真元,由此学会无上医术并拥有了透视眼,他一次次施展神奇的医术,成为了启东市妇孺皆知的神医,也获得了众多美女的青睐,名利色三收,不但成为医生中的尊者,更借真元之力修得无上法术。
  • 最强打工平台

    最强打工平台

    因为顶级文明的扶贫政策,高小言过上了每过一段时间都要背井离乡的到外星球务工的日子,政策我支持,但是能不能有点生存保障?这是一个通过让自己进步从而改变世界的故事。
  • 都市护花兵王

    都市护花兵王

    绝世天兵金锐回归故乡,开启一段最燃最爆最激情的旅程!刺客高手靠边站,特工保镖闪一边。你拯救的是目标,我拯救的是地球。蓝水星的守护者,人类最后的防线。至尊无上,绝世天兵!荣耀归来!蓝水星有我!
热门推荐
  • 混灵邪帝

    混灵邪帝

    王南偶得一本功法,从此开启神道之路,身化混沌,俯视苍生,君临天下,成就一代天帝。
  • 大学生就业指导与创业教育

    大学生就业指导与创业教育

    本书旨在帮助和指导高等职业学校的学生树立正确的择业观和创业观,在思想上做好自主谋业、自主创业的精神准备,学习掌握一定的求职就业及开拓创业的知识、技能和方法。本书的内容主要包括大学生就业概述、就业准备、心理调适、面试技巧、创业实践等内容。本书力求从大学生的实际出发,将系统性、知识性、理论性、实用性和可操作性融为一体。可以帮助大学生全面了解就业指导的历史、意义、内容和方法,提升大学生的就业能力和综合素质,为就业和创业做好充分的准备!
  • 许个未来给你

    许个未来给你

    米芒是坚定的不婚族,但奇怪的事发生了。她结婚了。“我没看错吧!”闺蜜艾朵拿着小红本本,除了惊讶还是惊讶。结婚证上确实写着米芒和许未梾的名字。……婚后米芒发现了一个秘密,她被许医生骗了。
  • 曾经擦肩而过的季节

    曾经擦肩而过的季节

    这是一本青春励志小说,有初入大学时的茫然,追逐梦想时的兴奋,与舍友编织未来的美好。小说以主人公的视角,写出了80后多姿多彩的校园生活。然而,四年之后,蓦然回首,才发现青春已经远去。
  • 我的师父太无敌

    我的师父太无敌

    无敌的定义是什么?只是很强吗?不,那是非常强,强到什么程度?强到一眼可碎星辰,一剑可开天地,哪怕所谓的神明在她眼中亦是一剑可诛,但无敌也会寂寞,直到宇宙万界出现另一种生灵——聻。
  • 天行

    天行

    号称“北辰骑神”的天才玩家以自创的“牧马冲锋流”战术击败了国服第一弓手北冥雪,被誉为天纵战榜第一骑士的他,却受到小人排挤,最终离开了效力已久的银狐俱乐部。是沉沦,还是再次崛起?恰逢其时,月恒集团第四款游戏“天行”正式上线,虚拟世界再起风云!
  • 色与戒:中国情人

    色与戒:中国情人

    在荒原般的城市里,青梅竹马的爱情终究败给现实,当“老总”、“教授”、“高官”粉墨登场,她成为他们的“情人”。不要去追问香兰和几个男人之间是怎样的感情,也不要去追问她爱过谁、没爱过谁,当眼见的都是支离破碎时,这些都不再重要。这部小说最大的追求在于对爱情的叩问、对人性的反思,在于探讨性格与社会环境驱使下,一个既坚强又脆弱、既善良又邪恶的女人如何迷失在万丈红尘中,又如何艰难地自我救赎。作者希望你能挽救这个女人,从流言蜚语和对社会道德的不断越矩中,解救出一个用深沉的忧郁和疯狂的表演来刺痛这个世界的女人,一个揉碎了爱情以探知生命底线的正在归途的女人。
  • 替身代嫁:昭阳公主

    替身代嫁:昭阳公主

    母妃曾言,她是她梦阳入怀而生的,所以父皇赐她封号昭阳。可是随着母妃一朝被贬,等待她的命运就是冷情阁里的艰难岁月。她,是帝王的第一宠妃。家国三千里,深宫二十载。一声何满子,泪湿沾满襟。这就是她半生的写照。为了让哥哥步上皇位,她可以耍尽手段与心机。为了妹妹的心愿,她可以出让自己的爱人。从此,一个帝国的殊荣,就在她的裙袂飞扬之际。可是繁华落尽,能守住的又是什么呢?权力?亲情?爱情?
  • 宠妻至上

    宠妻至上

    如果上天允许,他会从她五岁一直宠她到一百零五岁。这样,她下辈子就会记得他的好,不会再如今生一样,晚了十年才来到他身边。爱情本就是霸道,毫无道理可循的。这是一个外表萝莉的娃和致力于宠坏萝莉的大叔的甜蜜故事。
  • 九龙逆空

    九龙逆空

    他是神王九子琉光,因为私下凡人界,擅自修改凡人命格,而被变下凡人界重修金身。离去时,他说,“我说过,当我琉光归来之时,八荒六合,唯我独尊!你们容不下我。没关系!容不下我的人,杀!《法典》容不下我。没关系!我要重造《法典》!”