登陆注册
9086800000192

第192章 人景分离

每一次挫折,都是一次新的机遇。

眼下的白垩纪正是如此,在吃瓜网民的注视下,白垩纪顺势发起对流量户的名誉权反诉讼,并借势开始招募线下加盟商,布局线下销售行业。

紧跟着,白垩纪发布了Android操作系统版本2.02,新的操作系统中剔除了企鹅的两款语音聊天工具,新加入了天猫商城APP。

企鹅立马发起了不正当竞争诉讼,白垩纪直接就发了声明:结束合作,赔钱退股!

反正就是不想跟你玩了。

(流量户这一设定参考腾百和几个手机的合作历史和诉讼史,我感觉我又走在了404的边缘,李飞飞千万保佑我……)

白垩纪下一代手机战略,在具体机型有了目标后,整体战略也多了一个目标:实现盈利,尤其是在高端手机上,增加差异化,提高利润比。

对高通的诉讼,一时半会儿也出不了什么结果,着急也没用。工作组来了几天,调查盘问了一些问题,又取走了一些资料,表示接下来还会对其他手机和生产单位调查取证,而后就走了。

即使知道工作组和国产手机在利益上是“一家人”,但是还是要有事实依据,最终拿证据说事的。

天网的开源计划定了,霍蓓蕾的“任性”是一方面,也有一些出于其他方面的考量。

随之而来的开发人员不足的问题,却是让人觉得头都大了几圈。

移动式机械手的研发还是要继续进行下去的,哪怕研发速度减缓,还是不能停,这关乎到天网的“饭碗”问题。

其他的许多动作,只能被迫停下来了,这里面就有关于连杆机械足的研发计划。

而保留下来的项目,除机械手外只有一个,仍然还是视觉领域的项目:人景分离。

再具体一点:视频场景的人景分离。

更具体一点:为新A站打造人景分离弹幕。

技术本身不复杂,仍然还是基于神经网络的深度学习。

一个完整的视频网站或者直播网站,其技术流程包含了采集、处理、编码、封装、推流……还需要了解RTMP等协议、H264等格式,掩码(mask)……

以上都是唬人玩的。

视频网站的真实开发场景就是客户端一套代码,服务端一套代码,按照规范和手册做下来即可。有些东西并不需要特别深究,是前人已经封装好的。保护脑细胞健康,从忽视原理开始。

卡住中小企业的关键问题之一仍然还是服务器架构问题,这里面cdn的运用和服务器分发规则等负载均衡问题算是个学问。

就视频本身而言,其本质仍然还是图片,以快速刷新屏幕的方式,欺骗人的视觉,让人以为视频中的人物和场景在移动,而直播则是被分割成的一个个短小视频的衔接。

视频中的每一张图片被称之为“帧”。

既然是图片,那么神经网络和深度学习这对组合,就能够派上用场了。

对大量包含人物的样本图片进行监督学习,可以得到关于人物轮廓的特征库以及语意库,作为分离标准。

对静动像素的神经网络进行算法分析,可以得到需要处理的目标区域。

此外还有远近景的区分等等,这又是一个长长的课题清单。

监督学习和深度学习不再表述,总之这就是个黑盒模式。黑盒就是人类看不懂也无法解释的意思,其过程是个有目的的随机碰撞的过程,依赖于高速GPU的计算能力。

静动分析更好说,如果图片四角是静止的,那么目标可能就是动的。如果图片四角是移动的,那么目标可能是静止的。

远近景就不说了,有些时候并不是所有图片中动的物体都需要切割。

这里面临一个问题:英伟达支持AI计算的显卡目前还没发布,所以这一项目想要实现,仍然还是依赖于服务器。

所以整个项目流程被定为,AI服务器从新A站服务器得到视频数据,将视频数据解码变为图片集,对像素进行标记,处理好的图片集再次打包成视频吐回服务器,视频网站设置对应的人、景、弹幕三者的z-index,在网站上和移动端把弹幕置于人景之间,最终呈现给用户的就是一个人景分离的弹幕了。

因为依赖于服务器的原因,算力是有限的,能从这一项目得到受惠的up主必然不会太多。因此这一成果将用于吸引优秀up主加入,作为优秀视频的奖励。

当然这些扯远了,眼下八字还没一撇。好端端的突然跳到这个科研树,原因是因为需要强化语意分割。

语意分割,其目标是知道图片中的物体是什么。

以微软识图为例,一张绿草如茵的图片,可能会被识别为“羊”。原因是,有关羊的训练库都和草地有关,所以看到草地,计算机就会自动认为这是“羊”。这就是无语意分割。

语意分割就是要搞清楚,“羊”是什么,“羊”长什么样,“羊”在哪。

机械手识别商品并进行抓取,用到是就是有语意分割的深度学习神经网络,但是存在着一些缺陷。

新开的这个项目就是为了强化语意分割的概念,进一步增加对图片的辨识度,并为图片中的物体赋予含义。

并不涉及到未知技术,叶晓奇也没打算插手。人景分离项目继天网课堂的人脸识别项目后,成为了新的可选实训项目。而人景分离,也将为天网课堂的考核教程提供素材。

叶晓奇点了一个人,做这个项目负责人,老实巴交的刘浩然,上一次刘浩然的展示给叶晓奇留下了深刻的印象。

校企合作那边也相应的提了要求,近期需要侧重提供包含人物的图片,以供学习。

(这个技术的灵感来源是b站的蒙版弹幕,早在蒙版弹幕出来的时候我就在搞这个玩了,FNC在这方面做的很好,再后来发现可以不用这么玩,谷歌在2月份发布了deeplabv3+可以直接做这个东西。这个技术真的很简单,当下的条件,一个人就能写了,只是跟团队比起来会有效率高低开发快慢的不同,具体用到的工具和库也会不一样,有几个库可供选择,效果也不一样。到目前为止,本书中出现过的东西,都是现实里已经有的。AI弹幕,按道理来说,其实早就应该有了,可能是研发AI的企业关注点都在别的方面,比如汽车和VR什么的,所以拖到2018年才有。未来,本书也许会略带科幻元素,原则仍然还是以现有技术能否实现为基准,不会科幻的很离谱。)

同类推荐
  • 最强和尚驾到

    最强和尚驾到

    “小和尚,这个月的房租什么时候交?”“柳姐,小僧的命都是你的,还交什么房租啊!”“随缘哥哥,这罗汉拳好难练。”“女孩家家练什么罗汉拳,小僧教你一套仕女剑。”从嵩山下来的小沙弥闯入花都,开始了一段传奇生涯…新书《我有一个天师朋友》已经发表。
  • 重生之都市最强纨绔大少

    重生之都市最强纨绔大少

    楚天歌蓦然醒来,他成了一方有钱有权有势的纨绔大少。本该过着混吃等死,逍遥自在的愉快生活。简直不要太爽。然而,现在有一个问题摆在他的面前。“什么!我不是主角?我是专门演前三章的龙套纨绔大少,调戏了校花,被校花的贴身高手狠揍了一顿?”“……这套路不能演下去!”
  • 浮华之名

    浮华之名

    肖潇是一个最底层的普通人,他爱浮华,他爱堕落,他爱幻想。他爱一个人,一辈子。身边的人,走了又走,心里的人,来了又去。肖潇始终在浮华尘世的边缘活着。像一个傀儡,像一个……屋漏偏逢连夜雨,心灰意冷又失业。几近绝望的肖潇却迎来了黎明的曙光,大公司竟然投来了橄榄枝。然而肖潇却觉得事情没有那么简单……
  • 大神戒

    大神戒

    当一枚可以穿梭世界的神戒从天而降,林扬表示不能淡定。汉末三国,一个夜光瓶,你出价千金?一个音乐盒,你当成传家宝?绝世武功,仗剑江湖!倩女幽魂?仙剑奇侠传?西游记?这是要成仙的节奏?风骚的人生,从林扬走进一个个世界开始。咱的口号是,我是林扬,我喂自己袋盐。(扣扣群,529942076。)
  • 护界师

    护界师

    人类自从诞生之初,就受到来自异界的魑物威胁,从魑物手中保护人们的是护界师。护界师和魑物之间的战争不知道持续了多少年,一直到现在。他是一个人类,一名青年,更是一名护界师!缠绵两世的恋情,比怪物更可怕的人心,一个又一个考验接踵而来,他将会如何应对呢?新书《凌耀苍穹》已发布,请支持。
热门推荐
  • 莫泊桑短篇小说集(化境文库)

    莫泊桑短篇小说集(化境文库)

    《莫泊桑短篇小说集》包含《羊脂球》《项链》《一个诺曼底佬》《我的叔叔于勒》等名篇,也加入了其他不为人熟知的作品,如《月光》《西蒙的爸爸》等,这位世界文坛巨匠下笔举重若轻,寥寥数语就能尽显普通小人物生动的生活及内心——十九世纪的妓女羊脂球的凄冷际遇、虚荣少女马蒂尔德所付出的代价等,人性永不过时,今天读来仍然引发读者强烈共鸣,故而长盛不衰成为经典流传于世。此版更由法国文学研究大家、翻译泰斗柳鸣九先生倾力翻译。
  • Miss or Mrs

    Miss or Mrs

    本书为公版书,为不受著作权法限制的作家、艺术家及其它人士发布的作品,供广大读者阅读交流。汇聚授权电子版权。
  • 虞先生请离婚

    虞先生请离婚

    她是寄人篱下的孤女。他是人人羡慕含着金钥匙出生的贵公子。他生病,她没日没夜的照顾。他想吃的,她费劲千辛万苦的去学。他不想见她,她就悄悄的躲在角落里偷偷看她。她捧着一颗真挚的心献给他,最后换回来的不过一句:“离婚还是堕胎,你二选一。”等她伤心欲绝转身离开,他才发现爱已入髓。
  • 主宇宙传说

    主宇宙传说

    有力量真的可以为所欲为吗?有的时候你甚至连自己最亲近的人都保护不了。"我不是为了变强,我只是想保护她们而已。”这是天航成为最强后说的第一句话。
  • 故事会(2016年3月下)

    故事会(2016年3月下)

    《故事会》是上海文艺出版社编辑出版的仅有114个页码、32开本的杂志,是中国最通俗的民间文学小本杂志。《故事会》创刊于1963年,是中国的老牌刊物之一。先后获得两届中国期刊的最高奖——国家期刊奖。1998年,它在世界综合类期刊中发行量排名第5。
  • 我最想要的亲子智商游戏书

    我最想要的亲子智商游戏书

    智商的高低未必全是“天生”的,后天的良好教育和悉心培养也可以大幅度提高儿童的智商。家长从小就应将对孩子智商的开发融入日常生活中,努力使孩子的智商得到提高,使思维得到训练,而智商游戏就是最佳的方式之一。本书坚持立足实践,以简明易操作的步骤、通俗易懂的语言教会家长寓教于乐,通过有趣的游戏,锻炼孩子逻辑推理、创意思考、观察判断等各方面的能力,使枯燥的概念融入生活中,教育性与趣味性兼具,还可以使父母在与孩子的共同游戏中建立更加亲密的关系。
  • 橙色倒数

    橙色倒数

    橙色倒数出现的时候,我在五号州际高速公路边上不远处的一个露营地。那天风很大,我用一只手抽烟,另一只手压着湖蓝色的长裙。我冲着天空吐了一口烟圈,然后抬头看着烟圈在风里很快被吹散。透过快要消散的烟痕,我突然发现黝黑的夜空多出了一道鲜艳悦目的橙色。仔细看去,那是一串长长的数字,我数了数,有九位,每隔一秒左右,最后一位就会减去一。
  • 奥巴马传

    奥巴马传

    奥巴马竞选成功,继任美国总统,再次成为全世界关注的焦点,本书从奥巴马的身世、幼年、成长乃至成功,揭露了这位美国现任总统诸多不为人知的秘密。
  • 贵女高门

    贵女高门

    穿越了,年轻二十岁,爽吧?但,继母是个公主。出身高门大族,还是个嫡女,爽吧?但,继母是皇帝最宠爱的公主。长得漂亮爹爹疼惜,祖母慈爱外家给力,爽吧?但,继母是有个未来皇帝做哥哥的公主。求问:干掉有皇帝当靠山的后妈的方法是什么?答曰:有个靠谱的爹,和一个凶残的郎。
  • 丽花的悲伤

    丽花的悲伤

    春天刚来的时候,丽花被班里的大队长约去了家里,大队长请她吃两颗话梅,然后让她坐在沙发上,自己则站在她面前,一件一件地换衣服。丽花不安地坐着,嘴里咂着两颗话梅,舌头把它们卷来卷去,两颗话梅渐渐没了味道,但丽花还是闻到那股沁人的香气,她忍不住用牙去咬它们,但是大队长马上就递过来一个烟灰缸,说:“吐里面吧!”丽花受宠若惊,即便不舍,还是迅速地吐了出来。两粒发白的话梅核在茶色的玻璃缸中打了个转,便沾上烟灰不动了。