Facebook AI新架构：全景FPN，同时完成图像实例与语义分割 | 极客头条

参加「CTA 核心技术及应用峰会」，请扫码报名 ↑↑↑

整理 | 刘旭坤、Jane

出品 | AI科技大本营（id：rgznai100）

实例分割和语义分割长期以来都是运用不同的神经网络架构来完成的，虽然最近出现了将语义和实例分割进行结合的“全景分割”，但经典方法仍将两者视为独立的任务。近日，Facebook AI 使用单一神经网络架构来同时完成实例分割（识别出图片前景中的人或者动物）和语义分割（对图片背景中的像素进行分类）。他们的研究则通过统一的神经网络架构来同时实现实例和语义分割，这一新架构实现了对内存和计算资源的高效利用，也可以作为全景分割任务的基准。

原理：这一新架构“全景 FPN ”在 Facebook 2017 年发布的 Mask R-CNN 的基础上添加了一个用于语义分割的分支。这一新架构可以同时对图像进行实例和语义分割，而且精确度与只进行实例或语义分割的神经网络相当，这相当于能将传统方法所需要的计算资源减半。在 COCO 和 Cityscapes 数据集上的测试显示在计算资源相同的条件下全景 FPN 的表现远优于使用两个独立的神经网络分别进行实例和语义分割。

重要性：全景 FPN 架构统一，方便实现而且资源利用率高，为之后的全景分割研究设立了基准。对计算资源要求的降低以及对图像理解的深入也会对需要进行复杂图像实时处理的识别系统产生深远的影响。将图片前景中物体的分割与背景分割作为一个统一的任务对我们理解图片中场景并据此完成进一步的操作至关重要。

论文链接

https://arxiv.org/abs/1901.02446

博文链接：

https://ai.facebook.com/blog/improving-scene-understanding-through-panoptic-segmentation/

（本文为AI科技大本营编译文章，转载请微信联系1092722531）

◆

精彩推荐

◆

5月25-27日，由中国IT社区CSDN与数字经济人才发展中心联合主办的第一届CTA核心技术及应用峰会将在杭州国际博览中心隆重召开。首届CTA核心技术及应用峰会将围绕人工智能，邀请技术领航者，与开发者共同探讨机器学习和知识图谱的前沿研究及应用。

同时，我们推出会议双日开发者盲定票，仅售299元（原票价1099元），限量30张。请扫描下方二维码，或添加小助手微信1731967109，备注【CTA】，了解大会详情以及票务问题。

推荐阅读：

• 恶犬秒变萌汪：技术头条

• “你行你上”：有本事跟OpenAI Five打一把DOTA？
  

• 以女大学生相亲为例，给你讲明白数据挖掘算法

• Python分析《权力的游戏》最终季...... | 附源码

• 谷歌大神Jeff Dean点赞网红博士论文：改进分布式共识机制 | 技术头条

• 滴滴全链路压测解决之道 | 技术头条

• 手机导航已死！

• 如何嫁给年入百万的阿里人？

• 《捕鱼达人》幕后的开发引擎玩起区块链, 区块链游戏的春天已近？| 人物志

• 程序员如何向女友解释：为啥软件都要装C盘？

❤点击“阅读原文”，直接参与大会报名。