flickr使用教程

图像检索新方向使用社交媒体评估阿根廷安第斯山脉偏远保护区内的生态系统服务。

-flickr图片检索系统评估 -服装 -flick -盗版

点击我爱盘算机视觉标星,更快获取CVML新技能


机器之心公布

机器之心编辑部

克日,盘算机视觉顶会 CVPR 2020 吸收论文结果宣布,从 6656 篇有用投稿中录用了 1470 篇论文,录用率约为 22%。本文介绍了阿里安全全新的「盗版服装图像」检索算法。

在此 Oral 论文《Which is Plagiarism: Fashion Image Retrieval based on Regional Representation for Design Protection》中, 阿里基于服装地区性表达的检索模型,对图像中的服装进行地区化的相似性学习和度量,检索效果明显提高

「两种方法纬度差别,但都能实现对局部抄袭的敏捷辨认,对于服装产品的知识产权葆护具有极大的应用价值。」阿里安全图灵试验室高级算法专家华棠表现。

服装知识产权葆护困难待解

当前,服装的盗版问题广泛存在,无论线上还是线下,管理难度逐年升高。

第一类是图片盗用 ,其一样平常基于正版品牌的商品图进行无授权使用要么进行一些修改,如在图上添加自己店面的水印,要么进行一些图像处置,如反转、缩放、拼接等。这类侵权本钱最低,但也最轻易被平台的图片检索系统找到和管理。

第二类是创意盗用 ,指的是不良商家直接抄袭原创商家公布的整体商品计划和创意,即制作同款要么仿款。这类侵权的本钱稍高一些,但是现在的基于商品整体相似度度量的同款检索算法可以对它们进行召回和管理。

第三类即对服装的某些局部地区进行修改 ,比方如改变领口的计划款式、要么胸前印花的结构,甚至改变服装的款型等,但整体上仍抄袭正版品牌服装的气势派头和计划元素,如下图两组盗版案例所示。这类盗版的本钱最高,而且也不易被传统的基于商品同款检索的算法召回,电商平台对此类侵权征象的处罚過逞中通常需要更多的人工考核本领。

图 1:两组盗版示例,此中每组中左图为正版服装,右图为盗版服装。 「盗版服装图像」检索算法详解

为理解决第三类盗版问题,阿里安全研究者将图像中的服装分为五个地区,包括领子、胸部、腰部和两个袖子地区。「盗版服装」被定义为整体上抄袭原版服装计划和气势派头,并在一两个地区进行修改,以躲避现有同款服装检索模型筛查的服装样本。作者在四类服装上进行了试验,各服装地区分别如下图所示。

图 2:四类服装的地区分别示例,依次为短袖 T 恤、长袖上衣、外衣、连衣裙

在算法计划上,阿里安全研究者提出了一种服装重要点引导的地区留意力机制。首先,作者使用服装重要点预计分支来猜测服装的重要点,即分布在服装图像各个重要位置的点位,如领口、袖口、肩部、腋劣等。每类服装的重要点数目和分布有肯定差别,点数在每件 25-40 个左右。根据这些重要点,该算法可对服装图片进行多个地区的分别,如领子、袖子、胸部、腰部地区等。

地区分别信息通过基于 ROI Pooling 头脑的方法引入,一体化的服装图像特性被解耦为多个地区化的特性表达,以独立地进行特性相似度的学习和度量。同时,服装重要点联合地区化的表达可作为一种留意力机制,引入到图像检索网络上,重要部位的特性权重被提高,非重要部位的权重被减少,以提高模型对重要部位的鉴别力。

服装重要点预计分支和图像检索分支使用相同的 HR-Net 主干网络,其多级并联布局在获取多标准特性的同时保持了高辨别率。在丧失函数的选择上,重要点预计分支接纳了均方差丧失函数,检索分支接纳了地区化计划的 Triplet 丧失函数。丧失函数的数值不再是整个图片范畴的特性 triplet 差值,而是各个地区特性差值的累加结果。文中方法的框架如下图所示。

图 3:方法框架图,网络可分为服装重要点预计分支和服装检索分支,此中检索网络包含同款服装检索和盗版服装检索两种输出情势

通过对平台侵权服装样本的分析,作者发现差别种别服装易被盗版的地区是不一样的,因此只将服装图像特性的相似度度量過逞解耦是不够的,还需要为每类服装的多个地区设定差别化的权值,进行加权的地区相似性盘算,以召回更多的盗版服装样本。

为此,阿里安全研究者基于平台盗版服装数据,创建了一个名为「Fashion Plagiarism Dataset」的数据集,该数据会合,每组「原版服装」的 query 图像对应 gallery 中多个「盗版服装」图像,数据覆盖短袖 T 恤、长袖上衣、外衣、连衣裙四类样本。作者在该数据集上,对在 Deepfashion2 数据集上预练习过的检索网络进行 Fine Tune 练习,用 Coordinate Ascent 算法对差别服装种别的各地区权值进行迭代优化,以降低丧失函数数值。「盗版服装」检索练习過逞的丧失函数,同样基于 Triplet 丧失函数计划。最终,练习后的盗版检索网络可以基于上图中的 Input 服装图像召回 Output 中绿框内的盗版服装样本。

在论文的试验部分 ,阿里安全研究者首先在「Fashion Plagiarism Dataset」上对算法!的「盗版服装图像」检索本领进行了评估。除了论文所提出的方法外,作者还设定了两种方法进行对比。一种是传统检索方法,使用相同的 backbone 网络和 Triplet 的丧失函数,但是不包含地区化特性学习和表达机制;另一种是包含地区化特性表达机制,但是使用非 Fine Tune 练习得到的地区权重。评价指标为 mAP, 从表中结果可以看出,论文所用方法在各个服装种别都取得了最佳效果。

表 1:各方法在「Fashion Plagiarism Dataset」上盗版服装检索性能比较。

除上述「盗版服装检索」的评价试验外,作者还在 Deepfashion 系列数据集上进行了服装重要点预计,和同款服装图像检索使命的试验。在服装重要点预计部分,作者在现在庞杂度最高的 Deepfashion2 数据集上进行了评测,与现有 Match-RCNN, CPN, Simple-Baseline 等方法相比,我们的服装重要点预计模型在各个子集上都取得了最高的 mAP 结果。

表 2:各方法在 Deepfashion2 数据集上的服装重要点预计性能比较。

在同款服装检索试验中,作者选用了 FashionNet, Match-RCNN, PCB 等方法作为对比,在 Deepfashion 和 Deepfashion2 上分别进行了试验。此中,Deepfashion 重要针对 In-shop 检索场景,Deepfashion2 则针对于 Consumer-to-shop 场景。评价指标分别为 Top-N recall 和 Top-N accuracy。我们的方法在 Deepfashion 数据集上取得了与 SOTA 方法相近的效果,在 Deepfashion2 数据集上的结果要显着优于现有 baseline 方法。

图 4:各方法在 Deepfashion 系列数据集上同款服装检索本领对比

综上所述,该论文在现有服装检索使命底子上,提出了一个新的「盗版服装检索」研究使命,创建了针对该使命的数据集,并给出了系统性的解决方案,有用提高了「盗版服装图像」的检索效果。同时,所提出模型在服装重要点预计和同款服装检索上的性能也处在范畴内前线。该工作将会给阿里巴巴原创葆护平台提供更强盛的侵权检测本领。


强化学习交流群

关注最新、最前沿的强化学习技能,扫码添加CV君拉你入群,如已为CV君其他账号好友请直接私信,

(请务必注明:强化):

嘻歡在QQ交流的童鞋可以加52CV官方QQ群:805388940。

(不会时时在线,假如没能实时通过还请包涵)


长按关注我爱盘算机视觉

flickr图片检索系统评估

交际媒体图像是一种新奇的数据出处,可用来评估人们怎样对待和评估环境。访问这些图像通常是免费的,图像的数目和流传范畴正在敏捷扩大,因此它们是增补和扩展其他数据的数据的越来越有价值的出处。近来,编码图像已用于评估与生态系统服务(包括国度公园提供的服务)有关的社会文化价值。为了进一步探索交际媒体图像的使用,包括在偏远环境中的使用,我们分析了访问包含南半球最高山峰的国度公园的人们公布到Flickr的图像的内容。阿空加瓜,在阿根廷,南美。审美景观的显着性,娱乐性,104位游客到公园向Flickr公布的334张图片中,社会关系和淡水供给量很高,但位置很重要。来自易于使用的日用地域的访客的图像更大概包含反应生物多样性存在,地质,文化和教诲服务的内容,而来自偏远地域的图像的内容则更有大概反应社会关系和淡水供给服务。来自山的图像内容的比较。阿空加瓜与欧洲,南美,亚洲,非洲和澳大利亚的其他研究一起,夸大了人们对所在多样性的见解的异同,同时也评估了用户在评估环境和管理问题时天生的交际媒体内容的利弊。来自易于使用的日用地域的访客的图像更大概包含反应生物多样性存在,地质,文化和教诲服务的内容,而来自偏远地域的图像的内容则更有大概反应社会关系和淡水供给服务。来自山的图像内容的比较。阿空加瓜与欧洲,南美,亚洲,非洲和澳大利亚的其他研究一起,夸大了人们对所在多样性的见解的异同,同时也评估了用户在评估环境和管理问题时天生的交际媒体内容的利弊。来自易于使用的日用地域的访客的图像更大概包含反应生物多样性存在,地质,文化和教诲服务的内容,而来自偏远地域的图像的内容则更有大概反应社会关系和淡水供给服务。来自山的图像内容的比较。阿空加瓜与欧洲,南美,亚洲,非洲和澳大利亚的其他研究一起,夸大了人们对所在多样性的见解的异同,同时也评估了用户在评估环境和管理问题时天生的交际媒体内容的利弊。而偏远地域的图像内容更大概反应出社会关系和淡水供给服务。来自山的图像内容的比较。阿空加瓜与欧洲,南美,亚洲,非洲和澳大利亚的其他研究一起,夸大了人们对所在多样性的见解的异同,同时也评估了用户在评估环境和管理问题时天生的交际媒体内容的利弊。而偏远地域的图像内容更大概反应出社会关系和淡水供给服务。来自山的图像内容的比较。阿空加瓜与欧洲,南美,亚洲,非洲和澳大利亚的其他研究一起,夸大了人们对所在多样性的见解的异同,同时也评估了用户在评估环境和管理问题时天生的交际媒体内容的利弊。 "点击察看英文标题和摘要"


Using social media images to assess ecosystem services in a remote protected area in the Argentinean Andes.

Social media images are a novel source of data to assess how people view and value the environment. Access to these images is often free, the volume and spread of images is expanding rapidly and hence they are an increasingly valuable source of data complementing and expanding on other data. Recently, coding images has been used to assess sociocultural values relating to ecosystem services including those provided by national parks. To further explore the use of social media images, including for remote environments, we analysed the content of images posted to Flickr by people visiting a national park that contains the highest mountain in the southern hemisphere, Mt. Aconcagua, in Argentina, South America. The saliency of aesthetic landscapes, recreation, social relations and fresh-water provisioning was high across the 334 images posted to Flickr by 104 visitors to the Park, but location mattered. Images from visitors in easily accessible day-use areas were significantly more likely to include content that reflects biodiversity-existence, geology, culture and education services, wh!ile the content of images from remote areas was more likely to reflect social relations and fresh-water provision services. Comparisons of the content of images from Mt. Aconcagua with other studies in Europe, South America, Asia, Africa and Australia highlight similarities and differences in people’s views of the diversity of locati!ons, but also the benefits and limitations of user-generated social media content when assessing environmental and management issues.

访问他们的网站

Flickr现在是照片分享的第一名。 由雅虎拥有,很大概是最常用的照片共享网站,Flickr是您在互联网上无法制止的照片共享网站。 纵然你现在没有使用Flickr,你熟悉的人要么你阅读的文章中的照片链接也会导致Flickr。 Flickr上有超越60亿张照片“在线”(在本次检察时),这些照片从专业到难以辨认的快照进行了游戏。

借助免费会员资格以及内置交际媒体选项的便利性,Flickr可以轻松描述为拍照Facebook。 实际上,便利是我们读者提交的评述中使用Flickr的最显着的缘故。

我嘻歡Flickr

  • 可以或许标志允许声明
    在某一时候,Flickr是版权的狂野西部,但如今有易于使用的选项来设置每张照片或一批照片的允许通知。 不幸的是, 允许和版权数据 大概隐蔽在屏幕的底部,常常被忽视。
  • 交际网络
    由于交际网络,照片标志和群组内置于Flickr中,因此假如您只想成为照片社区的一部分,则无需使用多个交际平台。
  • 照片可见性设置
    个別照片可以标志为公开或仅限一组(或个人)。 这为Flickr用户提供了许多分享照片的机动性,只有他们想分享照片。
  • 积分
    除了自己的移动应用程序之外,Flickr还集成到很多大型照片编辑软件程序(Aperture,iPhoto,Photoshop Elements等)中,因此您可以直接从编辑中上传。
  • 组织
    拖放组织使得在Flickr上移动照片比其他需要基于文本的文件夹系统分类的网站更轻易。

我不嘻歡关于Flickr的内容

  • Thefts
    虽然Flickr已经添加了允许标签,但它仍旧使用Creative Commons格式,很多人错误地以为这种格式意味着“免费给全部人”。 别的,Flickr仍旧在争取它的旧名声,作为一个免费的复制园地,甚至有些公司也被抓到从Flickr偷取照片用于广告活动。
  • 这是坏照片的倾倒场
    我固然不是那种以为每张照片都必须是相当有价值的照片的人,但是当前50张照片出如今搜索结果中如此失去核心而且曝光不足以致无法辨认时,它会很快变老。 这是一个不可制止的事实,就Flickr的范围而言,60亿上传的照片中的大量数据只不外是搜索中的杂乱。
  • 网站计划
    每次Flickr添加一个信息功能(地图,标签,允许条款)时,它好像只是将其贴在右栏的底部。 因此,信息很难快速查找信息,重要信息(如允许证)在没有滚动的环境下隐蔽起来。

它要几多钱?

Flickr提供免费和付费(专业)账户。 专业账户每年24.95美元(在本次评估公布时,尽管雅虎和Flickr可以随时变动条款或费用)。

免费账户详情
  • 300 MB月度上传限定,每张照片限定为15MB
  • Photostream只表现200张近来的照片
  • 容许10组池
  • 只能调整尺寸较小的图像
付费(“专业”)帐户具体信息
  • 无穷每月上传照片,但每张照片只限于20MB
  • 无穷存储
  • 无穷带宽
  • 原始照片的辨别率高于免费帐户所容许的辨别率
  • 可以更换照片(而不是删除并上传新照片)
  • 容许60组池
  • 无广告欣赏和共享
  • 察看照片的计数和引用者统计数据

访问他们的网站

本文网址: http://www.diminga.com/w/2021019225416_5869_730944893/home