【数据竞赛】京东AI时尚挑战赛总结

比赛名称：京东AI时尚挑战赛

比赛链接：https://fashion-challenge.github.io

比赛类型：计算机视觉、图像分类/检索

分享内容：比赛介绍 & 优胜选手思路

比赛简介

随着中国时尚消费市场的扩大和AI技术在中国消费领域的普及，AI+Fashion正在对时尚行业产生重大影响。在AI技术促进和改善时尚相关购物体验的技术不断涌现的同时，相关技术仍然面临重重挑战。

在此京东集团AI平台与研究院举办AI+Fashion挑战竞赛，大赛将推出与时尚相关的AI+Fashion竞赛，包含两个子任务，并将在ChinaMM 2018举办专题技术交流和颁奖。

赛题1：时尚女装风格识别

赛题背景

服饰风格的判断因为很强的专业性，是时尚结合 AI 领域最有难度的多标签分类任务之一。本次竞赛邀请了专业时尚设计界人士，在其指导下标注了接近 6万5千张京东的女装商品照片的整体时尚风格，专注如何利用 AI 识别服饰的时尚风格。

赛题任务

根据服饰单品/搭配的整体或局部设计判断服饰所属的一种或多种时尚风格。

给定一张时尚照片，参赛算法需要预测。

={运动, 休闲, OL/通勤, 日系, 韩版, 欧美, 英伦, 少女, 名媛/淑女, 简约, 自然, 街头/朋克, 民族}

该划分为专业时尚设计师针对比赛数据给出的常见时尚风格大类集合。

数据集

• 开发数据：包含5.5万经过专业标注的真实的京东时尚单品展 示图，该数据用作模型训练及调优。
• 测试数据：1万张经过专业标注的真实的京东时尚单品展示图。

评价方法

参赛队伍将结果交京东评审小组，由系统依据所有风格的F2-score。

优胜选手分享

• 西天取经队伍

• 北科801队伍

• extreme-WJLD队伍

赛题2：时尚单品搜索

时尚单品搜索是在线商城业务的重要支柱。通过分析用户拍摄的时尚单品照片，在庞大的时尚单品数据库中高精准、高效率地检索出与之相对应的商品是一项拥有广阔应用场景的技术，能够助力拍照购物、个性化推荐、广告点击预测等多项人工智能产品。同时，查询图像中商品的角度、光照、遮挡、尺寸、质量等都为本问题带来巨大挑战。

竞赛背景

作为电商领域最具挑战性的 AI 技术之一，拍照购物包含多个 AI 算法模块。本次竞赛将专注于解决其中一项实际场景中的难题：从时尚单品的“用户实拍图”到“电商展示图”的跨域匹配。

本次竞赛关注如何解决这种差异从而精准地进行时尚单品匹配。为了突出搜索与匹配，本次竞赛中所有时尚单品均需参赛队伍根据提供的 URL 和单品坐标进行抠图处理，确保每张图像的给定坐标区域内只包含一项时尚单品。

竞赛任务

在庞大的电商展示图数据库中，找到与指定的时尚单品的用户实拍图最匹配的电商展示图片。

给定一个大规模时尚单品的电商展示图集合，其中每个时尚商品都属于{上衣，鞋子，箱包}中的某一类。对于任意一张时尚单品的用户实拍图都存在一个与之相匹配的电商展示图集合。

在本赛中，我们设定，任意的用户实拍图至少存在一张与之对应的电商展示图，即。

给定某个用户实拍图，参赛算法需把的电商展示图依照的相似度降序排列，提交Top‐10电商展示图的ID序列。

同时我们邀请专家标注与对应的Ground Truth 电商展示图集合评分系统会根据中元素在 ID 序列中的优先程度评价参赛算法的质量。

数据集

‐ 训练数据：1.2 万个真实的京东时尚单品图片对，即{电商展示图+用户实拍图}

‐ 测试数据：1000 张用户实拍图，与 15 万张电商展示图集合。

评测方法

参赛队伍将所有用户实拍图对应的Top-10 图片ID序列提交，使用mean Average Precision计算精度。

优胜选手分享

• fashion_first队伍

• skyshow队伍

• Vismarty&NWPU队伍