该项目来源于亚马逊中国商城Channel Sales部门的工具产品的实际应用。随着电商行业的发展,各大平台上不断涌现新的商品,亚马逊在互联网发展的浪潮中成为了全球最大的网上零售商。但对于中国消费者而言,本土的几家主流电商平台始终是他们的第一选择,相比于亚马逊中国商城,他们更能在本土的电商平台中找到喜爱的商品。为了能够在亚马逊中国商城引入受中国消费者偏爱的各种商品,就需要知道这些商品的销售数据,为此,作者所在的技术项目组决定开发一个内部工具------基于AWS云服务的选品追踪站点,本项目可以将其他几家主流电商平台的商品、卖家、品牌、类别等的销售数据根据度量指标进行展示并与亚马逊平台进行对比分析,帮助销售部门的员工了解热点卖家和品牌。本文首先阐述该站点研发的背景以及国内外现状,明确了要达到的目标,然后对整个站点进行功能性和非功能性需求分析。接着根据需求分析来设计站点的系统架构、划分系统功能模块、设计站点数据库。接着对站点进行详细设计与实现。该站点的研发主要分为两大部分,第一部分是EMR(AWS数据处理平台)上的数据处理,需要对从其他平台爬取到的原始数据在EMR上进行一系列基于Spark的数据处理和分析的流程,使得原始的数据成为有效可靠的数据来源并将其分布在不同的数据库和ES集群上,最后还要对数据进行维护、迁移和备份。第二部分是站点网站的开发,网站最主要的目的是用于数据的可视化,为了以最快的速度进行开发,使用了Ruby on Rails框架作为站点网站的开发框架。作者独立完成了第一部分数据处理的全部工作,并参与了站点网站的大部分开发工作,最后根据需求对站点进行了功能性测试和性能测试,保证了站点的正常上线。目前论文所设计的基于AWS云服务的选品追踪站点已经能够上线投入使用,针对不同的查询所展示的销售数据基本符合实际。