作者：魏倩男; 贺正楚; 陈一鸣电商平台数据分析分布式系统ajaxmapredueejumonycore
摘要：以京东平台的网页数据抓取为例，研究如何提高网络爬虫技术对网页数据的抓取效率，进而对抓取到的数据进行数据挖掘和数据分析．该网络爬虫技术主要建立在分布式系统的基础上，多台计算机多线程同时运行，使数据抓取效率显著提高．分析京东平台的网页信息，统一分类，抓取分类下的商品信息，获取到网页内容后，利用解析器重建网页DOM树，通过JQUERY选择器，针对选择不同的标签名称和标识名称获取商品信息，把获取到的数据进行过滤、整合，然后进行数据挖掘和数据分析，对电商行业走势进行预测，进而指导电商运营团队决策．
注：因版权方要求，不能公开全文，如需全文，请咨询杂志社
