大数据（Big Data），指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据分析平台就是依据企业的数据需求，整合当前主流的、成熟的各种具有不同侧重点的大数据处理分析框架和工具，实现对海量数据的挖掘和分析，满足企业的数据需求。

网络爬虫（Web Crawler）是一种按照一定规则，自动抓取万维网信息的程序或脚本。它就像互联网上的 "蜘蛛"，通过链接关系从一个网页爬到另一个网页，采集需要的数据。