大数据分析与应用

随着云时代的来临，大数据技术将具有越来越重要的战略意义。大数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产要素，人们对于海量数据的运用将预示着新一轮生产率增长和消费者盈余浪潮的到来。大数据分析技术将帮助企业用户在合理时间内攫取、管理、处理、整理海量数据，为企业经营决策提供积极的帮助。大数据分析作为数据分析的前沿技术，广泛应用于物联网、云计算、移动互联网等战略性新兴产业。虽然大数据目前在国内还处于初级阶段，但是其商业价值已经显现出来。为加强大数据分析创新发展顶层设计和科学布局，推动相关人员更好理解和掌握大数据分析的关键技术原理、未来发展方向，为此培养大数据分析高级工程师。

课程目标

• 掌握大数据带来的行业价值；
• 了解大数据分析流程及常用方法；
• 熟悉大数据产业分工；
• 熟悉大数据分析带来的新趋势；
• 了解大数据分析在行业中的典型应用；

课程纲要

• 一 基础概念
• 二 传统数据分析的作用
• 三 什么是大数据（4V）
• 四 大数据概念提出的历史背景
• 五 大数据产业现状
• 六 产业实践（号称”大数据“的企业，都在做什么？）

• 一 大数据分析方法与难点
• 二 大数据相关职位
• 三 “数据科学“
• 四 大数据分析带来的新趋势

• 一 分布式文件系统和并行计算框架
• 二 云计算（不得不提的云计算，大数据技术得以实现的基础）
• 三 Hadoop
• 四 NoSQL Database
• 五 Storm，Spark，etc.

• 一 应用领域：对关系的探查；聚类/分类；数值预测；模式识别；机器翻译
• 二 经典案例：Google疾病预测，电影票房预测，google的关于学习词的表示：Learning the meaning behind words；百度地图；微博舆情分析；大悦城促销等

• 一 数据分析技术对人们生活的影响
• 二 各种数据分析平台，百度数据工厂，微软Avocado
• 三 应用大数据的产品（儿童手环等）
• 四 更深层影响